SD-WAN制御接続のトラブルシューティング
内容
はじめに
このドキュメントでは、制御接続の問題の原因となる可能性のあるいくつかの原因と、そのトラブルシューティング方法について説明します。
バックグラウンド情報
トラブルシューティングを行う前に、問題のWANエッジが正しく設定されていることを確認します。
次のようなサービスが含まれます。
- インストールされている有効な証明書。
- 次の設定は、
systemブロックの下に配置されています。 - system-ip
- site-id
- 組織名
- vBondアドレス
- トンネルオプションとIPアドレスが設定されたVPN 0トランスポートインターフェイス。
- vEdgeで正しく設定されているシステムクロックと、他のデバイス/コントローラと一致するシステムクロック：
show clockコマンドを使用して、現在設定されている時刻を確認します。
デバイスに正しい時刻を設定するため、clock setコマンドを入力します。
前述のすべてのケースで、Transport Locator(TLOC)が起動していることを確認します。これを確認するには、show control local-propertiesコマンドを使用します。
有効な出力の例を次に示します。
branch-vE1# show control local-properties
personality vedge
organization-name vIPtela Inc Regression
certificate-status Installed
root-ca-chain-status Installed
certificate-validity Valid
certificate-not-valid-before Sep 06 22:39:01 2018 GMT
certificate-not-valid-after Sep 06 22:39:01 2019 GMT
dns-name vbond-dns-name.cisco.com
site-id 10
domain-id 1
protocol dtls
tls-port 0
system-ip 10.1.10.1
chassis-num/unique-id 66cb2a8b-2eeb-479b-83d0-0682b64d8190
serial-num 12345718
vsmart-list-version 0
keygen-interval 1:00:00:00
retry-interval 0:00:00:17
no-activity-exp-interval 0:00:00:12
dns-cache-ttl 0:00:02:00
port-hopped TRUE
time-since-last-port-hop 20:16:24:43
number-vbond-peers 2
INDEX IP PORT
-------------------------------
0 10.3.25.25 12346
1 10.4.30.30 12346
number-active-wan-interfaces 2
PUBLIC PUBLIC PRIVATE PRIVATE RESTRICT/ LAST MAX SPI TIME LAST-RESORT
INTERFACE IPv4 PORT IPv4 PORT VS/VM COLOR CARRIER STATE CONTROL CONNECTION CNTRL REMAINING INTERFACE
---------------------------------------------------------------------------------------------------------------------------------------------
ge0/1 10.1.7.11 12346 10.1.7.11 12346 2/1 gold default up no/yes 0:00:00:16 2 0:07:33:55 No
ge0/2 10.2.9.11 12366 10.2.9.11 12366 2/0 silver default up no/yes 0:00:00:12 2 0:07:35:16 No
vEdgeソフトウェアバージョン16.3以降では、出力にいくつかの追加フィールドがあります。
number-vbond-peers 1 number-active-wan-interfaces 1
NAT TYPE: E -- indicates End-point independent mapping A -- indicates Address-port dependent mapping N -- indicates Not learned Note: Requires minimum two vbonds to learn the NAT type PUBLIC PUBLIC PRIVATE PRIVATE PRIVATE MAX RESTRICT/ LAST SPI TIME NAT VM INTERFACE IPv4 PORT IPv4 IPv6 PORT VS/VM COLOR STATE CNTRL CONTROL/ LR/LB CONNECTION REMAINING TYPE CON STUN PRF ---------------------------------------------------------------------------------------------------------------------------------------------------- ge0/4 172.16.0.20 12386 192.168.0.20 2601:647:4380:ca75::c2 12386 2/1 public-internet up 2 no/yes/no No/Yes 0:10:34:16 0:03:03:26 E 5
問題のシナリオ
DTLS接続障害(DCONFAIL)
これは、制御接続が確立されない一般的な問題の1つです。考えられる原因には、ファイアウォールまたはその他の接続の問題があります。
一部またはすべてのパケットがいずれかの場所でドロップ/フィルタされている可能性があります。これよりも大きなサイズのダンプの例を、intcpdumpの結果として示します。
- ネクストホップ(NH)ルータに到達できない。
- デフォルトゲートウェイがルーティング情報ベース(RIB)にインストールされていない。
- データグラムトランスポート層セキュリティ(DTLS)ポートがコントローラで開かれていません。
次のshowコマンドを使用できます。
#Check that Next hop
show ip route vpn 0
#Check ARP table for Default GW
show arp
#Ping default GW
ping <...>
#Ping Google DNS
ping 8.8.8.8
#Ping vBond if ICMP is allowed on vBond
ping <vBond IP>
#Traceroute to vBond DNS
traceroute <...>
DTLS接続に失敗した場合、show control connections-historyコマンドの出力で確認できます。
PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE ERROR ERROR COUNT DOWNTIME
---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 vsmart tls 10.0.1.5 160000000 1 10.0.2.73 23456 10.0.2.73 23456 default trying DCONFAIL NOERR 10407 2019-04-07T22:03:45+0000
これは、たとえばSD-WAN(vSmart)側でtcpdump を使用した場合に、大きなパケットがvEdgeに到達しないとどうなるかを示しています。
tcpdump vpn 0 interface eth1 options "host 198.51.100.162 -n" 13:51:35.312109 IP 198.51.100.162.9536 > 172.18.10.130.12546: UDP, length 140 <<<< 1 (packet number) 13:51:35.312382 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 1024 <<< not reached vEdege 13:51:35.318654 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 1024 <<< not reached vEdege 13:51:35.318726 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 853 <<< not reached vEdege 13:51:36.318087 IP 198.51.100.162.9536 > 172.18.10.130.12546: UDP, length 140 <<<< 5 13:51:36.318185 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 79 <<<< 6 13:51:36.318233 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 1024 << not reached vEdege 13:51:36.318241 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 879 << not reached vEdege 13:51:36.318257 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 804 << not reached vEdege 13:51:36.318266 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 65 <<<< 10 13:51:36.318279 IP 172.18.10.130.12546 > 198.51.100.162.9536: UDP, length 25 <<<< 11
vEdge側の例を次に示します。
tcpdump vpn 0 interface ge0/1 options "host 203.0.113.147 -n"
13:51:35.250077 IP 198.51.100.162.12426 > 203.0.113.147.12746: UDP, length 140 <<<< 1 13:51:36.257490 IP 198.51.100.162.12426 > 203.0.113.147.12746: UDP, length 140 <<<< 5 13:51:36.325456 IP 203.0.113.147.12746 > 198.51.100.162.12426: UDP, length 79 <<<< 6 13:51:36.325483 IP 203.0.113.147.12746 > 198.51.100.162.12426: UDP, length 65 <<<< 10 13:51:36.325538 IP 203.0.113.147.12746 > 198.51.100.162.12426: UDP, length 25 <<<< 11
サービスプロバイダーでは、大きなUDPパケット、フラグメント化されたUDPパケット（特にUDPの小さなフラグメント）、またはDSCPでマークされたパケットの配信に関する問題が発生する可能性があるため、tracerouteまたはnpingユーティリティを使用して、さまざまなパケットサイズでトラフィックを生成したり、Differentiated Services Code Point(DSCP)マークを使用して接続をチェックしたりできます。次に、接続が成功したときのnpingの例を示します。
vSmartから：
vSmart# tools nping vpn 0 198.51.100.162 options "--udp -p 12406 -g 12846 --source-ip 172.18.10.130 --df --data-length 555 --tos 192" Nping in VPN 0 Starting Nping 0.6.47 ( http://nmap.org/nping ) at 2019-05-17 23:28 UTC SENT (0.0220s) UDP 172.18.10.130:12846 > 198.51.100.162:12406 ttl=64 id=16578 iplen=583 SENT (1.0240s) UDP 172.18.10.130:12846 > 198.51.100.162:12406 ttl=64 id=16578 iplen=583
vEdgeの例を次に示します。
vEdge# tcpdump vpn 0 interface ge0/1 options "-n host 203.0.113.147 and udp" tcpdump -i ge0_1 -s 128 -n host 203.0.113.147 and udp in VPN 0 tcpdump: verbose output suppressed, use -v or -vv for full protocol decode listening on ge0_1, link-type EN10MB (Ethernet), capture size 128 bytes 18:29:43.492632 IP 203.0.113.147.12846 > 198.51.100.162.12406: UDP, length 555 18:29:44.494591 IP 203.0.113.147.12846 > 198.51.100.162.12406: UDP, length 555
次に、vSmartで（vShellから実行される）tracerouteコマンドを使用した接続の失敗例を示します。
vSmart$ traceroute 198.51.100.162 1400 -F -p 12406 -U -t 192 -n -m 20 traceroute to 198.51.100.162.162 (198.51.100.162.162), 20 hops max, 1400 byte packets 1 * * * 2 * * * 3 * * * 4 * * * 5 * * * 6 10.65.14.177 0.435 ms 10.65.13.225 0.657 ms 0.302 ms 7 10.10.28.115 0.322 ms 10.93.28.127 0.349 ms 10.93.28.109 1.218 ms 8 * * * 9 * * * 10 * 10.10.114.192 4.619 ms * 11 * * * 12 * * * 13 * * * 14 * * * 15 * * * 16 10.68.72.61 2.162 ms * * 17 * * *
18 * * *
19 * * *
20 * * *
21 * * *
22 * * *
23 * * *
24 * * *
25 * * *
26 * * *
27 * * *
28 * * *
29 * * *
30 * * *
vEdgeは、vSmartから送信されたパケットを受信しません（他の一部のトラフィックまたはフラグメントのみ）。
vEdge# tcpdump vpn 0 interface ge0/1 options "-n host 203.0.113.147 and udp" tcpdump -i ge0_1 -s 128 -n host 203.0.113.147 and udp in VPN 0 tcpdump: verbose output suppressed, use -v or -vv for full protocol decode listening on ge0_1, link-type EN10MB (Ethernet), capture size 128 bytes 18:16:30.232959 IP 203.0.113.147.12846 > 198.51.100.162.12386: UDP, length 65
18:16:30.232969 IP 203.0.113.147.12846 > 198.51.100.162.12386: UDP, length 25
18:16:33.399412 IP 203.0.113.147.12846 > 198.51.100.162.12386: UDP, length 16
18:16:34.225796 IP 198.51.100.162.12386 > 203.0.113.147.12846: UDP, length 140
18:16:38.406256 IP 203.0.113.147.12846 > 198.51.100.162.12386: UDP, length 16
18:16:43.413314 IP 203.0.113.147.12846 > 198.51.100.162.12386: UDP, length 16
TLOC無効(DISTLOC)
TLOC Disabledメッセージのトリガーは、次の考えられる原因が考えられます。
- コントロール接続のクリア
- TLOCの色の変更
- システムIPの変更
show control connections-historycommandの出力で、システムブロックまたはトンネルのプロパティに示されている設定の変更。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------ vmanage dtls 192.168.30.101 1 0 192.168.20.101 12346 192.168.20.101 12346 biz-internet tear_down DISTLOC NOERR 3 2019-06-01T14:43:11+0200 vsmart dtls 192.168.30.103 1 1 192.168.20.103 12346 192.168.20.103 12346 biz-internet tear_down DISTLOC NOERR 4 2019-06-01T14:43:11+0200 vbond dtls 0.0.0.0 0 0 192.168.20.102 12346 192.168.20.102 12346 biz-internet tear_down DISTLOC NOERR 4 2019-06-01T14:43:11+0200
ボードIDが初期化されていません(BIDNTPR)
非常に不安定なネットワークで、ネットワーク接続が継続的にフラップする場合は、「TXCHTOBD - failed to send a challenge to Board ID failed」や「RDSIGFBD -Read Signature from Board ID failed」が表示される場合があります。 また、ロックの問題が原因でボードIDに送信されたチャレンジが失敗し、その場合はボードIDをリセットして再試行します。これは頻繁には発生せず、制御接続の形式で遅延が発生します。この問題は、新しいバージョンでは修正されています。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------- vbond dtls - 0 0 203.0.113.109 12346 203.0.113.109 12346 silver challenge TXCHTOBD NOERR 2 2019-05-22T05:53:47+0000 vbond dtls - 0 0 203.0.113.56 12346 203.0.113.56 12346 silver challenge TXCHTOBD NOERR 0 2019-05-21T09:50:41+0000
BDSGVERFL – ボードIDの署名エラー
これは、vEdge chassis-num/unique-id/serial numberがvBondによって拒否されたことを示します。これが発生した場合、show control local-propertiesコマンドの出力に示されるvEdge情報を確認し、その出力をvBondのshow orchestrator valid-vedgesと比較します。
vEdgeのエントリが存在しない場合は、次のことを確認します。
- スマートアカウントにvEdgeを追加。
- そのファイルをvManageに正しくアップロードしました。
Configuration > Certificatesの下のSend to Controllersをクリックします。
存在する場合は、valid-vEdgeテーブルで重複するエントリを確認し、Cisco Technical Assistance Center(TAC)に連絡してこれをトラブルシューティングしてもらいます
Stuck in Connect：ルーティングの問題
ネットワークにルーティングの問題がある場合、制御接続が確立されません。 正しいNH/TLOCの有効なルートがRIBにあることを確認します。
次に例を示します。
- RIB内のvBondへのより具体的なルートは、制御接続の確立に使用されないNH/TLOCを指しています。
- TLOC IPがアップストリームサービスプロバイダー間でリークされ、不正なルーティングを引き起こします。
確認のために次のコマンドを入力します。
show ip route
show ip routes vpn 0 <prefix/mask>
ping <vBond IP>
IPプレフィクスのディスタンス値とプロトコルを探します。
vEdgeがコントロール接続の確立を試行しても成功しないか、コントローラへの接続がフラッピングし続ける。
show control connectionsコマンドかshow sdwan control connections-history コマンド、あるいはその両方を使用して確認します。
vedge1# show control connections
PEER PEER CONTROLLER
PEER PEER PEER SITE DOMAIN PEER PRIV PEER PUB GROUP
TYPE PROT SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR PROXY STATE UPTIME ID
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
vbond dtls 0.0.0.0 0 0 192.168.20.102 12346 192.168.20.102 12346 biz-internet - connect 0
ソケットエラー(LISFD)
ネットワーク内に重複したIPが存在する場合、制御接続は確立されません。「LISFD - Listener Socket FD Error」メッセージが表示されます。これは、パケットの破損、RESET、FWポートが開いていない場合のTLSポートとDTLSポートのvEdgeとコントローラの不一致など、他の理由でも発生する可能性があります。
最も一般的な原因は、トランスポートIPの重複です。接続をチェックし、アドレスが一意であることを確認します。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------- vbond dtls - 0 0 203.0.113.21 12346 203.0.113.21 12346 default up LISFD NOERR 0 2019-04-30T15:46:25+0000
ピアタイムアウトの問題(VM_TMO)
ピアタイムアウト状態は、vEdgeが対象コントローラへの到達可能性を失ったときにトリガーされます。
この例では、avManage Timeoutメッセージ（ピアVM_TMO）をキャプチャします。その他のメッセージには、ピアvBond、vSmartおよび/またはvEdgeタイムアウト(VB_TMO、VP_TMO、VS_TMO)が含まれます。
トラブルシューティングの一環として、コントローラへの接続が確立されていることを確認します。対象のIPアドレスに対して、インターネット制御メッセージプロトコル(ICMP)またはtraceroute（あるいはその両方）を使用します。トラフィックドロップが多い（損失が大きい）場合。 pingを迅速に実行し、問題がないことを確認します。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------- vmanage tls 10.0.1.3 3 0 10.0.2.42 23456 203.0.113.124 23456 default tear_down VM_TMO NOERR 21 2019-04-30T15:59:24+0000
また、show control connections-history detailコマンドの出力を確認して、TX/RX制御統計情報を調べ、カウンタに重大な不一致があるかどうかを確認します。出力で、RXとTXのhelloパケット番号の違いに注目してください。
----------------------------------------------------------------------------------------
LOCAL-COLOR- biz-internet SYSTEM-IP- 192.168.30.103 PEER-PERSONALITY- vsmart
----------------------------------------------------------------------------------------
site-id 1
domain-id 1
protocol dtls
private-ip 192.168.20.103
private-port 12346
public-ip 192.168.20.103
public-port 12346
UUID/chassis-number 4fc4bf2c-f170-46ac-b217-16fb150fef1d
state tear_down [Local Err: ERR_DISABLE_TLOC] [Remote Err: NO_ERROR]
downtime 2019-06-01T14:52:49+0200
repeat count 5
previous downtime 2019-06-01T14:43:11+0200
Tx Statistics-
--------------
hello 597
connects 0
registers 0
register-replies 0
challenge 0
challenge-response 1
challenge-ack 0
teardown 1
teardown-all 0
vmanage-to-peer 0
register-to-vmanage 0
Rx Statistics-
--------------
hello 553
connects 0
registers 0
register-replies 0
challenge 1
challenge-response 0
challenge-ack 1
teardown 0
vmanage-to-peer 0
register-to-vmanage 0
シリアル番号なし(CRTREJSER、BIDNTVRFD)
特定のデバイスのコントローラにシリアル番号がない場合、コントロール接続は失敗します。
これは、show controllers [ valid-vsmarts | valid-vedges ]出力で確認でき、ほとんどの場合、修正されています。vmanageタブから、Configuration > Certificates > Send to ControllersまたはSend to vBondボタンの順に移動します。vBondで、show orchestrator valid-vedgesまたはshow orchestrator valid-vsmartsを確認します。
vBondのログで、理由ERR_BID_NOT_VERIFIED:とともに次のメッセージが表示されます。
messages:local7 info: Dec 21 01:13:31 vBond-1 VBOND[1677]: %Viptela-vBond-1-vbond_0-6-INFO-1400002: Notification: 12/21/2018 1:13:31 vbond-reject-vedge-connection severit y-level:major host-name:"vBond-1" system-ip:10.0.1.11 uuid:"11OG301234567" organization-name:"Example_Orgname" sp-organization-name:"Example_Orgname"" reason:"ERR_BID_NOT_VERIFIED"
このような問題のトラブルシューティングを行う際には、正しいシリアル番号とデバイスモデルが設定され、PnPポータル(software.cisco.com)とvManageでプロビジョニングされていることを確認してください。
シャーシ番号と証明書のシリアル番号を確認するには、次のコマンドをvEdgeルータで使用できます。
vEdge1# show control local-properties | include "chassis-num|serial-num" chassis-num/unique-id 11OG528180107 serial-num 1001247E
Cisco IOS XE SD-WANソフトウェアを実行するルータで、次のコマンドを入力します。
cEdge1#show sdwan control local-properties | include chassis-num|serial-num chassis-num/unique-id C1111-4PLTEEA-FGL223911LK serial-num 016E9999
または次のコマンドを使用します。
Router#show crypto pki certificates CISCO_IDEVID_SUDI | s ^Certificate
Certificate
Status: Available
Certificate Serial Number (hex): 016E9999
Certificate Usage: General Purpose
Issuer:
o=Cisco
cn=High Assurance SUDI CA
Subject:
Name: C1111-4PLTEEA
Serial Number: PID:C1111-4PLTEEA SN:FGL223911LK
cn=C1111-4PLTEEA
ou=ACT-2 Lite SUDI
o=Cisco
serialNumber=PID:C1111-4PLTEEA SN:FGL223911LK
Validity Date:
start date: 15:33:46 UTC Sep 27 2018
end date: 20:58:26 UTC Aug 9 2099
Associated Trustpoints: CISCO_IDEVID_SUDI
vEdge/vSmartに関する問題
show control connections-historyコマンドの出力に表示される、vEdge/vSmartのエラーは次のようになります。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------ vbond dtls 0.0.0.0 0 0 192.168.0.231 12346 192.168.0.231 12346 biz-internet challenge_resp RXTRDWN BIDNTVRFD 0 2019-06-01T16:40:16+0200
vBondのshow orchestrator connections-historyコマンドの出力：
PEER PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE LOCAL/REMOTE COUNT DOWNTIME
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 unknown dtls - 0 0 :: 0 192.168.10.234 12346 default tear_down BIDNTVRFD/NOERR 1 2019-06-01T18:44:34+0200
また、vBondのデバイスシリアル番号が有効なvEdgeのリストに含まれていません。
vbond1# show orchestrator valid-vedges | i 11OG528180107
コントローラに関する問題
コントローラ間のシリアル・ファイルが一致しない場合、vBondのローカル・エラーは、vSmarts/vManage用に失効した証明書に対して存在しないシリアル番号です。
vBond上：
PEER PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE LOCAL/REMOTE COUNT DOWNTIME
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 unknown dtls - 0 0 :: 0 192.168.0.229 12346 default tear_down SERNTPRES/NOERR 2 2019-06-01T19:04:51+0200
vbond1# show orchestrator valid-vsmarts SERIAL NUMBER ORG ----------------------- 0A SAMPLE - ORGNAME 0B SAMPLE - ORGNAME 0C SAMPLE - ORGNAME 0D SAMPLE - ORGNAME
影響を受けるvSmart/vManage:
PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE ERROR ERROR COUNT DOWNTIME
---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 vbond dtls 0.0.0.0 0 0 192.168.0.231 12346 192.168.0.231 12346 default tear_down CRTREJSER NOERR 9 2019-06-01T19:06:32+0200
vsmart# show control local-properties| i serial-num serial-num 0F
また、vEdgeに関する影響を受けるvSmartでORPTMOメッセージが表示されます。
PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE ERROR ERROR COUNT DOWNTIME
---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 unknown tls - 0 0 :: 0 192.168.10.238 54850 default tear_down ORPTMO NOERR 0 2019-06-01T19:18:16+0200
0 unknown tls - 0 0 :: 0 192.168.10.238 54850 default tear_down ORPTMO NOERR 0 2019-06-01T19:18:16+0200
0 unknown tls - 0 0 :: 0 198.51.100.100 55374 default tear_down ORPTMO NOERR 0 2019-06-01T19:18:05+0200
0 unknown tls - 0 0 :: 0 198.51.100.100 59076 default tear_down ORPTMO NOERR 0 2019-06-01T19:18:03+0200
0 unknown tls - 0 0 :: 0 192.168.10.240 53478 default tear_down ORPTMO NOERR 0 2019-06-01T19:18:02+0200
影響を受けるvEdge vSmartでは、show control connections-historyの出力にSERNTPRESエラーが示されます。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------ vsmart tls 10.10.10.229 1 1 192.168.0.229 23456 192.168.0.229 23456 biz-internet tear_down SERNTPRES NOERR 29 2019-06-01T19:18:51+0200 vsmart tls 10.10.10.229 1 1 192.168.0.229 23456 192.168.0.229 23456 mpls tear_down SERNTPRES NOERR 29 2019-06-01T19:18:32+0200
誤ったChassis-Num/Unique-Id
PnPポータルで誤った製品ID（モデル）が使用されている場合、同じエラーCRTREJSER/NOERRの別の例が表示される可能性があります。例：
vbond# show orchestrator valid-vedges | include ASR1002 ASR1002-HX-DNA-JAE21050110 014EE30A valid Cisco SVC N1
ただし、実際のデバイスのモデルは異なります（DNA接尾記号は名前に含まれていません）。
ASR1k#show sdwan control local-properties | include chassis-num chassis-num/unique-id ASR1002-HX-JAE21050110
組織の不一致(CTORGNMMIS)
組織名は、制御接続を起動するための重要なコンポーネントです。特定のオーバーレイに対して、制御接続を確立できるように、組織名がすべてのコントローラとvEdgeで一致している必要があります。
そうでない場合は、次に示すように「Certificate Org. name mismatch」エラーが表示されます。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------ vbond dtls - 0 0 203.0.113.197 12346 203.0.113.197 12346 biz-internet tear_down CTORGNMMIS NOERR 14 2019-04-08T00:26:19+0000 vbond dtls - 0 0 198.51.100.137 12346 198.51.100.137 12346 biz-internet tear_down CTORGNMMIS NOERR 13 2019-04-08T00:26:04+0000
vEdge/vSmart証明書の失効/無効化(VSCRTREV/CRTVERFL)
コントローラ上で証明書が失効した場合、またはvEdgeのシリアル番号が無効になった場合は、vSmartまたはvEdgeの証明書失効メッセージがそれぞれ表示されます。
vSmart証明書失効メッセージの出力例を次に示します。これは、vSmartで無効になっている証明書です。
PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE ERROR ERROR COUNT DOWNTIME
---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 vbond dtls 0.0.0.0 0 0 192.168.0.231 12346 192.168.0.231 12346 default up RXTRDWN VSCRTREV 0 2019-06-01T18:13:22+0200
1 vbond dtls 0.0.0.0 0 0 192.168.0.231 12346 192.168.0.231 12346 default up RXTRDWN VSCRTREV 0 2019-06-01T18:13:22+0200
同様に、同じオーバーレイ内の別のvSmartでは、証明書が失効しているvSmartが次のように表示されます。
PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE ERROR ERROR COUNT DOWNTIME
---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 vsmart tls 10.10.10.229 1 1 192.168.0.229 23456 192.168.0.229 23456 default tear_down VSCRTREV NOERR 0 2019-06-01T18:13:24+0200
vBondでは次のように表示されます。
PEER PEER PEER
PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC REPEAT
INSTANCE TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT REMOTE COLOR STATE LOCAL/REMOTE COUNT DOWNTIME
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
0 vsmart dtls 10.10.10.229 1 1 192.168.0.229 12346 192.168.0.229 12346 default tear_down VSCRTREV/NOERR 0 2019-06-01T18:13:14+0200
証明書検証の失敗とは、インストールされたルート証明書では証明書を検証できない場合です。
1. show clockコマンドで時間を確認します。少なくともvBond証明書の有効範囲内である必要があります(show orchestrator local-propertiesコマンドで確認してください)。
2. これは、vEdgeのルート証明書が破損していることが原因で発生する可能性があります。
その後、vEdgeルータ上でshow control connections-historyコマンドを実行すると、次のような出力が表示されます。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME --------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------- vbond dtls - 0 0 203.0.113.82 12346 203.0.113.82 12346 default tear_down CRTVERFL NOERR 32 2018-11-16T23:58:22+0000 vbond dtls - 0 0 203.0.113.81 12346 203.0.113.81 12346 default tear_down CRTVERFL NOERR 31 2018-11-16T23:58:03+0000
この場合、vEdgeはコントローラ証明書も検証できません。この問題を解決するには、ルート証明書チェーンを再インストールします。Symantec認証局(CA)を使用する場合は、読み取り専用ファイルシステムからルート証明書チェーンをコピーできます。
vEdge1# vshell vEdge1:~$ cp /rootfs ro/usr/share/viptela/root-ca-sha1-sha2.crt /home/admin/ vEdge1:~$ exit exit vEdge1# request root-cert-chain install /home/admin/root-ca-sha1-sha2.crt Uploading root-ca-cert-chain via VPN 0 Copying ... /home/admin/root-ca-sha1-sha2.crt via VPN 0 Installing the new root certificate chain Successfully installed the root certificate chain
vManageにアタッチされていないvEdgeテンプレート
デバイスがvManageのテンプレートに接続されていない場合にデバイスが起動すると、「NOVMCFG - No Config in vManage for device」というエラーメッセージが表示されます。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT D OWNTIME ----------------------------------------------------------------------------------------------------------------------------------------------------------------------- ------------------- vmanage dtls 10.0.1.1 1 0 10.0.2.80 12546 203.0.113.128 12546 default up RXTRDWN NOVMCFG 35 2 019-02-26T12:23:52+0000
一時的な状態(DISCVBD、SYSIPCHNG)
コントロール接続がフラップする一時的な状態を次に示します。これには、次のようなルーティング プロトコルが含まれます。
- vEdgeでsystem-IPが変更されました。
- vBondへのティアダウンメッセージ（vBondへのコントロール接続は一時的）。
PEER PEER PEER PEER PEER SITE DOMAIN PEER PRIVATE PEER PUBLIC LOCAL REMOTE REPEAT TYPE PROTOCOL SYSTEM IP ID ID PRIVATE IP PORT PUBLIC IP PORT LOCAL COLOR STATE ERROR ERROR COUNT DOWNTIME ------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------ vmanage dtls 10.0.0.1 1 0 198.51.100.92 12646 198.51.100.92 12646 default tear_down SYSIPCHNG NOERR 0 2018-11-02T16:58:00+0000
DNSの障害
show control connection-historyコマンドで接続の試行が確認できない場合、次の手順でvBondに対するDNS解決障害を確認できます。
- vBondのDNSアドレスに対してpingを実行します。
ping vbond-dns-name.cisco.com
ping vbond-dns-name.cisco.com: Temporary failure in name resolution
- 発信元インターフェイスからgoogle DNS(8.8.8.8)にpingを実行して、インターネット到達可能性を確認します。
ping 8.8.8.8
Type escape sequence to abort.
Sending 5, 100-byte ICMP Echos to 8.8.8.8, timeout is 2 seconds:
- 送受信されたDNSトラフィックを確認するための、ポート53でのDNSトラフィックの組み込みパケットキャプチャ。
monitor capture mycap interface <interface that forms control>
monitor capture mycap match ipv4 <source IP> <vBond IP>
参照ドキュメント：組み込みパケットキャプチャ。
モニタのキャプチャを開始し、数分間実行させてから、キャプチャを停止します。次に、パケットキャプチャを調べて、DNSクエリが送受信されているかどうかを確認します。
関連情報
更新履歴
| 改定 | 発行日 | コメント |
|---|---|---|
5.0 |
20-Jul-2026
|
再認定 – 更新された形式と対象リンク |
4.0 |
18-Jan-2023
|
再認定 |
3.0 |
17-Oct-2022
|
「前提条件」、「DNSの障害」、および「関連情報」のセクションを追加 |
2.0 |
29-Apr-2022
|
「BDSGVERFL – ボードID署名失敗」セクションを追加、IPアドレスを更新、機械翻訳用に編集。 |
1.0 |
13-Jun-2019
|
初版 |
フィードバック