المحتويات

المقدمة

معلومات أساسية

أوامر أستكشاف أخطاء Serdes Lane وإصلاحها

الاسترداد اليدوي

معلومات ذات صلة

المقدمة

يصف هذا المستند أوامر أستكشاف الأخطاء وإصلاحها لممر إلغاء التسلسل (SERDES) lane(link) في ASR 5500.

معلومات أساسية

يحتوي ASR 5500 على روابط سلسلة بين البطاقات لتسهيل الاتصال ومسارات البيانات بين بطاقة البنية والتخزين (FSC) وبطاقة معالجة البيانات (DPC) وبطاقات الإدخال/الإخراج للإدارة (MIO). وفي بعض الأحيان، يمكن أن تتعطل إرتباطات SERDES هذه بسبب أخطاء أو عطل في الأجهزة.

أوامر أستكشاف أخطاء Serdes Lane وإصلاحها

أوامر للتحقيق في مسارات الخدمة الخاصة بهيكل ASR 5500:

- تجميع show support details، ابحث في جزء "debug console..." لأسطر الإخراج:

1397273780.205 card 5-cpu0: afio [5/0/7808] [  80616.933] afio/afio_fe600_serdes.c:3297: #1: fe600=47=16/1, Fabric SERDES lane transitioned from up to down, serdes=29, devid=25=7/1

- وضع إختبار الوصول لواجهة سطر الأوامر (CLI) للهيكل cli test-commands password

.

تحذير: يمكن أن يؤدي إستخدام هذا الوضع إلى مقاطعة كبيرة للخدمة

- مسألة show fabric health أمر لصورة عامة من التحويل بناء.

تلميح: يمكن الحصول على نفس المعلومات من show fabric support details جزء من تفاصيل دعم العرض

في المثال، هناك مشكلة بين بطاقة DPC رقم 2 وبطاقة FSC رقم 14.

في المخرج، يتم الإبلاغ عن الخطأ من جهاز DPC المصدر في الفتحة 2 تجاه FSC في الفتحة 14:

Command: petra-b system-device-id 3

Command: show health

Petra-B 3=2/1

Fabric Status:

Status OK(+)------------------------+

Topology fault(T)------------------+|

Far side not expected(*)----------+||

Logically not connected(L)-------+|||

Physically not connected(P)-----+||||           NIF Status:

Rx Down(*)---------------------+||||| +----------NIF powered off(*)

Tx Down(*)--------------------+|||||| |+---------SERDES powered off(*)

Code Group(G)----------------+||||||| ||+--------Local side down(l)

Misalignment(M)-------------+|||||||| |||+-------Remote side down(r)

Cell Size(C)---------------+||||||||| ||||+------Rx activity(r)

Internally fixed(I)-------+|||||||||| |||||+-----Tx activity(t)

Not Accept Cells(A)------+||||||||||| ||||||+----Status OK(+)

|||||||||||| |||||||

SERDES Status:            |||||||||||| |||||||

Status OK(+)-----------+ |||||||||||| |||||||

Rx power off(*)-------+| |||||||||||| |||||||

Tx power off(*)------+|| |||||||||||| |||||||

Sig not locked(S)---+||| |||||||||||| |||||||

Rx signal loss(*)--+|||| |||||||||||| |||||||

Modified Parms(m)-+||||| |||||||||||| |||||||

Admin down(D)----+|||||| |||||||||||| |||||||

||||||| |||||||||||| |||||||

Fabric lane-----+ ||||||| |||||||||||| |||||||

SERDES lane--+  | ||||||| |||||||||||| |||||||                                      Config

Source  Dev SL FL vvvvvvv vvvvvvvvvvvv vvvvvvv     Rate     Topology CRC Errs  Remote Dev SL FL       Last Change

------- --- -- -- ------- ------------ ------- ------------ -------- -------- ------- --- -- -- ----------------------

3= 2/1 FAP 47 15       + A  M    L            6250.00 Mbps        -        - 43=14/1  FE 82 82 FAULT_DETECTED         ***

في الإخراج الخاص بنفس الارتباط في الإتجاه الآخر من بطاقة FSC في الفتحة 14 إلى بطاقة DPC في الفتحة 2، يتم الإبلاغ عن نفس الخطأ:

Command: fe600 system-device-id 43

Command: show health

FE600 43=14/1

Fabric Status:

Status OK(+)------------------------+

Topology fault(T)------------------+|

Far side not expected(*)----------+||

Logically not connected(L)-------+|||

Physically not connected(P)-----+||||           NIF Status:

Rx Down(*)---------------------+||||| +----------NIF powered off(*)

Tx Down(*)--------------------+|||||| |+---------SERDES powered off(*)

Code Group(G)----------------+||||||| ||+--------Local side down(l)

Misalignment(M)-------------+|||||||| |||+-------Remote side down(r)

Cell Size(C)---------------+||||||||| ||||+------Rx activity(r)

Internally fixed(I)-------+|||||||||| |||||+-----Tx activity(t)

Not Accept Cells(A)------+||||||||||| ||||||+----Status OK(+)

|||||||||||| |||||||

SERDES Status:            |||||||||||| |||||||

Status OK(+)-----------+ |||||||||||| |||||||

Rx power off(*)-------+| |||||||||||| |||||||

Tx power off(*)------+|| |||||||||||| |||||||

Sig not locked(S)---+||| |||||||||||| |||||||

Rx signal loss(*)--+|||| |||||||||||| |||||||

Modified Parms(m)-+||||| |||||||||||| |||||||

Admin down(D)----+|||||| |||||||||||| |||||||

||||||| |||||||||||| |||||||

Fabric lane-----+ ||||||| |||||||||||| |||||||

SERDES lane--+  | ||||||| |||||||||||| |||||||                                      Config

Source  Dev SL FL vvvvvvv vvvvvvvvvvvv vvvvvvv     Rate     Topology CRC Errs  Remote Dev SL FL       Last Change

------- --- -- -- ------- ------------ ------- ------------ -------- -------- ------- --- -- -- ----------------------

43=14/1  FE 82 82       +         L T          6250.00 Mbps   3= 2/1        -  3= 2/1 FAP 47 15 FAULT_DETECTED         ***

نوع آخر من المشاكل مع إرتباط SERDES هو حالة الارتباط دون اتصال. في المثال، الرابط بين بطاقة DPC في الفتحة 6 وبطاقة FSC في 17 غير متصل:

23= 6/3 FAP 38  6 D                            6250.00 Mbps  50=17/2  1557643 50=17/2  FE 65 65 OFFLINE                ***

يتم عرض العدد الإجمالي لارتباطات SERDES النشطة وعدد الارتباطات النشطة في إخراج show fabric status erasecat4000_flash:. في المثال الظاهر، تم عد روابطين، واحد لكل جانب من الرابط. ولا شك أن انزلاق ممر واحد ليس بالمشكلة. فهناك الكثير من سعة البنية الزائدة، ولا يؤثر المسار الواحد على سعة المعالجة. المشكلة الوحيدة ان الروابط باستمرار إلى صعودا ونزولا بسبب أخطاء، في هذه الحالة من الممكن ان المستعمل والتحكم حركة مرور سقطت، ولهذا السبب من الافضل ان الروابط سقطت.

[local]ASR5500> show fabric status

Total number of FAPs: 24

Total number of FEs : 8

Total number of SERDES links:        1600

Total number of active SERDES links: 1598

ملاحظة: هناك الكثير من سعة البنية الزائدة ولا يؤثر المسار الواحد على سعة معالجة الهيكل.

- عادة، تهدأ مشكلة الرابط من تلقاء نفسها. يمر النظام بالخطوات الأوتوماتيكية التي تسمى "الإيزكان" لحل المشكلة. يتم الإبلاغ عن نتائج الاسترداد التلقائي في show serdes all-serdes history أجزاء من show fabric support details

ملاحظة: FE (عنصر بنيوي) هو جانب بطاقة FSC. FAP (معالج صفيف الموصلات البينية) هو جانب بطاقة DPC و/أو MIO.

تحتوي بطاقات DPC على بطاقتي FAP، وبطاقات DPC2 على 1 FAP فقط، وبطاقات MIO بها 4 FAPs، وبطاقات FSCs بها 2 FEs.

التنسيق الموجود في إخراج الأوامر هو <card #>/<FAP/FE #>، على سبيل المثال، MIO 5 يحتوي على 5/1 و 5/2 و 5/3 و 5/4.

يمكن أن يحتوي هيكل DPC2 المحمل بالكامل على 28 نقطة نهاية: 8 (8 ديسيبل لكل قناة) + 8 (2 Mio * 4) + 12 ( 6 FCS * 2)

يتم عرض مثال جانب FE الذي تم استعادته بعد الاسترداد التلقائي:

card=5, cpu=0, pid=7808, peer_mode=AFIO_IPC_PEER_MODE_DAEMON, sys_dev_id=47=16/1

Fabric Status:

Topology fault(T)----------------+

Far side not expected(*)--------+|

Logically not connected(L)-----+||

Physically not connected(P)---+|||

Rx Down(*)-------------------+||||

Tx Down(*)------------------+|||||        NIF Status:

Code Group(G)--------------+|||||| +--------NIF powered off(*)

Misalignment(M)-----------+||||||| |+-------SERDES powered off(*)

Cell Size(C)-------------+|||||||| ||+------Local side down(l)

Internally fixed(I)-----+||||||||| |||+-----Remote side down(r)

Not Accept Cells(A)----+|||||||||| ||||

||||||||||| ||||

SERDES Status:            ||||||||||| ||||

Rx power off(*)------+ ||||||||||| ||||

Tx power off(*)-----+| ||||||||||| ||||

Sig not locked(S)--+|| ||||||||||| ||||

Rx signal loss(*)-+||| ||||||||||| ||||

Admin Down(D)----+|||| ||||||||||| ||||

||||| ||||||||||| ||||

Fabric lane-----+ ||||| ||||||||||| ||||

SERDES lane--+  | ||||| ||||||||||| ||||

Record time     Source  Dev SL FL vvvvv vvvvvvvvvvv vvvv Remote  Dev SL FL CRC Errs        Last Change

------------------- ------- --- -- -- ----- ----------- ---- ------- --- -- -- -------- ----------------------

2014-05-18+12:38:17 47=16/1  FE 40 40        I               31= 8/1 FAP 43 11        1 CRC_ERROR

2014-05-18+12:39:27 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 ADMIN_DOWN

2014-05-18+12:39:28 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 EYESCAN_START

2014-05-18+13:14:41 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 EYESCAN_COMPLETE

2014-05-18+13:14:50 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 ADMIN_UP

يتم توضيح إسترداد جانب آخر من السطر في المثال:

card=5, cpu=0, pid=7808, peer_mode=AFIO_IPC_PEER_MODE_DAEMON, sys_dev_id=47=16/1

Fabric Status:

Topology fault(T)----------------+

Far side not expected(*)--------+|

Logically not connected(L)-----+||

Physically not connected(P)---+|||

Rx Down(*)-------------------+||||

Tx Down(*)------------------+|||||        NIF Status:

Code Group(G)--------------+|||||| +--------NIF powered off(*)

Misalignment(M)-----------+||||||| |+-------SERDES powered off(*)

Cell Size(C)-------------+|||||||| ||+------Local side down(l)

Internally fixed(I)-----+||||||||| |||+-----Remote side down(r)

Not Accept Cells(A)----+|||||||||| ||||

||||||||||| ||||

SERDES Status:            ||||||||||| ||||

Rx power off(*)------+ ||||||||||| ||||

Tx power off(*)-----+| ||||||||||| ||||

Sig not locked(S)--+|| ||||||||||| ||||

Rx signal loss(*)-+||| ||||||||||| ||||

Admin Down(D)----+|||| ||||||||||| ||||

||||| ||||||||||| ||||

Fabric lane-----+ ||||| ||||||||||| ||||

SERDES lane--+  | ||||| ||||||||||| ||||

Record time     Source  Dev SL FL vvvvv vvvvvvvvvvv vvvv Remote  Dev SL FL CRC Errs        Last Change

------------------- ------- --- -- -- ----- ----------- ---- ------- --- -- -- -------- ----------------------

2014-05-18+12:38:17 47=16/1  FE 40 40        I               31= 8/1 FAP 43 11        1 CRC_ERROR

2014-05-18+12:39:27 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 ADMIN_DOWN

2014-05-18+12:39:28 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 EYESCAN_START

2014-05-18+13:14:41 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 EYESCAN_COMPLETE

2014-05-18+13:14:50 47=16/1  FE 40 40                        31= 8/1 FAP 43 11        1 ADMIN_UP

- في الإصدار 16.1 من نظام التشغيل StarOS والإصدارات الأحدث، يتمتع النظام بالقدرة على إنشاء إختبارات SNMP عند ملاحظة عتبة تجاهل قائمة انتظار الخروج (EGQ) التي تم تكوينها بواسطة الهيكل. ويتم توضيح مثال الأوامر المستخدمة لتعيين الحد على 50 مرتجع من EGQ لكل 30 ثانية.

[local]asr5500# config

[local]asr5500(config)# fabric egress drop-threshold enable count 50 interval-secs 30

الاسترداد اليدوي

وعندما لا يكون قد تم إستعادة إرتباط سردي بعد إختبار وإعادة برمجة عصيات العين، يكون من الضروري إستعادة البيانات يدويا. ولكن من المؤسف فيما يتصل بالبرامج أننا غير قادرين على تحديد الجانب الخطأ من الرابط بين الخوادم. علينا أن نتبع منهجية لحل المشكلة.

تحذير: الخطوات 1 و 2 إلزامية قبل RMA

1. أعد بيع بطاقة واحدة أولا. قم بالخروج من البطاقة وافحص اللوحة الخلفية للبطاقة بحثا عن المسامير التالفة والمنثنية الموجودة على البطاقة وفي اللوحة الخلفية للهيكل.

- إذا تم ملاحظة مسامير تالفة ومنثنية، فقم بالتقاط صور ورفع طلب الخدمة (SR) باستخدام Cisco TAC.

- جهاز العرض لمدة 72 ساعة.

- إذا ظهرت المشكلة، فانتقل إلى الخطوة 2.

- إذا تم المسح، فسيتم حل المشكلة.

2. أعد تركيب البطاقة الأخرى. قم بالخروج من البطاقة وافحص اللوحة الخلفية للبطاقة بحثا عن المسامير التالفة والمنثنية الموجودة على البطاقة وفي اللوحة الخلفية للهيكل.

- إذا تم ملاحظة مسامير تالفة ومنثنية، فقم بالتقاط صور ورفع طلب الخدمة (SR) باستخدام Cisco TAC.

- جهاز العرض لمدة 72 ساعة.

- إذا ظهرت المشكلة، انتقل إلى الخطوة 3.

- إذا تم المسح، فسيتم حل المشكلة.

3. Open SR مع Cisco TAC ومرفق جمعت تفاصيل دعم العرض قبل وبعد إعادة بيع البطاقات، وصور المسامير التالفة أو المنثنية.

عندما يتم حل المشكلة، فإن show fabric status تبدو هكذا:

[local]ASR5500> show fabric status

Total number of FAPs: 24

Total number of FEs : 8

Total number of SERDES links:        1600

Total number of active SERDES links: 1600

ملائمة SNMP SERDESLanePermenentlyDown تم تنفيذه الآن للإشارة إلى الوقت الذي تم فيه تنزيل ممر SERDES بشكل دائم بسبب حالات فشل Eyescan:

Sun Apr 17 00:05:00 2016 Internal trap notification 1303 (SERDESLanePermanentlyDown) SERDES lane is Down on local: slot 17 device 2 serdes lane index 14, Remote: slot 1 device 1 serdes lane index 40

[local]ASR5500> show fabric status

Total number of FAPs: 16

Total number of FEs : 12

Total number of SERDES links:        1456

Total number of active SERDES links: 1454

Total number of Fabric SERDES with errors: 0

Total number of NIF SERDES with errors   : 0

[local]ASR5500> show fabric history

Command: arad system-device-id 1

Command: show serdes all-serdes history

Fabric Status:

+------Not Accept Cells(A)

SERDES Status:              |+-----Cell Size(C)

Power off(*)-------------+ ||+----Misalignment(M)

Sig not locked(S)-------+| |||+---Code Group(G)

Admin down(D)----------+|| ||||+--Topology fault(T)

||| |||||

Logical Port---------+  ||| |||||

Fabric lane-----+    |  ||| |||||

SERDES lane--+  |    |  ||| |||||

Record time     Source  Dev SL  FL   |  vvv vvvvv Remote  Dev SL  FL  CRC Errs      Last Change

------------------- ------- --- --- --- --- --- ----- ------- --- --- --- -------- ----------------------

2016-04-16+23:53:05  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - FAULT_DETECTED

2016-04-16+23:53:14  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - ADMIN_DOWN

2016-04-16+23:57:02  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - ADMIN_UP

2016-04-16+23:57:02  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - FAULT_DETECTED

2016-04-16+23:57:11  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - ADMIN_DOWN

2016-04-17+00:00:59  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - ADMIN_UP

2016-04-17+00:00:59  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - FAULT_DETECTED

2016-04-17+00:01:08  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - ADMIN_DOWN

2016-04-17+00:05:00  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - ADMIN_UP

2016-04-17+00:05:00  1= 1/1 FAP  40   8 264         T 42=17/2  FE  14  14        - FAULT_DETECTED

...

Command: fe600 system-device-id 42

Command: show serdes all-serdes history

NIF Status:                               Fabric Status:

Remote side down(r)-------+ +------------Not Accept Cells(A)

Local side down(l)-------+| |+-----------Internally fixed(*)

SERDES powered off(*)---+|| ||+----------Cell Size(C)

NIF powered off(*)-----+||| |||+---------Misalignment(M)

|||| ||||+--------Code Group(G)

SERDES Status:          |||| |||||+-------Tx Down(*)

Rx power off(*)------+ |||| ||||||+------Rx Down(*)

Tx power off(*)-----+| |||| |||||||+-----Physically not connected(P)

Sig not locked(S)--+|| |||| ||||||||+----Logically not connected(L)

Rx signal loss(*)-+||| |||| |||||||||+---Far side not expected(*)

Admin down(D)----+|||| |||| ||||||||||+--Topology fault(T)

||||| |||| |||||||||||

Fabric lane-----+ ||||| |||| |||||||||||

SERDES lane--+  | ||||| |||| |||||||||||

Record time     Source  Dev SL FL vvvvv vvvv vvvvvvvvvvv Remote  Dev SL  FL  CRC Errs      Last Change

------------------- ------- --- -- -- ----- ---- ----------- ------- --- --- --- -------- ----------------------

2016-04-16+23:57:01 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - FAULT_DETECTED

2016-04-16+23:57:11 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - ADMIN_DOWN

2016-04-16+23:57:11 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - EYESCAN_START

2016-04-17+00:00:52 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - EYESCAN_FAILURE

2016-04-17+00:00:55 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - ADMIN_UP

2016-04-17+00:00:58 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - FAULT_DETECTED

2016-04-17+00:01:08 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - ADMIN_DOWN

2016-04-17+00:01:08 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - EYESCAN_START

2016-04-17+00:04:56 42=17/2  FE 14 14  *S        A  M   PL T  1= 1/1 FAP  40   8        - EYESCAN_FAILURE

2016-Apr-17+00:05:00.023 [snmp 22002 info] [5/0/7150 <afctrl:0> trap_api.c:17297] [software internal system syslog] Internal trap notification 1303 (SERDESLanePermanentlyDown) SERDES lane is Down on local: slot 17 device 2 serdes lane index 14, Remote: slot 1 device 1 serdes lane index 40

2016-Apr-17+00:05:00.023 [afctrl 186019 critical] [5/0/7150 <afctrl:0> l_msg_handler.c:1541] [hardware internal system syslog] Fabric device 17/2, serdes lane index 14, (remote fabric device 1/1, serdes lane index 40) is Administratively offline due to excessive calibration failures

2016-Apr-16+23:41:09.247 [system 1009 warning] [6/0/10430 <evlogd:1> evlgd_syslogd.c:162] [software internal system critical-info syslog] CPU[5/0]:  afio: afio [5/0/9285] [ 426721.037] afio/afio_fe600_serdes.c:2827: #1: fe600=42=17/2, Fabric SERDES lane transitioned from up to down, serdes=14, devid=1=1/1, serdes=40

2016-Apr-16+23:41:09.247 [system 1009 warning] [5/0/7073 <evlogd:0> evlgd_syslogd.c:162] [software internal system critical-info syslog] CPU[5/0]:  afio: afio [5/0/9285] [ 426721.037] afio/afio_fe600_serdes.c:2827: #1: fe600=42=17/2, Fabric SERDES lane transitioned from up to down, serdes=14, devid=1=1/1, serdes=40

معلومات ذات صلة

- دليل أستكشاف أخطاء Cisco ASR 5500 وإصلاحها