المحتويات

المقدمة

معلومات أساسية

مسار حزمة تشخيص PUNT Fabric

بنية LC عالية المستوى

توماهوك إل سي

بنية 8x100G

البنية 12 x 100G

Lightspeed LC

A9K-20HG-FLEX-SE/TR

الطراز A99-32x100GE-X-SE/TR

A9K-8HG-FLEX-SE/TR

قوائم انتظار الإخراج الظاهرية والمحكم

نظرة عامة على قائمة انتظار الإخراج الظاهري

مخطط وسيط النسيج

الموصلات البينية الليفية

الموصلات الليفية البينية للمحول ASR9006 و ASR9010

الموصلات الليفية البينية للمحول ASR9922

لوحة التوصيل الخلفية ASR9922 و ASR9912

نظرة عامة على التشخيصات عبر الإنترنت

فرز المشكلة

المعلومات اللازمة لبدء عملية الفرز

إختبار تشخيصي

فرز الأقمشة

فرز أخطاء الوسيط

فرز أعطال NP

مجموعة السجلات العامة ل Tomahawk و LSQ و LSP

توقيع الخطأ الشائع والتوصية

العيوب المعروفة

سلوك أمر إيقاف تشغيل/تبديل منفذ بيانات مدير الأعطال

المقدمة

يصف هذا المستند رسائل فشل مسار بيانات البنية المضمنة التي تمت رؤيتها أثناء عملية سلسلة موجه خدمات التجميع (ASR) 9000 من Cisco.

معلومات أساسية

تظهر الرسالة بهذا التنسيق:

- يتم مشاهدة أجهزة الإنذار على وحدة تحكم الموجه كما هو موضح هنا.

- وهذا يعني أن مسار إسترجاع هذه الرسائل مقطوع في مكان ما.

RP/0/RP0/CPU0:Oct 28 12:46:58.459 IST: pfm_node_rp[349]: %PLATFORM-DIAGS-3-PUNT_FABRIC_DATA_PATH_FAILED :

Set|online_diag_rsp[24790]|System Punt/Fabric/data Path Test(0x2000004)|failure threshold is 3,

(slot, NP) failed: (0/9/CPU0, 1) (0/9/CPU0, 3)

يقع الإصدار ل NP1 و NP3 على 0/9/CPU0 يذكر سابقا.

هذا وثيقة مقصود ل أي شخص يريد أن يفهم الخطأ رسالة والإجراء أن يكون أخذت إن المشكلة رأيت.

تتوفر بطاقة الخط المستندة إلى Tomahawk (LC) كبطاقة خط (LC) محسنة لحافة الخدمة (جودة خدمة محسنة) أو نقل حزم محسن (جودة خدمة أساسية) LC.

- SE - تحسين مستوى الخدمات

- TR - نقل الحزم المحسن

يتوفر عنصر التحكم في الشبكة المحلية (LC) ذو ال 4 منافذ و 8 منافذ لشبكة إيثرنت بسرعة 100 جيجابت في إثنين من المتغيرات التي تدعم منافذ LAN/WAN/OTN Unified PHY CPAK أو منافذ LAN PHY-only CPAK.

هذه ال LCs مبنية على توماهوك:

- A9K-8x100G-LB-SE

- A9K-8x100G-LB-TR

- A9K-8X100GE-SE

- A9K-8X100GE-TR

- A9K-4x100GE-SE

- A9K-4X100GE-TR

- A9K-400G-DWDM-TR

- A9K-MOD400-SE

- A9K-MOD400-TR

- A9K-MOD200-SE

- A9K-MOD200-TR

- A9K-24x10GE-1G-SE

- A9K-24x10GE-1G-TR

- A9K-48x10GE-1G-SE

- A9K-48x10GE-1G-TR

- الطراز A99-12x100GE

- المحول A99-8x100GE-SE

- A99-8x100GE-TR

ملاحظة: تتوافق أرقام أجزاء التحكم في الوصول (LC) المستندة إلى Tomahawk والتي تبدأ بهيكل A99-X مع هيكل Cisco ASR 9904 و ASR 9906 و ASR 9910 و ASR 9912 و ASR 9922. لا تتوافق مع موجهات Cisco ASR 9006 و ASR 9010.

قد تتوفر قوائم التحكم في الوصول (LC) المستندة إلى السرعة الخفيفة إما في صورة حد خدمة محسن (جودة خدمة محسنة) أو نقل حزم محسن (جودة خدمة أساسية) LC. وعلى عكس مصابيح LC التي تستند إلى Tomahawk، لا يتوفر كل طراز LC في كلا النوعين -SE و-TR.

- SE - تحسين مستوى الخدمات

- TR - نقل الحزم المحسن

تستند قوائم التحكم في الوصول (LC) هذه إلى Lightspeed:

- A9K-16x100GE-TR

- المحول A99-16x100GE-X-SE

- الطراز A99-32x100GE-TR

تتوفر قوائم التحكم في الوصول (LSP) المستندة إلى تقنية Lightspeed-Plus (LSP) في صورة وحدة تحكم في الوصول (LCs) محسنة لحافة الخدمة (جودة الخدمة المحسنة) أو وحدة نقل حزم محسنة (جودة الخدمة الأساسية) LC.

تستند قوائم التحكم في الوصول (LCs) هذه إلى LSP:

- A9K-4HG-FLEX-TR

- A9K-4HG-FLEX-SE

- A99-4HG-Flex-TR

- A99-4HG-Flex-SE

- A9K-8HG-FLEX-TR

- A9K-8HG-FLEX-SE

- A9K-20HG-FLEX-TR

- A9K-20HG-FLEX-SE

- الطراز A99-32x100GE-X-TR

- المحول A99-32x100GE-X-SE

- الطراز A99-10x400GE-X-TR

- الطراز A99-10x400GE-X-SE

مسار حزمة تشخيص PUNT Fabric

- يقوم التطبيق التشخيصي الذي يتم تشغيله على وحدة المعالجة المركزية لبطاقة معالج المسار بداخل الحزم التشخيصية الموجهة لكل معالج شبكة (NP) بشكل دوري.

- يتم تكرار الحزمة التشخيصية مرة أخرى داخل NP وتتم إعادتها نحو وحدة المعالجة المركزية لبطاقة معالج التوجيه التي تم الحصول عليها من الحزمة.

- يوفر هذا الفحص الدوري للصحة لكل NP مع حزمة فريدة لكل NP بواسطة التطبيق التشخيصي على بطاقة معالج المسار تنبيها لأية أخطاء وظيفية على مسار البيانات أثناء تشغيل الموجه.

- من الضروري ملاحظة أن التطبيق التشخيصي على كل من معالج التوجيه النشط ومعالج المسار الاحتياطي يقوم بإدخال حزمة واحدة لكل NP بشكل دوري ويحافظ على عدد نجاح أو فشل لكل NP.

- يتم إرسال حزمة تشخيص كل دقيقة إلى NP، (إلى كل واجهة قوائم انتظار افتراضية (VQI) أربع مرات (إجمالي أربعة دقائق/VQI) ويتم تشغيلها عبر جميع شبكات VQI الخاصة ب NP). وللإحاطة بهذا الموضوع، فيما يلي مثال:

باعتبار ال LC يتلقى أربعة np، التشخيص عبر الإنترنت ينبغي تمرين كل NPs (أن يعرف أنها صحية - بناء ممر). والآن، يمكن أن تحتوي كل مجموعة NP على 20 VCIs لكل منها (0-19، 20-39، 40-59، 60-79).

في الدقيقة الأولى، يرسل التشخيص عبر الإنترنت حزمة واحدة إلى كل NP.

1 min : against VQI 0, 20, 40, 60 (to all 4 NPs)

2 min:""""""""

3 min: """""""

4 min : """""

5th min : against VQI 1, 21, 41, 61..

6 min : """"""""

هذا يكرر في دورة ما إن تنتهي كل VQI.

- عند الوصول إلى حد الحزم التشخيصية الملقاة، يقوم التطبيق برفع تنبيه في إدارة أخطاء النظام الأساسي (PFM).

RP/0/RP1/CPU0:AG2-2#show pfm location 0/RP1/CPU0

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Apr  7 01:04:04 2022PFM TOTAL: 1   EMERGENCY/ALERT(E/A): 0   CRITICAL(CR): 0   ERROR(ER): 1

-------------------------------------------------------------------------------------------------

Raised Time         |S#|Fault Name                         |Sev|Proc_ID|Dev/Path Name |Handle

--------------------+--+-----------------------------------+---+-------+--------------+----------

Apr  7 00:54:52 2022|0 |PUNT_FABRIC_DATA_PATH_FAILED       |ER |10042 >>ID |System Punt/Fa|0x2000004

من أجل تجميع جميع المعلومات حول تنبيهات PFM، قم بالتقاط إخراج الأمر هذا:

show pfm location all

show pfm trace location all

إذا كنت تريد أن ترى المزيد من المعلومات حول الإنذارات التي تنشأ عن عملية معينة، يمكنك إستخدام هذا الأمر:

show pfm process name <process_name> location <location> >>> location where the PFM alarm is observed

بنية LC عالية المستوى

توماهوك إل سي

بنية 8x100G

توماهوك - 8x100G LC

البنية 12 x 100G

توماهوك 12*100g lc

Lightspeed LC

A9K-20HG-FLEX-SE/TR

A9K-20HG-FLEX-SE/TR

الطراز A99-32x100GE-X-SE/TR

الطراز A99-32x100GE-X-SE/TR

A9K-8HG-FLEX-SE/TR

بنية LC

بنية LC

قوائم انتظار الإخراج الظاهرية والمحكم

يشتمل كل معالج تحويل مسار/معالج محول (RSP/RP) على رقاقتي نسيج يتم التحكم فيهما بواسطة وسيط مشترك واحد (تعني كل معالج محول مسار ثنائي/معالج تحويل المسار (RSP) وحدات تحكم مرنة لكل هيكل). يتحكم المشرف فقط على RSP/RP النشط في جميع شرائح البنى الأربع (بافتراض شرائح RSP المزدوجة). بيد أن كلا المحكمين يتلقيان طلبات الوصول إلى البنية لمعرفة حالة النظام بأكمله في أي وقت من الأوقات بحيث يمكن أن يكون تجاوز الفشل فورا بين خطط التكيف الهيكلي/خطط التكيف الهيكلي. ولا توجد علاقة بين المحكمين، ولكن لدى الجهات المكلفة بإدارة نظم السجلات/الجهات المكلفة بإدارة نظم السجلات جهاز منطقي معقد قابل للبرمجة (مماثل لجهاز FPGA) وإحدى وظائفه هي تعقب حالة موارد الموارد/الموارد العادية الأخرى عن طريق رسائل تنشيط ذات مستوى منخفض وتحديد أي من المحكم النشط.

يحتوي كل Fabric Interconnect ASIC على مجموعة من بطاقات VCIs، وهي مجموعة من قوائم الانتظار التي تمثل وحدة من الجيل الحادي عشر (ل Tomahawk) في النظام. كل 100G وحدة (1x100G ميناء على مخرج واحد NP يتم تمثيلها مع 100G VQI وحيد في مدخل NP) لها فئات أولوية متعددة.

يحتوي كل VQI على مجموعة من أربع قوائم انتظار إخراج افتراضية (VOQs)، لأولويات الحزم المختلفة، منها ثلاث قوائم انتظار تستخدم في بنية إعادة توجيه ASR 9000. وتتوافق هذه مع مستويات الأولوية 1 و 2 والإفتراضية في نهج جودة الخدمة المدخل. هناك إثنان من قوائم الانتظار ذات الأولوية الصارمة وقائمة انتظار واحدة عادية (الصف الرابع للبث المتعدد ولا يتم إستخدامه لإعادة توجيه البث الأحادي).

وبشكل عام، تبدأ قائمة الانتظار الافتراضية في إسقاط الحزم أولا أثناء الضغط الخلفي من بطاقات VCIs الخاصة بالمنفذ NP. فقط عندما يتم تحميل وحدة معالجة شبكة الخروج (NPU) أكثر من اللازم (تخدم المزيد من BPS أو PPS مما يمكن للدوائر التعامل معه)، فإنها تبدأ بالضغط على المدخل LC/NP. ويتم تمثيل هذا من خلال توقف تدفق VQI على ASIC لواجهة الموصلات البينية (FIA) الخاصة بهذا المدخل LC.

مثال:

RP/0/RP0/CPU0:AG3_1#show controllers np ports all location 0/0/CPU0  >>> LC0 is installed in slot 2

Node: 0/0/CPU0:

----------------------------------------------------------------

NP Bridge Fia                       Ports

-- ------ --- ---------------------------------------------------

0  --     0   TenGigE0/0/0/0/0 - TenGigE0/0/0/0/9, TenGigE0/0/0/1/0 - TenGigE0/0/0/1/9

1  --     1   TenGigE0/0/0/2/0 - TenGigE0/0/0/2/9, HundredGigE0/0/0/3

2  --     2   HundredGigE0/0/0/4 - HundredGigE0/0/0/5  >>>Below is the VQI assignment

3  --     3   HundredGigE0/0/0/6 - HundredGigE0/0/0/7

RP/0/RP0/CPU0:AG3_1#sh controller fabric vqi assignment slot 2

slot = 2

fia_inst = 2 >>>FIA 2

VQI = 40       SPEED_100G

VQI = 41       SPEED_100G

VQI = 42       SPEED_100G

VQI = 43       SPEED_100G

VQI = 44       SPEED_100G

VQI = 45       SPEED_100G

VQI = 46       SPEED_100G

VQI = 47       SPEED_100G

VQI = 56       SPEED_100G

VQI = 57       SPEED_100G

VQI = 58       SPEED_100G

VQI = 59       SPEED_100G

VQI = 60       SPEED_100G

VQI = 61       SPEED_100G

VQI = 62       SPEED_100G

VQI = 63       SPEED_100G

عندما يقرر المدخل LC أن يريد أن يرسل ربط خاص إلى مخرج خاص NPU، فإن التعديل (MDF) مرحلة على المدخل LC يغلف ربط مع بناء غاية رأس. وعندما تنظر هيئة الاستخبارات المالية في هذا "العنوان"، فإنها تتحقق من الصوت الخاص بالمغادرة المحددة NPU/destination/LC وترى ما إذا كان هناك ما يكفي من النطاق الترددي المتاح. عندما يكون جاهزا لإعادة تصنيفه إلى عنصر التحكم في الوصول هذا، يطلب المدخل FIA منحة من البنية (وسيط الحساب) لهذا الغرض. تكون خوارزمية التحكيم مدركة لجودة الخدمة، وتضمن أن حزم فئة P1 لها تفضيل على فئة P2 وما إلى ذلك. فينقل المحكم طلب المنحة من مدخل FIA إلى FIA.

يمكن أن يجمع المدخل FIA حزم متعددة معا تذهب إلى نفس مخرج LC في ما يسمى إطار فائق. هذا يعني أنه ليس إطارات/حزم أصلية تمر عبر روابط هيكل المحول ولكن الإطارات الفائقة. من المهم ملاحظة ذلك، لأنه، في إختبار ل 100pps ثابتة، يمكن أن تظهر واجهة سطر الأوامر (CLI) عدادات البنية التي تبلغ عن 50 نقطة في الثانية فقط. هذا ليس فقدان ربط، هو فقط يعني أن هناك إثنان ربط في كل إطار فائق يبث عبر هيكل المفتاح. تتضمن الإطارات الفائقة معلومات التسلسل وإعادة ترتيب دعم FIA الوجهة (يمكن "رش" الحزم عبر إرتباطات بنيوية متعددة). يتم وضع حزم البث الأحادي فقط في الإطارات الفائقة، ولا يتم وضع حزم البث المتعدد أبدا.

ما إن إستلمت الربط ب المخرج LC، الميناء رجعت إلى المادة تحكيم. لدى المحكم عدد محدود من الرموز المميزة لكل VOQ. عندما يسمح المحكم لمدخل FIA أن يرسل إطار (سوبر) إلى VOQ معين، أن رمز مميز يرجع إلى البركة فقط عندما المخرج FIA يسلم الإطارات إلى المخرج NP. إذا قام المخرج NP برفع إشارة ضغط خلفية إلى FIA، فإن الرمز المميز يبقى مشغولا. هذا هو كيف أن المحكم في نهاية المطاف ينفذ من الرموز المميزة لهذا voq في مدخل FIA. عندما يحدث ذلك، يبدأ FIA المدخل في إسقاط الحزم الواردة. المشغل الخاص بالضغط الخلفي هو مستوى إستخدام المخازن المؤقتة لواصف إطار التلقي (RFD) في مخرج NP. تحتفظ المخازن المؤقتة ل RFD بالحزم أثناء معالجة ميكروكود NP لها. كلما زاد عدد الميزات التي تتم معالجة الحزمة خلالها، كلما طال بقاؤها في مخازن RFD المؤقتة.

1. Ingress FIA يقوم بطلبات نسيج لكل المحكمين في الهيكل.

2. يقوم المشرف النشط بالتحقق من الرموز المميزة لمنح الوصول الحر ومعالجة خوارزمية جودة الخدمة الخاصة به في حالة وجود إزدحام.

3. آلية ائتمانية من المحكم المحلي إلى المحكم الفاعل في إدارة الموارد.

4. يقوم المحكم النشط بإرسال رمز منحة الأقمشة إلى FIA.

5. توازنات حمل FIA (خارق)مدخل عبر الروابط الليفية.

6. "Egress FIA" يعيد رمز بناء إلى المحكم المركزي.

والأفضل من ذلك أن نذكر آلية الائتمان من المحكم المحلي إلى المحكم الفاعل في إدارة الخدمات المالية. أضف أيضا قسما آخر لتغطية الحالات المحتملة لأخطاء المحكم (لا تحتاج إلى ذكر رموز الأخطاء، ولكن لإلقاء نظرة على أخطاء المحكم ASIC) للنظر في حالة أي مشكلة تتعلق بالمحكم وعدم الحصول على منح بسبب المحكم المحلي أو المركزي مما يتسبب في تراكم قائمة الانتظار.

نظرة عامة على قائمة انتظار الإخراج الظاهري

قائمة انتظار الإخراج الظاهري

توضع الحزم التي تنتقل إلى نقاط وصول مختلفة إلى المخرج في مجموعات صوت مختلفة. لا يمنع الازدحام على NP واحد الحزمة التي تنتقل إلى NPs مختلفة.

مخطط وسيط النسيج

حكم نسيجي

الموصلات البينية الليفية

الموصلات الليفية البينية للمحول ASR9006 و ASR9010

الموصلات الليفية البينية للمحول ASR9006 و ASR9010

الموصلات الليفية البينية للمحول ASR9922

ويعتبر ASR9912 هو نفسه مع دعم 10 LCs فقط وشريحة اتصال بيني أحادية البنية.

الموصلات الليفية البينية للمحول ASR9922

لوحة التوصيل الخلفية ASR9922 و ASR9912

لوحة التوصيل الخلفية ASR9922 و ASR9912

نظرة عامة على التشخيصات عبر الإنترنت

- تعمل أداة التشخيص عبر الإنترنت على كل من وحدة المعالجة المركزية LC و RP.

- إختبارات التشخيص التي تختبر مسار إعادة التوجيه هي:

- إختبار PuntFabricDataPath قيد التشغيل على وحدة المعالجة المركزية RP النشطة والاحتياطية، مما يعمل على إرسال الحزم التشخيصية إلى كل NP نشط في النظام. رسائل RP النشطة.

- حزم تشخيص PuntFabricDataPath كبث أحادي، بينما يرسلها الاستعداد كبث متعدد. يتم إرسال حزم الاستجابة مرة أخرى إلى وحدة المعالجة المركزية ل RP الناشئة.

- إختبار إسترجاع NP داخل LC.

- إختبار NPULoopback قيد التشغيل على كل وحدة معالجة مركزية LC، مع إرسال حزم تشخيص إلى كل NP. يتم إرسال حزم الاستجابة مرة أخرى إلى وحدة المعالجة المركزية (CPU) الخاصة بوحدة التحكم في الشبكة المحلية (LC).

فرز المشكلة

تقدم الخطوات هنا بعض التلميحات حول كيفية تضييق القضايا المتعلقة بفشل مسار الهبوط، ولا تحتاج إلى اتباع نفس الترتيب بالضبط.

المعلومات اللازمة لبدء عملية الفرز

- ابحث عن NP و LC المتضررين:

show logging | inc “PUNT_FABRIC_DATA_PATH”

RP/0/RP1/CPU0:Oct 28 12:46:58.459 IST: pfm_node_rp[349]: %PLATFORM-DIAGS-3-PUNT_FABRIC_DATA_PATH_FAILED :

Set|online_diag_rsp[24790]|System Punt/Fabric/data Path Test(0x2000004)|failure threshold is 3, (slot, NP)

failed: (0/9/CPU0, 1) (0/9/CPU0, 3)

يقع الإصدار ل NP1 و NP3 على 0/9/CPU0 يذكر سابقا.

- للعثور على فتحة الهيكل، أدخل run nslot all الأمر.

- تنبيه PFM

RP/0/RP1/CPU0:AG2-2#show pfm location 0/RP1/CPU0

node: node0_RP1_CPU0

---------------------

CURRENT TIME: Mar 25 12:11:29 2022

PFM TOTAL: 1   EMERGENCY/ALERT(E/A): 0   CRITICAL(CR): 0   ERROR(ER): 1

-------------------------------------------------------------------------------------------------

Raised Time         |S#|Fault Name                         |Sev|Proc_ID|Dev/Path Name |Handle

--------------------+--+-----------------------------------+---+-------+--------------+----------

Mar 25 12:03:30 2022|1 |PUNT_FABRIC_DATA_PATH_FAILED       |ER |8947   |System Punt/Fa|0x2000004

RP/0/RP1/CPU0:AG2-2#sh pfm process 8947 location 0/rp1/CPU0

node: node0_RP1_CPU0

---------------------

CURRENT TIME: Mar 25 12:12:36 2022

PFM TOTAL: 1   EMERGENCY/ALERT(E/A): 0   CRITICAL(CR): 0   ERROR(ER): 1

PER PROCESS TOTAL: 0   EM: 0   CR: 0   ER: 0

Device/Path[1 ]:Fabric loopbac  [0x2000003 ] State:RDY  Tot: 0

Device/Path[2 ]:System Punt/Fa  [0x2000004 ] State:RDY  Tot: 1

1   Fault Id:          432

Sev:               ER

Fault Name:        PUNT_FABRIC_DATA_PATH_FAILED

Raised Timestamp:  Mar 25 12:03:30 2022

Clear Timestamp:   Mar 25 12:07:32 2022

Changed Timestamp: Mar 25 12:07:32 2022

Resync Mismatch:   FALSE

MSG:               failure threshold is 3, (slot, NP) failed: (0/9/CPU0, 1) (0/9/CPU0, 3)

رسم تخطيطي لتدفق حزم التشخيص

- مسار حزمة رسائل DIAG بين RP و LC (فترة الحزمة التشخيصية دقيقة واحدة).

مسار الحزمة على RP:

online_diags <===> SPP <===> Fabric <===> NP

مسار الحزمة على LC:

online_diags <===> SPP <===> Punt-switch <====> NP

- إختبار إسترجاع NP داخل LC

وفي كل دقيقة يتم حقن حزمة Diags لكل NP من وحدة المعالجة المركزية (LC) إلى محول Punt، ويتم إعادة توجيه جميع الحزم إلى وحدات المعالجة المركزية (NP). لا يذهبون إلى القماش على الإطلاق. نقطة التحول أو نقطة منتصف الطريق هي كل ميكروكود في الشرطة الوطنية.

- مسار الإرسال التشخيصي: ل.س: التشخيصات عبر الإنترنت > إدخال > LC-NP > (أنشوطة)

- مسار الإرجاع التشخيصي: LC-NP > Punt > التشخيصات عبر الإنترنت: إل سي

إختبار تشخيصي

RP/0/RP0/CPU0:AG2-2(admin)#show diagnostic content location <> >>> (in cXR)

RP/0/RP0/CPU0:AG2-2#show diagnostic content location <> >>> (in eXR)

A9K-8X100GE-L-SE 0/0/CPU0:

Diagnostics test suite attributes:

M/C/* - Minimal bootup level test / Complete bootup level test / NA

B/O/* - Basic ondemand test / not Ondemand test / NA

P/V/* - Per port test / Per device test / NA

D/N/* - Disruptive test / Non-disruptive test / NA

S/* - Only applicable to standby unit / NA

X/* - Not a health monitoring test / NA

F/* - Fixed monitoring interval test / NA

E/* - Always enabled monitoring test / NA

A/I - Monitoring is active / Monitoring is inactive

n/a -  Not applicable

Test Interval    Thre- Timeout

ID   Test Name                          Attributes     (day hh:mm:ss.ms shold ms   )

==== ================================== ============ ================= =====  =====

1) CPUCtrlScratchRegister ----------> *B*N****A       000 00:01:00.000 3 n/a

2) DBCtrlScratchRegister -----------> *B*N****A       000 00:01:00.000 3 n/a

3) PortCtrlScratchRegister ---------> *B*N****A       000 00:01:00.000 3 n/a

4) PHYScratchRegister --------------> *B*N****A       000 00:01:00.000 3 n/a

5) NPULoopback ---------------------> *B*N****A       000 00:01:00.000 3 n/a

RP/0/RP0/CPU0:AG2-2#show diagnostic result location 0/0/CPU0

A9K-8X100GE-L-SE 0/0/CPU0:

Overall diagnostic result: PASS

Diagnostic level at card bootup: bypass

Test results: (. = Pass, F = Fail, U = Untested)

1  ) CPUCtrlScratchRegister ----------> .

2  ) DBCtrlScratchRegister -----------> .

3  ) PortCtrlScratchRegister ---------> .

4  ) PHYScratchRegister --------------> .

5  ) NPULoopback ---------------------> .

- يمكنك إختبار هذه المعلمة يدويا "إدخال حزم التشخيصات" بالتفصيل كما هو مذكور في هذا المثال:

admin diag start location 0/x/cpu0 test NPULoopback (cXR)

RP/0/RP0/CPU0:AG3_1#diagnostic start location 0/0/CPU0 test NPULoopback   >>> eXR

Fri May 13 06:53:00.902 EDT

RP/0/RP0/CPU0:AG3_1#show diagnostic res location 0/0/CPU0 test 5 detail >>> Here there are

multiple test 1-5 (check previous examples)

Test results: (. = Pass, F = Fail, U = Untested)

___________________________________________________________________________

5  ) NPULoopback ---------------------> .

Error code ------------------> 0 (DIAG_SUCCESS)

Total run count -------------> 67319

Last test execution time ----> Fri May 13 06:53:01 2022

First test failure time -----> n/a

Last test failure time ------> n/a

Last test pass time ---------> Fri May 13 06:53:01 2022

Total failure count ---------> 0

Consecutive failure count ---> 0

___________________________________________________________________________

- التحقق من تلقي/إرسال رسائل NP:

RP/0/RSP1/CPU0:AG2-2#show controllers np counters location | inc DIAG| LC_CPU

108  PARSE_RSP_INJ_DIAGS_CNT               25195          0  >>> total DIAG packets injected by Active+Stdby RP

904  PUNT_DIAGS_RSP_ACT                    12584          0  >>> Loopbacks to Active RP

906  PUNT_DIAGS_RSP_STBY                   12611          0  >>> Loopbacks to Stdby R

122  PARSE_LC_INJ_DIAGS_CNT                2618           0  >>> total DIAG packets injected by LC

790  DIAGS                                12618           0  >>> total DIAG packets replied back to LC

16  MDF_TX_LC_CPU                     3998218312         937  >>> a packet punted to LC CPU

PARSE_RSP_INJ_DIAGS_CNT should match (PUNT_DIAGS_RSP_ACT + PUNT_DIAGS_RSP_STDBY)

PARSE_LC_INJ_DIAGS_CNT should match DIAGS

PARSE_XX_INJ_DIAGS_CNT should increment periodically.

- التحقق مما إذا كان مسار حزمة البرامج (SPP) يقوم بإرسال/تلقي رسائل DIAG:

show spp sid stats location | inc DIAG

2. DIAG                        35430

2. DIAG                        35430

هذه عدادات DIAG مستلمة ومرسلة. يمكنها دائما التطابق والزيادات معا على LC.

- debug punt-input l2-packet diag np 0 location 0/9/cpu0

مثال سجلات: يقوم SPP بإرسال الحزمة التشخيصية واستقبالها مع التسلسل no 0x4e packet.

LC/0/1/CPU0:Jun 6 04:14:05.581 : spp[89]: Sent DIAG packet. NP:0 Slot:0 Seq:0x4e

LC/0/1/CPU0:Jun 6 04:14:05.584 : spp[89]: Rcvd DIAG packet. NP:0 Slot:0 Seq:0x4e

- تحقق من أي حالات سقوط في مسار الحزمة:

show drops all location

show drops all ongoing location

- تحقق من أخطاء التشخيص عبر الإنترنت (في cXR):

تكون التشخيصات عبر الإنترنت مفيدة عدة مرات في التحقق من الطوابع الزمنية عندما تم إرسال/تلقي الحزم أو فقدها. يمكن مقارنة هذه الطوابع الزمنية مع لقطات SPP لإرتباط الحزمة.

admin debug diagnostic engineer location

admin debug diagnostic error location

ملاحظة: أدخل الأمر admin undebug all لتعطيل عمليات تصحيح الأخطاء هذه.

نموذج مخرجات من تصحيح الأخطاء:

RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: Slot 1 has 4 NPs  >>> Sending DIAG

messages to NPs on slot 1

RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending

a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 0, sfp=0xc6

RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending

a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 1, sfp=0xde

RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending

a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 2, sfp=0xf6

RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending

a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 3, sfp=0x10e

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:

Time took to receive 22 pkts: 503922888 nsec, timeout value: 500000000 nsec

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:

Received 22 packets, expected 24  => Some replies missed

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:

Got a packet from physical slot 1, np 0

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: Successfully verified

a packet, seq. no.: 25

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:

Got a packet from physical slot 1, np 2  <= Replies from NP1 and NP3 missing

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: Successfully verified

a packet, seq. no.: 25

RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:

Got a packet from physical slot 3, np 0

- التتبع التشخيصي:

RP/0/RP1/CPU0:AG2-2#show diagnostic trace location 0/rp1/CPU0

Fri Mar 25 12:16:40.866 IST

1765 wrapping entries (3136 possible, 2048 allocated, 0 filtered, 3503120 total)

Mar 16 02:40:21.641 diags/online/gold_error 0/RP1/CPU0 t7356 Failed to get ack: got 0 responses,

expected 1

Mar 16 02:40:36.490 diags/online/message 0/RP1/CPU0 t8947 My nodeid 0x120, rack# is 0, slot# 1,

board type = 0x100327

Mar 16 02:40:36.948 diags/online/message 0/RP1/CPU0 t8947 dev cnt=25, path cnt=3, shm loc for

dev alarms@0x7fd4f0bec000, path alarms@0x7fd4f0bec01c, path alarm data@0x7fd4f0bec028

Mar 16 02:40:37.022 diags/online/message 0/RP1/CPU0 t8947 Last rpfo time: 1647378637

Mar 24 06:03:27.479 diags/online/error 0/RP1/CPU0 2105# t9057 PuntFabricDataPath test error:

physical slot 11(LC# 9): expected np mask: 0x0000000f, actual: 0x0000000b, failed: 0x00000004

Mar 24 06:03:27.479 diags/online/error 0/RP1/CPU0 634# t9057 PuntFabricDataPath test failure detected,

detail in the form of (0-based) (slot, NP: count): (LC9,2: 13)

فرز الأقمشة

- صحة البنية (يقدم هذا ملخصا لحالة الارتباط والإحصائيات والسقوط والتنبيهات):

show controllers fabric health location <>

- صحة العمود الفقري:

show controllers fabric health spine all

- تسجيل الأعطال على اللوحة (OBFL) (بعد إعادة التحميل أيضا سيكون هذا متوفرا):

admin

sysadmin-vm:0_RP0# show logging onboard fabric location 0/0

- فحص عدادات البنية عند الدخول LC FIA:

show controllers fabric fia errors ingress location <>

show controllers fabric fia stats location

- مدخل LC شريط متقاطع (لا ينطبق على Trident و SIP-700):

show controllers fabric crossbar statistics instance [0-1] location <>

- شريط متقاطع Egress LC (غير قابل للتطبيق على Trident و SIP-700):

show controllers fabric crossbar statistics instance [0-1] location <>

- إيغريس إل سي فيا:

show controllers fabric fia errors egress location <>

show controllers fabric fia stats location

- إحصائيات العمود الفقري:

show controllers fabric crossbar statistics instance [0-1] spine [0-6]

- فحص عمليات إسقاط البنية:

- إنجريس إل سي فايا:

show controllers fabric fia drops ingress location <>

- إيغريس إل سي فيا:

show controllers fabric fia drops egress location <>

- أخطاء ASIC:

- ل.س:

show controllers fabric crossbar asic-errors instance 0 location<>

show asic-errors fia <> all location <>

- توماهوك:

show asic-errors fia <> all location <>

RP/0/RP0/CPU0:AG3_1#show controllers np fabric-counters all np0 location 0/0/CPU0

Node: 0/0/CPU0:

----------------------------------------------------------------

Egress fabric-to-bridge interface 2 counters for NP 0

INTERLAKEN_CNT_TX_BYTES                       0x000073fc 23b6d99b

INTERLAKEN_CNT_TX_FRM_GOOD                    0x000000ae a79d6612

INTERLAKEN_CNT_TX_FRM_BAD                     0x00000000 00000000 >>> this is 0 which is good,

need to check if it is incremented

-------------------------------------------------------------

Egress fabric-to-bridge interface 3 counters for NP 0

INTERLAKEN_CNT_TX_BYTES                       0x0004abdd fe02068d

INTERLAKEN_CNT_TX_FRM_GOOD                    0x000005b8 089aac95

INTERLAKEN_CNT_TX_FRM_BAD                     0x00000000 00000000

-------------------------------------------------------------

Node: 0/0/CPU0:

----------------------------------------------------------------

Ingress fabric-to-bridge interface 2 counters for NP 0

INTERLAKEN_CNT_RX_BYTES                       0x0004aeb5 a4b9dbbe

INTERLAKEN_CNT_RX_FRM_GOOD                    0x0000058e b7b91c15

INTERLAKEN_CNT_RX_FRM_BAD                     0x00000000 00000000

INTERLAKEN_CNT_RX_BURST_CRC32_ERROR           0x00000000 00000000

INTERLAKEN_CNT_RX_BURST_CRC24_ERROR           0x00000000 00000000

INTERLAKEN_CNT_RX_BURST_SIZE_ERROR            0x00000000 00000000

-------------------------------------------------------------

Ingress fabric-to-bridge interface 3 counters for NP 0

INTERLAKEN_CNT_RX_BYTES                       0x000094ce b8783f95

INTERLAKEN_CNT_RX_FRM_GOOD                    0x000000f5 33cf9ed7

INTERLAKEN_CNT_RX_FRM_BAD                     0x00000000 00000000

INTERLAKEN_CNT_RX_BURST_CRC32_ERROR           0x00000000 00000000

INTERLAKEN_CNT_RX_BURST_CRC24_ERROR           0x00000000 00000000

INTERLAKEN_CNT_RX_BURST_SIZE_ERROR            0x00000000 00000000

- للتحقق من حالة إرتباط FIA:

show controllers fabric fia link-status location

RP/0/RP0/CPU0:AG3_1#show controllers fabric fia link-status location 0/0/CPU0

********** FIA-0 **********

Category: link-0

spaui link-0                       Up >>> FIA to NP link

spaui link-1                       Up >>> FIA to NP link

arb  link-0                       Up >>> Arbitor link

xbar link-0                       Up >>> FIA to XBAR link

xbar link-1                       Up >>> FIA to XBAR link

xbar link-2                       Up >>> FIA to XBAR link

- للتحقق من حالة إرتباط XBAR:

RP/0/RP0/CPU0:AG3_1#show controllers fabric crossbar link-status instance 0 lo 0/0/CPU0

Mon May  2 04:05:06.161 EDT

PORT    Remote Slot  Remote Inst    Logical ID  Status

======================================================

00      0/0/CPU0            01             2        Up

01      0/FC3               01             0        Up

02      0/FC3               00             0        Up

03      0/FC4               01             0        Up

04      0/FC2               01             0        Up

05      0/FC4               00             0        Up

06      0/FC2               00             0        Up

07      0/FC1               01             0        Up

10      0/FC1               00             0        Up

14      0/FC0               01             0        Up

15      0/FC0               00             0        Up

16      0/0/CPU0            02             0        Up

18      0/0/CPU0            02             2        Up

19      0/0/CPU0            02             1        Up

20      0/0/CPU0            03             2        Up

21      0/0/CPU0            03             1        Up

22      0/0/CPU0            03             0        Up

23      0/0/CPU0            00             2        Up

24      0/0/CPU0            00             1        Up

25      0/0/CPU0            00             0        Up

26      0/0/CPU0            01             0        Up

27      0/0/CPU0            01             1        Up

إن يراقب أنت هذا سجل مقياس سرعة في ال LSP بطاقة:

LC/0/3/CPU0:Jul  5 13:05:53.365 IST: fab_xbar[172]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :

sfe[1]: An interface-err error has occurred causing  packet drop transient.

ibbReg17.ibbExceptionHier.ibbReg17.ibbExceptionLeaf0.intIpcFnc0UcDataErr  Threshold has been exceeded

17*2 هنا يساعد على تعريف المنفذ باستخدام show controllers fabric crossbar link-status instance 1 lo 0/3/CPU0 الأمر:

مجموعة السجلات:

show platform

show inventory

show tech fabric

show tech np

show tech ethernet interface

show logging

show pfm location all

show pfm trace location <location id>

show controllers pm vqi location all

show hw-module fpd location all (cxr) / admin show hw-module fpd (exr)

show controllers fti trace <process-name>  location  <Card location>

admin show tech obfl

Cxr:

From Admin:

show logging onboard common location <>

show logging onboard error location <>

Exr:

From sysadmin/calvados:

show logging onboard fabric location <>

- إذا كان في أخطاء أسيا في FIA:

ل LS:

show controllers asic LS-FIA instance <instance> block <block_name> register-name <register_name> location <>

ل LSP:

show controllers asic LSP-FIA instance <instance> block <block_name> register-name <register_name> location <>

إذا كان الخطأ الذي تم الإعلام عنه بهذا الشكل:

LC/0/9/CPU0:Mar  1 05:12:25.474 IST: fialc[137]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :

fia[3]: A link-err error has occurred causing  performance loss persistent.

fnc2serdesReg1.fnc2serdesExceptionHier.fnc2serdesReg1.fnc2serdesExceptionLeaf0.

iNTprbsErrTxphyrdydropped6  Threshold has been exceeded

- المثيل هو رقم المثيل ل FIA ASIC. فيما يلي "3" block_name هو "fnc2serdesReg1" و register_name هو "fnc2serdesExceptionLeaf0".

- إذا كانت أخطاء ASIC موجودة على LC/RSP XBAR:

show controllers asic SKB-XBAR instance <instance> block-name <block_name> register-name <register_name> location <>

إذا كان الخطأ الذي تم الإعلام عنه بهذا الشكل:

LC/0/7/CPU0:Mar  4 06:42:01.241 IST: fab_xbar[213]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :

sfe[0]: An interface-err error has occurred causing  packet drop transient.

ibbReg11.ibbExceptionHier.ibbReg11.ibbExceptionLeaf0.intIpcFnc1UcDataErr  Threshold has been exceeded

- المثيل هو رقم المثيل ل SFE/XBAR ASIC. هنا، "0" block_name هو "ibbReg11" و register_name هو "ibbExceptionLeaf0".

- إذا تم الإبلاغ عن أخطاء ASIC على FC XBAR:

show controllers asic FC2-SKB-XBAR instance <instance> block-name <block_name> register-name <register_name> location

إذا كان الخطأ الذي تم الإعلام عنه بهذا الشكل:

RP/0/RP0/CPU0:Mar  4 06:41:14.398 IST: fab_xbar_sp3[156]: %PLATFORM-CIH-3-ASIC_ERROR_SPECIAL_HANDLE_THRESH :

fc3xbar[1]: A link-err error has occurred causing  packet drop transient.

cflReg17.cflExceptionHier.cflReg17.cflExceptionLeaf4.intCflPal1RxAlignErrPktRcvd  Threshold has been exceeded

ثم إن ASIC هو المثيل "FC3-SKB-Xbar" وهو المثيل رقم من SFE/XBAR ASIC. هنا هو "1"، كلاهما يأتي من "fc3xbar[1]" block_name هو "cflReg17" و register_name هو "cflExceptionLeaf4".

مثال:

RP/0/RSP0/CPU0: AG2-10#sh logging | i ASIC

RP/0/RSP0/CPU0:May 11 20:48:57.658 IST: fab_xbar[184]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :

sfe[0]: An interface-err error has occurred causing  packet drop transient.

ibbReg13.ibbExceptionHier.ibbReg13.ibbExceptionLeaf0.intIpcFnc0UcDataErr  Threshold has been exceeded

RP/0/RSP0/CPU0: AG2-10#sh controllers fabric crossbar link-status instance 0 location 0/rsp0/CPU0

PORT    Remote Slot  Remote Inst    Logical ID  Status

======================================================

04      0/0/CPU0            00             1        Up

06      0/0/CPU0            00             0        Up

08      0/7/CPU0            00             1        Up

10      0/7/CPU0            00             0        Up

24      0/2/CPU0            00             0        Up

26      0/2/CPU0            00             1        Up

>>> ibbReg13 >> 13*2 = 26 SO IT IS POINTING TO LC2 – IN THIS CASE YOU CAN DO OIR TO RECOVER THE ASIC ERROR

40      0/RSP0/CPU0         00             0        Up

RP/0/RSP0/CPU0: AG2-10#show controllers asic SKB-XBAR instance 0 block-name ibbReg13 register-name ibbExceptionLeaf0 location 0/RSP0/CPU0

address   name                value

0x00050d080  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1Stat 0x00000000 (4 bytes)

address   name                value

0x00050d084  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1StatRw1s 0x00000000 (4 bytes)

address   name                value

0x00050d088  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1Enable 0xfffffffb (4 bytes)

address   name                value

0x00050d08c  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1First 0x00000000 (4 bytes)

address   name                value

0x00050d090  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2Stat 0x00000c50 (4 bytes)

address   name                value

0x00050d094  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2StatRw1s 0x00000c50 (4 bytes)

address   name                value

0x00050d098  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2Enable 0x00000000 (4 bytes)

address   name                value

0x00050d09c  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2First 0x00000000 (4 bytes)

address   name                value

0x00050d0a0  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_haltEnable 0x00000000 (4 bytes)

address   name                value

0x00050d0a4  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_fault 0x00000000 (4 bytes)

address   name                value

0x00050d0a8  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_intMulti 0x00000840 (4 bytes)

address   name                value

0x00050d0ac  SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_leaf 0x00000000 (4 bytes)

RP/0/RSP0/CPU0:AG2-10#

فرز أخطاء الوسيط

للتحقق من حالة الارتباط:

RP/0/RSP0/CPU0:AG2-10#sho controllers fabric arbiter link-status location 0/1/$

Port    Remote Slot  Remote Elem    Remote Inst  Status

=======================================================

00      0/1/CPU0            FIA            0        Up

01      0/1/CPU0            FIA            1        Up

24      0/RSP0/CPU0         ARB            0        Up

25      0/RSP1/CPU0         ARB            0        Up

للتحقق من توفر VQI:

RP/0/RP0/CPU0:AG3_1#sh controllers fabric vqi assignment all

Current mode: Highbandwidth mode - 2K VQIs

Node          Number of VQIs

----------------------------

0/0/CPU0       80

0/1/CPU0       40

0/2/CPU0       48

0/3/CPU0       80

0/5/CPU0       80

0/7/CPU0       80

0/12/CPU0      64

RP*/RSP*       8

----------------------------

In Use   =      480

Available =    1568

تحقق من السرعة المعينة ل VQI:

RP/0/RP0/CPU0:AG3_1#sh controller fabric vqi assignment slot 7

Thu May 12 07:58:59.897 EDT

slot = 7

fia_inst = 0

VQI = 400      SPEED_100G

VQI = 401      SPEED_100G

VQI = 402      SPEED_100G

VQI = 403      SPEED_100G

VQI = 404      SPEED_100G

VQI = 405      SPEED_100G

VQI = 406      SPEED_100G

slot = 7

fia_inst = 1

VQI = 416      SPEED_40G

VQI = 417      SPEED_40G

VQI = 418      SPEED_40G

VQI = 419      SPEED_40G

VQI = 420      SPEED_100G

إذا راقبت أي ذيل يسقط على FIA، تحقق من هذه الخطوات:

التحقق من عمق قائمة الانتظار في VQI:

RP/0/RP0/CPU0:AG3_1#show controllers fabric fia q-depth location 0/0/CPU0

Thu May 12 08:00:42.186 EDT

********** FIA-0 **********

Category: q_stats_a-0

Voq       ddr            pri            Cellcnt   Slot_FIA_NP

28        0              2              2         LC0_1_1

********** FIA-0 **********

Category: q_stats_b-0

Voq       ddr            pri            Cellcnt   Slot_FIA_NP

********** FIA-1 **********

Category: q_stats_a-1

Voq       ddr            pri            Cellcnt   Slot_FIA_NP

7         0              2              12342         LC0_0_0

>>> Here Packet count is high so we need to check for LC0 FIA0 NP0 (egress) is there any congestion

or any other issue in LC0 FIA0 or NP0

Here Pri = 2 is the default queue (BE) , Pri = 0 is P1 (Voice, real time) queue, Pri = 1 is P2

97        0              2                23           LC1_0_0

RP/0/RP0/CPU0:AG3_1#show controllers fabric vqi assignment slot 02

slot = 2

fia_inst = 0

VQI = 0        SPEED_10G

VQI = 1        SPEED_10G

VQI = 2        SPEED_10G

VQI = 3        SPEED_10G

VQI = 4        SPEED_10G

VQI = 5        SPEED_10G

VQI = 6        SPEED_10G

VQI = 7        SPEED_10G

تفاصيل تخطيط المنفذ ل VQI:

RP/0/RP0/CPU0:AG3_1#show controllers pm vqi location 0/0/CPU0

Platform-manager VQI Assignment Information

Interface Name      | ifh Value | VQI | NP#

--------------------------------------------------

TenGigE0_0_0_0_1 | 0x4000680 |   1 |   0

TenGigE0_0_0_0_2 | 0x40006c0 |   2 |   0

TenGigE0_0_0_0_3 | 0x4000700 |   3 |   0

TenGigE0_0_0_0_4 | 0x4000740 |   4 |   0

TenGigE0_0_0_0_5 | 0x4000780 |   5 |   0

TenGigE0_0_0_0_6 | 0x40007c0 |   6 |   0

TenGigE0_0_0_0_7 | 0x4000800 |   7 |   0

RP/0/RP0/CPU0:AG3_1#show controllers pm interface tenGigE 0/0/0/0/7

Ifname(1): TenGigE0_0_0_0_7, ifh: 0x4000800 :

iftype             0x1e

egress_uidb_index  0x12, 0x0, 0x0, 0x0

ingress_uidb_index 0x12, 0x0, 0x0, 0x0

port_num           0x0

subslot_num        0x0

ifsubinst          0x0

ifsubinst port     0x7

phy_port_num       0x7

channel_id         0x0

channel_map        0x0

lag_id             0x7e

virtual_port_id    0xa

switch_fabric_port 7     >>> VQI matching for the ports

in_tm_qid_fid0     0x38001e

in_tm_qid_fid1     0x0

in_qos_drop_base   0xa69400

out_tm_qid_fid0    0x1fe002

out_tm_qid_fid1    0xffffffff

np_port            0xd3

مجموعة السجلات:

Show tech fabric

Show tech np

show controllers pm trace ?

async        Platform manager async trace

creation     Platform manager interface creation/deletion trace

error        Platform manager error trace

information  Platform manager information trace

init         Platform manager init trace

other        Platform manager common trace

stats        Platform manager stats trace

فرز أعطال NP

التحقق من حمل NP:

RP/0/RP0/CPU0:AG3_1#show controller np load all location 0/0/CPU0

Node: 0/0/CPU0:

----------------------------------------------------------------

Load                Packet Rate

NP0:  2% utilization         3095766 pps

NP1:  3% utilization         5335675 pps

NP2:  0% utilization             498 pps

NP3:  0% utilization            1117 pps

تخطيط المنفذ:

RP/0/RP0/CPU0:AG3_1#show controllers np ports all location 0/0/CPU0

Node: 0/0/CPU0:

----------------------------------------------------------------

NP Bridge Fia                       Ports

-- ------ --- ---------------------------------------------------

0  --     0   TenGigE0/0/0/0/0 - TenGigE0/0/0/0/9, TenGigE0/0/0/1/0 - TenGigE0/0/0/1/9

1  --     1   TenGigE0/0/0/2/0 - TenGigE0/0/0/2/9, HundredGigE0/0/0/3

2  --     2   HundredGigE0/0/0/4 - HundredGigE0/0/0/5

3  --     3   HundredGigE0/0/0/6 - HundredGigE0/0/0/7

توماهوك

لاحظ أن هذا وضع المسؤول:

sysadmin-vm:0_RP0# show controller switch statistics location 0/LC0/LC-SW

Thu May  12 12:32:37.160 UTC+00:00

Rack  Card  Switch  Rack Serial Number

--------------------------------------

0     LC0   LC-SW

Tx      Rx

Phys   State                            Drops/  Drops/

Port  State  Changes  Tx Packets  Rx Packets  Errors  Errors  Connects To

----------------------------------------------------------------------------

0     Up     2        3950184361  3977756349  0       0       NP0

1     Up     2        0           0           0       0       NP0

8     Up     1        1319787462  209249871   0       0       LC CPU N0 P0

9     Up     1        3374323096  1819796660  0       0       LC CPU N0 P1

16    Up     2        2245174606  1089972811  0       0       NP1

17    Up     2        0           0           0       0       NP1

18    Up     2        65977       16543963    0       0       NP2

19    Up     2        0           0           0       0       NP2

32    Up     2        128588820   3904804720  0       0       NP3

33    Up     2        0           0           0       0       NP3

show asic-error np <> all loc <>   >>> Ignore the macwrap errors as they are seen for every

interface flaps/ Execute 3-4 times to verify the drops increment

show controller np fast-drop <> loc <>  >>> Execute 3-4 times to verify the drops increment

RP/0/RP0/CPU0:AG3_1#show controller np fast-drop  np0 location 0/0/CPU0

Thu May 12 10:13:22.981 EDT

Node: 0/0/CPU0:

----------------------------------------------------------------

All fast drop counters for NP 0:

TenGigE0/0/0/1/0-TenGigE0/0/0/1/9:[Priority1]    0

TenGigE0/0/0/1/0-TenGigE0/0/0/1/9:[Priority2]    0

TenGigE0/0/0/1/0-TenGigE0/0/0/1/9:[Priority3]    0

TenGigE0/0/0/0/0-TenGigE0/0/0/0/9:[Priority1]    0

TenGigE0/0/0/0/0-TenGigE0/0/0/0/9:[Priority2]    0

TenGigE0/0/0/0/0-TenGigE0/0/0/0/9:[Priority3]    0

show controllers np punt-path-counters all HOST-IF-0 np<> location <>

[Check for IF_CNT_RX_FRM & IF_CNT_TX_FRM] >>> To check if diagnostic packets make it to the LC NP

Host CPU network port

لايت سبيد

show asic-error np <> all loc <>   >>> Ignore the macwrap errors as they are seen for every interface flap

RP/0/RP0/CPU0:AG3_1#sho asic-errors np 0 all location 0/5/CPU0

************************************************************

*                         0_5_CPU0                         *

************************************************************

************************************************************

*                    Single Bit Errors                     *

************************************************************

************************************************************

*                   Multiple Bit Errors                    *

************************************************************

************************************************************

*                      Parity Errors                       *

************************************************************

************************************************************

*                      Generic Errors                      *

************************************************************

ASR, ASR9K Lightspeed 20*100GE SE LC, 0/5/CPU0, npu[0]

Name            : mphmacwrapReg1.mphmacwrapExceptionLeaf4.mphWrapIrqUmacIpInt82

Leaf ID         : 0x2023e082

Error count     : 1

Last clearing   : Thu Apr  7 11:41:47 2022

Last N errors   : 1

--------------------------------------------------------------

First N errors.

@Time, Error-Data

------------------------------------------

show controller np fast-drop <> loc <> >>> Execute 3-4 times to verify the drops increment

RP/0/RP0/CPU0:AG3_1#show controller np fast-drop  np0 location 0/5/CPU0

Thu May 12 10:13:28.321 EDT

Node: 0/5/CPU0:

----------------------------------------------------------------

All fast drop counters for NP 0:

HundredGigE0_5_0_0[Crit]                      0

HundredGigE0_5_0_0[HP]                        0

HundredGigE0_5_0_0[LP2]                       0

HundredGigE0_5_0_0[LP1]                       0

HundredGigE0_5_0_0[Crit+HP_OOR]               0

HundredGigE0_5_0_0[LP2+LP1_OOR]               0

HundredGigE0_5_0_1[Crit]                      0

HundredGigE0_5_0_1[HP]                        0

HundredGigE0_5_0_1[LP2]                       0

HundredGigE0_5_0_1[LP1]                       0

HundredGigE0_5_0_1[Crit+HP_OOR]               0

لاحظ أن هذا وضع المسؤول:

sysadmin-vm:0_RP0# show controller switch statistics location 0/LC5/LC-SW   >>> Execute 3-4

times to verify the errors increment

Rack  Card  Switch  Rack Serial Number

--------------------------------------

0     LC5   LC-SW

Tx      Rx

Phys   State                            Drops/  Drops/

Port  State  Changes  Tx Packets  Rx Packets  Errors  Errors  Connects To

-----------------------------------------------------------------------------

0     Up     4        1456694749  329318054   0       4       CPU -- EOBC

1     Up     2        21          23          0       0       CPU -- flexE

2     Up     4        1063966999  87683758    0       0       CPU -- PUNT

3     Up     4        885103800   3021484524  0       0       CPU -- BFD

4     Up     3        329319167   1456700372  0       0       RP0

5     Up     3        0           0           0       0       RP1

6     Up     1        11887785    2256        0       0       IPU 0

7     Up     1        0           1086        0       0       IPU 1

9     Up     4        74028034    3025657779  0       0       NP0

10    Up     4        5           0           0       0       NP0

11    Down   1        0           0           0       0       PHY0 -- flexE

12    Up     4        264928      264929      0       0       NP1

13    Up     2        5           0           0       0       NP1

14    Down   1        0           0           0       0       PHY1 -- flexE

15    Up     4        1516538834  1159586563  0       0       NP2

مجموعة السجلات:

show tech np

show tech fabric

show asic-errors fia trace all location <>

- في eXR، قم بتجميع np_datalog:

RP/0/RP0/CPU0:AG3_1#run chvrf 0 ssh lc0_xr

LC : [one time capture]

show_np -e <> -d npdatalog [<> should be the affected NP]

Path where NP datalogs is saved : /misc/scratch/np/NPdatalog_0_0_CPU0_np0_prm__20220512-105332.txt.gz

LC : 5 to 10 times

show_np -e <> -d pipeline [<> should be the affected NP]

- فشل NP في LSP:

RP/0/RP0/CPU0:AG2-2#show controllers np ports all location 0/6/CPU0

Node: 0/6/CPU0:

----------------------------------------------------------------

NP Bridge Fia                       Ports

-- ------ --- ---------------------------------------------------

0  --     0   HundredGigE0/6/0/0 - HundredGigE0/6/0/31  --

1 --      1   HundredGigE0/6/0/4 - HundredGigE0/6/0/7

NP2 is down. >>>>>>>>>. NP Down/Init Failure

3 --      3   HundredGigE0/6/0/12 - HundredGigE0/6/0/154  --

4 --      4  HundredGigE0/6/0/16 - HundredGigE0/6/0/19

تلاحظ هذه السجلات:

LC/0/6/CPU0:Mar 23 02:53:56.175 IST: npu_server_lsp[138]: %PLATFORM-LDA-3-INIT_FAIL :

Failed to initialize lda_bb_np_reset_process 13795 inst 0x2 LC INIT: Failed in NP HAL

Reset np  (0x00000001 - Operation not permitted)  : npu_server_lsp : (PID=4597) :

-Traceback= 7fea2d5cd9f6 7fea2d7d5816 7fea21465efa 7fea21465fc2 7fea42ad0bed 55a9dbd66031

7fea45e1c855 7fea45e1cc2b 7fea2624d526 7fea3571b96a 7fea4d6e4831 55a9dbd691e9

LC/0/6/CPU0:Mar 23 02:53:56.185 IST: npu_server_lsp[138]: %PLATFORM-NP-4-INIT_DEBUG_MSG :

LDA NP2 Reset failed!!  Check for a downlevel IPU version.

مجموعة السجلات:

show tech-support ethernet interfaces

show tech-support ethernet controllers

show tech-support np

show tech-support fpd

admin show tech-support ctrace (in eXR)

show tech fabric

show asic-errors fia trace all location <>

show logging

gather (in eXR)

RP/0/RP0/CPU0:AG3_1#admin

sysadmin-vm:0_RP0#

[sysadmin-vm:0_RP0:~]$bash -l

[sysadmin-vm:0_RP0:~]$ gather

File will be generated and will get saved in rp0_xr:/misc/disk1

مجموعة السجلات العامة ل Tomahawk و LSQ و LSP

show platform

show inventory

show tech fabric

show tech np

show tech ethernet interface

show logging

show pfm location all

show pfm trace location <location id>

sh pfm process <> location <>

show controllers pm vqi location all

show hw-module fpd location all (cxr) / admin show hw-module fpd (exr)

show controllers fti trace <process-name> location <card location>

Cxr:

From admin:

show logging onboard common location <>

show logging onboard error location <>

Exr:

From sysadmin/calvados:

show logging onboard fabric location <>"

توقيع الخطأ الشائع والتوصية

الفئة

الخطأ

ملاحظات

التوصية

فشل وصول NP

معيار LC/0/0/CPU0:معيار SEP 29 00:41:13.171 IST: pfm_node_lc[304]: ٪PLATFORM-NP-1-NP_INIT_FAIL_NO_RESET: مجموعة|prm_server_ty[168018]|0x1008006|فشل تهيئة NP المستمر، لا يلزم إعادة تحميل بطاقة الخط.

يمكن أن يدخل NP في خطأ NP متواصل بسبب خطأ تماثل HW/TCAM الذي يفرض على NP النزول.

إعادة تحميل LC من خلال واجهة سطر الأوامر للاسترداد.

يمكن أن يسترد الإصدار إذا كان عابرا في الطبيعة بعد أول إعادة تحميل ل LC.

قم بإكمال "تفويض المواد المسترجعة" (RMA) لمثيلات تكرار نفس الخطأ.

RMA إذا ظهرت أمثلة متكررة. (قم بالتقاط صورة للوحة المعيبة لفحص التلف/مسامير منثنية في SR).

وقد تواجه البطاقة الجديدة نفس المشكلة بسبب معالجة الحقل بشكل خاطئ.

تبقى الواجهة المعينة إلى NP منخفضة / لا يوجد تأثير.

خطأ ECC فادح في تقنية ASIC

ل.ل./0/8/CPU0:مايو 29 18:29:09.836 IST: pfm_node_lc[301]: ٪FABRIC-FIA-0-ASIC_FATAL_FAULT : مجموعة|fialc[159811]|0x108a000|واجهة البنية ASIC0 واجهت خطأ فادحا 0x1 - DDR خطأ ECC مزدوج

هذا خطأ مزدوج في نظام تصحيح الأخطاء ECC في FIA هو خطأ صعب.

خطأ الأجهزة في FIA.

يمكن أن يظهر الخطأ من جديد وبالتالي ينصح بإيقاف إدارة LC.

آر إم أي كارد.

تبقى الواجهة المعينة إلى NP/FIA دون تأثير.

وتتجلى هذه المسألة في إحدى الحالات التي توصلت فيها FIA إلى كتلة FIB_MGR.

خطأ في SERDES

·RP/0/RSP1/CPU0:Apr 17 12:22:10.690 IST: pfm_node_rp[378]: ٪platform-crossbar-1-serdes_error_lnk0 : مجموعة|fab_xbar[209006]|0x101702f|xbar_1_slot_1

خطأ في البنية على قناة LC الليفية أو قناة RSP

إعادة تحميل LC من خلال CLI لاسترداد خطأ النقل / CRC للخطأ المتكرر.

Data_NB_SERDES_1_FAIL_0

LC/0/3/CPU0:أبريل 10 18:55:03.213 IST: pfm_node_lc[304]: ٪FABRIC-FIA-1-DATA_NB_SERDES_1_FAIL_0 : مجموعة|fialc[168004]|0x103d001|فشل Data NB Serdes Link 1 على FIA 1

RP/0/RSP0/CPU0:APR 10 18:55:13.043 IST: برنامج FABMGR[227]: ٪platform-fabmgr-2-fabric_internal_fault: واجه 0/3/CPU0 (slot 3) خطأ في البنية. سيتم إيقاف تشغيل الواجهات.

آلية إعادة تدريب الواجهة للاسترداد التلقائي لخطأ SERDES على البنية.

في حالة وجود مشكلة في الأجهزة، يمكن ظهور الخطأ على LC أو RSP مرة أخرى.

يبقى القارن up / كثير خطأ على serdes أثر الحركة مرور.

RMA للتكرار بعد OIR.

أخطاء ASIC Init

·LC/0/6/CPU0:Jul 17 00:01:40.738 2019:pfm_node_lc[301]: ٪FABRIC-FIA-1-ASIC_INIT_ERROR : مجموعة|fialc[168003]|0x108a000|تم الكشف عن خطأ ASIC INIT على مثيل FIA 0

حدث طرح مثيل FIA لأي من FIA على LC مع خطأ ASIC INIT في Syslog.

قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة.

خطأ FIA القاتل

(TS_NI_INTR_LCL_TIMER_EXPIRED)

معيار LC/0/19/CPU0:مارس 804:52:29.020 IST: pfm_node_lc[301]: ٪FABRIC-FIA-0-FATAL_INTERRUPT_ERROR : مجموعة|fialc[172098]|0x108a003|مقاطعة أخطاء FIA الفادحة في FIA 3: انتهت صلاحية TS_NI_INTR_LCL_TIMER_EXPIRED

بالنسبة للبطاقة الجديدة، يلاحظ أن الوحدة قد تم التعامل معها بشكل غير صحيح أثناء الشحن / التركيب مما تسبب في حدوث تلف فعلي باللوحة.

ولم تظهر بعض اللوحات أي ضرر مادي، ولكن شوهد شرخ لحام أثناء توفير المياه للجميع. يشير ذلك إلى زيادة الضغط على الحزمة والعطل المحتمل على مر الوقت.

يبقى القارن up / كثير خطأ على serdes أثر الحركة مرور.

إذا إستمرت المشكلة، فقم بمتابعة RMA / R&R.

إعادة الضبط السريع لبروتوكول NP (Tomahawk)

LC/0/4/CPU0:Jul 6 04:06:49.259 IST: prm_server_ty[318]: ٪platform-NP-3-ECC : prm_ser_check: تمت إعادة تعيين NP السريع بنجاح للاسترداد من خطأ بسيط في NP 1. لا توجد حاجة إلى إجراء تصحيحي آخر.

يقوم NP باكتشاف مشكلة التماثل السهل ويحاول إصلاحها عن طريق محاولة إعادة تعيين NP السريع.

لا يتوفر ترخيص المواد المسترجعة (RMA) للتكرار الأول.

إعادة تحميل LC لتماثل NP

ل.ل./0/6/CPU0:27 يناير 20:38:08.011 IST: prm_server_to[315]: ٪platform-np-0-lc_reload: حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا

عادة، بعد ثلاث محاولات للشفاء، تقوم وحدة التحكم في الشبكة (LC) بإعادة التحميل بنفسها لإصلاح مشكلة التماثل في بروتوكول NP والتي عادة ما يتم رؤيتها لبطاقة Tomahawk.

تقوم وحدة التحكم في الوصول (LC) بإجراء الاسترداد التلقائي من خلال إعادة تحميل وحدة التحكم في الوصول (LC) وإصلاح مشكلة التماثل غير القابلة للاسترداد في بروتوكول NP الذي تم الإعلام عنه.

يتم قطع الواجهة المعينة إلى NP بإعادة الضبط / بدون تأثير.

RMA لتكرار مثيلات نفس الخطأ.

lc_np_loopback_failed

LC/0/1/CPU0:Jul 26 17:29:06.146 IST: pfm_node_lc[304]: ٪platform-diags-0-lc_np_loopback_failed_tx_path : set|online_diag_lc[168022]|إختبار إسترجاع وحدة معالجة الشبكة (NPU) لبطاقة الخط (0x200006)|قناع فشل الارتباط 0x1.

فشل إختبار إسترجاع LC NP على واحد من NP.

قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة.

تم تعيين التنبيه في PFM على هيئة "lc_np_loopback_failed_xx_path".

RMA لتكرار مثيلات نفس الخطأ.

يتم قطع الواجهة المعينة إلى NP بإعادة الضبط / بدون تأثير.

Fabric-FIA-1-Sustained_CRC_ERR

LC/0/5/CPU0:m 6 05:47:34.748 IST: pfm_node_lc[303]: ٪FABRIC-FIA-1-SUSTAINED_CRC_ERR : المجموعة|fialc[168004]|0x103d000|تعرض واجهة البنية ASIC-0 لأخطاء CRC المستمرة

إيقاف تشغيل FIA بسبب خطأ FABRIC في CRC.

قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة.

مع حادث إغلاق FIA، القارن على FIA أيضا ينهار.

RMA لتكرار مثيلات نفس الخطأ.

يبقى القارن فوق / ما من تأثير.

FAB ARB XIF1 ERR

·LC/0/6/CPU0:يناير 25 19:31:22.787 IST: pfm_node_lc[302]: ٪platform-fabarbiter-1-rx_link_err : clear|fab_arb[163918]|0x1001001|lit_xif1_k_char_err

ل.ل./0/6/CPU0:يناير 25 19:31:22.787 IST: pfm_node_lc[302]: ٪platform-fabarbiter-1-sync_err : clear|fab_arb[163918]|0x1001001|LIT_XIF1_LOSS_SYNC

ل.ل./0/6/CPU0:يناير 25 19:33:23.010 IST: pfm_node_lc[302]: ٪platform-fabarbiter-1-rx_link_err : مجموعة|fab_arb[163918]|0x1001001|lit_xif1_disp_err

خطأ في LC وخطأ في وسيط تركيب & rx_link.

يبقى القارن فوق / ما من تأثير.

لرفض أي مسألة عابرة.

RMA لتكرار مثيلات نفس الخطأ.

خطأ FPOE_READ_WRITE

تتبع أخطاء Xbar (إظهار البنية التقنية)

مارس 2500:14:03.497 sm15/error.log_fab_xbar 0/7/cpu0 t4812 /sm15_board_spec.c:90: (خطأ) sm15_tom_get_ha_status: lda_get_active(sup)) بعد إعادة المحاولة 0

مارس 2500:14:04.893 sm15/error.log_fab_xbar 0/7/cpu0 t4812 /sm15_config.c:917: (خطأ) sm15_port_setup_auto_spread: asic:0 ميناء:12 خطأ، rc: 0x0

مارس 2500:14:31.935 sm15/error.log_fab_xbar 0/7/cpu0 t4812 /sm15_regio.c:686: (خطأ) sm15_pciE_read_fpoe: write_fpoe_beg asic:0 port:5 fpoe:2722 data:0x6271268

مارس 2500:14:31.935 sm15/error.log_fab_xbar 0/7/cpu0 t4812 /sm15_regio.c:166: (خطأ) sm15_rd_fpoe: RF_E:0x5 i:0 p:5 o:0xaa2 v:0x0

مارس 2500:14:31.965 sm15/error.log_fab_xbar 0/7/cpu0 t4812 /sm15_regio.c:686: (خطأ) sm15_pciE_read_fpoe: write_fpoe_beg asic:0 port:5 fpoe:2961 data:0x6271624

مارس 2500:14:31.965 sm15/error.log_fab_xbar 0/7/cpu0 t4812 /sm15_regio.c:166: (خطأ) sm15_rd_fpoe: RF_E:0x5 i:0 p:5 o:0xb91 v:0x0

معرف تصحيح الأخطاء من Cisco CSCvv45788

عيب برمجي

خوادم FIA_XBAR

#show موقع حالة إرتباط وحدة التحكم الليفية 0/9/CPU0

********** FIA-3 **********

الفئة: لينك-3

ARB Link-0 up

وصلة Xbar-0 لأعلى

وصلة Xbar-1 لأعلى

إرتباط Xbar-2 للأسفل

وصلة Xbar-3 للأسفل

ل.ل./0/9/CPU0:أكتوبر 15 05:51:50.677 IST: pfm_node_lc[252]: ٪FABRIC-FIA-1-DATA_NB_SERDES_2_FAIL_0 : واضح|fialc[4574]|0x108b003|فشل Data NB Serdes Link 2 على FIA 3 | LC/0/9/CPU0:أكتوبر 15 06:02:23. 310 IST: pfm_node_lc[252]: ٪platform-crossbar-1-serdes_error_lnk2 : مجموعة|fab_xbar[4586]|0x1017008|FIA_3

| LC/0/9/CPU0:أكتوبر 15 06:02:33. 311 IST: pfm_node_lc[252]: ٪platform-crossbar-1-serdes_error_lnk2 : clear|fab_xbar[4586]|0x1017008|FIA_3

المعيار RP/0/RP1/CPU0:مارس 104:36:27.501 IST: برنامج FABMGR[218]: ٪platform-fabmgr-2-fabric_link_down_fault : (0/8/CPU0 FIA 3) <—> (0/8/CPU0 XBAR 0) تم إيقاف إرتباط البنية

المعيار RP/0/RP1/CPU0:مارس 104:36:27.504 IST: برنامج FABMGR[218]: ٪platform-fabmgr-2-fabric_internal_fault:  واجه 0/8/CPU0 (slot 10) خطأ في البنية. سيتم إيقاف تشغيل الواجهات.

لرفض أي مسألة عابرة. RMA لتكرار مثيلات نفس الخطأ.

إعادة تعيين سريعة ل ICFD الخاص بالإعلام NP DIAG

NP-DIAG على NP0، ICFD (STS-1)، NP يمكن أن يكون 0-4

حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا

تشغيل إعادة تعيين سريعة ل NP

ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة.

إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA.

فشلت مراقبة حماية PRM في الحصول على عمليات إعادة الضبط السريعة لحزمة NP

فشل مراقبة سلامة NP-DIAG

حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا

تشغيل إعادة تعيين سريعة ل NP

ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة.

إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA.

تحصل مراقبة سلامة PRM على عمليات إعادة الضبط السريعة ل Packet-NP التالفة

مراقبة الصحة ل NP-DIAG على

حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا

تشغيل إعادة تعيين سريعة ل NP

ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة.

إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA.

فشل أعلى في عدم النشاط

فشل NP-DIAG على NP

مقاطعة من UCODE على أعلى عدم النشاط - هل يتم إعادة الضبط السريع ل NP

تشغيل إعادة تعيين سريعة ل NP

ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة.

إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA.

فشل LSP NP Init

معيار LC/0/6/CPU0:مارس 23 02:53:56.175 IST: npu_server_lsp[138]: ٪PLATFORM-LDA-3-INIT_FAILED : فشل تهيئة lda_bb_np_reset_process 13795 inst 0x2 LC init: فشل في إعادة تعيين NP HAL (0x0000001 - العملية غير مسموح بها) : npu_server_lsp : (معرف العملية = 4597) :  -traceback= 7fea2d5cd9f6 7fea2d7d5816 7fea21465efa 7fea21465fc2 7fea42ad0bed 55a9dbd66031 7fea45e1c855 7fea45e1cc2b 7fea2624d5267fea3571b96a4d6e835a9dbd691e9

معيار LC/0/6/CPU0:مارس 23 02:53:56.185 IST: npu_server_lsp[138]: ٪platform-np-4-init_debug_msg : فشلت إعادة تعيين LDA NP2!!  تحقق من وجود إصدار IPU ذي مستوى منخفض.

يتعين تجميع هذه المعلومات:

show tech-support ethernet interfaces

show tech-support ethernet controllers

show tech-support np

show tech-support fpd

admin show tech-support ctrace

show tech fabric

show logging

gather

RP/0/RP0/CPU0:AG3_1#admin

sysadmin-vm:0_RP0# run

[sysadmin-vm:0_RP0:~]$bash -l

[sysadmin-vm:0_RP0:~]$ gather

يتم إنشاء الملف ويتم حفظه في rp0_xr:/misc/disk1

من sysadmin/calvados:

show logging onboard fabric location <>

قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة.

فشل NP ل Tomahawk (فشل تدريب DDR)

+++ show prm server trace error location 0/7/cpu0 [14:36:59.520 IST SAT في 29 يناير 2022] ++++

97 إدخالا ملفوفا (2112 ممكن، 320 مخصص، 0 مصفى، إجمالي 97)

يناير 2900:22:10. 135 prm_server/error 0/7/CPU0 t10 prm_np_channel_PowerUp : 0x80001d46 خطأ أثناء تشغيل القناة 3 المرحلة 4

يناير 2900:22:10. 136 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup : فشلت المرحلة 4 من الطاقة 0xa57c0200 على القناة 3

فشل تمهيد NP3 في يناير 29 00:22:10.136 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup NP3، وحاول مرة أخرى. إعادة المحاولة رقم 1

يناير 2900:22:35. 125 prm_server/error 0/7/CPU0 t10 prm_np_channel_PowerUp : 0x80001d46 خطأ أثناء تشغيل القناة 3 المرحلة 4

يناير 2900:22:35. 125 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup : فشلت المرحلة 4 من الطاقة 0xa57c0200 على القناة 3

فشل تمهيد NP3 في 2900:22:35.125 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup NP3، وحاول مرة أخرى. إعادة المحاولة رقم 2

يناير 2900:22:59. 075 prm_server/error 0/7/CPU0 t10 prm_np_channel_PowerUp : 0x80001d46 خطأ أثناء تشغيل القناة 3 المرحلة 4

يناير 2900:22:59. 075 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup : فشلت المرحلة 4 من الطاقة 0xa57c0200 على القناة 3

في 29 يناير 2900:22:59.075 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup بعد 3 محاولات (محاولات)، فشل NP3 في التهيئة.

يناير 2900:23:00.087 prm_server/error 0/7/CPU0 t10 prm_send_pfm_msg: فشل تهيئة NP المستمر، إعادة تحميل بطاقة الخط غير مطلوبة.

إيداع سجلات برامج تشغيل NP

<NP#3>فشل التدريب على DDR (الحالة 0x1)

<np#3>ddr3TipRunAlg: فشل الضبط 0

<NP#3>التعليمات البرمجية ل ddrTipRunAlgo: فشل ddr3TipRunAlg (خطأ 0x1)

<NP#3>** خطأ: غير معروف 0x1

العقدة: node0_7_cpu0

—

الوقت الحالي: 3 مايو، 46:42 م 2022 م

إجمالي PFM: حالة طوارئ/تنبيه (E/A): 1 حرج (CR): 0 خطأ(er): 0

—

زمن مرتفع |S#|اسم الخطأ |Sev|Proc_ID|Dev/Path Name |المؤشر

—+—+—+—+——+——

يناير 2900:22:58|8 |NP_INIT_FAIL_NO_RESET |E/A|5356 |عمليات الشبكة|0x1008000

قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة. إذا كانت المشكلة مازالت تراعى RMA ال LC

معرف تصحيح الأخطاء من Cisco CSCwa85165

فشل LSP NP Init (خطأ HbmReadParticleError)

ل.ل./0/13/CPU0:يناير 10 13:34:59.106 IST: npu_server_lsp[278]: ٪PLATFORM-NP-4-SHUTDOWN_START : منتج NP4: تم الكشف عن خطأ EMRHIMREG.ch1Psch0HbmReadParticleError، إيقاف تشغيل NP قيد التقدم

ل.ل./0/13/CPU0:يناير 10 13:34:59.106 IST: pfm_node_lc[330]: ٪PLATFORM-NP-0-UNREVERABLE_ERROR : مجموعة|npu_server_lsp[4632]|0x10a5004|تم الكشف عن خطأ غير قابل للاسترداد على NP4

+++ إظهار وحدات التحكم np التي تقاطع جميع المواقع 0/13/CPU0 [16:02:16.712 IST من 10 يناير 2022] ++++

العقدة: 0/13/CPU0:

—

CNT لمعرف مقاطعة NPU

— — — —

<snip>

4 hbmdpReg0.hbmdpExceptionLeaf0.hbmdpIntNwlHbmdpRdDataUncorrectableErrCh1Psch1 0x201dc013 1

4 hbmdpReg0.hbmdpExceptionLeaf0.hbmdpIntNwlHbmdpRdDataUncorrectableErrCh1Psch0 0x201dc012 1

تحقق من تثبيت معرف تصحيح الأخطاء من Cisco CSCvt59803.

يساعد إعادة تحميل LC من خلال واجهة سطر الأوامر (CLI) على الاسترداد.

إرتباط الوسيط مع وضع الاستعداد

برنامج Fabric-Manager:

###########

حالة الشريحة

=====================================

0/RP0/CPU0 0 عبر الإنترنت

0/RP1/CPU0 0 عبر الإنترنت

0/0/CPU0 0 1 عبر الإنترنت

0/1/CPU0 0 1 عبر الإنترنت

0/8/CPU0 0 دون اتصال (إرتباط وسيط اللوحة الخلفية لأسفل)

0/8/CPU0 1 دون اتصال (إرتباط وسيط اللوحة الخلفية لأسفل)

0/8/CPU0 2 دون اتصال (إرتباط وسيط اللوحة الخلفية لأسفل)

0/8/CPU0 3 غير متصل (إرتباط وسيط اللوحة الخلفية لأسفل)

لرفض أي مسألة عابرة. RMA لتكرار مثيل نفس الخطأ.

خطأ في Serdes

إظهار موقع تتبع السلاسل 0/x/cpu0 | i "htl_err_device_not_connected") ترى هذه الأخطاء:

68413 أغسطس 12:44:33.525 vkg_serdes/خطأ 0/3/CPU0 t5234 خطأ: vkg_mdx1_get_lasi_info() line:2910 mdx1_serdes_status_get failed على الجهاز 1 قناة 12. rc=0x2103 - HTL_ERR_DEVICE_NOT_CONNECTED

معرف تصحيح الأخطاء من Cisco CSCvz7552

عيب برمجي

العيوب المعروفة

معرف الخطأ من Cisco

المكون

العنوان

معرف تصحيح الأخطاء من Cisco CSCvy00012

asr9k-diags-online

إستهلاك ذاكرة الحزمة بواسطة online_diag_rsp

معرف تصحيح الأخطاء من Cisco CSCvw57721

asr9k-serviceAck

Umbrella SMU التي تحتوي على برامج ثابتة محدثة لمنتجات Lightspeed NP ووحدات التحكيم

معرف تصحيح الأخطاء من Cisco CSCvz7552

asr9k-vic-ls

تعلق البرامج الثابتة ل PHY وتسبب عدم التعرف على البصريات على A9K-20HG-FLEX

معرف تصحيح الأخطاء من Cisco CSCvz76691

asr9k-serviceAck

وحدة إدارة الهيكل (SMU) المظلة مع معالجة مقاطعة حالة الارتباط المحسنة لخطوط Tomahawk

Cisco بق id CSCvz84139

ASR9k-LS-Fabric

تعطل FAB_SI عند ترقية الموجه إلى 742

معرف تصحيح الأخطاء من Cisco CSCwa81006

asr9k-pfm

تعذر على ASR9K/eXR تنفيذ إيقاف تشغيل منفذ بيانات مدير الأخطاء في بعض السيناريوهات

Cisco بق id CSCvz16840

ASR9k-FIA

BLB جلسة رفرفة عندما CLI يعيد تحميل LC لأن مسار إعادة التوجيه أغلق مبكرا بسبب التغييرات المضافة في 6.5.2

معرف تصحيح الأخطاء من Cisco CSCwb64255

asr9k-fab-xbar

إعدادات SI الجديدة ل SKB في هيكل Starscream(9912) و MegaAtron(9922)

معرف تصحيح الأخطاء من Cisco CSCwa09794

asr9k-fab-xbar

بروتوكول SI الجديد بعد إجراء الضبط الدقيق لهيكل RO ل SKB-SM15

معرف تصحيح الأخطاء من Cisco CSCvv45788

asr9k-fab-xbar

يمكن لعمليتي fab_xbar و mgid-programmer الوصول إلى الأجهزة في نفس الوقت

معرف تصحيح الأخطاء من Cisco CSCwd22196

asr9k-prm

إستهلاك مخزن RFD المؤقت بين إرتباط ILKN على Tomahawk LC

معرف تصحيح الأخطاء من Cisco CSCwb66960

asr9k-fab-infra

عزل أخطاء بنية ASR9k

معرف تصحيح الأخطاء من Cisco CSCwa79758

asr9k-fab-xbar

فقد البث المتعدد على LSP LC بعد إجراء عملية إدخال/إخراج لبطاقة LSP LC أخرى مع خطأ إرتباط Xbar

معرف تصحيح الأخطاء من Cisco CSCvw88284

asr9k-lda-ls

RSP5 BW افتراضيا إلى 200G على هيكل 9910/9906 بدلا من 600G.

معرف تصحيح الأخطاء من Cisco CSCvm82379

asr9k-fab-arb

تحطمت فاب-أرب أثناء اصطحابها لقماش الشركة

معرف تصحيح الأخطاء من Cisco CSCvh00349

ASR9k-FIA

يمكن أن تتعامل بنية ASR9k مع حزم UCAST المرسلة أثناء وضع الاستعداد

معرف تصحيح الأخطاء من Cisco CSCvk44688

ASR9k-FIA

تعرضت FPGA للأخطاء بشكل متكرر ولم تتمكن من التعافي

معرف تصحيح الأخطاء من Cisco CSCvy31670

ASR9k-ls-fia

ل.س: تؤدي إزالة FC0 إلى تمكين أدوات تحديد معدل البنية، بينما لا تسمح FC4 بذلك

معرف تصحيح الأخطاء من Cisco CSCvt59803

asr9k-ls-npdriver

ل.س: Platform-NP-4-Shutdown IMRHIMREG.ch1Psch1HbmReadParticleError

سلوك fault-manager datapath port shutdown/toggle القيادة

- يساعد fault-manager datapath port shutdown الأمر في إيقاف تشغيل المنافذ الخاصة ب FIA/NP ذي الصلة والتي من أجلها يتم تعيين تنبيه فشل بيانات الاعتماد، على RP/RSP نشط، ولا تظهر الواجهة تلقائيا حتى تقوم بإعادة تحميل عنصر التحكم في الشبكة المحلية (LC). لا يعمل أمر واجهة سطر الأوامر (CLI) هذا كما هو متوقع من الإصدار 7. x.x. (fault-manager datapath port shutdownلا يعمل أمر واجهة سطر الأوامر (CLI) وفقا للتصميم من 7. x.x) - ثابت في 7. 7.2.

- يعمل أمر واجهة سطر الأوامر (fault-manager datapath port toggleCLI) بشكل جيد. إنه يفتح المنفذ بمجرد مسح تنبيه فشل Punt DataPath.

- وهذا يساعد على منع انقطاع الخدمة في حالة توفر معدل تكرار صحيح على مستوى الارتباط وتوفر BW على المسار المتكرر.

الاختبار - للتحقق من صحة عملية الأمر المذكورة سابقا.

إنشاء خطأ PUNT على NP0 LC7:

RP/0/RP0/CPU0:ASR-9922-A#monitor np counter PUNT_DIAGS_RSP_ACT np0 count 20 location 0/7/CPU0

Wed Jul  7 14:15:17.489 UTC

Usage of NP monitor is recommended for cisco internal use only.

Please use instead 'show controllers np capture' for troubleshooting packet drops in NP

and 'monitor np interface' for per (sub)interface counter monitoring

Warning: Every packet captured will be dropped! If you use the 'count'

option to capture multiple protocol packets, this could disrupt

protocol sessions (eg, OSPF session flap). So if capturing protocol

packets, capture only 1 at a time.

Warning: A mandatory NP reset will be done after monitor to clean up.

This will cause ~150ms traffic outage. Links will stay Up.

Proceed y/n [y] > y

Monitor PUNT_DIAGS_RSP_ACT on NP0 ... (Ctrl-C to quit)

Wed Jul  7 14:17:08 2021 -- NP0 packet

From Fabric: 127 byte packet

0000: 00 09 00 00 b4 22 00 00 ff ff ff ff 00 00 ff ff   ....4"..........

0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa   ....ppppLLLL****

0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00   UUUU............

0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff   ................

0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55   ppppLLLL****UUUU

0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00   ................

0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0   ............pppp

0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00      LLLL****UUUU...

(count 1 of 20)

Wed Jul  7 14:18:09 2021 -- NP0 packet

From Fabric: 256 byte packet

0000: 00 09 00 00 b5 22 00 00 ff ff ff ff 00 00 ff ff   ....5"..........

0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa   ....ppppLLLL****

0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00   UUUU............

0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff   ................

0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55   ppppLLLL****UUUU

0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00   ................

0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0   ............pppp

0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 00   LLLL****UUUU....

0080: 01 00 00 00 00 00 00 00 00 00 00 00 ff ff ff ff   ................

0090: 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc   ........ppppLLLL

00a0: aa aa aa aa 55 55 55 55 00 00 00 00 01 00 00 00   ****UUUU........

00b0: 00 00 00 00 00 00 00 00 ff ff ff ff 00 00 ff ff   ................

00c0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00d0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00e0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00f0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

(count 2 of 20)

Wed Jul  7 14:19:09 2021 -- NP0 packet

Actual packet size 515 bytes truncated size 384:

From Fabric: 384 byte packet

0000: 00 09 00 00 b6 22 00 00 ff ff ff ff 00 00 ff ff   ....6"..........

0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa   ....ppppLLLL****

0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00   UUUU............

0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff   ................

0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55   ppppLLLL****UUUU

0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00   ................

0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0   ............pppp

0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 00   LLLL****UUUU....

0080: 01 00 00 00 00 00 00 00 00 00 00 00 ff ff ff ff   ................

0090: 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc   ........ppppLLLL

00a0: aa aa aa aa 55 55 55 55 00 00 00 00 01 00 00 00   ****UUUU........

00b0: 00 00 00 00 00 00 00 00 ff ff ff ff 00 00 ff ff   ................

00c0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00d0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00e0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00f0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0100: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0110: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0120: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0130: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0140: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0150: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0160: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

0170: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

RP/0/RP0/CPU0:ASR-9922-A#sh pfm location 0/RP0/CPU0

Wed Jul  7 14:19:17.174 UTC

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Jul  7 14:19:17 2021

PFM TOTAL: 2   EMERGENCY/ALERT(E/A): 1   CRITICAL(CR): 0   ERROR(ER): 1

-------------------------------------------------------------------------------------------------

Raised Time         |S#|Fault Name                         |Sev|Proc_ID|Dev/Path Name |Handle

--------------------+--+-----------------------------------+---+-------+--------------+----------

Jul  1 10:13:45 2021|0 |SPINE_UNAVAILABLE                  |E/A|5082   |Fabric Manager|0x1034000

Jul  7 14:19:09 2021|0 |PUNT_FABRIC_DATA_PATH_FAILED       |ER |9429   |System Punt/Fa|0x2000004

RP/0/RP0/CPU0:ASR-9922-A#sh pfm process 9429 location 0/Rp0/CPU0

Wed Jul  7 14:19:37.128 UTC

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Jul  7 14:19:37 2021

PFM TOTAL: 2   EMERGENCY/ALERT(E/A): 1   CRITICAL(CR): 0   ERROR(ER): 1

PER PROCESS TOTAL: 0   EM: 0   CR: 0   ER: 0

Device/Path[1 ]:Fabric loopbac  [0x2000003 ] State:RDY  Tot: 0

Device/Path[2 ]:System Punt/Fa  [0x2000004 ] State:RDY  Tot: 1

1   Fault Id:          432

Sev:               ER

Fault Name:        PUNT_FABRIC_DATA_PATH_FAILED

Raised Timestamp:  Jul  7 14:19:09 2021

Clear Timestamp:   N/A

Changed Timestamp: N/A

Resync Mismatch:   FALSE

MSG:               failure threshold is 3, (slot, NP) failed: (0/7/CPU0, 0)

Device/Path[3 ]:Crossbar Switc  [0x108c000 ] State:RDY  Tot: 0

Device/Path[4 ]:Crossbar Switc  [0x108c001 ] State:RDY  Tot: 0

Device/Path[5 ]:Crossbar Switc  [0x108c002 ] State:RDY  Tot: 0

Device/Path[6 ]:Crossbar Switc  [0x108c003 ] State:RDY  Tot: 0

Device/Path[7 ]:Crossbar Switc  [0x108c004 ] State:RDY  Tot: 0

Device/Path[8 ]:Crossbar Switc  [0x108c005 ] State:RDY  Tot: 0

Device/Path[9 ]:Crossbar Switc  [0x108c006 ] State:RDY  Tot: 0

Device/Path[10]:Crossbar Switc  [0x108c007 ] State:RDY  Tot: 0

Device/Path[11]:Crossbar Switc  [0x108c008 ] State:RDY  Tot: 0

Device/Path[12]:Crossbar Switc  [0x108c009 ] State:RDY  Tot: 0

Device/Path[13]:Crossbar Switc  [0x108c00a ] State:RDY  Tot: 0

Device/Path[14]:Crossbar Switc  [0x108c00b ] State:RDY  Tot: 0

Device/Path[15]:Crossbar Switc  [0x108c00c ] State:RDY  Tot: 0

Device/Path[16]:Crossbar Switc  [0x108c00d ] State:RDY  Tot: 0

Device/Path[17]:Crossbar Switc  [0x108c00e ] State:RDY  Tot: 0

Device/Path[18]:Fabric Interfa  [0x108b000 ] State:RDY  Tot: 0

Device/Path[19]:Fabric Arbiter  [0x1086000 ] State:RDY  Tot: 0

Device/Path[20]:CPU Controller  [0x108d000 ] State:RDY  Tot: 0

Device/Path[21]:Device Control  [0x109a000 ] State:RDY  Tot: 0

Device/Path[22]:ClkCtrl Contro  [0x109b000 ] State:RDY  Tot: 0

Device/Path[23]:NVRAM           [0x10ba000 ] State:RDY  Tot: 0

Device/Path[24]:Hooper switch   [0x1097000 ] State:RDY  Tot: 0

Device/Path[25]:Hooper switch   [0x1097001 ] State:RDY  Tot: 0

Device/Path[26]:Hooper switch   [0x1097002 ] State:RDY  Tot: 0

Device/Path[27]:Hooper switch   [0x1097003 ] State:RDY  Tot: 0

لم يتم تنزيل المنفذ في هذه الحالة:

RP/0/RP0/CPU0:ASR-9922-A#sh ipv4 int brief location 0/7/CPU0

Wed Jul  7 14:21:29.693 UTC

Interface                      IP-Address      Status          Protocol Vrf-Name

TenGigE0/7/0/0                 unassigned      Down            Down     default

TenGigE0/7/0/1                 unassigned      Down            Down     default

TenGigE0/7/0/2                 unassigned      Down            Down     default

TenGigE0/7/0/3                 unassigned      Down            Down     default

TenGigE0/7/0/4                 unassigned      Down            Down     default

TenGigE0/7/0/5                 unassigned      Down            Down     default

TenGigE0/7/0/6                 unassigned      Down            Down     default

TenGigE0/7/0/7                 unassigned      Shutdown        Down     default

TenGigE0/7/0/8                 unassigned      Shutdown        Down     default

TenGigE0/7/0/9                 unassigned      Shutdown        Down     default

TenGigE0/7/0/10                unassigned      Down            Down     default

TenGigE0/7/0/11                unassigned      Down            Down     default

TenGigE0/7/0/12                unassigned      Down            Down     default

TenGigE0/7/0/13                unassigned      Shutdown        Down     default

TenGigE0/7/0/14                unassigned      Shutdown        Down     default

TenGigE0/7/0/15                unassigned      Shutdown        Down     default

TenGigE0/7/0/16                unassigned      Shutdown        Down     default

TenGigE0/7/0/17                unassigned      Shutdown        Down     default

TenGigE0/7/0/18                unassigned      Down            Down     default

TenGigE0/7/0/19                unassigned      Up              Up       default  >>>>>>> Port is UP

RP/0/RP0/CPU0:ASR-9922-A#sh logging last 200 | in 0/7/0

Wed Jul  7 14:22:35.715 UTC

RP/0/RP0/CPU0:ASR-9922-A#

حالة الاختبار 1.2:

NP/سلوك المنافذ باستخدام fault-manager datapath port toggle الأمر:

RP/0/RP0/CPU0:ASR-9922-A#sh run formal | in data

Wed Jul  7 14:52:11.714 UTC

Building configuration...

fault-manager datapath port toggle

RP/0/RP0/CPU0:ASR-9922-A#

عدم وجود تنبيه في PFM:

RP/0/RP0/CPU0:ASR-9922-A#sh pfm location  0/Rp0/CPU0

Wed Jul  7 14:55:13.410 UTC

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Jul  7 14:55:13 2021

PFM TOTAL: 1   EMERGENCY/ALERT(E/A): 1   CRITICAL(CR): 0   ERROR(ER): 0

-------------------------------------------------------------------------------------------------

Raised Time         |S#|Fault Name                         |Sev|Proc_ID|Dev/Path Name |Handle

--------------------+--+-----------------------------------+---+-------+--------------+----------

Jul  1 10:13:45 2021|0 |SPINE_UNAVAILABLE                  |E/A|5082   |Fabric Manager|0x1034000

RP/0/RP0/CPU0:ASR-9922-A#

إنشاء خطأ في NP0 LC7:

RP/0/RP0/CPU0:ASR-9922-A#monitor np counter PUNT_DIAGS_RSP_ACT np0 count 20 location 0/7/CPU0

Wed Jul  7 14:51:18.596 UTC

Usage of NP monitor is recommended for cisco internal use only.

Please use instead 'show controllers np capture' for troubleshooting packet drops in NP

and 'monitor np interface' for per (sub)interface counter monitoring

Warning: Every packet captured will be dropped! If you use the 'count'

option to capture multiple protocol packets, this could disrupt

protocol sessions (eg, OSPF session flap). So if capturing protocol

packets, capture only 1 at a time.

Warning: A mandatory NP reset will be done after monitor to clean up.

This will cause ~150ms traffic outage. Links will stay Up.

Proceed y/n [y] > y

Monitor PUNT_DIAGS_RSP_ACT on NP0 ... (Ctrl-C to quit)

Wed Jul  7 14:53:21 2021 -- NP0 packet

From Fabric: 127 byte packet

0000: 00 09 00 00 d8 22 00 00 ff ff ff ff 00 00 ff ff   ....X"..........

0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa   ....ppppLLLL****

0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00   UUUU............

0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff   ................

0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55   ppppLLLL****UUUU

0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00   ................

0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0   ............pppp

0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00      LLLL****UUUU...

(count 1 of 20)

Wed Jul  7 14:54:22 2021 -- NP0 packet

From Fabric: 256 byte packet

0000: 00 09 00 00 d9 22 00 00 ff ff ff ff 00 00 ff ff   ....Y"..........

0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa   ....ppppLLLL****

0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00   UUUU............

0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff   ................

0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55   ppppLLLL****UUUU

0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00   ................

0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0   ............pppp

0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 00   LLLL****UUUU....

0080: 01 00 00 00 00 00 00 00 00 00 00 00 ff ff ff ff   ................

0090: 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc   ........ppppLLLL

00a0: aa aa aa aa 55 55 55 55 00 00 00 00 01 00 00 00   ****UUUU........

00b0: 00 00 00 00 00 00 00 00 ff ff ff ff 00 00 ff ff   ................

00c0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00d0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00e0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

00f0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00   ................

(count 2 of 20)

RP/0/RP0/CPU0:ASR-9922-A#sh pfm location  0/Rp0/CPU0

Wed Jul  7 14:56:24.459 UTC

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Jul  7 14:56:24 2021

PFM TOTAL: 2   EMERGENCY/ALERT(E/A): 1   CRITICAL(CR): 0   ERROR(ER): 1

-------------------------------------------------------------------------------------------------

Raised Time         |S#|Fault Name                         |Sev|Proc_ID|Dev/Path Name |Handle

--------------------+--+-----------------------------------+---+-------+--------------+----------

Jul  1 10:13:45 2021|0 |SPINE_UNAVAILABLE                  |E/A|5082   |Fabric Manager|0x1034000

Jul  7 14:55:23 2021|0 |PUNT_FABRIC_DATA_PATH_FAILED       |ER |9429   |System Punt/Fa|0x2000004

RP/0/RP0/CPU0:ASR-9922-A#sh pfm process 9429 location 0/RP0/CPU0

Wed Jul  7 14:56:39.961 UTC

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Jul  7 14:56:40 2021

PFM TOTAL: 2   EMERGENCY/ALERT(E/A): 1   CRITICAL(CR): 0   ERROR(ER): 1

PER PROCESS TOTAL: 0   EM: 0   CR: 0   ER: 0

Device/Path[1 ]:Fabric loopbac  [0x2000003 ] State:RDY  Tot: 0

Device/Path[2 ]:System Punt/Fa  [0x2000004 ] State:RDY  Tot: 1

1   Fault Id:          432

Sev:               ER

Fault Name:        PUNT_FABRIC_DATA_PATH_FAILED

Raised Timestamp:  Jul  7 14:55:23 2021

Clear Timestamp:   N/A

Changed Timestamp: N/A

Resync Mismatch:   FALSE

MSG:               failure threshold is 3, (slot, NP) failed: (0/7/CPU0, 0)

Device/Path[3 ]:Crossbar Switc  [0x108c000 ] State:RDY  Tot: 0

Device/Path[4 ]:Crossbar Switc  [0x108c001 ] State:RDY  Tot: 0

Device/Path[5 ]:Crossbar Switc  [0x108c002 ] State:RDY  Tot: 0

Device/Path[6 ]:Crossbar Switc  [0x108c003 ] State:RDY  Tot: 0

Device/Path[7 ]:Crossbar Switc  [0x108c004 ] State:RDY  Tot: 0

Device/Path[8 ]:Crossbar Switc  [0x108c005 ] State:RDY  Tot: 0

Device/Path[9 ]:Crossbar Switc  [0x108c006 ] State:RDY  Tot: 0

Device/Path[10]:Crossbar Switc  [0x108c007 ] State:RDY  Tot: 0

Device/Path[11]:Crossbar Switc  [0x108c008 ] State:RDY  Tot: 0

Device/Path[12]:Crossbar Switc  [0x108c009 ] State:RDY  Tot: 0

Device/Path[13]:Crossbar Switc  [0x108c00a ] State:RDY  Tot: 0

Device/Path[14]:Crossbar Switc  [0x108c00b ] State:RDY  Tot: 0

Device/Path[15]:Crossbar Switc  [0x108c00c ] State:RDY  Tot: 0

Device/Path[16]:Crossbar Switc  [0x108c00d ] State:RDY  Tot: 0

Device/Path[17]:Crossbar Switc  [0x108c00e ] State:RDY  Tot: 0

Device/Path[18]:Fabric Interfa  [0x108b000 ] State:RDY  Tot: 0

Device/Path[19]:Fabric Arbiter  [0x1086000 ] State:RDY  Tot: 0

Device/Path[20]:CPU Controller  [0x108d000 ] State:RDY  Tot: 0

Device/Path[21]:Device Control  [0x109a000 ] State:RDY  Tot: 0

Device/Path[22]:ClkCtrl Contro  [0x109b000 ] State:RDY  Tot: 0

Device/Path[23]:NVRAM           [0x10ba000 ] State:RDY  Tot: 0

Device/Path[24]:Hooper switch   [0x1097000 ] State:RDY  Tot: 0

Device/Path[25]:Hooper switch   [0x1097001 ] State:RDY  Tot: 0

Device/Path[26]:Hooper switch   [0x1097002 ] State:RDY  Tot: 0

Device/Path[27]:Hooper switch   [0x1097003 ] State:RDY  Tot: 0

انخفضت الواجهة TenGigE0/7/0/19 من NP0:

RP/0/RP0/CPU0:ASR-9922-A#show logging last 200 | in 0/7/0

Wed Jul  7 14:58:42.959 UTC

LC/0/7/CPU0:Jul  7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINK-3-UPDOWN :

Interface TenGigE0/7/0/19, changed state to Down

LC/0/7/CPU0:Jul  7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINEPROTO-5-UPDOWN :

Line protocol on Interface TenGigE0/7/0/19, changed state to Down

RP/0/RP0/CPU0:Jul  7 14:55:23.802 UTC: BM-DISTRIB[1290]: %L2-BM-6-ACTIVE :

TenGigE0/7/0/19 is no longer Active as part of Bundle-Ether854 (Link is down)

LC/0/7/CPU0:Jul  7 14:55:25.854 UTC: vic_0_0[379]: %PLATFORM-VIC-4-RFI :

Interface TenGigE0/7/0/19, Detected Remote Fault

LC/0/7/CPU0:Jul  7 14:55:26.936 UTC: lda_server[114]: %PKT_INFRA-FM-2-FAULT_CRITICAL :

ALARM_CRITICAL :OPTICS RX POWER LANE-0 LOW ALARM :CLEAR : Te0/7/0/0:

تم إيقاف إنشاء خطأ PUNT:

RP/0/RP0/CPU0:ASR-9922-A#sh ipv4 int brief location 0/7/CPU0

Wed Jul  7 14:59:16.322 UTC

Interface                      IP-Address      Status          Protocol Vrf-Name

TenGigE0/7/0/0                 unassigned      Down            Down     default

TenGigE0/7/0/1                 unassigned      Down            Down     default

TenGigE0/7/0/2                 unassigned      Down            Down     default

TenGigE0/7/0/3                 unassigned      Down            Down     default

TenGigE0/7/0/4                 unassigned      Down            Down     default

TenGigE0/7/0/5                 unassigned      Down            Down     default

TenGigE0/7/0/6                 unassigned      Down            Down     default

TenGigE0/7/0/7                 unassigned      Shutdown        Down     default

TenGigE0/7/0/8                 unassigned      Shutdown        Down     default

TenGigE0/7/0/9                 unassigned      Shutdown        Down     default

TenGigE0/7/0/10                unassigned      Down            Down     default

TenGigE0/7/0/11                unassigned      Down            Down     default

TenGigE0/7/0/12                unassigned      Down            Down     default

TenGigE0/7/0/13                unassigned      Shutdown        Down     default

TenGigE0/7/0/14                unassigned      Shutdown        Down     default

TenGigE0/7/0/15                unassigned      Shutdown        Down     default

TenGigE0/7/0/16                unassigned      Shutdown        Down     default

TenGigE0/7/0/17                unassigned      Shutdown        Down     default

TenGigE0/7/0/18                unassigned      Down            Down     default

TenGigE0/7/0/19                unassigned      Down            Down     default  >>>>>>

توقف التنبيه:

RP/0/RP0/CPU0:ASR-9922-A#sh pfm location  0/Rp0/CPU0

Wed Jul  7 15:01:44.478 UTC

node: node0_RP0_CPU0

---------------------

CURRENT TIME: Jul  7 15:01:44 2021

PFM TOTAL: 1   EMERGENCY/ALERT(E/A): 1   CRITICAL(CR): 0   ERROR(ER): 0

-------------------------------------------------------------------------------------------------

Raised Time         |S#|Fault Name                         |Sev|Proc_ID|Dev/Path Name |Handle

--------------------+--+-----------------------------------+---+-------+--------------+----------

Jul  1 10:13:45 2021|0 |SPINE_UNAVAILABLE                  |E/A|5082   |Fabric Manager|0x1034000

RP/0/RP0/CPU0:ASR-9922-A#

ظهرت الواجهة:

RP/0/RP0/CPU0:ASR-9922-A#show logging  | in 0/7/0/19

Wed Jul  7 15:06:11.532 UTC

LC/0/7/CPU0:Jul  7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINK-3-UPDOWN :

Interface TenGigE0/7/0/19, changed state to Down

LC/0/7/CPU0:Jul  7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINEPROTO-5-UPDOWN :

Line protocol on Interface TenGigE0/7/0/19, changed state to Down

RP/0/RP0/CPU0:Jul  7 14:55:23.802 UTC: BM-DISTRIB[1290]: %L2-BM-6-ACTIVE :

TenGigE0/7/0/19 is no longer Active as part of Bundle-Ether854 (Link is down)

LC/0/7/CPU0:Jul  7 14:55:25.854 UTC: vic_0_0[379]: %PLATFORM-VIC-4-RFI :

Interface TenGigE0/7/0/19, Detected Remote Fault

LC/0/7/CPU0:Jul  7 15:03:27.204 UTC: ifmgr[270]: %PKT_INFRA-LINK-3-UPDOWN :

Interface TenGigE0/7/0/19, changed state to Up

LC/0/7/CPU0:Jul  7 15:03:27.206 UTC: ifmgr[270]: %PKT_INFRA-LINEPROTO-5-UPDOWN :

Line protocol on Interface TenGigE0/7/0/19, changed state to Up

RP/0/RP0/CPU0:Jul  7 15:03:29.219 UTC: BM-DISTRIB[1290]: %L2-BM-6-ACTIVE :

TenGigE0/7/0/19 is Active as part of Bundle-Ether854