أستكشاف أخطاء مسار بيانات Punt Fabric وإصلاحها على Tomahawk و Lightspeed Card
المحتويات
المقدمة
يصف هذا المستند رسائل فشل مسار بيانات البنية المضمنة التي تمت رؤيتها أثناء عملية سلسلة موجه خدمات التجميع (ASR) 9000 من Cisco.
معلومات أساسية
تظهر الرسالة بهذا التنسيق:
- يتم مشاهدة أجهزة الإنذار على وحدة تحكم الموجه كما هو موضح هنا.
- وهذا يعني أن مسار إسترجاع هذه الرسائل مقطوع في مكان ما.
RP/0/RP0/CPU0:Oct 28 12:46:58.459 IST: pfm_node_rp[349]: %PLATFORM-DIAGS-3-PUNT_FABRIC_DATA_PATH_FAILED :
Set|online_diag_rsp[24790]|System Punt/Fabric/data Path Test(0x2000004)|failure threshold is 3,
(slot, NP) failed: (0/9/CPU0, 1) (0/9/CPU0, 3)
يقع الإصدار ل NP1 و NP3 على 0/9/CPU0 يذكر سابقا.
هذا وثيقة مقصود ل أي شخص يريد أن يفهم الخطأ رسالة والإجراء أن يكون أخذت إن المشكلة رأيت.
تتوفر بطاقة الخط المستندة إلى Tomahawk (LC) كبطاقة خط (LC) محسنة لحافة الخدمة (جودة خدمة محسنة) أو نقل حزم محسن (جودة خدمة أساسية) LC.
- SE - تحسين مستوى الخدمات
- TR - نقل الحزم المحسن
يتوفر عنصر التحكم في الشبكة المحلية (LC) ذو ال 4 منافذ و 8 منافذ لشبكة إيثرنت بسرعة 100 جيجابت في إثنين من المتغيرات التي تدعم منافذ LAN/WAN/OTN Unified PHY CPAK أو منافذ LAN PHY-only CPAK.
هذه ال LCs مبنية على توماهوك:
- A9K-8x100G-LB-SE
- A9K-8x100G-LB-TR
- A9K-8X100GE-SE
- A9K-8X100GE-TR
- A9K-4x100GE-SE
- A9K-4X100GE-TR
- A9K-400G-DWDM-TR
- A9K-MOD400-SE
- A9K-MOD400-TR
- A9K-MOD200-SE
- A9K-MOD200-TR
- A9K-24x10GE-1G-SE
- A9K-24x10GE-1G-TR
- A9K-48x10GE-1G-SE
- A9K-48x10GE-1G-TR
- الطراز A99-12x100GE
- المحول A99-8x100GE-SE
- A99-8x100GE-TR
ملاحظة: أرقام أجزاء التحكم في الوصول (LC) القائمة على الطراز Tomahawk والتي تبدأ بهيكل A99-X متوافقة مع هيكل Cisco ASR 9904 و ASR 9906 و ASR 9910 و ASR 9912 و ASR 9922. لا تتوافق مع موجهات Cisco ASR 9006 و ASR 9010.
قد تتوفر قوائم التحكم في الوصول (LC) المستندة إلى السرعة الخفيفة إما في صورة حد خدمة محسن (جودة خدمة محسنة) أو نقل حزم محسن (جودة خدمة أساسية) LC. وعلى عكس مصابيح LC التي تستند إلى Tomahawk، لا يتوفر كل طراز LC في كلا النوعين -SE و-TR.
- SE - تحسين مستوى الخدمات
- TR - نقل الحزم المحسن
تستند قوائم التحكم في الوصول (LC) هذه إلى Lightspeed:
- A9K-16x100GE-TR
- المحول A99-16x100GE-X-SE
- الطراز A99-32x100GE-TR
تتوفر قوائم التحكم في الوصول (LSP) المستندة إلى تقنية Lightspeed-Plus (LSP) في صورة وحدة تحكم في الوصول (LCs) محسنة لحافة الخدمة (جودة الخدمة المحسنة) أو وحدة نقل حزم محسنة (جودة الخدمة الأساسية) LC.
تستند قوائم التحكم في الوصول (LCs) هذه إلى LSP:
- A9K-4HG-FLEX-TR
- A9K-4HG-FLEX-SE
- A99-4HG-Flex-TR
- A99-4HG-Flex-SE
- A9K-8HG-FLEX-TR
- A9K-8HG-FLEX-SE
- A9K-20HG-FLEX-TR
- A9K-20HG-FLEX-SE
- الطراز A99-32x100GE-X-TR
- المحول A99-32x100GE-X-SE
- الطراز A99-10x400GE-X-TR
- الطراز A99-10x400GE-X-SE
مسار حزمة تشخيص PUNT Fabric
- يقوم التطبيق التشخيصي الذي يتم تشغيله على وحدة المعالجة المركزية لبطاقة معالج المسار بداخل الحزم التشخيصية الموجهة لكل معالج شبكة (NP) بشكل دوري.
- يتم تكرار الحزمة التشخيصية مرة أخرى داخل NP وتتم إعادتها نحو وحدة المعالجة المركزية لبطاقة معالج التوجيه التي تم الحصول عليها من الحزمة.
- يوفر هذا الفحص الدوري للصحة لكل NP مع حزمة فريدة لكل NP بواسطة التطبيق التشخيصي على بطاقة معالج المسار تنبيها لأية أخطاء وظيفية على مسار البيانات أثناء تشغيل الموجه.
- من الضروري ملاحظة أن التطبيق التشخيصي على كل من معالج التوجيه النشط ومعالج المسار الاحتياطي يقوم بإدخال حزمة واحدة لكل NP بشكل دوري ويحافظ على عدد نجاح أو فشل لكل NP.
- يتم إرسال حزمة تشخيص كل دقيقة إلى NP، (إلى كل واجهة قوائم انتظار افتراضية (VQI) أربع مرات (إجمالي أربعة دقائق/VQI) ويتم تشغيلها عبر جميع شبكات VQI الخاصة ب NP). وللإحاطة بهذا الموضوع، فيما يلي مثال:
باعتبار ال LC يتلقى أربعة np، التشخيص عبر الإنترنت ينبغي تمرين كل NPs (أن يعرف أنها صحية - بناء ممر). والآن، يمكن أن تحتوي كل مجموعة NP على 20 VCIs لكل منها (0-19، 20-39، 40-59، 60-79).
في الدقيقة الأولى، يرسل التشخيص عبر الإنترنت حزمة واحدة إلى كل NP.
1 min : against VQI 0, 20, 40, 60 (to all 4 NPs)
2 min:""""""""
3 min: """""""
4 min : """""
5th min : against VQI 1, 21, 41, 61..
6 min : """"""""
هذا يكرر في دورة ما إن تنتهي كل VQI.
- عند الوصول إلى حد الحزم التشخيصية الملقاة، يقوم التطبيق برفع تنبيه في إدارة أخطاء النظام الأساسي (PFM).
RP/0/RP1/CPU0:AG2-2#show pfm location 0/RP1/CPU0
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Apr 7 01:04:04 2022PFM TOTAL: 1 EMERGENCY/ALERT(E/A): 0 CRITICAL(CR): 0 ERROR(ER): 1
-------------------------------------------------------------------------------------------------
Raised Time |S#|Fault Name |Sev|Proc_ID|Dev/Path Name |Handle
--------------------+--+-----------------------------------+---+-------+--------------+----------
Apr 7 00:54:52 2022|0 |PUNT_FABRIC_DATA_PATH_FAILED |ER |10042 >>ID |System Punt/Fa|0x2000004
من أجل تجميع جميع المعلومات حول تنبيهات PFM، قم بالتقاط إخراج الأمر هذا:
show pfm location all
show pfm trace location all
إذا كنت تريد أن ترى المزيد من المعلومات حول الإنذارات التي تنشأ عن عملية معينة، يمكنك إستخدام هذا الأمر:
show pfm process name <process_name> location <location> >>> location where the PFM alarm is observed
بنية LC عالية المستوى
توماهوك إل سي
بنية 8x100G
توماهوك - 8x100G LC
البنية 12 x 100G
توماهوك 12*100g lc
Lightspeed LC
A9K-20HG-FLEX-SE/TR
A9K-20HG-FLEX-SE/TR
الطراز A99-32x100GE-X-SE/TR
الطراز A99-32x100GE-X-SE/TR
A9K-8HG-FLEX-SE/TR
بنية LC
بنية LC
قوائم انتظار الإخراج الظاهرية والمحكم
يشتمل كل معالج تحويل مسار/معالج محول (RSP/RP) على رقاقتي نسيج يتم التحكم فيهما بواسطة وسيط مشترك واحد (تعني كل معالج محول مسار ثنائي/معالج تحويل المسار (RSP) وحدات تحكم مرنة لكل هيكل). يتحكم المشرف فقط على RSP/RP النشط في جميع شرائح البنى الأربع (بافتراض شرائح RSP المزدوجة). بيد أن كلا المحكمين يتلقيان طلبات الوصول إلى البنية لمعرفة حالة النظام بأكمله في أي وقت من الأوقات بحيث يمكن أن يكون تجاوز الفشل فورا بين خطط التكيف الهيكلي/خطط التكيف الهيكلي. ولا توجد علاقة بين المحكمين، ولكن لدى الجهات المكلفة بإدارة نظم السجلات/الجهات المكلفة بإدارة نظم السجلات جهاز منطقي معقد قابل للبرمجة (مماثل لجهاز FPGA) وإحدى وظائفه هي تعقب حالة موارد الموارد/الموارد العادية الأخرى عن طريق رسائل تنشيط ذات مستوى منخفض وتحديد أي من المحكم النشط.
يحتوي كل Fabric Interconnect ASIC على مجموعة من بطاقات VCIs، وهي مجموعة من قوائم الانتظار التي تمثل وحدة من الجيل الحادي عشر (ل Tomahawk) في النظام. كل 100G وحدة (1x100G ميناء على مخرج واحد NP يتم تمثيلها مع 100G VQI وحيد في مدخل NP) لها فئات أولوية متعددة.
يحتوي كل VQI على مجموعة من أربع قوائم انتظار إخراج افتراضية (VOQs)، لأولويات الحزم المختلفة، منها ثلاث قوائم انتظار تستخدم في بنية إعادة توجيه ASR 9000. وتتوافق هذه مع مستويات الأولوية 1 و 2 والإفتراضية في نهج جودة الخدمة المدخل. هناك إثنان من قوائم الانتظار ذات الأولوية الصارمة وقائمة انتظار واحدة عادية (الصف الرابع للبث المتعدد ولا يتم إستخدامه لإعادة توجيه البث الأحادي).
وبشكل عام، تبدأ قائمة الانتظار الافتراضية في إسقاط الحزم أولا أثناء الضغط الخلفي من بطاقات VCIs الخاصة بالمنفذ NP. فقط عندما يتم تحميل وحدة معالجة شبكة الخروج (NPU) أكثر من اللازم (تخدم المزيد من BPS أو PPS مما يمكن للدوائر التعامل معه)، فإنها تبدأ بالضغط على المدخل LC/NP. ويتم تمثيل هذا من خلال توقف تدفق VQI على ASIC لواجهة الموصلات البينية (FIA) الخاصة بهذا المدخل LC.
مثال:
RP/0/RP0/CPU0:AG3_1#show controllers np ports all location 0/0/CPU0 >>> LC0 is installed in slot 2
Node: 0/0/CPU0:
----------------------------------------------------------------
NP Bridge Fia Ports
-- ------ --- ---------------------------------------------------
0 -- 0 TenGigE0/0/0/0/0 - TenGigE0/0/0/0/9, TenGigE0/0/0/1/0 - TenGigE0/0/0/1/9
1 -- 1 TenGigE0/0/0/2/0 - TenGigE0/0/0/2/9, HundredGigE0/0/0/3
2 -- 2 HundredGigE0/0/0/4 - HundredGigE0/0/0/5 >>>Below is the VQI assignment
3 -- 3 HundredGigE0/0/0/6 - HundredGigE0/0/0/7
RP/0/RP0/CPU0:AG3_1#sh controller fabric vqi assignment slot 2
slot = 2
fia_inst = 2 >>>FIA 2
VQI = 40 SPEED_100G
VQI = 41 SPEED_100G
VQI = 42 SPEED_100G
VQI = 43 SPEED_100G
VQI = 44 SPEED_100G
VQI = 45 SPEED_100G
VQI = 46 SPEED_100G
VQI = 47 SPEED_100G
VQI = 56 SPEED_100G
VQI = 57 SPEED_100G
VQI = 58 SPEED_100G
VQI = 59 SPEED_100G
VQI = 60 SPEED_100G
VQI = 61 SPEED_100G
VQI = 62 SPEED_100G
VQI = 63 SPEED_100G
عندما يقرر المدخل LC أن يريد أن يرسل ربط خاص إلى مخرج خاص NPU، فإن التعديل (MDF) مرحلة على المدخل LC يغلف ربط مع بناء غاية رأس. وعندما تنظر هيئة الاستخبارات المالية في هذا "العنوان"، فإنها تتحقق من الصوت الخاص بالمغادرة المحددة NPU/destination/LC وترى ما إذا كان هناك ما يكفي من النطاق الترددي المتاح. عندما يكون جاهزا لإعادة تصنيفه إلى عنصر التحكم في الوصول هذا، يطلب المدخل FIA منحة من البنية (وسيط الحساب) لهذا الغرض. تكون خوارزمية التحكيم مدركة لجودة الخدمة، وتضمن أن حزم فئة P1 لها تفضيل على فئة P2 وما إلى ذلك. فينقل المحكم طلب المنحة من مدخل FIA إلى FIA.
يمكن أن يجمع المدخل FIA حزم متعددة معا تذهب إلى نفس مخرج LC في ما يسمى إطار فائق. هذا يعني أنه ليس إطارات/حزم أصلية تمر عبر روابط هيكل المحول ولكن الإطارات الفائقة. من المهم ملاحظة ذلك، لأنه، في إختبار ل 100pps ثابتة، يمكن أن تظهر واجهة سطر الأوامر (CLI) عدادات البنية التي تبلغ عن 50 نقطة في الثانية فقط. هذا ليس فقدان ربط، هو فقط يعني أن هناك إثنان ربط في كل إطار فائق يبث عبر هيكل المفتاح. تتضمن الإطارات الفائقة معلومات التسلسل وإعادة ترتيب دعم FIA الوجهة (يمكن "رش" الحزم عبر إرتباطات بنيوية متعددة). يتم وضع حزم البث الأحادي فقط في الإطارات الفائقة، ولا يتم وضع حزم البث المتعدد أبدا.
ما إن إستلمت الربط ب المخرج LC، الميناء رجعت إلى المادة تحكيم. لدى المحكم عدد محدود من الرموز المميزة لكل VOQ. عندما يسمح المحكم لمدخل FIA أن يرسل إطار (سوبر) إلى VOQ معين، أن رمز مميز يرجع إلى البركة فقط عندما المخرج FIA يسلم الإطارات إلى المخرج NP. إذا قام المخرج NP برفع إشارة ضغط خلفية إلى FIA، فإن الرمز المميز يبقى مشغولا. هذا هو كيف أن المحكم في نهاية المطاف ينفذ من الرموز المميزة لهذا voq في مدخل FIA. عندما يحدث ذلك، يبدأ FIA المدخل في إسقاط الحزم الواردة. المشغل الخاص بالضغط الخلفي هو مستوى إستخدام المخازن المؤقتة لواصف إطار التلقي (RFD) في مخرج NP. تحتفظ المخازن المؤقتة ل RFD بالحزم أثناء معالجة ميكروكود NP لها. كلما زاد عدد الميزات التي تتم معالجة الحزمة خلالها، كلما طال بقاؤها في مخازن RFD المؤقتة.
- Ingress FIA يقوم بطلبات نسيج لكل المحكمين في الهيكل.
- يقوم المشرف النشط بالتحقق من الرموز المميزة لمنح الوصول الحر ومعالجة خوارزمية جودة الخدمة الخاصة به في حالة وجود إزدحام.
- آلية ائتمانية من المحكم المحلي إلى المحكم الفاعل في إدارة الموارد.
- يقوم المحكم النشط بإرسال رمز منحة الأقمشة إلى FIA.
- توازنات حمل FIA (خارق)مدخل عبر الروابط الليفية.
- "Egress FIA" يعيد رمز بناء إلى المحكم المركزي.
والأفضل من ذلك أن نذكر آلية الائتمان من المحكم المحلي إلى المحكم الفاعل في إدارة الخدمات المالية. أضف أيضا قسما آخر لتغطية الحالات المحتملة لأخطاء المحكم (لا تحتاج إلى ذكر رموز الأخطاء، ولكن لإلقاء نظرة على أخطاء المحكم ASIC) للنظر في حالة أي مشكلة تتعلق بالمحكم وعدم الحصول على منح بسبب المحكم المحلي أو المركزي مما يتسبب في تراكم قائمة الانتظار.
نظرة عامة على قائمة انتظار الإخراج الظاهري
قائمة انتظار الإخراج الظاهري
توضع الحزم التي تنتقل إلى نقاط وصول مختلفة إلى المخرج في مجموعات صوت مختلفة. لا يمنع الازدحام على NP واحد الحزمة التي تنتقل إلى NPs مختلفة.
مخطط وسيط النسيج
حكم نسيجي
الموصلات البينية الليفية
الموصلات الليفية البينية للمحول ASR9006 و ASR9010
الموصلات الليفية البينية للمحول ASR9006 و ASR9010
الموصلات الليفية البينية للمحول ASR9922
ويعتبر ASR9912 هو نفسه مع دعم 10 LCs فقط وشريحة اتصال بيني أحادية البنية.
الموصلات الليفية البينية للمحول ASR9922
لوحة التوصيل الخلفية ASR9922 و ASR9912
لوحة التوصيل الخلفية ASR9922 و ASR9912
نظرة عامة على التشخيصات عبر الإنترنت
- تعمل أداة التشخيص عبر الإنترنت على كل من وحدة المعالجة المركزية LC و RP.
- إختبارات التشخيص التي تختبر مسار إعادة التوجيه هي:
- إختبار PuntFabricDataPath قيد التشغيل على وحدة المعالجة المركزية RP النشطة والاحتياطية، مما يعمل على إرسال الحزم التشخيصية إلى كل NP نشط في النظام. رسائل RP النشطة.
- حزم تشخيص PuntFabricDataPath كبث أحادي، بينما يرسلها الاستعداد كبث متعدد. يتم إرسال حزم الاستجابة مرة أخرى إلى وحدة المعالجة المركزية ل RP الناشئة.
- إختبارات التشخيص التي تختبر مسار إعادة التوجيه هي:
- إختبار إسترجاع NP داخل LC.
- إختبار NPULoopback قيد التشغيل على كل وحدة معالجة مركزية LC، مع إرسال حزم تشخيص إلى كل NP. يتم إرسال حزم الاستجابة مرة أخرى إلى وحدة المعالجة المركزية (CPU) الخاصة بوحدة التحكم في الشبكة المحلية (LC).
فرز المشكلة
تقدم الخطوات هنا بعض التلميحات حول كيفية تضييق المشاكل المتعلقة بفشل مسار الهبوط. ولا حاجة إلى اتباعها بنفس الترتيب بالضبط.
المعلومات اللازمة لبدء عملية الفرز
- ابحث عن NP و LC المتضررين:
show logging | inc “PUNT_FABRIC_DATA_PATH”
RP/0/RP1/CPU0:Oct 28 12:46:58.459 IST: pfm_node_rp[349]: %PLATFORM-DIAGS-3-PUNT_FABRIC_DATA_PATH_FAILED :
Set|online_diag_rsp[24790]|System Punt/Fabric/data Path Test(0x2000004)|failure threshold is 3, (slot, NP)
failed: (0/9/CPU0, 1) (0/9/CPU0, 3)
يقع الإصدار ل NP1 و NP3 على 0/9/CPU0 يذكر سابقا.
- للعثور على فتحة الهيكل، أدخل
run nslot allerasecat4000_flash:. - تنبيه PFM
RP/0/RP1/CPU0:AG2-2#show pfm location 0/RP1/CPU0
node: node0_RP1_CPU0
---------------------
CURRENT TIME: Mar 25 12:11:29 2022
PFM TOTAL: 1 EMERGENCY/ALERT(E/A): 0 CRITICAL(CR): 0 ERROR(ER): 1
-------------------------------------------------------------------------------------------------
Raised Time |S#|Fault Name |Sev|Proc_ID|Dev/Path Name |Handle
--------------------+--+-----------------------------------+---+-------+--------------+----------
Mar 25 12:03:30 2022|1 |PUNT_FABRIC_DATA_PATH_FAILED |ER |8947 |System Punt/Fa|0x2000004
RP/0/RP1/CPU0:AG2-2#sh pfm process 8947 location 0/rp1/CPU0
node: node0_RP1_CPU0
---------------------
CURRENT TIME: Mar 25 12:12:36 2022
PFM TOTAL: 1 EMERGENCY/ALERT(E/A): 0 CRITICAL(CR): 0 ERROR(ER): 1
PER PROCESS TOTAL: 0 EM: 0 CR: 0 ER: 0
Device/Path[1 ]:Fabric loopbac [0x2000003 ] State:RDY Tot: 0
Device/Path[2 ]:System Punt/Fa [0x2000004 ] State:RDY Tot: 1
1 Fault Id: 432
Sev: ER
Fault Name: PUNT_FABRIC_DATA_PATH_FAILED
Raised Timestamp: Mar 25 12:03:30 2022
Clear Timestamp: Mar 25 12:07:32 2022
Changed Timestamp: Mar 25 12:07:32 2022
Resync Mismatch: FALSE
MSG: failure threshold is 3, (slot, NP) failed: (0/9/CPU0, 1) (0/9/CPU0, 3)
رسم تخطيطي لتدفق حزم التشخيص
- مسار حزمة رسائل DIAG بين RP و LC (فترة الحزمة التشخيصية دقيقة واحدة).
مسار الحزمة على RP:
online_diags <===> SPP <===> Fabric <===> NP
مسار الحزمة على LC:
online_diags <===> SPP <===> Punt-switch <====> NP
- إختبار إسترجاع NP داخل LC
وفي كل دقيقة يتم حقن حزمة Diags لكل NP من وحدة المعالجة المركزية (LC) إلى محول Punt، ويتم إعادة توجيه جميع الحزم إلى وحدات المعالجة المركزية (NP). لا يذهبون إلى القماش على الإطلاق. نقطة التحول أو نقطة منتصف الطريق هي كل ميكروكود في الشرطة الوطنية.
- مسار الإرسال التشخيصي: LC: التشخيصات عبر الإنترنت > إدخال > LC-NP > (تكرار حلقي)
- مسار الإرجاع التشخيصي: LC-NP > Punt > التشخيصات عبر الإنترنت: LC
إختبار تشخيصي
RP/0/RP0/CPU0:AG2-2(admin)#show diagnostic content location <> >>> (in cXR)
RP/0/RP0/CPU0:AG2-2#show diagnostic content location <> >>> (in eXR)
A9K-8X100GE-L-SE 0/0/CPU0:
Diagnostics test suite attributes:
M/C/* - Minimal bootup level test / Complete bootup level test / NA
B/O/* - Basic ondemand test / not Ondemand test / NA
P/V/* - Per port test / Per device test / NA
D/N/* - Disruptive test / Non-disruptive test / NA
S/* - Only applicable to standby unit / NA
X/* - Not a health monitoring test / NA
F/* - Fixed monitoring interval test / NA
E/* - Always enabled monitoring test / NA
A/I - Monitoring is active / Monitoring is inactive
n/a - Not applicable
Test Interval Thre- Timeout
ID Test Name Attributes (day hh:mm:ss.ms shold ms )
==== ================================== ============ ================= ===== =====
1) CPUCtrlScratchRegister ----------> *B*N****A 000 00:01:00.000 3 n/a
2) DBCtrlScratchRegister -----------> *B*N****A 000 00:01:00.000 3 n/a
3) PortCtrlScratchRegister ---------> *B*N****A 000 00:01:00.000 3 n/a
4) PHYScratchRegister --------------> *B*N****A 000 00:01:00.000 3 n/a
5) NPULoopback ---------------------> *B*N****A 000 00:01:00.000 3 n/a
RP/0/RP0/CPU0:AG2-2#show diagnostic result location 0/0/CPU0
A9K-8X100GE-L-SE 0/0/CPU0:
Overall diagnostic result: PASS
Diagnostic level at card bootup: bypass
Test results: (. = Pass, F = Fail, U = Untested)
1 ) CPUCtrlScratchRegister ----------> .
2 ) DBCtrlScratchRegister -----------> .
3 ) PortCtrlScratchRegister ---------> .
4 ) PHYScratchRegister --------------> .
5 ) NPULoopback ---------------------> .
- يمكنك إختبار هذه المعلمة يدويا "إدخال حزم التشخيصات" بالتفصيل كما هو مذكور في هذا المثال:
admin diag start location 0/x/cpu0 test NPULoopback (cXR)
RP/0/RP0/CPU0:AG3_1#diagnostic start location 0/0/CPU0 test NPULoopback >>> eXR
Fri May 13 06:53:00.902 EDT
RP/0/RP0/CPU0:AG3_1#show diagnostic res location 0/0/CPU0 test 5 detail >>> Here there are
multiple test 1-5 (check previous examples)
Test results: (. = Pass, F = Fail, U = Untested)
___________________________________________________________________________
5 ) NPULoopback ---------------------> .
Error code ------------------> 0 (DIAG_SUCCESS)
Total run count -------------> 67319
Last test execution time ----> Fri May 13 06:53:01 2022
First test failure time -----> n/a
Last test failure time ------> n/a
Last test pass time ---------> Fri May 13 06:53:01 2022
Total failure count ---------> 0
Consecutive failure count ---> 0
___________________________________________________________________________
- التحقق من تلقي/إرسال رسائل NP:
RP/0/RSP1/CPU0:AG2-2#show controllers np counters location | inc DIAG| LC_CPU
108 PARSE_RSP_INJ_DIAGS_CNT 25195 0 >>> total DIAG packets injected by Active+Stdby RP
904 PUNT_DIAGS_RSP_ACT 12584 0 >>> Loopbacks to Active RP
906 PUNT_DIAGS_RSP_STBY 12611 0 >>> Loopbacks to Stdby R
122 PARSE_LC_INJ_DIAGS_CNT 2618 0 >>> total DIAG packets injected by LC
790 DIAGS 12618 0 >>> total DIAG packets replied back to LC
16 MDF_TX_LC_CPU 3998218312 937 >>> a packet punted to LC CPU PARSE_RSP_INJ_DIAGS_CNT should match (PUNT_DIAGS_RSP_ACT + PUNT_DIAGS_RSP_STDBY)
PARSE_LC_INJ_DIAGS_CNT should match DIAGS
PARSE_XX_INJ_DIAGS_CNT should increment periodically.
- التحقق مما إذا كان مسار حزمة البرامج (SPP) يقوم بإرسال/تلقي رسائل DIAG:
show spp sid stats location | inc DIAG 2. DIAG 35430
2. DIAG 35430
يتم إستلام هذه عدادات DIAG وإرسالها. يمكنهم دائما المطابقة والزيادة معا على LC.
- debug punt-input l2-packet diag np 0 location 0/9/cpu0
مثال السجلات: يقوم SPP بإرسال الحزمة التشخيصية واستقبالها مع التسلسل no 0x4e packet.
LC/0/1/CPU0:Jun 6 04:14:05.581 : spp[89]: Sent DIAG packet. NP:0 Slot:0 Seq:0x4e
LC/0/1/CPU0:Jun 6 04:14:05.584 : spp[89]: Rcvd DIAG packet. NP:0 Slot:0 Seq:0x4e
- تحقق من أي حالات سقوط في مسار الحزمة:
show drops all location
show drops all ongoing location
- تحقق من أخطاء التشخيص عبر الإنترنت (في cXR):
تكون التشخيصات عبر الإنترنت مفيدة عدة مرات في التحقق من الطوابع الزمنية عندما تم إرسال/تلقي الحزم أو فقدها. يمكن مقارنة تلك الطوابع الزمنية مع لقطات SPP لإرتباط الحزمة.
admin debug diagnostic engineer location
admin debug diagnostic error location
ملاحظة: أدخل admin undebug all أمر in order to أعجزت هذا يضبط.
نموذج مخرجات من تصحيح الأخطاء:
RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: Slot 1 has 4 NPs >>> Sending DIAG
messages to NPs on slot 1
RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending
a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 0, sfp=0xc6
RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending
a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 1, sfp=0xde
RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending
a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 2, sfp=0xf6
RP/0/RSP0/CPU0:Mar 25 05:43:43.384 EST: online_diag_rsp[349]: PuntFabricDataPath: sending
a pak (seq 25), destination physical slot 1 (card type 0x3d02aa), NP 3, sfp=0x10e
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:
Time took to receive 22 pkts: 503922888 nsec, timeout value: 500000000 nsec
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:
Received 22 packets, expected 24 => Some replies missed
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:
Got a packet from physical slot 1, np 0
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: Successfully verified
a packet, seq. no.: 25
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:
Got a packet from physical slot 1, np 2 <= Replies from NP1 and NP3 missing
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: Successfully verified
a packet, seq. no.: 25
RP/0/RSP0/CPU0:Mar 25 05:43:43.888 EST: online_diag_rsp[349]: PuntFabricDataPath:
Got a packet from physical slot 3, np 0
- التتبع التشخيصي:
RP/0/RP1/CPU0:AG2-2#show diagnostic trace location 0/rp1/CPU0
Fri Mar 25 12:16:40.866 IST
1765 wrapping entries (3136 possible, 2048 allocated, 0 filtered, 3503120 total)
Mar 16 02:40:21.641 diags/online/gold_error 0/RP1/CPU0 t7356 Failed to get ack: got 0 responses,
expected 1
Mar 16 02:40:36.490 diags/online/message 0/RP1/CPU0 t8947 My nodeid 0x120, rack# is 0, slot# 1,
board type = 0x100327
Mar 16 02:40:36.948 diags/online/message 0/RP1/CPU0 t8947 dev cnt=25, path cnt=3, shm loc for
dev alarms@0x7fd4f0bec000, path alarms@0x7fd4f0bec01c, path alarm data@0x7fd4f0bec028
Mar 16 02:40:37.022 diags/online/message 0/RP1/CPU0 t8947 Last rpfo time: 1647378637
Mar 24 06:03:27.479 diags/online/error 0/RP1/CPU0 2105# t9057 PuntFabricDataPath test error:
physical slot 11(LC# 9): expected np mask: 0x0000000f, actual: 0x0000000b, failed: 0x00000004
Mar 24 06:03:27.479 diags/online/error 0/RP1/CPU0 634# t9057 PuntFabricDataPath test failure detected,
detail in the form of (0-based) (slot, NP: count): (LC9,2: 13)
فرز الأقمشة
- صحة البنية (يقدم هذا ملخصا لحالة الارتباط والإحصائيات والسقوط والتنبيهات):
show controllers fabric health location <>
- صحة العمود الفقري:
show controllers fabric health spine all
- تسجيل الأعطال على اللوحة (OBFL) (بعد إعادة التحميل أيضا سيكون هذا متوفرا):
admin
sysadmin-vm:0_RP0# show logging onboard fabric location 0/0
- فحص عدادات البنية عند الدخول LC FIA:
show controllers fabric fia errors ingress location <>
show controllers fabric fia stats location
- مدخل LC شريط متقاطع (لا ينطبق على Trident و SIP-700):
show controllers fabric crossbar statistics instance [0-1] location <>
- شريط متقاطع Egress LC (غير قابل للتطبيق على Trident و SIP-700):
show controllers fabric crossbar statistics instance [0-1] location <>
- إيغريس إل سي فيا:
show controllers fabric fia errors egress location <>
show controllers fabric fia stats location
- إحصائيات العمود الفقري:
show controllers fabric crossbar statistics instance [0-1] spine [0-6]
- فحص عمليات إسقاط البنية:
- إنجريس إل سي فايا:
show controllers fabric fia drops ingress location <>
- إيغريس إل سي فيا:
show controllers fabric fia drops egress location <>
- أخطاء ASIC:
- ل.س:
show controllers fabric crossbar asic-errors instance 0 location<>
show asic-errors fia <> all location <>
-
- توماهوك:
show asic-errors fia <> all location <>
RP/0/RP0/CPU0:AG3_1#show controllers np fabric-counters all np0 location 0/0/CPU0
Node: 0/0/CPU0:
----------------------------------------------------------------
Egress fabric-to-bridge interface 2 counters for NP 0
INTERLAKEN_CNT_TX_BYTES 0x000073fc 23b6d99b
INTERLAKEN_CNT_TX_FRM_GOOD 0x000000ae a79d6612
INTERLAKEN_CNT_TX_FRM_BAD 0x00000000 00000000 >>> this is 0 which is good,
need to check if it is incremented
-------------------------------------------------------------
Egress fabric-to-bridge interface 3 counters for NP 0
INTERLAKEN_CNT_TX_BYTES 0x0004abdd fe02068d
INTERLAKEN_CNT_TX_FRM_GOOD 0x000005b8 089aac95
INTERLAKEN_CNT_TX_FRM_BAD 0x00000000 00000000
-------------------------------------------------------------
Node: 0/0/CPU0:
----------------------------------------------------------------
Ingress fabric-to-bridge interface 2 counters for NP 0
INTERLAKEN_CNT_RX_BYTES 0x0004aeb5 a4b9dbbe
INTERLAKEN_CNT_RX_FRM_GOOD 0x0000058e b7b91c15
INTERLAKEN_CNT_RX_FRM_BAD 0x00000000 00000000
INTERLAKEN_CNT_RX_BURST_CRC32_ERROR 0x00000000 00000000
INTERLAKEN_CNT_RX_BURST_CRC24_ERROR 0x00000000 00000000
INTERLAKEN_CNT_RX_BURST_SIZE_ERROR 0x00000000 00000000
-------------------------------------------------------------
Ingress fabric-to-bridge interface 3 counters for NP 0
INTERLAKEN_CNT_RX_BYTES 0x000094ce b8783f95
INTERLAKEN_CNT_RX_FRM_GOOD 0x000000f5 33cf9ed7
INTERLAKEN_CNT_RX_FRM_BAD 0x00000000 00000000
INTERLAKEN_CNT_RX_BURST_CRC32_ERROR 0x00000000 00000000
INTERLAKEN_CNT_RX_BURST_CRC24_ERROR 0x00000000 00000000
INTERLAKEN_CNT_RX_BURST_SIZE_ERROR 0x00000000 00000000
- للتحقق من حالة إرتباط FIA:
show controllers fabric fia link-status location
RP/0/RP0/CPU0:AG3_1#show controllers fabric fia link-status location 0/0/CPU0
********** FIA-0 **********
Category: link-0
spaui link-0 Up >>> FIA to NP link
spaui link-1 Up >>> FIA to NP link
arb link-0 Up >>> Arbitor link
xbar link-0 Up >>> FIA to XBAR link
xbar link-1 Up >>> FIA to XBAR link
xbar link-2 Up >>> FIA to XBAR link
- للتحقق من حالة إرتباط XBAR:
RP/0/RP0/CPU0:AG3_1#show controllers fabric crossbar link-status instance 0 lo 0/0/CPU0
Mon May 2 04:05:06.161 EDT
PORT Remote Slot Remote Inst Logical ID Status
======================================================
00 0/0/CPU0 01 2 Up
01 0/FC3 01 0 Up
02 0/FC3 00 0 Up
03 0/FC4 01 0 Up
04 0/FC2 01 0 Up
05 0/FC4 00 0 Up
06 0/FC2 00 0 Up
07 0/FC1 01 0 Up
10 0/FC1 00 0 Up
14 0/FC0 01 0 Up
15 0/FC0 00 0 Up
16 0/0/CPU0 02 0 Up
18 0/0/CPU0 02 2 Up
19 0/0/CPU0 02 1 Up
20 0/0/CPU0 03 2 Up
21 0/0/CPU0 03 1 Up
22 0/0/CPU0 03 0 Up
23 0/0/CPU0 00 2 Up
24 0/0/CPU0 00 1 Up
25 0/0/CPU0 00 0 Up
26 0/0/CPU0 01 0 Up
27 0/0/CPU0 01 1 Up
إن يراقب أنت هذا سجل مقياس سرعة في ال LSP بطاقة:
LC/0/3/CPU0:Jul 5 13:05:53.365 IST: fab_xbar[172]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :
sfe[1]: An interface-err error has occurred causing packet drop transient.
ibbReg17.ibbExceptionHier.ibbReg17.ibbExceptionLeaf0.intIpcFnc0UcDataErr Threshold has been exceeded
17*2 هنا يساعد على تحديد المنفذ باستخدام show controllers fabric crossbar link-status instance 1 lo 0/3/CPU0 :
مجموعة السجلات:
show platform
show inventory
show tech fabric
show tech np
show tech ethernet interface
show logging
show pfm location all
show pfm trace location <location id>
show controllers pm vqi location all
show hw-module fpd location all (cxr) / admin show hw-module fpd (exr)
show controllers fti trace <process-name> location <Card location>
admin show tech obfl
Cxr:
From Admin:
show logging onboard common location <>
show logging onboard error location <>
Exr:
From sysadmin/calvados:
show logging onboard fabric location <>
- إذا كان في أخطاء أسيا في FIA:
ل LS:
show controllers asic LS-FIA instance <instance> block <block_name> register-name <register_name> location <>
ل LSP:
show controllers asic LSP-FIA instance <instance> block <block_name> register-name <register_name> location <>
إذا كان الخطأ الذي تم الإعلام عنه بهذا الشكل:
LC/0/9/CPU0:Mar 1 05:12:25.474 IST: fialc[137]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :
fia[3]: A link-err error has occurred causing performance loss persistent.
fnc2serdesReg1.fnc2serdesExceptionHier.fnc2serdesReg1.fnc2serdesExceptionLeaf0.
iNTprbsErrTxphyrdydropped6 Threshold has been exceeded
- المثيل هو رقم المثيل ل FIA ASIC. فيما يلي "3" block_name هو "fnc2serdesReg1" و register_name هو "fnc2serdesExceptionLeaf0".
- إذا كانت أخطاء ASIC موجودة على LC/RSP XBAR:
show controllers asic SKB-XBAR instance <instance> block-name <block_name> register-name <register_name> location <>
إذا كان الخطأ الذي تم الإعلام عنه بهذا الشكل:
LC/0/7/CPU0:Mar 4 06:42:01.241 IST: fab_xbar[213]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :
sfe[0]: An interface-err error has occurred causing packet drop transient.
ibbReg11.ibbExceptionHier.ibbReg11.ibbExceptionLeaf0.intIpcFnc1UcDataErr Threshold has been exceeded
- المثيل هو رقم المثيل ل SFE/XBAR ASIC. هنا، "0" block_name هو "ibbReg11" و register_name هو "ibbExceptionLeaf0".
- إذا تم الإبلاغ عن أخطاء ASIC على FC XBAR:
show controllers asic FC2-SKB-XBAR instance <instance> block-name <block_name> register-name <register_name> location
إذا كان الخطأ الذي تم الإعلام عنه بهذا الشكل:
RP/0/RP0/CPU0:Mar 4 06:41:14.398 IST: fab_xbar_sp3[156]: %PLATFORM-CIH-3-ASIC_ERROR_SPECIAL_HANDLE_THRESH :
fc3xbar[1]: A link-err error has occurred causing packet drop transient.
cflReg17.cflExceptionHier.cflReg17.cflExceptionLeaf4.intCflPal1RxAlignErrPktRcvd Threshold has been exceeded
ثم إن ASIC هو المثيل "FC3-SKB-Xbar" وهو المثيل رقم من SFE/XBAR ASIC. هنا هو "1"، كلاهما يأتي من "fc3xbar[1]" block_name هو "cflReg17" و register_name هو "cflExceptionLeaf4".
مثال:
RP/0/RSP0/CPU0: AG2-10#sh logging | i ASIC
RP/0/RSP0/CPU0:May 11 20:48:57.658 IST: fab_xbar[184]: %PLATFORM-CIH-5-ASIC_ERROR_THRESHOLD :
sfe[0]: An interface-err error has occurred causing packet drop transient.
ibbReg13.ibbExceptionHier.ibbReg13.ibbExceptionLeaf0.intIpcFnc0UcDataErr Threshold has been exceeded
RP/0/RSP0/CPU0: AG2-10#sh controllers fabric crossbar link-status instance 0 location 0/rsp0/CPU0
PORT Remote Slot Remote Inst Logical ID Status
======================================================
04 0/0/CPU0 00 1 Up
06 0/0/CPU0 00 0 Up
08 0/7/CPU0 00 1 Up
10 0/7/CPU0 00 0 Up
24 0/2/CPU0 00 0 Up
26 0/2/CPU0 00 1 Up
>>> ibbReg13 >> 13*2 = 26 SO IT IS POINTING TO LC2 – IN THIS CASE YOU CAN DO OIR TO RECOVER THE ASIC ERROR
40 0/RSP0/CPU0 00 0 Up
RP/0/RSP0/CPU0: AG2-10#show controllers asic SKB-XBAR instance 0 block-name ibbReg13 register-name ibbExceptionLeaf0 location 0/RSP0/CPU0
address name value
0x00050d080 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1Stat 0x00000000 (4 bytes)
address name value
0x00050d084 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1StatRw1s 0x00000000 (4 bytes)
address name value
0x00050d088 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1Enable 0xfffffffb (4 bytes)
address name value
0x00050d08c SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int1First 0x00000000 (4 bytes)
address name value
0x00050d090 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2Stat 0x00000c50 (4 bytes)
address name value
0x00050d094 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2StatRw1s 0x00000c50 (4 bytes)
address name value
0x00050d098 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2Enable 0x00000000 (4 bytes)
address name value
0x00050d09c SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_int2First 0x00000000 (4 bytes)
address name value
0x00050d0a0 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_haltEnable 0x00000000 (4 bytes)
address name value
0x00050d0a4 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_fault 0x00000000 (4 bytes)
address name value
0x00050d0a8 SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_intMulti 0x00000840 (4 bytes)
address name value
0x00050d0ac SkyboltRegisters_ibbReg13_ibbExceptionLeaf0_leaf 0x00000000 (4 bytes)
RP/0/RSP0/CPU0:AG2-10#
فرز أخطاء الوسيط
للتحقق من حالة الارتباط:
RP/0/RSP0/CPU0:AG2-10#sho controllers fabric arbiter link-status location 0/1/$
Port Remote Slot Remote Elem Remote Inst Status
=======================================================
00 0/1/CPU0 FIA 0 Up
01 0/1/CPU0 FIA 1 Up
24 0/RSP0/CPU0 ARB 0 Up
25 0/RSP1/CPU0 ARB 0 Up
للتحقق من توفر VQI:
RP/0/RP0/CPU0:AG3_1#sh controllers fabric vqi assignment all
Current mode: Highbandwidth mode - 2K VQIs
Node Number of VQIs
----------------------------
0/0/CPU0 80
0/1/CPU0 40
0/2/CPU0 48
0/3/CPU0 80
0/5/CPU0 80
0/7/CPU0 80
0/12/CPU0 64
RP*/RSP* 8
----------------------------
In Use = 480
Available = 1568
تحقق من السرعة المعينة ل VQI:
RP/0/RP0/CPU0:AG3_1#sh controller fabric vqi assignment slot 7
Thu May 12 07:58:59.897 EDT
slot = 7
fia_inst = 0
VQI = 400 SPEED_100G
VQI = 401 SPEED_100G
VQI = 402 SPEED_100G
VQI = 403 SPEED_100G
VQI = 404 SPEED_100G
VQI = 405 SPEED_100G
VQI = 406 SPEED_100G
slot = 7
fia_inst = 1
VQI = 416 SPEED_40G
VQI = 417 SPEED_40G
VQI = 418 SPEED_40G
VQI = 419 SPEED_40G
VQI = 420 SPEED_100G
إذا راقبت أي ذيل يسقط على FIA، تحقق من هذه الخطوات:
التحقق من عمق قائمة الانتظار في VQI:
RP/0/RP0/CPU0:AG3_1#show controllers fabric fia q-depth location 0/0/CPU0
Thu May 12 08:00:42.186 EDT
********** FIA-0 **********
Category: q_stats_a-0
Voq ddr pri Cellcnt Slot_FIA_NP
28 0 2 2 LC0_1_1
********** FIA-0 **********
Category: q_stats_b-0
Voq ddr pri Cellcnt Slot_FIA_NP
********** FIA-1 **********
Category: q_stats_a-1
Voq ddr pri Cellcnt Slot_FIA_NP
7 0 2 12342 LC0_0_0
>>> Here Packet count is high so we need to check for LC0 FIA0 NP0 (egress) is there any congestion
or any other issue in LC0 FIA0 or NP0
Here Pri = 2 is the default queue (BE) , Pri = 0 is P1 (Voice, real time) queue, Pri = 1 is P2
97 0 2 23 LC1_0_0
RP/0/RP0/CPU0:AG3_1#show controllers fabric vqi assignment slot 02
slot = 2
fia_inst = 0
VQI = 0 SPEED_10G
VQI = 1 SPEED_10G
VQI = 2 SPEED_10G
VQI = 3 SPEED_10G
VQI = 4 SPEED_10G
VQI = 5 SPEED_10G
VQI = 6 SPEED_10G
VQI = 7 SPEED_10G
تفاصيل تخطيط المنفذ ل VQI:
RP/0/RP0/CPU0:AG3_1#show controllers pm vqi location 0/0/CPU0
Platform-manager VQI Assignment Information
Interface Name | ifh Value | VQI | NP#
--------------------------------------------------
TenGigE0_0_0_0_1 | 0x4000680 | 1 | 0
TenGigE0_0_0_0_2 | 0x40006c0 | 2 | 0
TenGigE0_0_0_0_3 | 0x4000700 | 3 | 0
TenGigE0_0_0_0_4 | 0x4000740 | 4 | 0
TenGigE0_0_0_0_5 | 0x4000780 | 5 | 0
TenGigE0_0_0_0_6 | 0x40007c0 | 6 | 0
TenGigE0_0_0_0_7 | 0x4000800 | 7 | 0
RP/0/RP0/CPU0:AG3_1#show controllers pm interface tenGigE 0/0/0/0/7
Ifname(1): TenGigE0_0_0_0_7, ifh: 0x4000800 :
iftype 0x1e
egress_uidb_index 0x12, 0x0, 0x0, 0x0
ingress_uidb_index 0x12, 0x0, 0x0, 0x0
port_num 0x0
subslot_num 0x0
ifsubinst 0x0
ifsubinst port 0x7
phy_port_num 0x7
channel_id 0x0
channel_map 0x0
lag_id 0x7e
virtual_port_id 0xa
switch_fabric_port 7 >>> VQI matching for the ports
in_tm_qid_fid0 0x38001e
in_tm_qid_fid1 0x0
in_qos_drop_base 0xa69400
out_tm_qid_fid0 0x1fe002
out_tm_qid_fid1 0xffffffff
np_port 0xd3
مجموعة السجلات:
Show tech fabric
Show tech np
show controllers pm trace ?
async Platform manager async trace
creation Platform manager interface creation/deletion trace
error Platform manager error trace
information Platform manager information trace
init Platform manager init trace
other Platform manager common trace
stats Platform manager stats trace
فرز أعطال NP
التحقق من حمل NP:
RP/0/RP0/CPU0:AG3_1#show controller np load all location 0/0/CPU0
Node: 0/0/CPU0:
----------------------------------------------------------------
Load Packet Rate
NP0: 2% utilization 3095766 pps
NP1: 3% utilization 5335675 pps
NP2: 0% utilization 498 pps
NP3: 0% utilization 1117 pps
تخطيط المنفذ:
RP/0/RP0/CPU0:AG3_1#show controllers np ports all location 0/0/CPU0
Node: 0/0/CPU0:
----------------------------------------------------------------
NP Bridge Fia Ports
-- ------ --- ---------------------------------------------------
0 -- 0 TenGigE0/0/0/0/0 - TenGigE0/0/0/0/9, TenGigE0/0/0/1/0 - TenGigE0/0/0/1/9
1 -- 1 TenGigE0/0/0/2/0 - TenGigE0/0/0/2/9, HundredGigE0/0/0/3
2 -- 2 HundredGigE0/0/0/4 - HundredGigE0/0/0/5
3 -- 3 HundredGigE0/0/0/6 - HundredGigE0/0/0/7
توماهوك
لاحظ أن هذا وضع المسؤول:
sysadmin-vm:0_RP0# show controller switch statistics location 0/LC0/LC-SW
Thu May 12 12:32:37.160 UTC+00:00
Rack Card Switch Rack Serial Number
--------------------------------------
0 LC0 LC-SW
Tx Rx
Phys State Drops/ Drops/
Port State Changes Tx Packets Rx Packets Errors Errors Connects To
----------------------------------------------------------------------------
0 Up 2 3950184361 3977756349 0 0 NP0
1 Up 2 0 0 0 0 NP0
8 Up 1 1319787462 209249871 0 0 LC CPU N0 P0
9 Up 1 3374323096 1819796660 0 0 LC CPU N0 P1
16 Up 2 2245174606 1089972811 0 0 NP1
17 Up 2 0 0 0 0 NP1
18 Up 2 65977 16543963 0 0 NP2
19 Up 2 0 0 0 0 NP2
32 Up 2 128588820 3904804720 0 0 NP3
33 Up 2 0 0 0 0 NP3
show asic-error np <> all loc <> >>> Ignore the macwrap errors as they are seen for every
interface flaps/ Execute 3-4 times to verify the drops increment
show controller np fast-drop <> loc <> >>> Execute 3-4 times to verify the drops increment
RP/0/RP0/CPU0:AG3_1#show controller np fast-drop np0 location 0/0/CPU0
Thu May 12 10:13:22.981 EDT
Node: 0/0/CPU0:
----------------------------------------------------------------
All fast drop counters for NP 0:
TenGigE0/0/0/1/0-TenGigE0/0/0/1/9:[Priority1] 0
TenGigE0/0/0/1/0-TenGigE0/0/0/1/9:[Priority2] 0
TenGigE0/0/0/1/0-TenGigE0/0/0/1/9:[Priority3] 0
TenGigE0/0/0/0/0-TenGigE0/0/0/0/9:[Priority1] 0
TenGigE0/0/0/0/0-TenGigE0/0/0/0/9:[Priority2] 0
TenGigE0/0/0/0/0-TenGigE0/0/0/0/9:[Priority3] 0
show controllers np punt-path-counters all HOST-IF-0 np<> location <>
[Check for IF_CNT_RX_FRM & IF_CNT_TX_FRM] >>> To check if diagnostic packets make it to the LC NP
Host CPU network port
لايت سبيد
show asic-error np <> all loc <> >>> Ignore the macwrap errors as they are seen for every interface flap
RP/0/RP0/CPU0:AG3_1#sho asic-errors np 0 all location 0/5/CPU0
************************************************************
* 0_5_CPU0 *
************************************************************
************************************************************
* Single Bit Errors *
************************************************************
************************************************************
* Multiple Bit Errors *
************************************************************
************************************************************
* Parity Errors *
************************************************************
************************************************************
* Generic Errors *
************************************************************
ASR, ASR9K Lightspeed 20*100GE SE LC, 0/5/CPU0, npu[0]
Name : mphmacwrapReg1.mphmacwrapExceptionLeaf4.mphWrapIrqUmacIpInt82
Leaf ID : 0x2023e082
Error count : 1
Last clearing : Thu Apr 7 11:41:47 2022
Last N errors : 1
--------------------------------------------------------------
First N errors.
@Time, Error-Data
------------------------------------------
show controller np fast-drop <> loc <> >>> Execute 3-4 times to verify the drops increment
RP/0/RP0/CPU0:AG3_1#show controller np fast-drop np0 location 0/5/CPU0
Thu May 12 10:13:28.321 EDT
Node: 0/5/CPU0:
----------------------------------------------------------------
All fast drop counters for NP 0:
HundredGigE0_5_0_0[Crit] 0
HundredGigE0_5_0_0[HP] 0
HundredGigE0_5_0_0[LP2] 0
HundredGigE0_5_0_0[LP1] 0
HundredGigE0_5_0_0[Crit+HP_OOR] 0
HundredGigE0_5_0_0[LP2+LP1_OOR] 0
HundredGigE0_5_0_1[Crit] 0
HundredGigE0_5_0_1[HP] 0
HundredGigE0_5_0_1[LP2] 0
HundredGigE0_5_0_1[LP1] 0
HundredGigE0_5_0_1[Crit+HP_OOR] 0
لاحظ أن هذا وضع المسؤول:
sysadmin-vm:0_RP0# show controller switch statistics location 0/LC5/LC-SW >>> Execute 3-4
times to verify the errors increment
Rack Card Switch Rack Serial Number
--------------------------------------
0 LC5 LC-SW
Tx Rx
Phys State Drops/ Drops/
Port State Changes Tx Packets Rx Packets Errors Errors Connects To
-----------------------------------------------------------------------------
0 Up 4 1456694749 329318054 0 4 CPU -- EOBC
1 Up 2 21 23 0 0 CPU -- flexE
2 Up 4 1063966999 87683758 0 0 CPU -- PUNT
3 Up 4 885103800 3021484524 0 0 CPU -- BFD
4 Up 3 329319167 1456700372 0 0 RP0
5 Up 3 0 0 0 0 RP1
6 Up 1 11887785 2256 0 0 IPU 0
7 Up 1 0 1086 0 0 IPU 1
9 Up 4 74028034 3025657779 0 0 NP0
10 Up 4 5 0 0 0 NP0
11 Down 1 0 0 0 0 PHY0 -- flexE
12 Up 4 264928 264929 0 0 NP1
13 Up 2 5 0 0 0 NP1
14 Down 1 0 0 0 0 PHY1 -- flexE
15 Up 4 1516538834 1159586563 0 0 NP2
مجموعة السجلات:
show tech np
show tech fabric
show asic-errors fia trace all location <>
- في eXR، قم بتجميع np_datalog:
RP/0/RP0/CPU0:AG3_1#run chvrf 0 ssh lc0_xr
LC : [one time capture]
show_np -e <> -d npdatalog [<> should be the affected NP]
Path where NP datalogs is saved : /misc/scratch/np/NPdatalog_0_0_CPU0_np0_prm__20220512-105332.txt.gz
LC : 5 to 10 times
show_np -e <> -d pipeline [<> should be the affected NP]
- فشل NP في LSP:
RP/0/RP0/CPU0:AG2-2#show controllers np ports all location 0/6/CPU0
Node: 0/6/CPU0:
----------------------------------------------------------------
NP Bridge Fia Ports
-- ------ --- ---------------------------------------------------
0 -- 0 HundredGigE0/6/0/0 - HundredGigE0/6/0/31 --
1 -- 1 HundredGigE0/6/0/4 - HundredGigE0/6/0/7
NP2 is down. >>>>>>>>>. NP Down/Init Failure
3 -- 3 HundredGigE0/6/0/12 - HundredGigE0/6/0/154 --
4 -- 4 HundredGigE0/6/0/16 - HundredGigE0/6/0/19
تلاحظ هذه السجلات:
LC/0/6/CPU0:Mar 23 02:53:56.175 IST: npu_server_lsp[138]: %PLATFORM-LDA-3-INIT_FAIL :
Failed to initialize lda_bb_np_reset_process 13795 inst 0x2 LC INIT: Failed in NP HAL
Reset np (0x00000001 - Operation not permitted) : npu_server_lsp : (PID=4597) :
-Traceback= 7fea2d5cd9f6 7fea2d7d5816 7fea21465efa 7fea21465fc2 7fea42ad0bed 55a9dbd66031
7fea45e1c855 7fea45e1cc2b 7fea2624d526 7fea3571b96a 7fea4d6e4831 55a9dbd691e9
LC/0/6/CPU0:Mar 23 02:53:56.185 IST: npu_server_lsp[138]: %PLATFORM-NP-4-INIT_DEBUG_MSG :
LDA NP2 Reset failed!! Check for a downlevel IPU version.
مجموعة السجلات:
show tech-support ethernet interfaces
show tech-support ethernet controllers
show tech-support np
show tech-support fpd
admin show tech-support ctrace (in eXR)
show tech fabric
show asic-errors fia trace all location <>
show logging
gather (in eXR)
RP/0/RP0/CPU0:AG3_1#admin
sysadmin-vm:0_RP0#
[sysadmin-vm:0_RP0:~]$bash -l
[sysadmin-vm:0_RP0:~]$ gather
File will be generated and will get saved in rp0_xr:/misc/disk1
مجموعة السجلات العامة ل Tomahawk و LSQ و LSP
show platform
show inventory
show tech fabric
show tech np
show tech ethernet interface
show logging
show pfm location all
show pfm trace location <location id>
sh pfm process <> location <>
show controllers pm vqi location all
show hw-module fpd location all (cxr) / admin show hw-module fpd (exr)
show controllers fti trace <process-name> location <card location>
Cxr:
From admin:
show logging onboard common location <>
show logging onboard error location <>
Exr:
From sysadmin/calvados:
show logging onboard fabric location <>"
توقيع الخطأ الشائع والتوصية
| الفئة |
الخطأ |
ملاحظات |
التوصية |
| فشل وصول NP |
LC/0/0/CPU0:Sep 29 00:41:13.171 IST: pfm_node_lc[304]: ٪PLATFORM-NP-1-NP_INIT_FAIL_NO_RESET: set|prm_server_ty[168018]|0x100806|فشل تهيئة NP المستمر، لا يلزم إعادة تحميل بطاقة الخط. |
يمكن أن يدخل NP في خطأ NP متواصل بسبب خطأ تماثل HW/TCAM الذي يفرض على NP النزول. |
إعادة تحميل LC من خلال واجهة سطر الأوامر للاسترداد. |
| يمكن أن يسترد الإصدار إذا كان عابرا في الطبيعة بعد أول إعادة تحميل ل LC. |
قم بإكمال "تفويض المواد المسترجعة" (RMA) لمثيلات تكرار نفس الخطأ. |
||
| RMA إذا ظهرت أمثلة متكررة. (قم بالتقاط صورة للوحة المعيبة لفحص التلف/مسامير منثنية في SR). |
|||
| وقد تواجه البطاقة الجديدة نفس المشكلة بسبب معالجة الحقل بشكل خاطئ. |
|||
| تبقى الواجهة المعينة إلى NP منخفضة / لا يوجد تأثير. |
|||
| خطأ ECC فادح في تقنية ASIC |
LC/0/8/CPU0:May 29 18:29:09.836 IST: pfm_node_lc[301]: ٪FABRIC-FIA-0-ASIC_FATAL_FAULT: set|fialc[159811]|0x108a00|Fabric interface ASIC0 واجه خطأ فادحا 0x1 - DDR Double ECC خطأ |
هذا خطأ مزدوج في نظام تصحيح الأخطاء ECC في FIA هو خطأ صعب. |
خطأ الأجهزة في FIA. |
| يمكن أن يظهر الخطأ من جديد وبالتالي ينصح بإيقاف إدارة LC. |
آر إم أي كارد. |
||
| تبقى الواجهة المعينة إلى NP/FIA دون تأثير. |
|||
| وتتجلى هذه المسألة في إحدى الحالات التي توصلت فيها FIA إلى كتلة FIB_MGR. |
|||
| خطأ في SERDES |
·RP/0/RSP1/CPU0:Apr 17 12:22:10.690 IST: pfm_node_rp[378]: ٪PLATFORM-CROSSBAR-1-SERDES_ERROR_LNK0: مجموعة|fab_xbar[20906]|0x101702f|XBAR_1_slot_1 |
خطأ في البنية على قناة LC الليفية أو قناة RSP |
إعادة تحميل LC من خلال CLI لاسترداد خطأ النقل / CRC للخطأ المتكرر. |
| Data_NB_SERDES_1_FAIL_0 |
LC/0/3/CPU0:Apr 10 18:55:03.213 IST: pfm_node_lc[304]: ٪FABRIC-FIA-1-DATA_NB_SERDES_1_FAIL_0: set|fialc[168004]|0x103d01|فشل Data NB Serdes Link 1 على FIA 1 واجه RP/0/RSP0/CPU0:Apr 10 18:55:13.043 IST: FABMGR[227]: ٪PLATFORM-FABMGR-2-FABRIC_INTERNAL_FAULT: 0/3/CPU0 (slot 3) خطأ في البنية. سيتم إيقاف تشغيل الواجهات. |
آلية إعادة تدريب الواجهة للاسترداد التلقائي لخطأ SERDES على البنية. في حالة وجود مشكلة في الأجهزة، يمكن ظهور الخطأ على LC أو RSP مرة أخرى. يبقى القارن up / كثير خطأ على serdes أثر الحركة مرور. |
RMA للتكرار بعد OIR. |
| أخطاء ASIC Init |
·LC/0/6/CPU0:Jul 17 00:01:40.738 2019:pfm_node_lc[301]: ٪FABRIC-FIA-1-ASIC_INIT_ERROR: set|fialc[168003]|0x108a00|خطأ ASIC INIT تم الكشف عنه على مثيل FIA 0 |
حدث طرح مثيل FIA لأي من FIA على LC مع خطأ ASIC INIT في Syslog. |
قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة. |
| خطأ FIA القاتل (TS_NI_INTR_LCL_TIMER_EXPIRED) |
LC/0/19/CPU0:Mar 8 04:52:29.020 IST: pfm_node_lc[301]: ٪FABRIC-FIA-0-FATAL_INTERRUPT_ERROR: set|fialc[172098]|0x108a03|FIA Fatal Error Interrupt على FIA 3: TS_NI_INTR_LCL_TIMER_EXPIRED |
بالنسبة للبطاقة الجديدة، يلاحظ أن الوحدة قد تم التعامل معها بشكل غير صحيح أثناء الشحن / التركيب مما تسبب في حدوث تلف فعلي باللوحة. ولم تظهر بعض اللوحات أي ضرر مادي، ولكن شوهد شرخ لحام أثناء توفير المياه للجميع. يشير ذلك إلى زيادة الضغط على الحزمة والعطل المحتمل على مر الوقت. يبقى القارن up / كثير خطأ على serdes أثر الحركة مرور. |
إذا إستمرت المشكلة، فقم بمتابعة RMA / R&R. |
| إعادة الضبط السريع لبروتوكول NP (Tomahawk) |
LC/0/4/CPU0:Jul 6 04:06:49.259 IST: prm_server_ty[318]: ٪PLATFORM-NP-3-ECC: prm_ser_check: تم إعادة الضبط السريع ل NP بنجاح للاسترداد من خطأ بسيط على NP 1. لا حاجة إلى إجراء تصحيحي آخر. |
يقوم NP باكتشاف مشكلة التماثل السهل ويحاول إصلاحها عن طريق محاولة إعادة تعيين NP السريع. |
لا يتوفر ترخيص المواد المسترجعة (RMA) للتكرار الأول. |
| إعادة تحميل LC لتماثل NP |
LC/0/6/CPU0:Jan 27 20:38:08.011 IST: prm_server_to[315]: ٪PLATFORM-NP-0-LC_RELOAD: NP3 لديه 3 عمليات إعادة تحميل سريعة في غضون ساعة واحدة، بدء تجميع بيانات NPdatalog وإعادة تمهيد LC تلقائيا |
عادة، بعد ثلاث محاولات للشفاء، تقوم وحدة التحكم في الشبكة (LC) بإعادة التحميل بنفسها لإصلاح مشكلة التماثل في بروتوكول NP والتي عادة ما يتم رؤيتها لبطاقة Tomahawk. تقوم وحدة التحكم في الوصول (LC) بإجراء الاسترداد التلقائي من خلال إعادة تحميل وحدة التحكم في الوصول (LC) وإصلاح مشكلة التماثل غير القابلة للاسترداد في بروتوكول NP الذي تم الإعلام عنه. يتم قطع الواجهة المعينة إلى NP بإعادة الضبط / بدون تأثير. |
RMA لتكرار مثيلات نفس الخطأ. |
| lc_np_loopback_failed |
LC/0/1/CPU0:Jul 26 17:29:06.146 IST: pfm_node_lc[304]: ٪PLATFORM-DIAGS-0-LC_NP_LOOPBACK_FAILED_TX_PATH: set|online_diag_lc[168022]|إختبار إسترجاع بطاقة الخط NPU(0x20006)|قناع الارتباط هو 0x1. |
فشل إختبار إسترجاع LC NP على واحد من NP. |
قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة. |
| تم تعيين التنبيه في PFM على هيئة "lc_np_loopback_failed_xx_path". |
RMA لتكرار مثيلات نفس الخطأ. |
||
| يتم قطع الواجهة المعينة إلى NP بإعادة الضبط / بدون تأثير. |
|||
| Fabric-FIA-1-Sustained_CRC_ERR |
LC/0/5/CPU0:Mar 605:47:34.748 IST: pfm_node_lc[303]: ٪FABRIC-FIA-1-SUSTAINED_CRC_ERR: مجموعة|fialc[168004]|0x103d00|Fabric interface ASIC-0 تحتوي على أخطاء CRC مستمرة |
إيقاف تشغيل FIA بسبب خطأ FABRIC في CRC. |
قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة. |
| مع حادث إغلاق FIA، القارن على FIA أيضا ينهار. |
RMA لتكرار مثيلات نفس الخطأ. |
||
| يبقى القارن فوق / ما من تأثير. |
|||
| FAB ARB XIF1 ERR |
·lc/0/6/cpu0:يناير 25 19:31:22.787 IST: pfm_node_lc[302]: ٪PLATFORM-FABARBITER-1-RX_LINK_ERR: clear|fab_arb[163918]|0x1001001|LIT_XIF1_k_char_err LC/0/6/CPU0:يناير 25 19:31:22.787 IST: pfm_node_lc[302]: ٪PLATFORM-FABARBITER-1-SYNC_ERR: clear|fab_arb[163918]|0x1001001|LIT_XIF1_LOSS_SYNC LC/0/6/CPU0:يناير 25 19:33:23.010 IST: pfm_node_lc[302]: ٪PLATFORM-FABARBITER-1-RX_LINK_ERR: مجموعة|fab_arb[163918]|0x1001001|LIT_XIF1_DISP_ERR |
خطأ في LC وخطأ في وسيط تركيب & rx_link. يبقى القارن فوق / ما من تأثير. |
لرفض أي مسألة عابرة. RMA لتكرار مثيلات نفس الخطأ. |
| خطأ FPOE_READ_WRITE |
تتبع أخطاء Xbar (إظهار البنية التقنية) |
معرف تصحيح الأخطاء من Cisco CSCvv45788 |
عيب برمجي |
| خوادم FIA_XBAR |
#show موقع حالة إرتباط وحدة التحكم الليفية 0/9/CPU0 |
لرفض أي مسألة عابرة. RMA لتكرار مثيلات نفس الخطأ. |
|
| إعادة تعيين سريعة ل ICFD الخاص بالإعلام NP DIAG |
NP-DIAG على NP0، ICFD (STS-1)، NP يمكن أن يكون 0-4 حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا |
تشغيل إعادة تعيين سريعة ل NP ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة. |
إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA. |
| فشلت مراقبة حماية PRM في الحصول على عمليات إعادة الضبط السريعة لحزمة NP |
فشل مراقبة سلامة NP-DIAG حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا |
تشغيل إعادة تعيين سريعة ل NP ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة. |
إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA. |
| تحصل مراقبة سلامة PRM على عمليات إعادة الضبط السريعة ل Packet-NP التالفة |
مراقبة الصحة ل NP-DIAG على حصلت NP3 على 3 عمليات إعادة إرسال سريعة في غضون ساعة واحدة، مما أدى إلى بدء تجميع بيانات NPata وإعادة تمهيد LC تلقائيا |
تشغيل إعادة تعيين سريعة ل NP ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة. |
إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA. |
| فشل أعلى في عدم النشاط |
فشل NP-DIAG على NP مقاطعة من UCODE على أعلى عدم النشاط - هل يتم إعادة الضبط السريع ل NP |
تشغيل إعادة تعيين سريعة ل NP ويتم إعادة تحميل وحدة التحكم في الشبكة المحلية (LC) إذا تم إعادة الضبط السريع من خلال ثلاث وحدات np في ساعة واحدة. |
إذا قام LC بإعادة تحميل مرات متعددة، فإن RMA. |
| فشل LSP NP Init |
LC/0/6/CPU0:Mar 23 02:53:56.175 IST: npu_server_lsp[138]: ٪PLATFORM-LDA-3-INIT_FAILED: فشل في تهيئة LDA_bb_np_reset_process 13795 inst 0x2 LC INIT: فشل في إعادة تعيين NP لحلول NP (0x0000001 - العملية غير مسموح بها) NPU_server_lpsp : id=4597): -Traceback= 7fea2d5cd9f6 7fea2d7d5816 7fea21465efa 7fea21465fc2 7fea42ad0bed 55a9dbd66031 7fea45e1c855 7fea45e1cc2b2fea2624d526fea3571b96a4a4d4a4a4a4a 4831 55a9dbd691e9 |
يتعين تجميع هذه المعلومات:
يتم إنشاء الملف ويتم حفظه في rp0_xr:/misc/disk1
|
قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة. |
| فشل NP ل Tomahawk (فشل تدريب DDR) |
+++ show prm server trace error location 0/7/cpu0 [14:36:59.520 IST SAT في 29 يناير 2022] ++++ 97 إدخالا ملفوفا (2112 ممكن، 320 مخصص، 0 مصفى، إجمالي 97) كانون الثاني 29 00:22:10.135 prm_server/error 0/7/cpu0 t10 prm_np_channel_powerUp: 0x8001d46 خطأ يشغل القناة 3 المرحلة 4 فشلت المرحلة 4 من الطاقة 0xa57c020.136 Prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup في القناة 3 فشل تمهيد NP3 في يناير 29 00:22:10.136 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup NP3، وحاول مرة أخرى. إعادة المحاولة رقم 1 29 يناير 00:22:35.125 prm_server/error 0/7/cpu0 t10 prm_np_channel_powerUp: 0x8001d46 خطأ يتم تشغيله في القناة 3 المرحلة 4 فشلت المرحلة 4 من الطاقة 0xa57c02700 في يناير 290:22:35.125 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup على القناة 3 فشل تمهيد NP3 في 2900:22:35.125 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup NP3، وحاول مرة أخرى. إعادة المحاولة رقم 2 كانون الثاني 29 00:22:59.075 prm_server/error 0/7/cpu0 t10 prm_np_channel_powerUp: 0x8001d46 خطأ يشغل القناة 3 المرحلة 4 فشلت المرحلة 4 من الطاقة 0xa57c02000 في يناير 290:22:59.075 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup على القناة 3 في 29 يناير 2900:22:59.075 prm_server/error 0/7/CPU0 t10 np_thread_channel_bringup بعد 3 محاولات (محاولات)، فشل NP3 في التهيئة. يناير 2900:23:00.087 prm_server/error 0/7/CPU0 t10 prm_send_pfm_msg: فشل تهيئة NP المستمر، لا يلزم إعادة تحميل بطاقة الخط. إيداع سجلات برامج تشغيل NP <NP#3>فشل التدريب على DDR (الحالة 0x1) <NP#3>ddr3TipRunAlg: فشل التوليف 0 <NP#3>ddrTipRunAlgo opcode: ddr3TipRunAlg failed (خطأ 0x1) <NP#3>** خطأ: 0x1 غير معروف |
العقدة0_7_CPU0 يناير 2900:22:58|8 |NP_INIT_FAIL_NO_RESET |E/A|5356 |عمليات الشبكة|0x1008000 |
قم بإعادة تحميل LC عبر واجهة سطر الأوامر لاستبعاد أي مشكلة عابرة. إذا كانت المشكلة مازالت تراعى RMA ال LC معرف تصحيح الأخطاء من Cisco CSCwa85165 |
| فشل LSP NP Init (خطأ HbmReadParticleError) |
LC/0/13/CPU0:Jan 10 13:34:59.106 IST: npu_server_lsp[278]: ٪PLATFORM-NP-4-SHUTDOWN_START: NP4: EMRHIMREG.ch1Psch0HbmReadParticleError الذي تم الكشف عنه، إيقاف تشغيل NP قيد التقدم LC/0/13/CPU0:يناير 10 13:34:59.106 IST: pfm_node_lc[330]: ٪PLATFORM-NP-0-UNREABLE_ERROR: set|npu_server_lsp[4632]|0x10a5004|تم اكتشاف خطأ غير قابل للاسترداد في NP4 |
+++ إظهار وحدات التحكم np التي تقاطع جميع المواقع 0/13/CPU0 [16:02:16.712 IST من 10 يناير 2022] ++++ العقدة: 0/13/CPU0: — CNT لمعرف مقاطعة NPU — — — — <snip> 4 hbmdpReg0.hbmdpExceptionLeaf0.hbmdpIntNwlHbmdpRdDataUncorrectableErrCh1Psch1 0x201dc013 1 4 hbmdpReg0.hbmdpExceptionLeaf0.hbmdpIntNwlHbmdpRdDataUncorrectableErrCh1Psch0 0x201dc012 1 |
تحقق من تثبيت معرف تصحيح الأخطاء من Cisco CSCvt59803. يساعد إعادة تحميل LC من خلال واجهة سطر الأوامر (CLI) على الاسترداد. |
| إرتباط الوسيط مع وضع الاستعداد |
برنامج Fabric-Manager: |
لرفض أي مسألة عابرة. RMA لتكرار مثيل نفس الخطأ. |
|
| خطأ في Serdes |
إظهار موقع تتبع السلاسل 0/x/cpu0 | i "htl_err_device_not_connected") ترى هذه الأخطاء: |
معرف تصحيح الأخطاء من Cisco CSCvz7552 |
عيب برمجي |
العيوب المعروفة
| معرف الخطأ من Cisco | مكون | العنوان |
| معرف تصحيح الأخطاء من Cisco CSCvy00012 | asr9k-diags-online | إستهلاك ذاكرة الحزمة بواسطة online_diag_rsp |
| معرف تصحيح الأخطاء من Cisco CSCvw57721 | asr9k-serviceAck | Umbrella SMU التي تحتوي على برامج ثابتة محدثة لمنتجات Lightspeed NP ووحدات التحكيم |
| معرف تصحيح الأخطاء من Cisco CSCvz7552 | asr9k-vic-ls | تعلق البرامج الثابتة ل PHY وتسبب عدم التعرف على البصريات على A9K-20HG-FLEX |
| معرف تصحيح الأخطاء من Cisco CSCvz76691 | asr9k-serviceAck | وحدة إدارة الهيكل (SMU) المظلة مع معالجة مقاطعة حالة الارتباط المحسنة لخطوط Tomahawk |
| Cisco بق id CSCvz84139 | ASR9k-LS-Fabric | تعطل FAB_SI عند ترقية الموجه إلى 742 |
| معرف تصحيح الأخطاء من Cisco CSCwa81006 | asr9k-pfm | تعذر على ASR9K/eXR تنفيذ إيقاف تشغيل منفذ بيانات مدير الأخطاء في بعض السيناريوهات |
| Cisco بق id CSCvz16840 | ASR9k-FIA | BLB جلسة رفرفة عندما CLI يعيد تحميل LC لأن مسار إعادة التوجيه أغلق مبكرا بسبب التغييرات المضافة في 6.5.2 |
| معرف تصحيح الأخطاء من Cisco CSCwb64255 | asr9k-fab-xbar | إعدادات SI الجديدة ل SKB في هيكل Starscream(9912) و MegaAtron(9922) |
| معرف تصحيح الأخطاء من Cisco CSCwa09794 | asr9k-fab-xbar | بروتوكول SI الجديد بعد إجراء الضبط الدقيق لهيكل RO ل SKB-SM15 |
| معرف تصحيح الأخطاء من Cisco CSCvv45788 | asr9k-fab-xbar | يمكن لعمليتي fab_xbar و mgid-programmer الوصول إلى الأجهزة في نفس الوقت |
| معرف تصحيح الأخطاء من Cisco CSCwd22196 | asr9k-prm | إستهلاك مخزن RFD المؤقت بين إرتباط ILKN على Tomahawk LC |
| معرف تصحيح الأخطاء من Cisco CSCwb66960 | asr9k-fab-infra | عزل أخطاء بنية ASR9k |
| معرف تصحيح الأخطاء من Cisco CSCwa79758 | asr9k-fab-xbar | فقد البث المتعدد على LSP LC بعد إجراء عملية إدخال/إخراج لبطاقة LSP LC أخرى مع خطأ إرتباط Xbar |
| معرف تصحيح الأخطاء من Cisco CSCvw88284 | asr9k-lda-ls | RSP5 BW افتراضيا إلى 200G على هيكل 9910/9906 بدلا من 600G. |
| معرف تصحيح الأخطاء من Cisco CSCvm82379 | asr9k-fab-arb | تحطمت فاب-أرب أثناء اصطحابها لقماش الشركة |
| معرف تصحيح الأخطاء من Cisco CSCvh00349 | ASR9k-FIA | يمكن أن تتعامل بنية ASR9k مع حزم UCAST المرسلة أثناء وضع الاستعداد |
| معرف تصحيح الأخطاء من Cisco CSCvk44688 | ASR9k-FIA | تعرضت FPGA للأخطاء بشكل متكرر ولم تتمكن من التعافي |
| معرف تصحيح الأخطاء من Cisco CSCvy31670 | ASR9k-ls-fia | LSP: تؤدي إزالة FC0 إلى تمكين أدوات تحديد معدل الموصلات البينية، بينما لا تسمح FC4 بذلك |
| معرف تصحيح الأخطاء من Cisco CSCvt59803 | asr9k-ls-npdriver | LSP: platform-NP-4-shutdown imrhimreg.ch1Psch1HbmReadParticleError |
سلوك fault-manager datapath port shutdown/toggle
- يعرض الأمر
fault-manager datapath port shutdownيساعد الأمر على إيقاف تشغيل منافذ FIA/NP ذات الصلة التي تم تعيين تنبيه فشل بيانات الاعتماد لها، على RP/RSP نشط، ولا تظهر الواجهة تلقائيا حتى تقوم بإعادة تحميل LC. لا يعمل أمر واجهة سطر الأوامر (CLI) هذا كما هو متوقع من الإصدار 7. x.x. (أمر واجهة سطر الأوامرfault-manager datapath port shutdownلا يعمل وفقا للتصميم من 7. x.x) - ثابت في 7. 7.2. - يعرض الأمر
fault-manager datapath port toggleيعمل أمر واجهة سطر الأوامر (CLI) بشكل جيد. إنه يفتح المنفذ بمجرد مسح تنبيه فشل Punt DataPath. - وهذا يساعد على منع انقطاع الخدمة في حالة توفر معدل تكرار صحيح على مستوى الارتباط وتوفر BW على المسار المتكرر.
الاختبار - للتحقق من صحة عملية الأمر المذكورة سابقا.
إنشاء خطأ PUNT على NP0 LC7:
RP/0/RP0/CPU0:ASR-9922-A#monitor np counter PUNT_DIAGS_RSP_ACT np0 count 20 location 0/7/CPU0
Wed Jul 7 14:15:17.489 UTC
Usage of NP monitor is recommended for cisco internal use only.
Please use instead 'show controllers np capture' for troubleshooting packet drops in NP
and 'monitor np interface' for per (sub)interface counter monitoring
Warning: Every packet captured will be dropped! If you use the 'count'
option to capture multiple protocol packets, this could disrupt
protocol sessions (eg, OSPF session flap). So if capturing protocol
packets, capture only 1 at a time.
Warning: A mandatory NP reset will be done after monitor to clean up.
This will cause ~150ms traffic outage. Links will stay Up.
Proceed y/n [y] > y
Monitor PUNT_DIAGS_RSP_ACT on NP0 ... (Ctrl-C to quit)
Wed Jul 7 14:17:08 2021 -- NP0 packet
From Fabric: 127 byte packet
0000: 00 09 00 00 b4 22 00 00 ff ff ff ff 00 00 ff ff ....4"..........
0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa ....ppppLLLL****
0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00 UUUU............
0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff ................
0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55 ppppLLLL****UUUU
0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00 ................
0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 ............pppp
0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 LLLL****UUUU...
(count 1 of 20)
Wed Jul 7 14:18:09 2021 -- NP0 packet
From Fabric: 256 byte packet
0000: 00 09 00 00 b5 22 00 00 ff ff ff ff 00 00 ff ff ....5"..........
0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa ....ppppLLLL****
0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00 UUUU............
0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff ................
0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55 ppppLLLL****UUUU
0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00 ................
0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 ............pppp
0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 00 LLLL****UUUU....
0080: 01 00 00 00 00 00 00 00 00 00 00 00 ff ff ff ff ................
0090: 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc ........ppppLLLL
00a0: aa aa aa aa 55 55 55 55 00 00 00 00 01 00 00 00 ****UUUU........
00b0: 00 00 00 00 00 00 00 00 ff ff ff ff 00 00 ff ff ................
00c0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00d0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00e0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00f0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
(count 2 of 20)
Wed Jul 7 14:19:09 2021 -- NP0 packet
Actual packet size 515 bytes truncated size 384:
From Fabric: 384 byte packet
0000: 00 09 00 00 b6 22 00 00 ff ff ff ff 00 00 ff ff ....6"..........
0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa ....ppppLLLL****
0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00 UUUU............
0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff ................
0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55 ppppLLLL****UUUU
0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00 ................
0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 ............pppp
0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 00 LLLL****UUUU....
0080: 01 00 00 00 00 00 00 00 00 00 00 00 ff ff ff ff ................
0090: 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc ........ppppLLLL
00a0: aa aa aa aa 55 55 55 55 00 00 00 00 01 00 00 00 ****UUUU........
00b0: 00 00 00 00 00 00 00 00 ff ff ff ff 00 00 ff ff ................
00c0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00d0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00e0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00f0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0100: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0110: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0120: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0130: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0140: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0150: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0160: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
0170: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
RP/0/RP0/CPU0:ASR-9922-A#sh pfm location 0/RP0/CPU0
Wed Jul 7 14:19:17.174 UTC
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Jul 7 14:19:17 2021
PFM TOTAL: 2 EMERGENCY/ALERT(E/A): 1 CRITICAL(CR): 0 ERROR(ER): 1
-------------------------------------------------------------------------------------------------
Raised Time |S#|Fault Name |Sev|Proc_ID|Dev/Path Name |Handle
--------------------+--+-----------------------------------+---+-------+--------------+----------
Jul 1 10:13:45 2021|0 |SPINE_UNAVAILABLE |E/A|5082 |Fabric Manager|0x1034000
Jul 7 14:19:09 2021|0 |PUNT_FABRIC_DATA_PATH_FAILED |ER |9429 |System Punt/Fa|0x2000004
RP/0/RP0/CPU0:ASR-9922-A#sh pfm process 9429 location 0/Rp0/CPU0
Wed Jul 7 14:19:37.128 UTC
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Jul 7 14:19:37 2021
PFM TOTAL: 2 EMERGENCY/ALERT(E/A): 1 CRITICAL(CR): 0 ERROR(ER): 1
PER PROCESS TOTAL: 0 EM: 0 CR: 0 ER: 0
Device/Path[1 ]:Fabric loopbac [0x2000003 ] State:RDY Tot: 0
Device/Path[2 ]:System Punt/Fa [0x2000004 ] State:RDY Tot: 1
1 Fault Id: 432
Sev: ER
Fault Name: PUNT_FABRIC_DATA_PATH_FAILED
Raised Timestamp: Jul 7 14:19:09 2021
Clear Timestamp: N/A
Changed Timestamp: N/A
Resync Mismatch: FALSE
MSG: failure threshold is 3, (slot, NP) failed: (0/7/CPU0, 0)
Device/Path[3 ]:Crossbar Switc [0x108c000 ] State:RDY Tot: 0
Device/Path[4 ]:Crossbar Switc [0x108c001 ] State:RDY Tot: 0
Device/Path[5 ]:Crossbar Switc [0x108c002 ] State:RDY Tot: 0
Device/Path[6 ]:Crossbar Switc [0x108c003 ] State:RDY Tot: 0
Device/Path[7 ]:Crossbar Switc [0x108c004 ] State:RDY Tot: 0
Device/Path[8 ]:Crossbar Switc [0x108c005 ] State:RDY Tot: 0
Device/Path[9 ]:Crossbar Switc [0x108c006 ] State:RDY Tot: 0
Device/Path[10]:Crossbar Switc [0x108c007 ] State:RDY Tot: 0
Device/Path[11]:Crossbar Switc [0x108c008 ] State:RDY Tot: 0
Device/Path[12]:Crossbar Switc [0x108c009 ] State:RDY Tot: 0
Device/Path[13]:Crossbar Switc [0x108c00a ] State:RDY Tot: 0
Device/Path[14]:Crossbar Switc [0x108c00b ] State:RDY Tot: 0
Device/Path[15]:Crossbar Switc [0x108c00c ] State:RDY Tot: 0
Device/Path[16]:Crossbar Switc [0x108c00d ] State:RDY Tot: 0
Device/Path[17]:Crossbar Switc [0x108c00e ] State:RDY Tot: 0
Device/Path[18]:Fabric Interfa [0x108b000 ] State:RDY Tot: 0
Device/Path[19]:Fabric Arbiter [0x1086000 ] State:RDY Tot: 0
Device/Path[20]:CPU Controller [0x108d000 ] State:RDY Tot: 0
Device/Path[21]:Device Control [0x109a000 ] State:RDY Tot: 0
Device/Path[22]:ClkCtrl Contro [0x109b000 ] State:RDY Tot: 0
Device/Path[23]:NVRAM [0x10ba000 ] State:RDY Tot: 0
Device/Path[24]:Hooper switch [0x1097000 ] State:RDY Tot: 0
Device/Path[25]:Hooper switch [0x1097001 ] State:RDY Tot: 0
Device/Path[26]:Hooper switch [0x1097002 ] State:RDY Tot: 0
Device/Path[27]:Hooper switch [0x1097003 ] State:RDY Tot: 0
لم يتم تنزيل المنفذ في هذه الحالة:
RP/0/RP0/CPU0:ASR-9922-A#sh ipv4 int brief location 0/7/CPU0
Wed Jul 7 14:21:29.693 UTC
Interface IP-Address Status Protocol Vrf-Name
TenGigE0/7/0/0 unassigned Down Down default
TenGigE0/7/0/1 unassigned Down Down default
TenGigE0/7/0/2 unassigned Down Down default
TenGigE0/7/0/3 unassigned Down Down default
TenGigE0/7/0/4 unassigned Down Down default
TenGigE0/7/0/5 unassigned Down Down default
TenGigE0/7/0/6 unassigned Down Down default
TenGigE0/7/0/7 unassigned Shutdown Down default
TenGigE0/7/0/8 unassigned Shutdown Down default
TenGigE0/7/0/9 unassigned Shutdown Down default
TenGigE0/7/0/10 unassigned Down Down default
TenGigE0/7/0/11 unassigned Down Down default
TenGigE0/7/0/12 unassigned Down Down default
TenGigE0/7/0/13 unassigned Shutdown Down default
TenGigE0/7/0/14 unassigned Shutdown Down default
TenGigE0/7/0/15 unassigned Shutdown Down default
TenGigE0/7/0/16 unassigned Shutdown Down default
TenGigE0/7/0/17 unassigned Shutdown Down default
TenGigE0/7/0/18 unassigned Down Down default
TenGigE0/7/0/19 unassigned Up Up default >>>>>>> Port is UP
RP/0/RP0/CPU0:ASR-9922-A#sh logging last 200 | in 0/7/0
Wed Jul 7 14:22:35.715 UTC
RP/0/RP0/CPU0:ASR-9922-A#
حالة الاختبار 1.2:
NP/سلوك المنافذ مع fault-manager datapath port toggle :
RP/0/RP0/CPU0:ASR-9922-A#sh run formal | in data
Wed Jul 7 14:52:11.714 UTC
Building configuration...
fault-manager datapath port toggle
RP/0/RP0/CPU0:ASR-9922-A#
عدم وجود تنبيه في PFM:
RP/0/RP0/CPU0:ASR-9922-A#sh pfm location 0/Rp0/CPU0
Wed Jul 7 14:55:13.410 UTC
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Jul 7 14:55:13 2021
PFM TOTAL: 1 EMERGENCY/ALERT(E/A): 1 CRITICAL(CR): 0 ERROR(ER): 0
-------------------------------------------------------------------------------------------------
Raised Time |S#|Fault Name |Sev|Proc_ID|Dev/Path Name |Handle
--------------------+--+-----------------------------------+---+-------+--------------+----------
Jul 1 10:13:45 2021|0 |SPINE_UNAVAILABLE |E/A|5082 |Fabric Manager|0x1034000
RP/0/RP0/CPU0:ASR-9922-A#
إنشاء خطأ في NP0 LC7:
RP/0/RP0/CPU0:ASR-9922-A#monitor np counter PUNT_DIAGS_RSP_ACT np0 count 20 location 0/7/CPU0
Wed Jul 7 14:51:18.596 UTC
Usage of NP monitor is recommended for cisco internal use only.
Please use instead 'show controllers np capture' for troubleshooting packet drops in NP
and 'monitor np interface' for per (sub)interface counter monitoring
Warning: Every packet captured will be dropped! If you use the 'count'
option to capture multiple protocol packets, this could disrupt
protocol sessions (eg, OSPF session flap). So if capturing protocol
packets, capture only 1 at a time.
Warning: A mandatory NP reset will be done after monitor to clean up.
This will cause ~150ms traffic outage. Links will stay Up.
Proceed y/n [y] > y
Monitor PUNT_DIAGS_RSP_ACT on NP0 ... (Ctrl-C to quit)
Wed Jul 7 14:53:21 2021 -- NP0 packet
From Fabric: 127 byte packet
0000: 00 09 00 00 d8 22 00 00 ff ff ff ff 00 00 ff ff ....X"..........
0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa ....ppppLLLL****
0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00 UUUU............
0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff ................
0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55 ppppLLLL****UUUU
0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00 ................
0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 ............pppp
0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 LLLL****UUUU...
(count 1 of 20)
Wed Jul 7 14:54:22 2021 -- NP0 packet
From Fabric: 256 byte packet
0000: 00 09 00 00 d9 22 00 00 ff ff ff ff 00 00 ff ff ....Y"..........
0010: 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc aa aa aa aa ....ppppLLLL****
0020: 55 55 55 55 00 00 00 00 01 00 00 00 00 00 00 00 UUUU............
0030: 00 00 00 00 ff ff ff ff 00 00 ff ff 00 ff 00 ff ................
0040: f0 f0 f0 f0 cc cc cc cc aa aa aa aa 55 55 55 55 ppppLLLL****UUUU
0050: 00 00 00 00 01 00 00 00 00 00 00 00 00 00 00 00 ................
0060: ff ff ff ff 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 ............pppp
0070: cc cc cc cc aa aa aa aa 55 55 55 55 00 00 00 00 LLLL****UUUU....
0080: 01 00 00 00 00 00 00 00 00 00 00 00 ff ff ff ff ................
0090: 00 00 ff ff 00 ff 00 ff f0 f0 f0 f0 cc cc cc cc ........ppppLLLL
00a0: aa aa aa aa 55 55 55 55 00 00 00 00 01 00 00 00 ****UUUU........
00b0: 00 00 00 00 00 00 00 00 ff ff ff ff 00 00 ff ff ................
00c0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00d0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00e0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
00f0: 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 ................
(count 2 of 20)
RP/0/RP0/CPU0:ASR-9922-A#sh pfm location 0/Rp0/CPU0
Wed Jul 7 14:56:24.459 UTC
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Jul 7 14:56:24 2021
PFM TOTAL: 2 EMERGENCY/ALERT(E/A): 1 CRITICAL(CR): 0 ERROR(ER): 1
-------------------------------------------------------------------------------------------------
Raised Time |S#|Fault Name |Sev|Proc_ID|Dev/Path Name |Handle
--------------------+--+-----------------------------------+---+-------+--------------+----------
Jul 1 10:13:45 2021|0 |SPINE_UNAVAILABLE |E/A|5082 |Fabric Manager|0x1034000
Jul 7 14:55:23 2021|0 |PUNT_FABRIC_DATA_PATH_FAILED |ER |9429 |System Punt/Fa|0x2000004
RP/0/RP0/CPU0:ASR-9922-A#sh pfm process 9429 location 0/RP0/CPU0
Wed Jul 7 14:56:39.961 UTC
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Jul 7 14:56:40 2021
PFM TOTAL: 2 EMERGENCY/ALERT(E/A): 1 CRITICAL(CR): 0 ERROR(ER): 1
PER PROCESS TOTAL: 0 EM: 0 CR: 0 ER: 0
Device/Path[1 ]:Fabric loopbac [0x2000003 ] State:RDY Tot: 0
Device/Path[2 ]:System Punt/Fa [0x2000004 ] State:RDY Tot: 1
1 Fault Id: 432
Sev: ER
Fault Name: PUNT_FABRIC_DATA_PATH_FAILED
Raised Timestamp: Jul 7 14:55:23 2021
Clear Timestamp: N/A
Changed Timestamp: N/A
Resync Mismatch: FALSE
MSG: failure threshold is 3, (slot, NP) failed: (0/7/CPU0, 0)
Device/Path[3 ]:Crossbar Switc [0x108c000 ] State:RDY Tot: 0
Device/Path[4 ]:Crossbar Switc [0x108c001 ] State:RDY Tot: 0
Device/Path[5 ]:Crossbar Switc [0x108c002 ] State:RDY Tot: 0
Device/Path[6 ]:Crossbar Switc [0x108c003 ] State:RDY Tot: 0
Device/Path[7 ]:Crossbar Switc [0x108c004 ] State:RDY Tot: 0
Device/Path[8 ]:Crossbar Switc [0x108c005 ] State:RDY Tot: 0
Device/Path[9 ]:Crossbar Switc [0x108c006 ] State:RDY Tot: 0
Device/Path[10]:Crossbar Switc [0x108c007 ] State:RDY Tot: 0
Device/Path[11]:Crossbar Switc [0x108c008 ] State:RDY Tot: 0
Device/Path[12]:Crossbar Switc [0x108c009 ] State:RDY Tot: 0
Device/Path[13]:Crossbar Switc [0x108c00a ] State:RDY Tot: 0
Device/Path[14]:Crossbar Switc [0x108c00b ] State:RDY Tot: 0
Device/Path[15]:Crossbar Switc [0x108c00c ] State:RDY Tot: 0
Device/Path[16]:Crossbar Switc [0x108c00d ] State:RDY Tot: 0
Device/Path[17]:Crossbar Switc [0x108c00e ] State:RDY Tot: 0
Device/Path[18]:Fabric Interfa [0x108b000 ] State:RDY Tot: 0
Device/Path[19]:Fabric Arbiter [0x1086000 ] State:RDY Tot: 0
Device/Path[20]:CPU Controller [0x108d000 ] State:RDY Tot: 0
Device/Path[21]:Device Control [0x109a000 ] State:RDY Tot: 0
Device/Path[22]:ClkCtrl Contro [0x109b000 ] State:RDY Tot: 0
Device/Path[23]:NVRAM [0x10ba000 ] State:RDY Tot: 0
Device/Path[24]:Hooper switch [0x1097000 ] State:RDY Tot: 0
Device/Path[25]:Hooper switch [0x1097001 ] State:RDY Tot: 0
Device/Path[26]:Hooper switch [0x1097002 ] State:RDY Tot: 0
Device/Path[27]:Hooper switch [0x1097003 ] State:RDY Tot: 0
انخفضت الواجهة TenGigE0/7/0/19 من NP0:
RP/0/RP0/CPU0:ASR-9922-A#show logging last 200 | in 0/7/0
Wed Jul 7 14:58:42.959 UTC
LC/0/7/CPU0:Jul 7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINK-3-UPDOWN :
Interface TenGigE0/7/0/19, changed state to Down
LC/0/7/CPU0:Jul 7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINEPROTO-5-UPDOWN :
Line protocol on Interface TenGigE0/7/0/19, changed state to Down
RP/0/RP0/CPU0:Jul 7 14:55:23.802 UTC: BM-DISTRIB[1290]: %L2-BM-6-ACTIVE :
TenGigE0/7/0/19 is no longer Active as part of Bundle-Ether854 (Link is down)
LC/0/7/CPU0:Jul 7 14:55:25.854 UTC: vic_0_0[379]: %PLATFORM-VIC-4-RFI :
Interface TenGigE0/7/0/19, Detected Remote Fault
LC/0/7/CPU0:Jul 7 14:55:26.936 UTC: lda_server[114]: %PKT_INFRA-FM-2-FAULT_CRITICAL :
ALARM_CRITICAL :OPTICS RX POWER LANE-0 LOW ALARM :CLEAR : Te0/7/0/0:
تم إيقاف إنشاء خطأ PUNT:
RP/0/RP0/CPU0:ASR-9922-A#sh ipv4 int brief location 0/7/CPU0
Wed Jul 7 14:59:16.322 UTC
Interface IP-Address Status Protocol Vrf-Name
TenGigE0/7/0/0 unassigned Down Down default
TenGigE0/7/0/1 unassigned Down Down default
TenGigE0/7/0/2 unassigned Down Down default
TenGigE0/7/0/3 unassigned Down Down default
TenGigE0/7/0/4 unassigned Down Down default
TenGigE0/7/0/5 unassigned Down Down default
TenGigE0/7/0/6 unassigned Down Down default
TenGigE0/7/0/7 unassigned Shutdown Down default
TenGigE0/7/0/8 unassigned Shutdown Down default
TenGigE0/7/0/9 unassigned Shutdown Down default
TenGigE0/7/0/10 unassigned Down Down default
TenGigE0/7/0/11 unassigned Down Down default
TenGigE0/7/0/12 unassigned Down Down default
TenGigE0/7/0/13 unassigned Shutdown Down default
TenGigE0/7/0/14 unassigned Shutdown Down default
TenGigE0/7/0/15 unassigned Shutdown Down default
TenGigE0/7/0/16 unassigned Shutdown Down default
TenGigE0/7/0/17 unassigned Shutdown Down default
TenGigE0/7/0/18 unassigned Down Down default
TenGigE0/7/0/19 unassigned Down Down default >>>>>>
توقف التنبيه:
RP/0/RP0/CPU0:ASR-9922-A#sh pfm location 0/Rp0/CPU0
Wed Jul 7 15:01:44.478 UTC
node: node0_RP0_CPU0
---------------------
CURRENT TIME: Jul 7 15:01:44 2021
PFM TOTAL: 1 EMERGENCY/ALERT(E/A): 1 CRITICAL(CR): 0 ERROR(ER): 0
-------------------------------------------------------------------------------------------------
Raised Time |S#|Fault Name |Sev|Proc_ID|Dev/Path Name |Handle
--------------------+--+-----------------------------------+---+-------+--------------+----------
Jul 1 10:13:45 2021|0 |SPINE_UNAVAILABLE |E/A|5082 |Fabric Manager|0x1034000
RP/0/RP0/CPU0:ASR-9922-A#
ظهرت الواجهة:
RP/0/RP0/CPU0:ASR-9922-A#show logging | in 0/7/0/19
Wed Jul 7 15:06:11.532 UTC
LC/0/7/CPU0:Jul 7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINK-3-UPDOWN :
Interface TenGigE0/7/0/19, changed state to Down
LC/0/7/CPU0:Jul 7 14:55:23.798 UTC: ifmgr[270]: %PKT_INFRA-LINEPROTO-5-UPDOWN :
Line protocol on Interface TenGigE0/7/0/19, changed state to Down
RP/0/RP0/CPU0:Jul 7 14:55:23.802 UTC: BM-DISTRIB[1290]: %L2-BM-6-ACTIVE :
TenGigE0/7/0/19 is no longer Active as part of Bundle-Ether854 (Link is down)
LC/0/7/CPU0:Jul 7 14:55:25.854 UTC: vic_0_0[379]: %PLATFORM-VIC-4-RFI :
Interface TenGigE0/7/0/19, Detected Remote Fault
LC/0/7/CPU0:Jul 7 15:03:27.204 UTC: ifmgr[270]: %PKT_INFRA-LINK-3-UPDOWN :
Interface TenGigE0/7/0/19, changed state to Up
LC/0/7/CPU0:Jul 7 15:03:27.206 UTC: ifmgr[270]: %PKT_INFRA-LINEPROTO-5-UPDOWN :
Line protocol on Interface TenGigE0/7/0/19, changed state to Up
RP/0/RP0/CPU0:Jul 7 15:03:29.219 UTC: BM-DISTRIB[1290]: %L2-BM-6-ACTIVE :
TenGigE0/7/0/19 is Active as part of Bundle-Ether854
محفوظات المراجعة
| المراجعة | تاريخ النشر | التعليقات |
|---|---|---|
1.0 |
09-Jan-2023 |
الإصدار الأولي |
التعليقات