Solución de problemas de una tarjeta mLOM de UCS C-Series que no puede comunicarse con el CIMC

Introducción

Este documento describe cómo resolver problemas de una tarjeta mLOM de servidor en rack Cisco UCS serie C que no puede comunicarse con el CIMC.

Prerequisites

Requirements

No hay requisitos específicos para este documento.

Componentes Utilizados

La información que contiene este documento se basa en las siguientes versiones de software y hardware.

• Cisco Unified Computing System (UCS) C220-M5 con firmware versión 4.0(4i)
• VIC Cisco UCS 1387 con firmware versión 4.3(3b) (se trata del adaptador modular LAN en placa base (mLOM))

La información que contiene este documento se creó a partir de los dispositivos en un ambiente de laboratorio específico. Todos los dispositivos que se utilizan en este documento se pusieron en funcionamiento con una configuración verificada (predeterminada). Si tiene una red en vivo, asegúrese de entender el posible impacto de cualquier comando.

Antecedentes

La mLOM se instala en los nodos de la memoria caché, el disco de almacenamiento de objetos (OSD), el equipo y el controlador de Cisco UCS.

Una tarjeta de interfaz virtual (VIC) es el adaptador que actúa como tarjeta mLOM en el servidor UCS. 

El adaptador mLOM VIC es una unidad sustituible in situ (FRU) que se coloca en servidores de controlador, informática y almacenamiento, en función de los requisitos de red de nubes subterráneas y nubes excesivas.

• El servidor del controlador tiene una mLOM con 2 puertos de 10 GigE, 1 LOM con 2 puertos de 1 Gb y 1 puerto del controlador Cisco Integrated Management Controller (CIMC) de 1 Gb.

• El servidor informático tiene una mLOM con 2 puertos 10 GigE, 1 LOM con 2 puertos 1 Gb, 2 tarjetas PCIe en las ranuras 1 y 4 con 2 puertos 10 GigE y 1 GigE CIMC.

• El servidor informático de la OSD tiene una mLOM con 2 puertos de 10 GigE, 1 LOM con 2 puertos de 2 Gb y 2 tarjetas PCIe en las ranuras 1 y 4 con 2 puertos de 10 GigE, 1 puerto CIMC de 1 Gb y 10 GigE.

• El servidor de almacenamiento tiene un mLOM con 2 puertos 10 GigE, 1 LOM con 2 puertos 2 Gb y 1 puerto CIMC de 1 Gb.

Las interfaces mLOM sirven para el aprovisionamiento de nube excesiva, la gestión de VNF y la orquestación, proporcionando interfaces de red de VIM para varias redes. Estas redes pueden incluir redes IP flotantes externas, redes API internas, redes de almacenamiento, redes de gestión del almacenamiento y redes de arrendatarios.

Solucionar problemas de comunicación entre la mLOM y el CIMC para ayudar a mantener las funciones dentro de estas redes.

Síntomas

Síntoma 1. La GUI de CIMC muestra "No se puede comunicar con la tarjeta adaptadora - mLOM"

Al acceder a la tarjeta de red/adaptador mLOM en UCS CIMC, la GUI muestra el mensaje "No se puede comunicar con la tarjeta adaptadora - mLOM. Recargue la interfaz de usuario web para obtener los datos más recientes."

Síntoma 2. La mLOM no aparece en la lista de adaptadores de UCS

La entrada mLOM no aparece en la lista de adaptadores del archivo de soporte técnico de UCS con la etiqueta tech_support.frupids, que se encuentra en la ruta de acceso del archivo de soporte técnico de UCS <TMP > tech_support.frupids>.

En circunstancias normales, la mLOM aparece en la lista de adaptadores tech_support_frupids del servicio de asistencia técnica de UCS.

AdapterList:
…
Slot: MLOM
Description: Cisco UCS VIC1387 Virtual Interface Card - Dual Port 40Gb QSFP+ MLOM
PID: UCSC-MLOM-C40Q-03
CPN: xxxxx
powMin: xxxxx
powMax: xxxxx
Vendor: xxxxx
Device: xxxxx
SubVendor: xxxxx
SubDevice: xxxxx

Síntoma 3. La mLOM no aparece dentro de las salidas del chasis de alcance CLI de CIMC para "scope adapter mlom"

C220-node/chassis # scope adapter mlom
Error: Managed object does not exist, use show command to list valid targets

Síntoma 4. Los sensores IPMI no detectan la mLOM

Los sensores de Intelligent Platform Management Interface (IPMI) no detectan la tarjeta mLOM, según el archivo de asistencia técnica de UCS <UCS Tech Support > tmp > tech_support>.

Running: dumpIPMISensors
Querying All IPMI Sensors:
Sensor Name | Reading | Unit | Status | LNR | LC | LNC | UNC | UC | UNR |
=================|=========|==============|========|=========|=========|=========|=========|=========|=========|
MLOM_PRSNT | disc -> | discrete | 0x0280 | na | na | na | na | na | na |
MLOM_TEMP | 38.000 | degrees C | OK | na | na | na | na | 90.000 | 95.000 |

Detección parcial de la tarjeta mLOM

El CIMC observa el inventario del servidor a través de sensores y conexiones en la placa base del servidor, pero el sistema operativo del servidor observa el hardware a través de los canales de datos del servidor. Dado que el CIMC y el inventario del sistema operativo del servidor utilizan diferentes rutas físicas para monitorear la tarjeta mLOM, la tarjeta mLOM se puede detectar parcialmente o los datos del inventario CIMC pueden mostrar resultados diferentes a los del sistema operativo del servidor.

• La mLOM puede aparecer en el registro de la unidad reemplazable in situ (FRU) <UCS Tech Support > TMP > tech_support.frupids>.

====== Dumping IPMI FRU Records ======
…
FRU Device Description : FRU_MLOM (ID
Board Mfg : Cisco Systems Inc
Board Product : UCSC-MLOM-C40Q-03
Board Serial : FCH2328764C
Board Part Number : 73-17793-06
Board Extra : A03V04
Board Extra : 0000000000
OEM (0xUnknown (0x9)) Record

• La presencia de mLOM parece haberse confirmado en los decodificadores SEL de UCS Tech Support <UCS Tech Support > var > sel_decode>.

Id: 757
severity: Normal
dateTime: 2023-12-29 11:08:15 EST
dateTimeOrder: 00028
description: "FRU_MLOM MLOM_PRSNT: Presence sensor for FRU_MLOM, Device Inserted / Device Present was asserted"

• El registro técnico del BIOS <UCS Tech Support > mnt > jffs2 > BIOS > bt > BiosTech.log> puede mostrar que la tarjeta mLOM se ha detectado previamente.

7:2023 Dec 29 11:04:33 EST:mLomPresent = TRUE
7:2023 Dec 29 11:04:33 EST:mLomSku = mLOM-x8

• La mLOM puede mostrarse en la lista de adaptadores del inventario de la asistencia técnica de UCS y en la lista de detalles de FRU <UCS Tech Support > var > Inventory-all>.

Adapter List
slot-number: MLOM
serial-number: FCH2328764C
card-type: 81
asic-type: 1
product-id: UCSC-MLOM-C40Q-03
asic-name: cruz
hw-part-no: 73-17793-06
hw-revision: 3
i2cLogicalBus: 112
new-card: no
active: no
standby-power: no
overtemp-condition: no
fan-running: no
ncsiPackageId: 1
eth-interface: eth0
bmc-mac0: 2c:f8:9b:29:7d:de
bmc-mac1: 2c:f8:9b:29:7d:df
cruz-mac: 2c:f8:9b:29:7d:c2
ipAddress: 127.16.3.1
remoteIPAddress: 127.16.3.2
virtual-eth-if: eth0_m3.4043
actions-blocked: yes
capabilities: 0x1
diagnostic-mode: no
UCSM-mode: Standalone
description:
...
FRU Details
FRU_MLOM(ID8)
Board Mfg : Cisco Systems Inc
Board Product : UCSC-MLOM-C40Q-03
Board Serial : FCH2328764C
Board Part Number : 73-17793-06
Board Extra : A03V04
Board Extra : 0000000000
OEM (0xUnknown (0x9)) Record

• La mLOM puede aparecer en los resultados del alcance del adaptador mLOM CLI de CIMC <show detail>.

C220-WZP2204006C /chassis # scope adapter MLOM
C220-WZP2204006C /chassis/adapter # show detail
PCI Slot MLOM:
Product Name: N/A
Serial Number: FCH22127H6J
Product ID: UCSC-MLOM-C40Q-03
Adapter Hardware Revision: 3
Current FW Version: N/A
VNTAG: N/A
FIP: N/A
LLDP: N/A
PORT CHANNEL: N/A
Configuration Pending:
Cisco IMC Management Enabled: no
VID: N/A
Vendor: N/A
Description:
Bootloader Version: N/A
FW Image 1 Version: N/A
FW Image 1 State: N/A
FW Image 2 Version: N/A
FW Image 2 State: N/A
FW Update Status: N/A
FW Update Error: N/A
FW Update Stage: N/A
FW Update Overall Progress: N/A

Pasos para la resolución de problemas

Entre cada paso, verifique si la tarjeta mLOM se puede ver en las salidas del chasis de alcance de <show pci-adapter>.

Nota: 'Not-Loaded' todavía puede aparecer en estas salidas debido al estado del servidor, en lugar de cualquier problema en la comunicación con la tarjeta mLOM.

C220-node# scope chassis
C220-node /chassis # show pci-adapter
Slot Vendor ID Device ID SubVendor ID SubDevice ID Firmware Version Product Name Option ROM Status
---------- ---------- ---------- ------------- ------------- ------------- ------------------------- ----------
MLOM 0x1137 0x0042 0x1137 0x015d 4.3(3b) Cisco UCS VIC 1387 MLOM Not-Loaded <<<<<<<<<<<<
MRAID 0x1000 0x0014 0x1137 0x020e 51.10.0-3151 Cisco 12G Modular Raid... Not-Loaded
L 0x8086 0x1563 0x1137 0x01a3 0x80000EC9... Intel X550 LOM Not-Loaded

Paso 1. Comprobar conexiones físicas

Rastree los cables desde los dos puertos de la mLOM hasta su switch de red para asegurarse de que no estén dañados. Sustituya cables y Small Form-Factor Pluggable (SFP) si es necesario.

- Desconecte y vuelva a conectar los SFP en el extremo del servidor y evalúe la conectividad mLOM.

- Desconecte y vuelva a conectar los SFP de la tarjeta mLOM y evalúe la conectividad mLOM.

Paso 2. Confirme que el BIOS tiene todos los puertos habilitados. Si no están habilitados, habilite los puertos.

Paso 2.1. Acceda al BIOS en el servidor reiniciando el servidor y haciendo clic en F2 para ingresar a la Utilidad de configuración de aplicaciones.

Paso 2.2. En el menú BIOS, navegue hasta Opciones avanzadas de LOM y PCI, y asegúrese de que Todos los puertos LOM incluidos estén habilitados.

Paso 2.3. Vaya a Detalles de inventario de ranuras PCIe. Los detalles de la tarjeta mLOM de ranura deben mostrarse allí. Por ejemplo, Falta mLOM de ranura.

Paso 3. Reinicie el CIMC

Un reinicio de CIMC solo reinicia el plano de administración de CIMC. El plano de datos del servidor no se ve afectado.

Paso 3.1. Ingrese el modo de comando CIMC, Server# scope cimc.

Paso 3.2. Reinicie el CIMC usando Server /cimc # reboot.

Paso 4. Ejecute la utilidad de actualización de host (HUU) de Cisco UCS para actualizar el UCS

Paso 4.1. Recopile la versión de firmware mediante el comando <show brief>.

Running: showBrief
Fri Dec 29 11:13:29 EST 2023
BMC Version Info
ver: 4.0(4i) <<<<<<<< Firmware Version

Paso 4.2. En el sitio web de descarga de software de Cisco, descargue la utilidad de actualización de host de Cisco UCS correspondiente a la versión del firmware de UCS.
https://software.cisco.com/download/home

Por ejemplo, para un UCS C220 M5 con la versión 4.0(4i), la versión de utilidad correcta es ucs-c220m5-huu-4.0.4i.iso.

https://software.cisco.com/download/home/286318809/type/283850974/release/4.0(4i)

Paso 4.3. Vuelva a actualizar el firmware de UCS mediante el procedimiento indicado en la sección "Actualización del firmware con la opción Actualizar todo" de la "Guía del usuario de la utilidad de actualización de host de Cisco" para el mismo servidor Cisco UCS de modelo.

Por ejemplo, para un servidor modelo UCS C220 M5, la guía para actualizar el firmware se encuentra en: https://www.cisco.com/c/en/us/td/docs/unified_computing/ucs/c/sw/lomug/2-0-x/3_0/b_huu_3_0_1/b_huu_2_0_13_chapter_011.html.

• Si el HUU genera un mensaje, aparecerá indicando "Las versiones en ejecución y empaquetadas son las mismas, omita la actualización". Durante el procedimiento de actualización, el firmware correcto ya está funcionando en este servidor UCS.

• Compruebe si el HU de Cisco muestra la presencia de la tarjeta mLOM. Este es un ejemplo de la utilidad HUU de Cisco que no muestra la tarjeta mLOM.

Paso 5. Vuelva a insertar físicamente la tarjeta adaptadora mLOM

Retire y vuelva a insertar físicamente la tarjeta adaptadora mLOM, siguiendo el procedimiento descrito en la sección "Sustitución de una tarjeta mLOM" de la "Guía de instalación y servicio del servidor" para el mismo servidor Cisco UCS de modelo.

Por ejemplo, para un servidor modelo UCS C220 M5, la guía para retirar y volver a insertar la mLOM se encuentra en: https://www.cisco.com/c/en/us/td/docs/unified_computing/ucs/c/hw/C220M5/install/C220M5/C220M5_chapter_010.html#task_zz5_h1m_3z.

Conclusión

Si se han verificado las conexiones físicas y los puertos del BIOS, se ha realizado un reinicio completo en el CIMC, el firmware del servidor se ha reinstalado con el firmware correcto y el mLOM se ha reinstalado físicamente, pero la tarjeta mLOM no aparece en las salidas de <show pci-adapter>, puede concluirse una falla de hardware mLOM. En tal caso, sustituya la tarjeta mLOM.

Información Relacionada

• Sustitución de una tarjeta mLOM - Guía de instalación y servicio del servidor Cisco UCS C220 M5
• Guía de la solución Ultra-M con CVIM, versión 6.2.bx
• Soporte Técnico y Documentación - Cisco Systems