Problemen oplossen met een UCS C-Series mLOM-kaart die niet kan communiceren met de CIMC

Inleiding

In dit document wordt beschreven hoe u problemen kunt oplossen met een Cisco UCS C-Series Rack Server mLOM-kaart die niet kan communiceren met de CIMC.

Voorwaarden

Vereisten

Er zijn geen specifieke vereisten van toepassing op dit document.

Gebruikte componenten

De informatie in dit document is gebaseerd op de volgende software- en hardware-versies:

• Cisco Unified Computing System (UCS) C220-M5 met firmwareversie 4.0(4i)
• Cisco UCS VIC 1387 met firmwareversie 4.3(3b) (Dit is de modulaire LAN On Motherboard (mLOM)-adapter)

De informatie in dit document is gebaseerd op de apparaten in een specifieke laboratoriumomgeving. Alle apparaten die in dit document worden beschreven, hadden een opgeschoonde (standaard)configuratie. Als uw netwerk live is, moet u zorgen dat u de potentiële impact van elke opdracht begrijpt.

Achtergrondinformatie

De mLOM is geïnstalleerd in de Cisco UCS-controller, computer, Object Storage Disk (OSD) Compute en ceph-nodes.

Een virtual interface card (VIC) is de adapter die dient als de mLOM-kaart in de UCS-server. 

De mLOM VIC-adapter is een in het veld vervangbare eenheid (Field Replaceable Unit, FRU) die wordt geplaatst in controller-, computer- en opslagservers, op basis van Undercloud- en Overcloud-netwerkvereisten.

• De controllerserver heeft één mLOM met twee 10GigE-poorten, één LOM met twee 1 Gb-poorten en één Gb Cisco Integrated Management Controller (CIMC)-poort.

• De computerserver heeft één mLOM met 2x10GigE-poorten, 1 LOM met 2x1Gb-poorten, 2 PCIe-kaarten in sleuven 1 en 4 met 2x10GigE en 1 GigE CIMC.

• De OSD-computerserver heeft één mLOM met 2x10GigE-poorten, 1 LOM met 2xGb-poorten en 2 PCIe-kaarten in sleuven 1 en 4 met 2x10GigE-poorten en 10GigE, 1xGb CIMC-poorten.

• De opslagserver heeft één mLOM met twee 10GigE-poorten, één LOM met twee Gb-poorten en één Gb CIMC-poort.

De mLOM-interfaces dienen Overcloud-provisioning, VNF-beheer en orkestratie door VIM-netwerkinterfaces voor verschillende netwerken te bieden. Deze netwerken kunnen externe drijvende IP-netwerken, interne API-netwerken, opslagnetwerken, opslagbeheernetwerken en huurdersnetwerken omvatten.

Problemen met de communicatie tussen het mLOM en het CIMC oplossen om functies binnen deze netwerken te helpen behouden.

Symptomen

Symptoom 1. De CIMC GUI geeft "Kan niet communiceren met de adapterkaart – mLOM" weer

Bij toegang tot de netwerk-/adapterkaart - mLOM in de UCS CIMC, geeft de GUI het bericht "Kan niet communiceren met de adapterkaart – mLOM. Laad de WebUI opnieuw om de nieuwste gegevens te verkrijgen."

Symptoom 2. De mLOM wordt niet weergegeven in de lijst met UCS-adapters

Het mLOM-item ontbreekt in de adapterlijst in het bestand UCS Tech Support met het label tech_support.frupids, dat zich bevindt in het bestandspad UCS Tech Support <TMP > tech_support.frupids>.

Onder normale omstandigheden wordt de mLOM weergegeven in de adapterlijst van UCS Tech Support tech_support_frupids.

AdapterList:
…
Slot: MLOM
Description: Cisco UCS VIC1387 Virtual Interface Card - Dual Port 40Gb QSFP+ MLOM
PID: UCSC-MLOM-C40Q-03
CPN: xxxxx
powMin: xxxxx
powMax: xxxxx
Vendor: xxxxx
Device: xxxxx
SubVendor: xxxxx
SubDevice: xxxxx

Symptoom 3. De mLOM wordt niet weergegeven in CIMC CLI Scope Chassis-uitgangen voor "scope adapter mlom"

C220-node/chassis # scope adapter mlom
Error: Managed object does not exist, use show command to list valid targets

Symptoom 4. De mLOM wordt niet gedetecteerd door de IPMI-sensoren

De mLOM-kaart wordt niet gedetecteerd door de IPMI-sensoren (Intelligent Platform Management Interface), volgens het UCS Tech Support-bestand <UCS Tech support > tmp > tech_support>.

Running: dumpIPMISensors
Querying All IPMI Sensors:
Sensor Name | Reading | Unit | Status | LNR | LC | LNC | UNC | UC | UNR |
=================|=========|==============|========|=========|=========|=========|=========|=========|=========|
MLOM_PRSNT | disc -> | discrete | 0x0280 | na | na | na | na | na | na |
MLOM_TEMP | 38.000 | degrees C | OK | na | na | na | na | 90.000 | 95.000 |

mLOM-kaart gedeeltelijke detectie

De CIMC observeert de serverinventaris via sensoren en verbindingen op het moederbord van de server, maar het besturingssysteem van de server observeert de hardware via de gegevenskanalen van de server. Aangezien de CIMC en de inventarisatie van het serverbesturingssysteem verschillende fysieke paden gebruiken om de mLOM-kaart te bewaken, kan de mLOM-kaart gedeeltelijk worden gedetecteerd of kunnen de inventarisgegevens van de CIMC andere resultaten laten zien dan het besturingssysteem van de server.

• De mLOM kan worden weergegeven in de Field Replaceable Unit (FRU) Record <UCS Tech Support > TMP > tech_support.frupids>.

====== Dumping IPMI FRU Records ======
…
FRU Device Description : FRU_MLOM (ID
Board Mfg : Cisco Systems Inc
Board Product : UCSC-MLOM-C40Q-03
Board Serial : FCH2328764C
Board Part Number : 73-17793-06
Board Extra : A03V04
Board Extra : 0000000000
OEM (0xUnknown (0x9)) Record

• De aanwezigheid van de mLOM lijkt te zijn bevestigd in de UCS Tech Support SEL Decodes <UCS Tech Support > var > sel_decode>.

Id: 757
severity: Normal
dateTime: 2023-12-29 11:08:15 EST
dateTimeOrder: 00028
description: "FRU_MLOM MLOM_PRSNT: Presence sensor for FRU_MLOM, Device Inserted / Device Present was asserted"

• Het BIOS Tech-logboek <UCS Tech Support > mnt > jffs2 > BIOS > bt > BiosTech.log> kan aantonen dat de mLOM-kaart eerder is gedetecteerd.

7:2023 Dec 29 11:04:33 EST:mLomPresent = TRUE
7:2023 Dec 29 11:04:33 EST:mLomSku = mLOM-x8

• De mLOM kan worden weergegeven in de lijst met adapters voor de UCS-inventaris van technische ondersteuning en de FRU-detaillijst <UCS Tech Support > var > inventory-all>.

Adapter List
slot-number: MLOM
serial-number: FCH2328764C
card-type: 81
asic-type: 1
product-id: UCSC-MLOM-C40Q-03
asic-name: cruz
hw-part-no: 73-17793-06
hw-revision: 3
i2cLogicalBus: 112
new-card: no
active: no
standby-power: no
overtemp-condition: no
fan-running: no
ncsiPackageId: 1
eth-interface: eth0
bmc-mac0: 2c:f8:9b:29:7d:de
bmc-mac1: 2c:f8:9b:29:7d:df
cruz-mac: 2c:f8:9b:29:7d:c2
ipAddress: 127.16.3.1
remoteIPAddress: 127.16.3.2
virtual-eth-if: eth0_m3.4043
actions-blocked: yes
capabilities: 0x1
diagnostic-mode: no
UCSM-mode: Standalone
description:
...
FRU Details
FRU_MLOM(ID8)
Board Mfg : Cisco Systems Inc
Board Product : UCSC-MLOM-C40Q-03
Board Serial : FCH2328764C
Board Part Number : 73-17793-06
Board Extra : A03V04
Board Extra : 0000000000
OEM (0xUnknown (0x9)) Record

• De mLOM kan worden weergegeven in het bereik van de CIMC CLI mLOM-adapter <details weergeven> uitgangen.

C220-WZP2204006C /chassis # scope adapter MLOM
C220-WZP2204006C /chassis/adapter # show detail
PCI Slot MLOM:
Product Name: N/A
Serial Number: FCH22127H6J
Product ID: UCSC-MLOM-C40Q-03
Adapter Hardware Revision: 3
Current FW Version: N/A
VNTAG: N/A
FIP: N/A
LLDP: N/A
PORT CHANNEL: N/A
Configuration Pending:
Cisco IMC Management Enabled: no
VID: N/A
Vendor: N/A
Description:
Bootloader Version: N/A
FW Image 1 Version: N/A
FW Image 1 State: N/A
FW Image 2 Version: N/A
FW Image 2 State: N/A
FW Update Status: N/A
FW Update Error: N/A
FW Update Stage: N/A
FW Update Overall Progress: N/A

Stappen voor probleemoplossing

Controleer tussen elke stap of de mLOM-kaart zichtbaar is in de uitvoer van het scope-chassis van <show pci-adapter>.

Opmerking: 'Niet geladen' kan nog steeds in deze uitgangen verschijnen vanwege de serverstatus, in plaats van enig probleem in de communicatie met de mLOM-kaart.

C220-node# scope chassis
C220-node /chassis # show pci-adapter
Slot Vendor ID Device ID SubVendor ID SubDevice ID Firmware Version Product Name Option ROM Status
---------- ---------- ---------- ------------- ------------- ------------- ------------------------- ----------
MLOM 0x1137 0x0042 0x1137 0x015d 4.3(3b) Cisco UCS VIC 1387 MLOM Not-Loaded <<<<<<<<<<<<
MRAID 0x1000 0x0014 0x1137 0x020e 51.10.0-3151 Cisco 12G Modular Raid... Not-Loaded
L 0x8086 0x1563 0x1137 0x01a3 0x80000EC9... Intel X550 LOM Not-Loaded

Stap 1. Fysieke verbindingen controleren

Volg de kabels van de twee poorten op de mLOM naar hun netwerkkabel om er zeker van te zijn dat ze onbeschadigd zijn. Vervang indien nodig kabels en Small Form-Factor Pluggable (SFP).

- Verbreek de verbinding met de SFP's aan het serveruiteinde en maak opnieuw verbinding en beoordeel of er mLOM-connectiviteit is.

- Koppel de SFP's op de mLOM-kaart los en sluit ze opnieuw aan en beoordeel de mLOM-connectiviteit.

Stap 2. Bevestig dat alle poorten in het BIOS zijn ingeschakeld. Als deze niet zijn ingeschakeld, schakelt u de poorten in.

Stap 2.1. Open het BIOS op de server door de server opnieuw op te starten en op F2 te klikken om het hulpprogramma Aptio Setup te openen.

Stap 2.2. Navigeer in het BIOS-menu naar Geavanceerde LOM- en PCI-opties en zorg ervoor dat alle geïntegreerde LOM-poorten zijn ingeschakeld.

Stap 2.3. Navigeer naar PCIe-sleuveninventaris. De details van de mLOM-sleufkaart moeten daar worden weergegeven. Bijvoorbeeld het ontbreken van een slot mLOM.

Stap 3. De CIMC opnieuw opstarten

Als u de CIMC opnieuw opstart, wordt alleen het CIMC-beheerplan opnieuw opgestart. Het gegevensvlak van de server wordt niet beïnvloed.

Stap 3.1. Voer de CIMC-opdrachtmodus in, Server# scope cimc.

Stap 3.2. Start de CIMC opnieuw op met Server /cimc # reboot.

Stap 4. Voer het Cisco UCS Host Upgrade Utility (HUU) uit om de UCS opnieuw te starten

Stap 4.1. Verzamel hun firmwareversie met behulp van de opdracht <kort weergeven>.

Running: showBrief
Fri Dec 29 11:13:29 EST 2023
BMC Version Info
ver: 4.0(4i) <<<<<<<< Firmware Version

Stap 4.2. Download op de website Cisco Software Download het juiste Cisco UCS Host Upgrade Utility voor de versie van de UCS-firmware.
https://software.cisco.com/download/home

Bijvoorbeeld, voor een UCS C220 M5 met versie 4.0(4i), de juiste utility versie is ucs-c220m5-huu-4.0.4i.iso.

https://software.cisco.com/download/home/286318809/type/283850974/release/4.0(4i)

Stap 4.3. Flitst de UCS-firmware opnieuw met behulp van de procedure die wordt vermeld in de sectie 'Firmware bijwerken met behulp van de optie Alles bijwerken' in de gebruikershandleiding 'Cisco Host Upgrade Utility' voor hetzelfde model Cisco UCS-server.

Voor een UCS C220 M5-modelserver is de handleiding voor het bijwerken van de firmware bijvoorbeeld te vinden op: https://www.cisco.com/c/en/us/td/docs/unified_computing/ucs/c/sw/lomug/2-0-x/3_0/b_huu_3_0_1/b_huu_2_0_13_chapter_011.html.

• Als de HUU een prompt produceert die aangeeft "Running and packaged versies are same, skip update.", tijdens de reflash-procedure, is de juiste firmware al actief op deze UCS-server.

• Controleer of de Cisco HUU de aanwezigheid van de mLOM-kaart weergeeft. Hier is een voorbeeld van het hulpprogramma Cisco HUU dat de mLOM-kaart niet weergeeft.

Stap 5. De mLOM-adapterkaart fysiek herstellen

De mLOM-adapterkaart fysiek herstellen met behulp van de procedure die wordt beschreven in 'Een mLOM-kaart vervangen' in de 'Installatie- en servicegids voor servers' voor hetzelfde model Cisco UCS-server.

Voor een UCS C220 M5-modelserver is de handleiding voor het opnieuw instellen van de mLOM bijvoorbeeld te vinden op: https://www.cisco.com/c/en/us/td/docs/unified_computing/ucs/c/hw/C220M5/install/C220M5/C220M5_chapter_010.html#task_zz5_h1m_3z.

Conclusie

Als fysieke verbindingen en BIOS-poorten zijn geverifieerd, de CIMC opnieuw is opgestart, de serverfirmware opnieuw is geflasht met de juiste firmware en de mLOM fysiek opnieuw is gemaakt, maar de mLOM-kaart niet wordt weergegeven in de uitgangen van <show pci-adapter>, kan een mLOM-hardwarefout worden afgesloten. Vervang in dat geval de mLOM-kaart.

Gerelateerde informatie

• Een mLOM-kaart vervangen - Installatie- en servicegids voor de Cisco UCS C220 M5-server
• Ultra-M oplossingsgids met CVIM, versie 6.2.bx
• Technische ondersteuning en documentatie – Cisco Systems