ACI Switch Node SSD-levensduur uitgelegd

Inleiding

In dit document wordt beschreven hoe de Solid State Drive (SSD) gedurende de levensduur werkt op ACI-switch (Application Centric Infrastructure).

Als u op deze pagina bent geland als gevolg van een SSD-fout bij Application Policy Infrastructure Controller (APIC) (niet bij een switch-knooppunt), raadpleegt u FN64329.

APIC SSD-vervangingsdocumenten voor de APIC SSD-vervangingsprocedure.

Achtergrondinformatie

ACI-knooppunten voor bladeren en wervelkolom maken gebruik van SSD’s voor opslag en vastlegging van gebeurtenissen. Alle SSD’s, ongeacht het type verkoper, hebben een vaste levensduur op basis van specifieke kenmerken die door de fabrikant zijn gedefinieerd. Sommige voorbeelden omvatten het aantal schrijfbewerkingen en wissen, evenals het volume van de gegevens die over een bepaalde periode naar de stations zijn overgebracht. De SSD-levensduur op de knooppunten van het blad en de wervelkolom kan worden uitgeput door regelmatige slijtage. Als de gebruiker geen goede actie onderneemt tegen een switch waarvan de SSD bijna op is, kan de switch crashen omdat de SSD naar de alleen-lezen modus gaat. Om deze reden is het noodzakelijk om prioriteit te geven aan SSD-vervanging als de F3073 fout tegen een gegeven knooppunt wordt opgeworpen. SSD’s zijn veldvervangbaar door Cisco gecertificeerde Field Engineer.

F3073 is geïmplementeerd in de releases 2.1(4), 2.2(4), 2.3(1o) en 3.1(2m). Alle latere softwareversies hebben de functionaliteit om F3073 te verhogen.

Opmerking: als u een ACI-softwareversie uitvoert die geen SSD-bewakingsfunctie heeft, is het sterk aangeraden om te upgraden naar een versie waar een dergelijke bewaking beschikbaar is.

Typische symptomen als de SSD niet wordt vervangen

1. Wanneer de switch niet opstart, ziet u op de console de volgende fouten:

/dev/hd-cfg0: ********** WARNING: Filesystem still has errors **********
e2fsck 1.42.1 (17-Feb-2012)
/dev/hd-cfg1: recovering journal
/sbin/e2fsck: unable to set superblock flags on /dev/hd-cfg1

2. Het systeem is in staat fouten met betrekking tot de SSD (F3073 of F3074 gebaseerd op het gebruik van de SSD-levensduur) proactief op te heffen bij latere code releases (behandeld in een latere sectie).

• F3074: fltEqptFlashFlash-minor-alarm (80% lifetime) 

• F3073: fltEqptFlashFlash-worn-out    (90% lifetime) 

3. Mogelijk ziet u ook fout F3525 verhoogd voor gebruik met hoge SSD's. Deze fout wordt vaak verward met F3073/F3074.

# fault.Inst
code : F3525
ack : no
annotation :
cause : equipment-flash-warning
changeSet : deltape (New: 21), peCycles (New: 1678), tbw (New: 32.465179), warning (New: yes)
childAction :
created : 2019-08-05T18:22:01.455-07:00
delegated : no
descr : High SSD usage observed. Please check switch activity and contact Cisco Technical Support about high SSD usage.
dn : topology/pod-1/node-206/sys/ch/supslot-1/sup/flash/fault-F3525
domain : infra
extMngdBy : undefined
highestSeverity : warning
lastTransition : 2019-08-05T18:24:02.029-07:00
lc : raised
modTs : never
occur : 1
origSeverity : warning
prevSeverity : warning
rn : fault-F3525
rule : eqpt-flash-flash-warning-alarm
severity : warning
status :
subject : flash-warning-alarm
type : operational

Fout F3525 wordt verhoogd als de P/E (programma-wissen) cycli in zeven dagen met meer dan 21 toenemen. Het betekent niet dat de SSD versleten is, simpelweg dat er een hoop karnas is die er uiteindelijk toe kan leiden dat de SSD's versleten zijn.

U moet samenwerken met het Technical Assistance Center (TAC) om te begrijpen wat de oorzaak van deze opstoot is en daar iets aan doen. Er is ook een beleid om de drempels te veranderen die veroorzaken dat F3525 wordt verhoogd voor een specifiek type SSD (zie Toegangsbeleid > Beleid > Switch > Beleid van het Config van de Flitser van het Materiaal).

Hoe de huidige gezondheid van een SSD te controleren

Er zijn twee manieren om de status van de SSD-levensduur te controleren:

• Proactieve systeemmeldingen
• Handmatige gegevensanalyse

Proactieve systeemmeldingen

Toezicht op SSD-levensduur is toegevoegd als deel van Cisco bug-id CSC88634 in deze versies van code:

• 2.1(4) en later voor 2.1 trein
• 2.2(4) en later voor 2.2 trein
• 2.3(1o) en later voor 2.3 trein
• 3.1(2m) en alle toekomstige releases

Een kleine fout wordt opgeheven wanneer de aandrijving 80% van zijn levensduur nadert en een grote fout wordt opgeheven wanneer het meer dan 90% van zijn levensduur bedraagt.

Hierdoor kunnen netwerkbeheerders switches monitoren en proactief vervangen voordat ze uitvallen als gevolg van een overschrijding van de SSD-levensduur.

• F3074: fltEqptFlash-mineur-alarm (levensduur 80%)
• F3073: fltEqptFlash-versleten (levensduur van 90%)

Eerdere versies van code hadden geen SSD-levencontrole voor switch-SSD’s. Zelfs als de switch bijna het verstrijken van de SSD naderde, zou er dus geen sprake zijn van een fout.

Handmatige gegevensanalyse

Het vastleggen van SSD-gebruik werd geïntroduceerd vanaf deze releases: 3.2(5d), 3.2(6i), 3.2(7f) en 4.1(1i).

a-leaf101# cat /mnt/pss/ssd_log_amp.log   (Tested on 4.2.3l)
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Mon Dec 16 19:00:01 EST 2019   16531370        0       29398      12350    100             0               122396965772    3825894828           60841125365               16         0.00 %              0               0
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Tue Dec 17 19:00:01 EST 2019   16531725        0       29422      12355    100             0               122447755358    3827482016           60858831240               16         0.00 %          12355      61606629993
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Wed Dec 18 19:00:01 EST 2019   16532222        0       29446      12359    100             0               122495197374    3828964594           60875667807               16         0.00 %          12359      61636366134
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Thu Dec 19 19:00:01 EST 2019   16533056        0       29470      12364    100             0               122542269672    3830435617           60892533342               16         0.00 %          12364      61666601865
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Fri Dec 20 19:00:01 EST 2019   16534010        0       29494      12367    100             0               122587126224    3831837398           60908759296               16         0.00 %          12367      61694592882
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Sat Dec 21 19:00:01 EST 2019   16535311        0       29518      12372    100             0               122631804318    3833233605           60925205662               16         0.00 %          12372      61723045022
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Sun Dec 22 19:00:01 EST 2019   16536727        0       29542      12376    100             0               122676829388    3834640654           60941741722               16         0.00 %          12376      61751623726
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Mon Dec 23 19:00:01 EST 2019   16538321        0       29566      12380    100             0               122722137414    3836056544           60958504969               16         0.00 %          12380      61780395692
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Tue Dec 24 19:00:01 EST 2019   16539858        0       29591      12384    100             0               122767087802    3837461258           60975050343               16         0.00 %          12384      61808582833
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Wed Dec 25 19:00:01 EST 2019   16541121        0       29615      12388    100             0               122812238580    3838872234           60991578411               16         0.00 %          12388      61837188237
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Thu Dec 26 19:00:01 EST 2019   16542653        0       29639      12393    100             0               122857007868    3840271286           61008101155               16         0.00 %          12393      61865429457
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Fri Dec 27 19:00:01 EST 2019   16544352        0       29663      12397    100             0               122901807026    3841671272           61024757511               16         0.00 %          12397      61893705871
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Sat Dec 28 19:00:01 EST 2019   16546213        0       29687      12401    100             0               122946927200    3843081289           61041459287               16         0.00 %          12401      61922169689
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Sun Dec 29 19:00:01 EST 2019   16549522        0       29711      12405    100             0               122991584018    3844476827           61058889999               16         0.00 %          12405      61950124731
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Mon Dec 30 19:00:01 EST 2019   16551885        0       29735      12410    100             0               123036252528    3845872732           61075846564               16         0.00 %          12410      61977362529
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Tue Dec 31 19:00:01 EST 2019   16553858        0       29759      12414    100             0               123098133082    3847806568           61093085451               16         0.00 %          12414      62022286518
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Wed Jan  1 19:00:01 EST 2020   16555127        0       29783      12418    100             0               123142018610    3849178024           61109758713               16         0.00 %          12418      62048933159
Model                     SerialNo        Software-Version               Date                           RawReadError(1) GBB(5)  UpTime(9)  PE(173)  LifeTime(202)   Attribute(210)  TBW(246)        HostPageCount(247)   BackgroundPageCount(248)  WAF        Delta_WAF    Delta_PE   Delta_TBW
Micron_M600_MTFDDAT064MBF MSA195207V1                                    Thu Jan  2 19:00:01 EST 2020   16556532        0       29808      12422    100             0               123186637556    3850572390           61126687626               16         0.00 %          12422      62076878843

Model                          SerialNo        SW-Version      Date         R.Error(1) GBB(5)     UpTime(9)  PE(173)  LifeTime(202)   Attr(210)  TBW(246)     WAF    DWAF       DPE      DTBW   
Micron_M600_MTFDDAT064MBF      MSA195207V1     14.2(3l)        2020-01-03   16557977   0          29832      12428    100             0          123278298184 16     0.00 %      0        0      
Micron_M600_MTFDDAT064MBF      MSA195207V1     14.2(3l)        2020-01-04   16558440   0          29856      12433    100             0          123323818606 16     0.00 %      5        45520422
Micron_M600_MTFDDAT064MBF      MSA195207V1     14.2(3l)        2020-01-05   16559031   0          29880      12438    100             0          123369348610 16     0.00 %      5        45530004
Micron_M600_MTFDDAT064MBF      MSA195207V1     14.2(3l)        2020-01-06   16561567   0          29904      12443    100             0          123415316270 16     0.00 %      5        45967660
Micron_M600_MTFDDAT064MBF      MSA195207V1     14.2(3l)        2020-01-07   16564701   0          29928      12448    100             0          123460483898 16     0.00 %      5        45167628
Micron_M600_MTFDDAT064MBF      MSA195207V1     14.2(3l)        2020-01-08   16565955   0          29952      12453    100             0          123505550532 16     0.00 %      5        45066634

ssd_log_amp.log bestand bevindt zich in de 1of3 switch technologie ondersteuning.

Voor extra fabrikant-gerelateerde opdrachten moeten de uitgangsrechten van een hoofdgebruiker worden overgedragen waarvoor een TAC-serviceverzoek vereist is.

Triggers die leiden tot de Switch SSD-uitputting tijdens levensduur

• In een poging om de servicemogelijkheid en het vermogen om basisoorzaak te geven voor gebeurtenissen lang nadat die gebeurtenis heeft plaatsgevonden, te waarborgen, hebben ACI APIC's en switches uitgebreide vastlegging voor elke component die persistent is aan SSD.
  
  
• Deze logboekfuncties vereisen een grote hoeveelheid schijfschrijvingen en overschrijvingen. Het vermogen van de schijven om dit te doen is niet oneindig, daarom is er een levensduur gekoppeld aan de schijf. Instabiliteit in het netwerk (een groot aantal bewegingen of beleidsupdates, enzovoort), voor een lange aanhoudende periode kan leiden tot voortijdige uitputting van een switch SSD.
  
  
• Er zijn vele verbeteringen geweest om te optimaliseren schrijft en handhaaft nut terwijl het verminderen van de hoeveelheid gegevens die aan schijf worden geschreven. Deze wijzigingen werden in verschillende versies ingevoerd. Raadpleeg het gedeelte Codeoptimalisatie.
  
  
• Voor een versie met de geïntegreerde verbeteringen van de codeoptimalisering, als u nog steeds snel SSD-verbruik zoals 2/3 P/E cyclus elke dag ervaart, is het zeer waarschijnlijk veroorzaakt door DB schrijven in plaats van registreren aangezien de meeste van hen aan RAMFS worden geschreven. Logbestanden worden alleen naar de SSD verplaatst na ZIP als rotatie vereist is.

Codeoptimalisatie

Er zijn vele verbeteringen geweest om te optimaliseren schrijft om nut te handhaven, terwijl het verminderen van de hoeveelheid gegevens die aan schijf worden geschreven. Deze wijzigingen werden in verschillende versies ingevoerd.

• Cisco bug-id CSC88634 - laat een fout zien wanneer de SSD langer meegaat dan de levensduur.
  Toegevoegd aan releases 2.1(4), 2.2(4), 2.3(1o) en 3.1(2m)
• Cisco bug-id CSCvi32353- F3073 Revision to SSD life overschreden detectielogica
• Cisco bug-id CSCvh73803 - ramfs-partitie maken voor tmp_logs om de gevolgen voor de vastlegging op SSD te verminderen
• Cisco bug-id CSCvm97108 - bug om wijzigingen in SSD-overprovisioning te volgen
• Cisco bug-id CSCvt36458 - verwijderde persistente SQL DB-laag voor switches.
  Toegevoegd aan releases 4.2(6d) en 5.1(1h)

Releases 3.2.4d en hoger en 4.x en hoger hebben alle verbeteringen voor foutbewaking en optimalisatie die vereist zijn om de levensduur van de SSD te verlengen. Dit betekent natuurlijk niet dat het upgraden naar deze releases absoluut voorkomt dat de SSD-levensduurkwestie.

Gedragsverandering herladen

Cisco bug-id CSCvt36458 heeft het verwachte gedrag van een onelegant knooppunt van de ACI-Switch gewijzigd:

Samenvattend, graceful switch herladingen blijven hun OB gebruiken bij het ophalen. Onelegante herladingen van switches vereisen nu dat alle beleid uit de APIC wordt getrokken, gelijkend op een upgrade.

Veelgestelde vragen

Kan de SSD in het veld worden vervangen?

Ja. Cisco vervangt nu SSD’s in het veld met de hulp van een gecertificeerde Field Engineer. Op modulaire Spines, wordt de volledige supervisor vervangen.

Moet u switch-hardware proactief vervangen?

TAC engineers kunnen slimme waarden controleren en evalueren welke switches meer levensduur hebben, zodat er direct vervangingen gemaakt kunnen worden voor de meest urgente switches, en dan geleidelijk aan die switches vervangen die minder urgent zijn.

Zijn er specifieke hardware-PID’s die gevoeliger zijn voor SSD-storingen?

Nee. Het gebruik van de SSD-levensduur kan variëren tussen verschillende apparaten in dezelfde omgeving. Het gebruik van de SSD-disks hangt af van hoe vaak het apparaat de logbestanden moet schrijven om gebeurtenissen te behouden. Een apparaat dat een groot aantal gebeurtenissen registreert die door netwerkinstabiliteit worden bijgedragen heeft het potentieel om zijn SSD levensduur eerder te bereiken dan anderen. Daarom bepleit Cisco de noodzaak om latere releases te gebruiken om ervoor te zorgen dat codeoptimalisatie helpt bij het controleren van de SSD schrijft en verlengt de SSD-levensduur.