Ultra-M isolatie en vervanging van mislukte diskette uit CEPH/Storage Cluster - vEPC

Downloadopties

  • PDF     (196.0 KB)
    Met Adobe Reader op diverse apparaten bekijken
  • ePub     (1.0 MB)
    Bekijken in diverse apps op iPhone, iPad, Android, Sony Reader of Windows Phone
  • Mobi (Kindle)     (742.1 KB)
    Op Kindle-apparaat of via Kindle-app op meerdere apparaten bekijken
Bijgewerkt:23 augustus 2018
Document-id:213588

Inclusief taalgebruik

De documentatie van dit product is waar mogelijk geschreven met inclusief taalgebruik. Inclusief taalgebruik wordt in deze documentatie gedefinieerd als taal die geen discriminatie op basis van leeftijd, handicap, gender, etniciteit, seksuele oriëntatie, sociaaleconomische status of combinaties hiervan weerspiegelt. In deze documentatie kunnen uitzonderingen voorkomen vanwege bewoordingen die in de gebruikersinterfaces van de productsoftware zijn gecodeerd, die op het taalgebruik in de RFP-documentatie zijn gebaseerd of die worden gebruikt in een product van een externe partij waarnaar wordt verwezen. Lees meer over hoe Cisco gebruikmaakt van inclusief taalgebruik.

Over deze vertaling

Cisco heeft dit document vertaald via een combinatie van machine- en menselijke technologie om onze gebruikers wereldwijd ondersteuningscontent te bieden in hun eigen taal. Houd er rekening mee dat zelfs de beste machinevertaling niet net zo nauwkeurig is als die van een professionele vertaler. Cisco Systems, Inc. is niet aansprakelijk voor de nauwkeurigheid van deze vertalingen en raadt aan altijd het oorspronkelijke Engelstalige document (link) te raadplegen.

    Inleiding

    In dit document worden de stappen beschreven die moeten worden uitgevoerd om OSD-schijf te isoleren en te vervangen van Ceph/Storage-cluster die op Object Storage Disk (OSD) is geïnstalleerd in een Ultra-M instelling.

    Achtergrondinformatie

    Ultra-M is een voorverpakte en gevalideerde gevirtualiseerde mobiele pakketoplossing die is ontworpen om de plaatsing van VPN’s te vereenvoudigen. OpenStack is de Gevirtualiseerde Infrastructuur Manager (VIM) voor Ultra-M en bestaat uit deze knooppunten:

    • berekenen
    • OSD - Compileren
    • Controller
    • OpenStack Platform - Director (OSPF)

    De hoge architectuur van Ultra-M en de betrokken onderdelen zijn in deze afbeelding weergegeven:

    213588-ultra-m-isolation-and-replacement-of-fai-00.pngUltraM-architectuurDit document is bedoeld voor het Cisco-personeel dat bekend is met het Cisco Ultra-M-platform en bevat informatie over de stappen die moeten worden uitgevoerd op OpenStack niveau op het moment dat de OSPF-server wordt vervangen.

    Opmerking: De Ultra M 5.1.x release wordt overwogen om de procedures in dit document te definiëren.

    Afkortingen

    VNF   Virtuele netwerkfunctie
    CF    Bedieningsfunctie
    SF    Service-functie
    ESC   Elastic Service Controller
    MOP   Procedure
    OSD   Objectopslaglocaties
    HDD   Station vaste schijf
    SSD   Solid State Drive
    VIM   Virtual-infrastructuurbeheer
    VM    Virtuele machine
    EM    Element Manager
    UAS   Ultra Automation Services
    UUID   Universele unieke ID-versterker



    Werkstroom van de MoP

    213588-ultra-m-isolation-and-replacement-of-fai-01.png

      

    Voorwaarde voor gezondheidscontroles

    1. Gebruik de opdracht Ceph-disklijst om te begrijpen hoe OSD in Journal in kaart wordt gebracht en om te identificeren welke schijf moet worden geïsoleerd en vervangen.

    [heat-admin@pod1-osd-compute-3 ~]$ sudo ceph-disk list
    /dev/sda :
     /dev/sda1 other, iso9660
     /dev/sda2 other, xfs, mounted on /
    /dev/sdb :
     /dev/sdb1 ceph journal, for /dev/sdc1
     /dev/sdb3 ceph journal, for /dev/sdd1
     /dev/sdb2 ceph journal, for /dev/sde1
     /dev/sdb4 ceph journal, for /dev/sdf1
    /dev/sdc :
     /dev/sdc1 ceph data, active, cluster ceph, osd.1, journal /dev/sdb1
    /dev/sdd :
    /dev/sdd1 ceph data, active, cluster ceph, osd.7, journal /dev/sdb3
    /dev/sde :
     /dev/sde1 ceph data, active, cluster ceph, osd.4, journal /dev/sdb2
    /dev/sdf :
     /dev/sdf1 ceph data, active, cluster ceph, osd.10, journal /dev/sdb4

    2. Controleer de Ceph-gezondheids- en OSD-boommapping voordat u doorgaat met het geïdentificeerde OSD-diskisolatie.

    [heat-admin@pod1-osd-compute-3 ~]$ sudo ceph -s
        cluster eb2bb192-b1c9-11e6-9205-525400330666
         health HEALTH_OK
                1 mons down, quorum 0,1 pod1-controller-0,pod1-controller-1
         monmap e1: 3 mons at {pod1-controller-0=11.118.0.10:6789/0,pod1-controller-1=11.118.0.11:6789/0,pod1-controller-2=11.118.0.12:6789/0}
                election epoch 28, quorum 0,1 pod1-controller-0,pod1-controller-1
         osdmap e709: 12 osds: 12 up, 12 in
                flags sortbitwise,require_jewel_osds
          pgmap v941813: 704 pgs, 6 pools, 490 GB data, 163 kobjects
                1470 GB used, 11922 GB / 13393 GB avail
                     704 active+clean
      client io 58580 B/s wr, 0 op/s rd, 7 op/s wr
    [heat-admin@pod1-osd-compute-3 ~]$ sudo ceph osd tree
    ID WEIGHT   TYPE NAME                   UP/DOWN REWEIGHT PRIMARY-AFFINITY 
    -1 13.07996 root default                                                  
    -2  4.35999     host pod1-osd-compute-0                                   
     0  1.09000         osd.0                    up  1.00000          1.00000 
     3  1.09000         osd.3                    up  1.00000          1.00000 
     6  1.09000         osd.6                    up  1.00000          1.00000 
     9  1.09000         osd.9                    up  1.00000          1.00000 
    -3        0     host pod1-osd-compute-1                                   
    -4  4.35999     host pod1-osd-compute-2                                   
     2  1.09000         osd.2                    up  1.00000          1.00000 
     5  1.09000         osd.5                    up  1.00000          1.00000 
     8  1.09000         osd.8                    up  1.00000          1.00000 
    11  1.09000         osd.11                   up  1.00000          1.00000 
    -5  4.35999     host pod1-osd-compute-3                                   
     1  1.09000         osd.1                    up  1.00000          1.00000 
     4  1.09000         osd.4                    up  1.00000          1.00000 
     7  1.09000         osd.7                    up  1.00000          1.00000 
    10  1.09000         osd.10                   up  1.00000          1.00000

    Oplossing en verwijdering van defecte OSD-schijf uit het cluster

    1. Schakel het OSD-proces uit en stop.

    [heat-admin@pod1-osd-compute-3 ~]$ sudo systemctl disable ceph-osd@7
    [heat-admin@pod1-osd-compute-3 ~]$ sudo systemctl stop ceph-osd@7

    2. Mark de OSD out.

    [heat-admin@pod1-osd-compute-3 ~]$ sudo su

    [root@pod1-osd-compute-3 heat-admin]# ceph osd set noout
    set noout

    [root@pod1-osd-compute-3 heat-admin]# ceph osd set norebalance 
    set norebalance

    [root@pod1-osd-compute-3 heat-admin]# ceph osd out 7
    marked out osd.7.

    Opmerking: Wacht tot de gegevensherbalans is voltooid en alle PG's zijn terug naar active+clean om problemen te voorkomen.

    3. Controleer of de OSD is gemarkeerd en wacht tot de Ceph opnieuw in evenwicht is.

    [root@pod1-osd-compute-3 heat-admin]# watch -n1 ceph -s                                                                                                                                                                                                                                      
                      95 active+undersized+degraded+remapped+wait_backfill
                      28 active+recovery_wait+degraded
                       2 active+undersized+degraded+remapped+backfilling
                       1 active+recovering+degraded
                       2 active+undersized+degraded+remapped+backfilling                                                                                                                                                                                                                                                
                       1 active+recovering+degraded
                       2 active+undersized+degraded+remapped+backfilling
                      67 active+undersized+degraded+remapped+wait_backfill                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          
                       3 active+undersized+degraded+remapped+backfilling                                                                                                                                                                                                                                                       
                      24 active+undersized+degraded+remapped+wait_backfill
                      22 active+undersized+degraded+remapped+wait_backfill                                                                                                                                                                                                                                      
                       1 active+undersized+degraded+remapped+backfilling
                       8 active+undersized+degraded+remapped+wait_backfill

     4. Verwijder de verificatiesleutel van de OSD.

    [root@pod1-osd-compute-3 heat-admin]# ceph auth del osd.7
    updated

    5. Bevestig dat de sleutels voor OSD.7 niet in de lijst staan.


    [root@pod1-osd-compute-3 heat-admin]# ceph auth list
    installed auth entries:

    osd.0
            key: AQCgpB5blV9dNhAAzDN1SVdnuJyTN2f7PAdtFw==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.1
            key: AQBdwyBbbuD6IBAAcvG+oQOz5vk62faOqv/CEw==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.10
            key: AQCwwyBb7xvHJhAAZKPprXWT7UnvnAXBV9W2rg==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.11
            key: AQDxpB5b9/rGFRAAkcCEkpSN1YZVDdeW+Bho7w==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.2
            key: AQCppB5btekoNBAAACoWpDz0VL9bZfyIygDpBQ==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.3
            key: AQC4pB5bBaUlORAAhi3KPzetwvWhYGnerAkAsg==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.4
            key: AQB1wyBbvMIQLRAAXefFVnZxMX6lVtObQt9KoA==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.5
            key: AQDBpB5buKHqOhAAW1Q861qoYqW6fAYHlOxsLg==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.6
            key: AQDQpB5b1BveFxAAfCLM3tvDUSnYneutyTmaEg==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.8
            key: AQDZpB5bd4nlGRAAkkzbmGPnEDAWV0dUhrhE6w==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    osd.9
            key: AQDopB5bKCZPGBAAfYtp1GLA7QIi/YxJa8O1yw==
            caps: [mon] allow profile osd
            caps: [osd] allow *
    client.admin
            key: AQDpmx5bAAAAABAA3hLK8O2tGgaAK+X2Lly5Aw==
            caps: [mds] allow *
            caps: [mon] allow *
            caps: [osd] allow *
    client.bootstrap-mds
            key: AQBDpB5bjR1GJhAAB6CKKxXulve9WIiC6ZGXgA==
            caps: [mon] allow profile bootstrap-mds
    client.bootstrap-osd
            key: AQDpmx5bAAAAABAA3hLK8O2tGgaAK+X2Lly5Aw==
            caps: [mon] allow profile bootstrap-osd
    client.bootstrap-rgw
            key: AQBDpB5b7OWXHBAAlATmBAOX/QWW+2mLxPqlkQ==
            caps: [mon] allow profile bootstrap-rgw
    client.openstack
            key: AQDpmx5bAAAAABAAULxfs9cYG1wkSVTjrtiaDg==
            caps: [mon] allow r
            caps: [osd] allow class-read object_prefix rbd_children, allow rwx pool=volumes, allow rwx pool=backups, allow rwx pool=vms, allow rwx pool=images, allow rwx pool=metrics

    7. Verwijder de OSD uit het cluster.

    [root@pod1-osd-compute-3 heat-admin]# ceph osd rm 7
    removed osd.7

    8. Koppel de OSD-schijf los die moet worden vervangen.

    [root@pod1-osd-compute-3 heat-admin]# umount /var/lib/ceph/osd/ceph-7

    9. Laat de rubberen los en doe de riem.

    [root@pod1-osd-compute-3 heat-admin]# ceph osd unset noscrub
    unset noscrub

    [root@pod1-osd-compute-3 heat-admin]# ceph osd unset nodeep-scrub
    unset nodeep-scrub

    10. Controleer de gezondheid van Ceph en wacht tot je gezond bent, en alle PG's weer actief+clean zijn.

    [root@pod1-osd-compute-3 heat-admin]# ceph -s
        cluster eb2bb192-b1c9-11e6-9205-525400330666
         health HEALTH_WARN
                28 pgs backfill_wait
                4 pgs backfilling
                5 pgs degraded
                5 pgs recovery_wait
                83 pgs stuck unclean
                recovery 1697/516881 objects degraded (0.328%)
                recovery 76428/516881 objects misplaced (14.786%)
                noout,norebalance,sortbitwise,require_jewel_osds flag(s) set
                1 mons down, quorum 0,1 pod1-controller-0,pod1-controller-1
         monmap e1: 3 mons at {pod1-controller-0=11.118.0.10:6789/0,pod1-controller-1=11.118.0.11:6789/0,pod1-controller-2=11.118.0.12:6789/0}
                election epoch 28, quorum 0,1 pod1-controller-0,pod1-controller-1
         osdmap e877: 11 osds: 11 up, 11 in; 193 remapped pgs
                flags noout,norebalance,sortbitwise,require_jewel_osds
          pgmap v942974: 704 pgs, 6 pools, 490 GB data, 163 kobjects
                1470 GB used, 10806 GB / 12277 GB avail
                1697/516881 objects degraded (0.328%)
                76428/516881 objects misplaced (14.786%)
                     511 active+clean
                     156 active+remapped
                      28 active+remapped+wait_backfill
                       5 active+recovery_wait+degraded+remapped
                       4 active+remapped+backfilling
      client io 331 kB/s wr, 0 op/s rd, 56 op/s wr

    OSD-schijf vervangen en nieuwe VD maken

    1. Verwijder het foutieve station en vervang het door een nieuw station: Cisco UCS C240 M4-serverinstallatie en -servicegids.

    2. Controleer het inloggen bij CIMC van de OSD-Computatie en controleer de sleuf waar OSD wordt vervangen en laat deze in goede gezondheid zien.

    3. Maak een Virtual Drive voor een nieuwe HDD, het moet een verse HDD zijn zonder metadata.

    4. Controleer dat de nieuwe schijf in de toestand Ongeconstrueerd goed is.

    213588-ultra-m-isolation-and-replacement-of-fai-02.pngOpslag > Cisco 12G SAS modulaire controller (SLOT-HBA) > Physical Drive-informatie

     5. Selecteer de optie Virtual Drive maken vanaf ongebruikte fysieke stuurprogramma's om de VD te maken.

    213588-ultra-m-isolation-and-replacement-of-fai-03.pngOpslag > Cisco 12G SAS modulaire controller (SLOT-HBA)

    6. Gebruik Physical Drive 9 om een nieuwe VD te maken en noem het op OSD3.

    213588-ultra-m-isolation-and-replacement-of-fai-04.pngOpslag > Cisco 12G SAS modulaire controller (SLOT-HBA) > Controller informatie > Virtual Drive maken vanaf ongebruikte fysieke stuurprogramma’s

    213588-ultra-m-isolation-and-replacement-of-fai-05.pngOpslag > Cisco 12G SAS modulaire controller (SLOT-HBA) > Controller informatie > Virtual Drive maken vanaf ongebruikte fysieke stuurprogramma’s

    7. IPMI via LAN inschakelen: Admin > Communicatieservices > Communicatieservices.

    213588-ultra-m-isolation-and-replacement-of-fai-06.pngIPMI via LAN inschakelen: Admin > Communicatieservices > Communicatieservices

    8. Schakel hyperthreading uit: Compute > configuratiescherm > Geavanceerd > processorconfiguratie.

    213588-ultra-m-isolation-and-replacement-of-fai-07.pnghyperthreading uitschakelen: Compileren > configuratiescherm > Geavanceerd > processorconfiguratie

    Opmerking: Het beeld dat hier wordt getoond en de configuratiestappen die in dit gedeelte worden beschreven, zijn gebaseerd op versie 3.0(3e) van de firmware en er kunnen kleine variaties zijn als u aan andere versies werkt.

    Voeg back-up toe aan de OSD in de Cluster

    1. Nadat een nieuwe schijf is vervangen, voert u partprobe uit om het nieuwe apparaat te ontdekken.

    [root@pod1-osd-compute-3 heat-admin]# partprobe 
    [root@pod1-osd-compute-3 heat-admin]# lsblk
    NAME   MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
    sda      8:0    0 278.5G  0 disk 
    |
     -sda1   8:1    0     1M  0 part 
     -sda2   8:2    0 278.5G  0 part /
    sdb      8:16   0 446.1G  0 disk 
    |
     -sdb1   8:17   0   107G  0 part 
     -sdb2   8:18   0   107G  0 part 
     -sdb3   8:19   0   107G  0 part 
     -sdb4   8:20   0   107G  0 part 
    sdc      8:32   0   1.1T  0 disk 
    |
     -sdc1   8:33   0   1.1T  0 part /var/lib/ceph/osd/ceph-1
    sdd 8:48   0   1.1T  0 disk 
    |
     -sdd1   8:49   0   1.1T  0 part 
    sde      8:64   0   1.1T  0 disk 
    |
     -sde1   8:65   0   1.1T  0 part /var/lib/ceph/osd/ceph-4
    sdf      8:80   0   1.1T  0 disk 
    |
     -sdf1   8:81   0   1.1T  0 part /var/lib/ceph/osd/ceph-10

     2. Vind een apparaat dat op de server beschikbaar is.

    [root@pod1-osd-compute-3 heat-admin]# fdisk -l

    Disk /dev/sda: 299.0 GB, 298999349248 bytes, 583983104 sectors
    Units = sectors of 1 * 512 = 512 bytes
    Sector size (logical/physical): 512 bytes / 512 bytes
    I/O size (minimum/optimal): 512 bytes / 512 bytes
    Disk label type: dos
    Disk identifier: 0x000b5e87

       Device Boot      Start         End      Blocks   Id  System
    /dev/sda1            2048        4095        1024   83  Linux
    /dev/sda2   *        4096   583983070   291989487+  83  Linux
    WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

    Disk /dev/sdb: 479.0 GB, 478998953984 bytes, 935544832 sectors
    Units = sectors of 1 * 512 = 512 bytes
    Sector size (logical/physical): 512 bytes / 4096 bytes
    I/O size (minimum/optimal): 4096 bytes / 4096 bytes
    Disk label type: gpt


    #         Start          End    Size  Type            Name
     1         2048    224462847    107G  unknown         ceph journal
     2    224462848    448923647    107G  unknown         ceph journal
     3    448923648    673384447    107G  unknown         ceph journal
     4    673384448    897845247    107G  unknown         ceph journal
    WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

    Disk /dev/sdd: 1199.0 GB, 1198999470080 bytes, 2341795840 sectors
    Units = sectors of 1 * 512 = 512 bytes
    Sector size (logical/physical): 512 bytes / 512 bytes
    I/O size (minimum/optimal): 512 bytes / 512 bytes
    Disk label type: gpt


    #         Start          End    Size  Type            Name
     1         2048   2341795806    1.1T  unknown         ceph data
    WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

    Disk /dev/sdc: 1199.0 GB, 1198999470080 bytes, 2341795840 sectors
    Units = sectors of 1 * 512 = 512 bytes
    Sector size (logical/physical): 512 bytes / 512 bytes
    I/O size (minimum/optimal): 512 bytes / 512 bytes
    Disk label type: gpt


    #         Start          End    Size  Type            Name
     1         2048   2341795806    1.1T  unknown         ceph data
    WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

    Disk /dev/sde: 1199.0 GB, 1198999470080 bytes, 2341795840 sectors
    Units = sectors of 1 * 512 = 512 bytes
    Sector size (logical/physical): 512 bytes / 512 bytes
    I/O size (minimum/optimal): 512 bytes / 512 bytes
    Disk label type: gpt


    #         Start          End    Size  Type            Name
     1         2048   2341795806    1.1T  unknown         ceph data
    WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion.

    Disk /dev/sdf: 1199.0 GB, 1198999470080 bytes, 2341795840 sectors
    Units = sectors of 1 * 512 = 512 bytes
    Sector size (logical/physical): 512 bytes / 512 bytes
    I/O size (minimum/optimal): 512 bytes / 512 bytes
    Disk label type: gpt


    #         Start          End    Size  Type            Name
     1         2048   2341795806    1.1T  unknown         ceph data
    [root@pod1-osd-compute-3 heat-admin]#

    3. Gebruik de lijst met vaste schijf om de tijdschrift schijf te identificeren.


    [root@pod1-osd-compute-3 heat-admin]# ceph-disk list
    /dev/sda :
     /dev/sda1 other, iso9660
     /dev/sda2 other, xfs, mounted on /
    /dev/sdb :
     /dev/sdb1 ceph journal, for /dev/sdc1
     /dev/sdb3 ceph journal
     /dev/sdb2 ceph journal, for /dev/sde1
     /dev/sdb4 ceph journal, for /dev/sdf1
    /dev/sdc :
     /dev/sdc1 ceph data, active, cluster ceph, osd.1, journal /dev/sdb1
    /dev/sdd :
     /dev/sdd1 other, xfs
    /dev/sde :
    /dev/sde1 ceph data, active, cluster ceph, osd.4, journal /dev/sdb2
    /dev/sdf :
     /dev/sdf1 ceph data, active, cluster ceph, osd.10, journal /dev/sdb4

    Opmerking: In de lijst van de ceph-schijf, wordt de uitvoer die gemarkeerd is sde1 is een tijdschrift voor sdb2. Controleer de uitvoer van de lijst van de ceph-schijf en kaart de schaduwverdeling in opdracht van Ceph in. Zodra u onder de opdracht OSD.7 draait, wordt er een nieuw evenwicht in de gegevensbalans (back-up/herstel) gestart.

     4. Maak de Ceph-schijf en voeg deze terug naar het cluster.

    [root@pod1-osd-compute-3 heat-admin]#  ceph-disk --setuser ceph --setgroup ceph prepare --fs-type xfs /dev/sdd /dev/sdb3

    prepare_device: OSD will not be hot-swappable if journal is not the same device as the osd data
    Creating new GPT entries.
    The operation has completed successfully.
    meta-data=/dev/sdd1              isize=2048   agcount=4, agsize=73181055 blks
             =                       sectsz=512   attr=2, projid32bit=1
             =                       crc=1        finobt=0, sparse=0
    data     =                       bsize=4096   blocks=292724219, imaxpct=5
             =                       sunit=0      swidth=0 blks
    naming   =version 2              bsize=4096   ascii-ci=0 ftype=1
    log      =internal log           bsize=4096   blocks=142931, version=2
             =                       sectsz=512   sunit=0 blks, lazy-count=1
    realtime =none                   extsz=4096   blocks=0, rtextents=0
    Warning: The kernel is still using the old partition table.
    The new table will be used at the next reboot.
    The operation has completed successfully.



    #####Hint###
    where - sdd is new drive added as OSD 

    where – sdb3 is journal disk partition number

    mapping is sdc1 for sdc, sdd1 for sdd, sde1 for sde

    sdf1 for sdf (and so on)

    5. Activeer de ceph-disks en verwijder de rubberen vlaggen zonder diepe scheuren.

    [root@pod1-osd-compute-3 heat-admin]# ceph-disk activate-all
    [root@pod1-osd-compute-3 heat-admin]# ceph osd unset noout
    unset noout
    [root@pod1-osd-compute-3 heat-admin]# ceph osd  unset norebalance
    unset norebalance
    [root@pod1-osd-compute-3 heat-admin]# ceph osd unset noscrub
    unset noscrub
    [root@pod1-osd-compute-3 heat-admin]# ceph osd unset nodeep-scrub
    unset nodeep-scrub

    6. Wacht tot het opnieuw in balans is en controleer of de gezondheid van de Ceph- en OSD-boom goed is.

    [root@pod1-osd-compute-3 heat-admin]# watch -n 3 ceph -s 
    [heat-admin@pod1-osd-compute-3 ~]$ sudo ceph -s
        cluster eb2bb192-b1c9-11e6-9205-525400330666
         health HEALTH_OK
                1 mons down, quorum 0,1 pod1-controller-0,pod1-controller-1
         monmap e1: 3 mons at {pod1-controller-0=11.118.0.10:6789/0,pod1-controller-1=11.118.0.11:6789/0,pod1-controller-2=11.118.0.12:6789/0}
                election epoch 28, quorum 0,1 pod1-controller-0,pod1-controller-1
         osdmap e709: 12 osds: 12 up, 12 in
                flags sortbitwise,require_jewel_osds
          pgmap v941813: 704 pgs, 6 pools, 490 GB data, 163 kobjects
                1470 GB used, 11922 GB / 13393 GB avail
                     704 active+clean
      client io 58580 B/s wr, 0 op/s rd, 7 op/s wr
     
    [heat-admin@pod1-osd-compute-3 ~]$ sudo ceph osd tree
    ID WEIGHT   TYPE NAME                   UP/DOWN REWEIGHT PRIMARY-AFFINITY 
    -1 13.07996 root default                                                  
    -2  4.35999     host pod1-osd-compute-0                                   
     0  1.09000         osd.0                    up  1.00000          1.00000 
     3  1.09000         osd.3                    up  1.00000          1.00000 
     6  1.09000         osd.6                    up  1.00000          1.00000 
     9  1.09000         osd.9                    up  1.00000          1.00000                                  
    -4  4.35999     host pod1-osd-compute-2                                   
     2  1.09000         osd.2                    up  1.00000          1.00000 
     5  1.09000         osd.5                    up  1.00000          1.00000 
     8  1.09000         osd.8                    up  1.00000          1.00000 
    11  1.09000         osd.11                   up  1.00000          1.00000 
    -5  4.35999     host pod1-osd-compute-3                                   
     1  1.09000         osd.1                    up  1.00000          1.00000 
     4  1.09000         osd.4                    up  1.00000          1.00000 
     7  1.09000         osd.7                    up  1.00000          1.00000 
    10  1.09000         osd.10                   up  1.00000          1.00000
    TAC Authored

    Bijgedragen door Cisco-engineers

    • Partheeban Rajagopal
      Cisco geavanceerde services
    • Padmaraj Ramanoudjam
      Cisco geavanceerde services

    Was dit document nuttig?

    FeedbackFeedback

    Contact Cisco

    Dit document is van toepassing op deze producten