Contenido

Introducción

Prerequisites

Requirements

Componentes Utilizados

Antecedentes

Sistemas HX compatibles

Cuándo se debe utilizar

Cómo usarla

HX versión 4.5 y posterior

HX versión 4.0 y anterior

Comprender las salidas/comprobaciones realizadas

Comprobaciones realizadas por Hypercheck

Ejemplo de resultado de hipercomprobación de un clúster extendido de 4 nodos

Analizar salida de herramienta

Pasos siguientes

Comandos CLI

Información Relacionada

Introducción

Este documento describe el proceso para ejecutar la herramienta Hypercheck Health and Pre-upgrade.

Prerequisites

Requirements

Cisco le recomienda que tenga conocimiento acerca de este tema:

- Hiperflex

Componentes Utilizados

La información de este documento se basa en la herramienta Hypercheck Health y Pre-upgrade.

La información que contiene este documento se creó a partir de los dispositivos en un ambiente de laboratorio específico. Todos los dispositivos que se utilizan en este documento se pusieron en funcionamiento con una configuración verificada (predeterminada). Si tiene una red en vivo, asegúrese de entender el posible impacto de cualquier comando.

Antecedentes

Esta herramienta es una utilidad que realiza autocomprobaciones proactivas en los sistemas Hyperflex para garantizar su estabilidad y resistencia. Ayuda a automatizar una lista de comprobaciones de estado y previas a la actualización en los sistemas Hyperflex para ahorrar tiempo durante las operaciones de actualización y mantenimiento de Hyperflex.

Nota: Descargue siempre la última versión de la herramienta antes de usarla. Dado que la herramienta se mejora con frecuencia, el uso de una versión anterior puede dar lugar a la falta de comprobaciones importantes.

Sistemas HX compatibles

- Versiones de Hyperflex: 1.8, 2.0, 2.1, 2.5, 2.6, 3.0, 3.5, 4.0, 4.5, 5.0, 5.5

- Clúster estándar Hyperflex

- Clúster extendido Hyperflex

- Clúster perimetral de hiperflex (2 nodos, 3 nodos y 4 nodos)

- Solo es compatible con el clúster Hyperflex en VMWare ESXi

Nota: Para obtener información sobre cómo ejecutar Hypercheck en el clúster HyperV de Hyperflex, consulte Hypercheck: Herramienta de comprobación de estado y actualización previa de Hyperflex - HyperV.

Cuándo se debe utilizar

Los tiempos efectivos para utilizar la herramienta de comprobación de estado y preactualización de Hyperflex son:

- Antes de las actualizaciones de Hyperflex

- Comprobación del estado de Hyperflex antes y después de las ventanas de mantenimiento

- Para identificar discos/unidades fallidas

- Cuando trabaja con Cisco TAC

- Control de salud proactivo en cualquier momento

Cómo usarla

HX versión 4.5 y posterior

Paso 1. Inicie una conexión SSH a la máquina virtual del controlador de almacenamiento (SCVM) mediante la IP de administración de clústeres (CMIP), que es la IP de conexión HX.

Paso 2. Ejecute el comando hypercheck .

admin:~$ hypercheck

Paso 3. Introduzca la contraseña de administración de SCVM cuando se le solicite e introduzca la contraseña raíz de ESXi.

admin:~$ hypercheck

HX Health Check 4.5.0

Please enter below info of HX-Cluster:

Enter the HX-Cluster Root Password:

Enter the HX-Cluster Admin Password:

Enter the ESX Root Password:

HX versión 4.0 y anterior

Paso 1. DescárgueloHyperflex-Hypercheck.zipdesde la cuenta de devnet github de Cisco. Obtenga la copia más reciente que contiene las mejoras y actualizaciones más recientes.

Nota: Solo los usuarios registrados de Cisco pueden acceder a las herramientas, archivos e información internos de Cisco.

Nota: Utilice únicamente el script descargado de la cuenta de dispositivo github de Cisco.

Paso 2. Cargarlo en el SCVM con el CMIP.

Utilice el método que prefierascp/sftp/ftp/tftp- - Para copiar elHyperflex-Hypercheck.zipen el/tmpdirectorio.

Para MAC:

Realice SCP desde CLI (confirme que elHyperflex-Hypercheck.zipesté en la misma carpeta desde la que ejecuta SCP).

# scp Hyperflex-Hypercheck.zip root@

:/tmp/

.

Utilice esto para identificar la IP de administración de clústeres en su entorno HX: cuaderno de campaña de Hyperflex.

Para Windows:

Puede utilizarWINSCPpara transferir los archivos como se muestra aquí:

Paso 3. Extraiga el contenido deHyperflex-Hypercheck.zip.

Escribacd /tmppara cambiar al/tmpdirectorio.

root@SpringpathController7PVQWP6WV1:~# cd /tmp/

Escriba unzip Hyperflex-Hypercheck.zip para extraer los archivos.

root@SpringpathController7PVQWP6WV1:/tmp# unzip Hyperflex-Hypercheck.zip

Archive:  Hyperflex-Hypercheck.zip

b61c59f7962b72902692ce70548ba3d760efdf06

creating: Hyperflex-Hypercheck/

inflating: Hyperflex-Hypercheck/HXTool.py

inflating: Hyperflex-Hypercheck/LICENSE.txt

inflating: Hyperflex-Hypercheck/ReadMe.txt

inflating: Hyperflex-Hypercheck/TestInfo.txt

inflating: Hyperflex-Hypercheck/prettytable.py

inflating: Hyperflex-Hypercheck/progressbar.py

root@SpringpathController7PVQWP6WV1:/tmp#

Paso 4. Ejecute el script HXTool Python.

Escriba  cd Hyperflex-Hypercheck para navegar alHyperflex-Hypercheckdirectorio.

root@SpringpathControllerABCDE01234:/tmp# cd Hyperflex-Hypercheck

Escribapython HXTool.pypara ejecutar la secuencia de comandos.

root@SpringpathControllerABCDE01234:/tmp/Hyperflex-Hypercheck# python HXTool.py

Paso 5. Introduzca la contraseña raíz de SCVM cuando se le solicite.

Enter this information of HX-Cluster:

Enter the HX-Cluster Root Password:

Enter the ESX Root Password:

Nota: Para detener la ejecución de la secuencia de comandos, utilice la tecla (CTRL+Z) y se detiene inmediatamente.

Paso 6. La herramienta Hyperflex-Hypercheck inicia sus comprobaciones. La ejecución tarda aproximadamente de 3 a 10 minutos en completarse, lo que depende del número de nodos convergentes del clúster.

Paso 7. Obtener un informe de los resultados del script. Puede recibirlo como se muestra a continuación:

ElHypercheck Report tararchivo se guarda en/var/log/springpathy/tmp/Hyperflex-Hypercheck. Por lo tanto, puede descargar el paquete tar desde debajo de/var/log/springpatho/tmp/Hyperflex-Hypercheck. Alternativamente, puede generar y cargar un paquete storfs-support que también contenga el informe de hiperverificación tar.

Ejemplo de archivo .tar de informe:HX_Report_2020_08_30_10_43_50.tarse copia en la ruta:  /var/log/springpath.

Escribals -l | grep HX_Reportpara revisar los archivos creados por la herramienta Hyperflex-Hypercheck.

Under /var/log/springpath,

root@SpringpathControllerABCDE01234:/var/log/springpath# ls -l | grep HX_Report

-rw-r--r-- 1 root root 380K Sep 23 15:41 HX_Report_2020_08_30_10_43_50.tar

root@SpringpathControllerABCDE01234:/var/log/springpath#

Under /tmp/Hyperflex-Hypercheck,

root@SpringpathControllerABCDE01234:/tmp/Hyperflex-Hypercheck# ls

HX_Report_2020_08_30_10_43_50.tar prettytable.py HX_Report_2020_08_30_10_43_50 TestInfo.txt progressbar.py

HXTool.py prettytable.pyc ReadMe.txt progressbar.pyc LICENSE.txt

root@SpringpathControllerABCDE01234:/tmp/Hyperflex-Hypercheck#

Archivos y registros en el paquete de registros de Hypercheck:

root@SpringpathControllerABCDE01234:/tmp/Hyperflex-Hypercheck# ls HX_Report_2020_08_30_10_43_50/

HX_Tool_2020-08-30_10-43-50.log

HX_Tool_Main_Report_2020-08-30_10-54-34.txt

HX_Tool_Summary.json

Paso 8. Exporte elHX_YYYY_MM_DD_HH_MM_SS.tary compártalo con el TAC.

Utilice el método que prefiera para exportar los registros de hipercomprobación con el uso descp/sftp/ftp/tftpdesde el SCVM o simplemente descargue el paquete storfs-support que contiene el paquete tar HX_Report.

Comprender las salidas/comprobaciones realizadas

Comprobaciones realizadas por Hypercheck

La herramienta Hyperflex-Hypercheck realiza estas comprobaciones:

Hyperflex Checks: (Below checks are performed on all the storage controller VMs)

Cluster services check - Verifies the status of storfs, stMgr and stNodeMgr services

Enospc state check - Checks if the cluster space usage is above the warning threshold or no

Zookeeper check - Checks whether the Zookeeper is running or no

Exhibitor check - Verfies the status of the Exhibitor service which manages the ZK

System Disks Usage - Checks if /sda1, var/stv and /var/zookeeper is less than 80%

HDD health check - Reports if you have any blacklisted disk in your cluster

DNS check - Checks whether DNS is configured and reachable

vCenter reachability check - Checks whether the vCenter is reachable on the required ports

Timestamp check - Checks if all the controller VMs have the exact same time

NTP sync check - Checks whether NTP is reachable from the storage controller VMs and synced

Check package & versions - Checks for packages and versions on Storage Controller VMs

Check Iptables count - Checks for Iptables count on and ensure it is same on all Storage Controller VMs.

Extra pnodes check - Looks for any extra/duplicate pnode entries in the cluster

Out of memory check - Checks through the log files if the cluster had any oom event

Supported vSphere versions - Shows all the vSphere Versions supported with your current HXDP version

Permissions for /tmp  - Checks if the /tmp permissions are set correctly

Check Cluster Policy  - Checks the Configured Cluster Policy

Check springpath_keystore.jceks file - Check if All the SCVM have same keystore file

SED Capable  - Checks if the cluster is SED Capable

SED Enabled - Checks if Encryption is enabled in the Cluster

USB-0 Check - If Encryption is enabled, Checks that USB0 interface is present on all the SCVMs

SED 5100/5200 Drive Check - If we have Micron SED 5100 drives and version is below 3.5.2b, we wont be able to replace or add new 5200 drives

Disk Lock Check - If Encryption is enabled, Checks for any Locked drives

Network Checks - Checks the connectivity in Storage network

Check ZK-Cleanup-Script - Checks to identify ZKTxnCleanUp Script

Replication Checks - If replication is enabled, we check the local and remote network connectivity (HX 4.5 Only)

Stretched Cluster Checks - Checks the latency between the sites and the witness VM (HX 4.5 Only)

ESXi Checks: (Below checks are performed on each ESXI node)

HX User Account check - Verifies if the HXUser is created on all the esxi hosts and has admin rights

vMotion enabled check - Checks if the vMotion network is confirgued

Check for ESXI Failback timer - Check for ESXi Failback timer on ESXi host

Check connectivity between vmk1 and eth1 - Checks the connectivity between the Mgmt and Storage network

No extra controller vm folders check - Checks for duplicate Controller SCVM Folders

VMware Tools location check  - Checks for Non default VMware Tools location

vfat Disk Usage check - Checks for vfat Disk Usage

Check /tmp usage - Checking for /tmp usage

Compute Node Checks - All the ESXI checks are also performed on Compute nodes (HX 4.5 Only)

Ejemplo de resultado de hipercomprobación de un clúster extendido de 4 nodos

Enter this information of HX-Cluster:

Enter the HX-Cluster Root Password:

Enter the ESX Root Password:

Cluster Name: HX-10-Stretched

Site-100

Site-97

Cluster Type: STRETCH_CLUSTER

SSH connection established to HX Node: 192.168.53.135

SSH connection established to HX Node: 192.168.53.136

SSH connection established to HX Node: 192.168.53.137

SSH connection established to HX Node: 192.168.53.138

HX Cluster Nodes:

+-------+--------------+--------------------------------+

| Nodes | IP Address   | HostName                       |

+-------+--------------+--------------------------------+

| 1     | 10.39.53.134 | SpringpathControllerOHCWUK9X3N |

+-------+--------------+--------------------------------+

| 2     | 10.39.53.135 | SpringpathController37MHMEIBCY |

+-------+--------------+--------------------------------+

| 3     | 10.39.53.136 | SpringpathControllerDWRWWIBFLF |

+-------+--------------+--------------------------------+

| 4     | 10.39.53.137 | SpringpathControllerWB4UNXDKX3 |

+-------+--------------+--------------------------------+

SSH connection established to ESX Host: 10.39.53.133

SSH connection established to ESX Host: 10.39.53.130

SSH connection established to ESX Host: 10.39.53.132

SSH connection established to ESX Host: 10.39.53.131

HX Controller: 192.168.53.135

Cluster services check      [########################] COMPLETED

ZooKeeper & Exhibitor check [########################] COMPLETED

HDD health check            [########################] COMPLETED

Pre-Upgrade Check           [########################] COMPLETED

Network check               [########################] COMPLETED

HX Controller: 192.168.53.136

Cluster services check      [########################] COMPLETED

ZooKeeper & Exhibitor check [########################] COMPLETED

HDD health check            [########################] COMPLETED

Pre-Upgrade Check           [########################] COMPLETED

Network check               [########################] COMPLETED

HX Controller: 192.168.53.137

Cluster services check      [########################] COMPLETED

ZooKeeper & Exhibitor check [########################] COMPLETED

HDD health check            [########################] COMPLETED

Pre-Upgrade Check           [########################] COMPLETED

Network check               [########################] COMPLETED

HX Controller: 192.168.53.138

Cluster services check      [########################] COMPLETED

ZooKeeper & Exhibitor check [########################] COMPLETED

HDD health check            [########################] COMPLETED

Pre-Upgrade Check           [########################] COMPLETED

Network check               [########################] COMPLETED

HX Controller: 192.168.53.135

Test Summary:

+--------------------------------------+-----------+----------------------------------------------------------------+

| Name                                 | Result    | Comments                                                       |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Cluster services check               | PASS      | Checks storfs, stMgr, sstNodeMgr service running on each node. |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Enospc state check                   | PASS      | Checks if the cluster storage utilization is above threshold.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Zookeeper check                      | PASS      | Checks if Zookeeper service is running.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Exhibitor check                      | PASS      | Checks if Exhibitor in running.                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| System Disks Usage                   | PASS      | Checks if /sda1, var/stv and /var/zookeeper is less than 80%.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| HDD Health check                     | PASS      | Checks if any drive is in blacklisted state.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| DNS check                            | PASS      | Checks if configured DNS is reachable.                         |

+--------------------------------------+-----------+----------------------------------------------------------------+

| vCenter reachability check           | PASS      | Checks if vCenter is network reachable using PING.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Timestamp check                      | PASS      | Checks if the timestamp is same across all Nodes.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| NTP sync check                       | PASS      | Checks if the NTP is synced with NTP server.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check package & versions             | PASS      | Checks for count and version of HX packages on each node.      |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Iptables count                 | PASS      | Checks if the IP Table count matches on all nodes.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Extra pnodes check                   | PASS      | Checks for any stale Node entry.                               |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Memory usage check                   | PASS      | Checks for available memory more than 2GB.                     |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Incidence of OOM in the log file     | PASS      | Checks for any previous incidence of Out Of Memory Condition.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Supported vSphere versions           | 6.0.0-U3  | Prints the supported ESXi versions.                            |

|                                      | 6.5.0-U1  |                                                                |

|                                      | 6.5.0-U2  |                                                                |

|                                      | 6.5.0-U3  |                                                                |

|                                      | 6.7.0-UGA |                                                                |

|                                      | 6.7.0-U1  |                                                                |

|                                      | 6.7.0-U2  |                                                                |

|                                      | 6.7.0-U3  |                                                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check permissions for /tmp           | PASS      | Checks if the /tmp permissions are set correctly.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Cluster Policy                 | Lenient   | Checks the Configured Cluster Policy                           |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check springpath_keystore.jceks file | PASS      | All the SCVM have same keystore file.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| SED Capable                          | NO        | Checks if the cluster is SED Capable.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Witness Reachability           | PASS      | Checks Witness VM IP address is reachabile.                    |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check ZK-Cleanup-Script              | PASS      | Checks to identify ZKTxnCleanUp Script.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

HX Controller: 192.168.53.136

Test Summary:

+--------------------------------------+-----------+----------------------------------------------------------------+

| Name                                 | Result    | Comments                                                       |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Cluster services check               | PASS      | Checks storfs, stMgr, sstNodeMgr service running on each node. |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Enospc state check                   | PASS      | Checks if the cluster storage utilization is above threshold.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Zookeeper check                      | PASS      | Checks if Zookeeper service is running.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Exhibitor check                      | PASS      | Checks if Exhibitor in running.                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| System Disks Usage                   | PASS      | Checks if /sda1, var/stv and /var/zookeeper is less than 80%.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| HDD Health check                     | PASS      | Checks if any drive is in blacklisted state.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| DNS check                            | PASS      | Checks if configured DNS is reachable.                         |

+--------------------------------------+-----------+----------------------------------------------------------------+

| vCenter reachability check           | PASS      | Checks if vCenter is network reachable using PING.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Timestamp check                      | PASS      | Checks if the timestamp is same across all Nodes.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| NTP sync check                       | PASS      | Checks if the NTP is synced with NTP server.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check package & versions             | PASS      | Checks for count and version of HX packages on each node.      |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Iptables count                 | PASS      | Checks if the IP Table count matches on all nodes.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Extra pnodes check                   | PASS      | Checks for any stale Node entry.                               |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Memory usage check                   | PASS      | Checks for available memory more than 2GB.                     |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Incidence of OOM in the log file     | PASS      | Checks for any previous incidence of Out Of Memory Condition.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Supported vSphere versions           | 6.0.0-U3  | Prints the supported ESXi versions.                            |

|                                      | 6.5.0-U1  |                                                                |

|                                      | 6.5.0-U2  |                                                                |

|                                      | 6.5.0-U3  |                                                                |

|                                      | 6.7.0-UGA |                                                                |

|                                      | 6.7.0-U1  |                                                                |

|                                      | 6.7.0-U2  |                                                                |

|                                      | 6.7.0-U3  |                                                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check permissions for /tmp           | PASS      | Checks if the /tmp permissions are set correctly.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Cluster Policy                 | Lenient   | Checks the Configured Cluster Policy                           |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check springpath_keystore.jceks file | PASS      | All the SCVM have same keystore file.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| SED Capable                          | NO        | Checks if the cluster is SED Capable.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Witness Reachability           | PASS      | Checks Witness VM IP address is reachabile.                    |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check ZK-Cleanup-Script              | PASS      | Checks to identify ZKTxnCleanUp Script.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

HX Controller: 192.168.53.137

Test Summary:

+--------------------------------------+-----------+----------------------------------------------------------------+

| Name                                 | Result    | Comments                                                       |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Cluster services check               | PASS      | Checks storfs, stMgr, sstNodeMgr service running on each node. |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Enospc state check                   | PASS      | Checks if the cluster storage utilization is above threshold.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Zookeeper check                      | PASS      | Checks if Zookeeper service is running.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Exhibitor check                      | PASS      | Checks if Exhibitor in running.                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| System Disks Usage                   | PASS      | Checks if /sda1, var/stv and /var/zookeeper is less than 80%.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| HDD Health check                     | PASS      | Checks if any drive is in blacklisted state.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| DNS check                            | PASS      | Checks if configured DNS is reachable.                         |

+--------------------------------------+-----------+----------------------------------------------------------------+

| vCenter reachability check           | PASS      | Checks if vCenter is network reachable using PING.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Timestamp check                      | PASS      | Checks if the timestamp is same across all Nodes.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| NTP sync check                       | PASS      | Checks if the NTP is synced with NTP server.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check package & versions             | PASS      | Checks for count and version of HX packages on each node.      |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Iptables count                 | PASS      | Checks if the IP Table count matches on all nodes.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Extra pnodes check                   | PASS      | Checks for any stale Node entry.                               |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Memory usage check                   | PASS      | Checks for available memory more than 2GB.                     |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Incidence of OOM in the log file     | PASS      | Checks for any previous incidence of Out Of Memory Condition.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Supported vSphere versions           | 6.0.0-U3  | Prints the supported ESXi versions.                            |

|                                      | 6.5.0-U1  |                                                                |

|                                      | 6.5.0-U2  |                                                                |

|                                      | 6.5.0-U3  |                                                                |

|                                      | 6.7.0-UGA |                                                                |

|                                      | 6.7.0-U1  |                                                                |

|                                      | 6.7.0-U2  |                                                                |

|                                      | 6.7.0-U3  |                                                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check permissions for /tmp           | PASS      | Checks if the /tmp permissions are set correctly.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Cluster Policy                 | Lenient   | Checks the Configured Cluster Policy                           |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check springpath_keystore.jceks file | PASS      | All the SCVM have same keystore file.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| SED Capable                          | NO        | Checks if the cluster is SED Capable.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Witness Reachability           | PASS      | Checks Witness VM IP address is reachabile.                    |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check ZK-Cleanup-Script              | PASS      | Checks to identify ZKTxnCleanUp Script.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

HX Controller: 192.168.53.138

Test Summary:

+--------------------------------------+-----------+----------------------------------------------------------------+

| Name                                 | Result    | Comments                                                       |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Cluster services check               | PASS      | Checks storfs, stMgr, sstNodeMgr service running on each node. |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Enospc state check                   | PASS      | Checks if the cluster storage utilization is above threshold.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Zookeeper check                      | PASS      | Checks if Zookeeper service is running.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Exhibitor check                      | PASS      | Checks if Exhibitor in running.                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| System Disks Usage                   | PASS      | Checks if /sda1, var/stv and /var/zookeeper is less than 80%.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| HDD Health check                     | PASS      | Checks if any drive is in blacklisted state.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| DNS check                            | PASS      | Checks if configured DNS is reachable.                         |

+--------------------------------------+-----------+----------------------------------------------------------------+

| vCenter reachability check           | PASS      | Checks if vCenter is network reachable using PING.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Timestamp check                      | PASS      | Checks if the timestamp is same across all Nodes.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| NTP sync check                       | PASS      | Checks if the NTP is synced with NTP server.                   |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check package & versions             | PASS      | Checks for count and version of HX packages on each node.      |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Iptables count                 | PASS      | Checks if the IP Table count matches on all nodes.             |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Extra pnodes check                   | PASS      | Checks for any stale Node entry.                               |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Memory usage check                   | PASS      | Checks for available memory more than 2GB.                     |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Incidence of OOM in the log file     | PASS      | Checks for any previous incidence of Out Of Memory Condition.  |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Supported vSphere versions           | 6.0.0-U3  | Prints the supported ESXi versions.                            |

|                                      | 6.5.0-U1  |                                                                |

|                                      | 6.5.0-U2  |                                                                |

|                                      | 6.5.0-U3  |                                                                |

|                                      | 6.7.0-UGA |                                                                |

|                                      | 6.7.0-U1  |                                                                |

|                                      | 6.7.0-U2  |                                                                |

|                                      | 6.7.0-U3  |                                                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check permissions for /tmp           | PASS      | Checks if the /tmp permissions are set correctly.              |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Cluster Policy                 | Lenient   | Checks the Configured Cluster Policy                           |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check springpath_keystore.jceks file | PASS      | All the SCVM have same keystore file.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| SED Capable                          | NO        | Checks if the cluster is SED Capable.                          |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Witness Reachability           | FAIL      | Checks Witness VM IP address is reachabile.                    |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check ZK-Cleanup-Script              | PASS      | Checks to identify ZKTxnCleanUp Script.                        |

+--------------------------------------+-----------+----------------------------------------------------------------+

| Check Disk for SMART Failure.        | PASS      | Checks disks for SMART Failure.                                |

+--------------------------------------+-----------+----------------------------------------------------------------+

################################################################################

Network check:

################################################################################

ESX vmk0: 10.39.53.130, 10.39.53.131, 10.39.53.132, 10.39.53.133

ESX vmk1: 192.168.53.130, 192.168.53.131, 192.168.53.132, 192.168.53.133

SCVM eth0: 10.39.53.134, 10.39.53.135, 10.39.53.136, 10.39.53.137

SCVM eth1: 192.168.53.135, 192.168.53.136, 192.168.53.137, 192.168.53.138

ESX Host: 10.39.53.130

+--------------------------------------+--------+-------------------------------------------------+

| Name                                 | Result | Comments                                        |

+--------------------------------------+--------+-------------------------------------------------+

| HX User Account check                | PASS   | Checks if HXUSER is present.                    |

+--------------------------------------+--------+-------------------------------------------------+

| vMotion enabled check                | PASS   | Checks if vMotion is enabled on the host.       |

+--------------------------------------+--------+-------------------------------------------------+

| Check for ESXI Failback timer        | PASS   | Checks for ESXi FAILBACK timer set to 30000ms.  |

+--------------------------------------+--------+-------------------------------------------------+

| Check vmk1 ping to eth1              | PASS   | Checks Network between ESXi vmk1 and SCVM eth1. |

+--------------------------------------+--------+-------------------------------------------------+

| No extra controller vm folders check | PASS   | Checks for duplicate Controller SCVM Folders.   |

+--------------------------------------+--------+-------------------------------------------------+

| VMware Tools location check          | PASS   | Checks for Non default VMware Tools location.   |

+--------------------------------------+--------+-------------------------------------------------+

| vfat Disk Usage check                | PASS   | Checks for vfat Disk Usage.                     |

+--------------------------------------+--------+-------------------------------------------------+

| Check /tmp usage                     | PASS   | Checking for /tmp usage.                        |

+--------------------------------------+--------+-------------------------------------------------+

ESX Host: 10.39.53.131

+--------------------------------------+--------+-------------------------------------------------+

| Name                                 | Result | Comments                                        |

+--------------------------------------+--------+-------------------------------------------------+

| HX User Account check                | PASS   | Checks if HXUSER is present.                    |

+--------------------------------------+--------+-------------------------------------------------+

| vMotion enabled check                | PASS   | Checks if vMotion is enabled on the host.       |

+--------------------------------------+--------+-------------------------------------------------+

| Check for ESXI Failback timer        | PASS   | Checks for ESXi FAILBACK timer set to 30000ms.  |

+--------------------------------------+--------+-------------------------------------------------+

| Check vmk1 ping to eth1              | PASS   | Checks Network between ESXi vmk1 and SCVM eth1. |

+--------------------------------------+--------+-------------------------------------------------+

| No extra controller vm folders check | PASS   | Checks for duplicate Controller SCVM Folders.   |

+--------------------------------------+--------+-------------------------------------------------+

| VMware Tools location check          | PASS   | Checks for Non default VMware Tools location.   |

+--------------------------------------+--------+-------------------------------------------------+

| vfat Disk Usage check                | PASS   | Checks for vfat Disk Usage.                     |

+--------------------------------------+--------+-------------------------------------------------+

| Check /tmp usage                     | PASS   | Checking for /tmp usage.                        |

+--------------------------------------+--------+-------------------------------------------------+

ESX Host: 10.39.53.132

+--------------------------------------+--------+-------------------------------------------------+

| Name                                 | Result | Comments                                        |

+--------------------------------------+--------+-------------------------------------------------+

| HX User Account check                | PASS   | Checks if HXUSER is present.                    |

+--------------------------------------+--------+-------------------------------------------------+

| vMotion enabled check                | PASS   | Checks if vMotion is enabled on the host.       |

+--------------------------------------+--------+-------------------------------------------------+

| Check for ESXI Failback timer        | PASS   | Checks for ESXi FAILBACK timer set to 30000ms.  |

+--------------------------------------+--------+-------------------------------------------------+

| Check vmk1 ping to eth1              | PASS   | Checks Network between ESXi vmk1 and SCVM eth1. |

+--------------------------------------+--------+-------------------------------------------------+

| No extra controller vm folders check | PASS   | Checks for duplicate Controller SCVM Folders.   |

+--------------------------------------+--------+-------------------------------------------------+

| VMware Tools location check          | PASS   | Checks for Non default VMware Tools location.   |

+--------------------------------------+--------+-------------------------------------------------+

| vfat Disk Usage check                | PASS   | Checks for vfat Disk Usage.                     |

+--------------------------------------+--------+-------------------------------------------------+

| Check /tmp usage                     | PASS   | Checking for /tmp usage.                        |

+--------------------------------------+--------+-------------------------------------------------+

Main Report File: HX_Tool_Main_Report_2020-08-26_09-54-59.txt

Report tar file: HX_Report_2020_08_26_09_43_18.tar

Report file copied to path: /var/log/springpath

Release Notes:

https://www.cisco.com/c/en/us/support/hyperconverged-systems/hyperflex-hx-data-platform-software/products-release-notes-list.html

Upgrade Guides:

https://www.cisco.com/c/en/us/support/hyperconverged-systems/hyperflex-hx-data-platform-software/products-installation-guides-list.html

Note:

1) If upgrading to HX 4.0(2a), please review the following link and perform workaround – https://tinyurl.com/wc7j5qp

2) Please check the status of Compute nodes manually, script only verifies the config on the converged nodes.

3) Hypercheck doesnot perform FAILOVER TEST, so please ensure that the upstream is configured for network connectivity for JUMBO or NORMAL MTU size as needed.

4) If you have performed any activity on your vcenter(like upgrade, certificate replacement,etc.), it is recommended to reregister your cluster to the vcenter before performing upgrades. Refer to the Hyperflex CLI guide for relevant commands.

Analizar salida de herramienta

Pasos siguientes

- La herramienta automatiza el proceso de ejecución de comandos manuales en sistemas Hyperflex.

- Si la herramienta se ejecuta en OK y da un PASS en todas las pruebas, el sistema HX es bueno para todas las comprobaciones que ha realizado la secuencia de comandos.

- En situaciones en las que la herramienta FALLA en algunas comprobaciones o no se ejecuta correctamente, puede utilizar los comandos CLI (que se enumeran) para realizar las mismas comprobaciones en el sistema Hyperflex que las que realiza la secuencia de comandos manualmente.

- La herramienta no verifica si hay advertencias antiguas/nuevas/abiertas/resueltas y, por lo tanto, se recomienda revisar las Notas de la versión y las Guías de actualización de Hyperflex antes de cualquier actividad de actualización o mantenimiento.

Nota: No abra un caso TAC porque el script no se pudo ejecutar. Ejecute los comandos manualmente, identifique el problema y abra una SR para el problema identificado.

Comandos CLI

En Hyperflex SCVM:

SSH to All Hyperflex SCVMs-

# service_status.sh

# sysmtool --ns cluster --cmd enospcinfo

# echo srvr | nc 0 2181

# pidof exhibitor

# stcli disk list --ip <Corresponding ESXi Mgmt IP Address> |grep -B 2 -A 8 blacklisted

# stcli services dns show (and ping the IPs listed)

# ping <vCenter IP Address>

# date ; compare the time on all SCVMs. They should ideally be identical

# stcli services ntp show

# stcli cleaner info

# ntpq -p -4

# dpkg -l | grep -i springpath | grep -v storfs-support*

# sysmtool --ns disk --cmd list | grep -i blacklisted

# iptables -L -n | wc -l

# stcli cluster info

# df -h ; check that /var/stv should be less than 80%

# zgrep -i “out of memory” /var/log/springpath/debug-storfs.*

# ping -I eth0 <eth0> of all SCVMs

# ping -I eth1 <eth1> of all SCVMs

# "ls -ld /tmp" check for 775 and 777

# stcli cluster info | grep -i 'clusterAccessPolicy:' | head -1

# md5sum /etc/springpath/secure/springpath_keystore.jceks

# cat /etc/springpath/sed_capability.conf

# cat /etc/springpath/sed.conf

# cat /var/log/springpath/diskslotmap-v2.txt

# stcli cluster info | grep dataZkIp (ping dataZkIp for latency)

En sistemas ESXi:

SSH to all ESXi hosts

# esxcli system account list

# esxcli network firewall ruleset list | grep -i vMotion

# esxcli software vib list| egrep -i 'scvm|stHyper|stfs'

# chkconfig --list | grep -E 'ntpd|hostd|vpxa|stHypervisorSvc|scvmclient|hxctlvm'

# esxcfg-vmknic -l ; confirm that vMotion VMK2 is created

# vmkping -I vmk1 <eth1> of all SCVMs

# cd /vmfs/volumes/Springpath-XXXXXXXXXX ; Ensure that it has only one Folder that has the Storage Controller VM

# df -h | grep vfat  ; Ensure dir has free space

Información Relacionada

- Soporte técnico y descargas de Cisco