Todas las réplicas de Longhorn son defectuosas

Descripción

Si las réplicas de Longhorn están en un estado defectuoso y requieren recuperación manual, el volumen puede no poder adjuntar y permanecer en estado de desconexión.

Para comprobar si el volumen requiere recuperación manual, ejecuta los siguientes comandos:

kubectl  logs -l app=longhorn-manager  -n longhorn-system  -c longhorn-manager --prefix=true  --tail=-1  |grep "set engine salvageRequested to true" | grep <PV NAME>

Salida de ejemplo:

2023-11-20T18:22:16.667609096+11:00 time="2023-11-20T07:22:16Z" level=info msg="All replicas are failed, set engine salvageRequested to true" accessMode=rwo controller=longhorn-volume frontend=blockdev migratable=false node=rpa-suite-dev-01.it.csiro.au owner=rpa-suite-dev-01.it.csiro.au state=detaching volume=pvc-031fd6bc-9cfe-420a-9213-da38509d733a

Solución

Para solucionar este problema, sigue los siguientes pasos:

1. Reduce los pods de carga de trabajo.

2. Encuentra réplicas del volumen relevante ejecutando el siguiente comando:

   kubectl get replicas.longhorn.io -n longhorn-system |grep <PV_NAME>
   

3. Edita el objeto replicas.longhorn.io para el PV relevante ejecutando el siguiente comando y establece el campo spec.failedat en vacío(““).

   kubectl get replicas.longhorn.io -n longhorn-system |grep <PV_NAME>
   

4. Reduce los pods de carga de trabajo.