Pod no se muestra después del reinicio del nodo debido a la corrupción del sistema de archivos

Descripción

Ocasionalmente, cuando se reinicia el host, el pod insights-insightslooker no se abre debido a un problema de fijación del volumen. Cuando esto sucede, la aplicación insights se queda atascada en un estado de progreso, tal y como se muestra en la siguiente imagen:

Si compruebas el pod insights-insightslooker en la IU de ArgoCD, deberías recibir el siguiente mensaje de error:

Solución

Para solucionar el problema, realiza los siguientes pasos:

1. Identifica el volumen defectuoso. En el mensaje anterior, se trata de pvc-5abe3c8f-7422-44da-9132-92be5641150a.

2. Reduce la carga de trabajo que utiliza el volumen afectado. Asegúrate de que el volumen esté separado del nodo. Para comprobar si el volumen está separado, ejecuta el siguiente comando:

   kubectl get volumes.longhorn.io -n longhorn-system |grep <PV>

3. Adjunta manualmente el volumen defectuoso a cualquier nodo de la IU de Longhorn.

4. Inicia sesión en el nodo y corrige el dispositivo correspondiente a ese volumen ejecutando el siguiente comando:

   fsck.ext4 /dev/longhorn/<ERRORED_VOLUME>

   Para obtener más detalles, consulta el siguiente ejemplo:

   

5. Después de reparar el volumen defectuoso, sepáralo del nodo. Puedes hacerlo desde la IU de Longhorn.

6. Amplía la carga de trabajo.

7. El pod debe aparecer automáticamente y, al cabo de un tiempo, quedar en buen estado.