Cluster unhealthy after automated upgrade from 2021.10

Durante a atualização automatizada do Automation Suite 2021.10, o provedor CNI é migrado do Canal para o Cilium. Esta operação requer que todos os nós sejam reiniciados. Em raras ocasiões, um ou mais nós podem não ser reinicializados com êxito, fazendo com que os pods em execução nesses nós permaneçam não íntegros.

Etapas de recuperação

1. Identifique reinicializações com falha.

   Durante a execução do Ansible, você pode ver uma saída semelhante ao seguinte snippet:

   TASK [Reboot the servers] ***************************************************************************************************************************
   fatal: [10.0.1.6]: FAILED! =>
     msg: 'Failed to connect to the host via ssh: ssh: connect to host 10.0.1.6 port 22: Connection timed out'

   Como alternativa, navegue pelos logs na máquina host Ansible, localizada em /var/tmp/uipathctl_<version>/_install-uipath.log. Se alguma reinicialização com falha for identificada, execute as etapas 2 a 4 em todos os nós.

2. Confirme se uma reinicialização é necessária em cada nó.

   Conecte-se a cada nó e execute o seguinte comando:

   ssh <username>@<ip-address>
   iptables-save 2>/dev/null | grep -i cali -c

   Se o resultado não for zero, uma reinicialização é necessária.

3. Reinicie o nó:

   sudo reboot

4. Aguarde até que o nó se torne responsivo (você deve ser capaz de fazer SSH para ele) e repita as etapas 2 a 4 em todos os outros nós.