Utilizar la pila de supervisión

La pila de supervisión para los clústeres de Automation Suite incluye Prometheus, Grafana y AlertManager, que están integrados en la interfaz de usuario del explorador de clústeres de Rancher.

Nota:

Los fallos de los nodos pueden provocar un apagado de Kubernetes, que interrumpiría las alertas de Prometheus. Para evitar esto, recomendamos configurar una alerta independiente en el servidor RKE2.

This page describes a series of monitoring scenarios. For more details, see the official Rancher documentation on using Rancher Monitoring.

Importante:

Al utilizar recopiladores para exportar métricas a herramientas de terceros, al habilitar la supervisión de la aplicación puede interrumpir la funcionalidad de Automation Suite.

Acceso al panel de supervisión de Rancher

1. Accede al explorador de clústeres de Rancher mediante https://monitoring.{cluster_host}. La pantalla que se le presenta depende de si es la primera vez que le conectas a Rancher Server.

2. Introduzca la contraseña. La contraseña es la misma en ambos casos. Se puede recuperar con el siguiente comando:

   kubectl get secret -n cattle-system rancher-admin-password -o jsonpath='{.data.password}' | base64 -d && echo
   

   

   

3. Abra el explorador de clústeres haciendo clic en el enlace local en la página principal del servidor Rancher.

   

4. Haga clic en el menú Supervisión de la barra lateral.

   

   

Comprobación de las alertas en curso

En el cuadro de mandos Supervisión, compruebe en el panel inferior las alertas que se están generando.Las siguientes capturas de pantalla muestran varias alertas generadas actualmente.

Silenciar alertas

Si las alertas son demasiado intrusivas, puede silenciarlas. Para hacerlo, siga los siguientes pasos:

1. Selecciona el mosaico AlertManager en la esquina superior izquierda del panel Supervisión . Se mostrará la siguiente pantalla.

   

2. Busque la alerta en cuestión y seleccione Silenciar.

   

3. Rellena los detalles del Creador y del Comentario y selecciona Crear. La alerta ya no debería aparecer en el panel de supervisión ni debería comunicarse a ninguno de los receptores configurados.

Envío de alertas a un receptor externo

Se recomienda encarecidamente la instalación de un receptor externo para las alertas. De este modo, las alertas se enviarán a medida que se produzcan, en lugar de tener que actualizar el panel Supervisión para ver las últimas alertas.

For details on how to send alerts to an external receiver, see the Rancher documentation on Alertmanager Receiver Configuration.

In addition to a receiver, you must configure at least one route that uses that receiver. A route defines how alerts are grouped, and which alerts are sent to the receiver. See the Rancher documentation on Alertmanager Route Configuration.

See below for an example of how the alerts will be displayed when using the Slack receiver. Clicking the link to AlertManager will take you to the AlertManager console where alerts can be silenced and there are further links to the Prometheus expression that triggered the alert. Clicking the Runbook URL will take you to this page with specific remediation instructions. These links are also present when alerts are sent to other external receivers.

Acceso al panel de control de Grafana

On the Monitoring dashboard, click the Grafana tile. The Grafana dashboard is now displayed.

Seguimiento del grupo de servicios

Puede supervisar el grupo de servicios de Istio a través de los siguientes paneles de Grafana: Panel de grupos de Istio y Carga de trabajo de Istio.

Panel de grupos de Istio

Este panel muestra el volumen global de solicitudes, así como las tasas de error 400 y 500 en toda la malla de servicios, para el período de tiempo seleccionado. Los datos aparecen en la esquina superior derecha de la ventana. Consulte los 4 gráficos de la parte superior para obtener esta información.

También muestra la tasa de éxito inmediata durante el último minuto para cada servicio individual. Ten en cuenta que una tasa de éxito de NaN indica que el servicio no está prestando tráfico actualmente.

Panel de carga de trabajo de Istio

Este panel muestra las métricas de tráfico en el rango de tiempo seleccionado en la esquina superior derecha de la ventana.

Usa los selectores de la parte superior del panel para profundizar en cargas de trabajo específicas. Es de especial interés el espacio de nombres uipath.

La sección superior muestra las métricas generales, la sección Cargas de trabajo entrantes separa el tráfico en función del origen, y la sección Servicios salientes separa el tráfico en función del destino.

Supervisión de los volúmenes persistentes

Puede supervisar los volúmenes persistentes a través del panel Kubernetes / Volúmenes persistentes. Puede hacer un seguimiento del espacio libre y utilizado de cada volumen.

También puede comprobar el estado de cada volumen haciendo clic en el elemento Volúmenes persistentes dentro del menú Almacenamiento del Explorador de clústeres.

Supervisión de la utilización del hardware

Para marcar la utilización del hardware por nodo, puede utilizar el panel Nodos. Los datos sobre la CPU, la memoria, el disco y la red están disponibles.

Puede supervisar la utilización del hardware para cargas de trabajo específicas con el panel Kubernetes / Calcular recursos / Espacio de nombres (cargas de trabajo). Seleccione el espacio de nombres uipath para obtener los datos necesarios.

Creación de una instantánea compartible de un gráfico de Grafana

1. Selecciona la flecha que apunta hacia abajo junto al título del gráfico y luego selecciona Compartir.
2. Selecciona la pestaña Instantánea y establece el Nombre de la instantánea,Caducidad y Tiempo de espera.
3. Selecciona Publicar en snapshot.raintank.io.

Para obtener más detalles, consulte la documentación de Grafana sobre compartir paneles.

Nota:

Esta instantánea puede verse en Internet de forma pública por cualquiera que tenga el enlace.

Creación de paneles personalizados y persistentes de Grafana

For details on how to create custom persisten Grafana dashboards, see Rancher documentation.

Acceso de administrador a Grafana

El acceso de administrador a Grafana no suele ser necesario en los clústeres de Automation Suite, ya que los paneles están disponibles para el acceso de lectura de forma predeterminada a los usuarios anónimos, y la creación de paneles persistentes personalizados debe crearse utilizando las instrucciones nativas de Kubernetes vinculadas anteriormente en este documento.

No obstante, el acceso de administrador a Grafana es posible con las siguientes instrucciones.

El nombre de usuario y la contraseña predeterminados para el acceso de administrador de Grafana se pueden obtener de la siguiente manera:

kubectl get secret -n cattle-monitoring-system rancher-monitoring-grafana -o jsonpath='{.data.admin-user}' | base64 -d && echo
kubectl get secret -n cattle-monitoring-system rancher-monitoring-grafana -o jsonpath='{.data.admin-password}' | base64 -d && echo

Ten en cuenta que en los clústeres de High Availability Automation Suite, hay varios pods de Grafana para habilitar el acceso de lectura ininterrumpido en caso de fallo del nodo, así como un mayor volumen de consultas de lectura. Esto es incompatible con el acceso de administrador porque los pods no comparten el estado de la sesión y el inicio de sesión lo requiere. Para solucionar esto, el número de réplicas de Grafana debe escalarse temporalmente a 1 mientras se desea acceso de administrador. Consulta las instrucciones sobre cómo escalar el número de réplicas de Grafana:

# scale down
kubectl scale -n cattle-monitoring-system deployment/rancher-monitoring-grafana --replicas=1
# scale up
kubectl scale -n cattle-monitoring-system deployment/rancher-monitoring-grafana --replicas=2

Consulte a Prometheus

On the Monitoring Dashboard, click Prometheus Graph. A new window is displayed.

La documentación sobre las métricas disponibles está aquí:

• https://github.com/prometheus/node_exporter#enabled-by-default: conectarse a la vista previa
• https://github.com/kubernetes/kube-state-metrics/tree/master/docs#exposed-metrics - Conectar con la vista previa
• Consulte de métricas desde Prometheus (Istio)

Creación de alertas personalizadas

Puede crear alertas personalizadas utilizando una consulte de Prometheus con una expresión booleana.

1. Para ello, haga clic en Reglas de Prometheus en el menú avanzado del panel Supervisión.

   

   

2. Click Create in the upper-right corner of the window to create a new alert, and follow the Rancher documentation: PrometheusRules

3. Cuando la alerta se dispara, debe aparecer en el panel Supervisión. Además, se dirigirá a cualquiera de los receptores configurados.

Supervisión del estado de los recursos de Kubernetes

Para ver el estado de los pods, implementaciones, StatefulSets, etc., puede utilizar la interfaz de usuario del explorador de clústeres. Esta es la misma página de destino a la que se accede después de registrarse en el punto final de rancher-server. La página de inicio muestra un resumen, con detalles específicos para cada tipo de recurso a la izquierda. El selector de espacio de nombres se encuentra en la parte superior de la página. Este panel también puede sustituirse por la herramienta Lens.

Exportación de las métricas de Prometheus a un sistema externo

Prometheus utiliza la función de escritura remota de Prometheus para obtener y exportar las métricas de Prometheus a un sistema externo.

Nota:

UiPath® no admite ni mantiene las integraciones de puntos finales de escritura remota. Sin embargo, los puntos finales son compatibles con la instancia de Prometheus entregada dentro de Automation Suite.

Para configurarremote_write en un clúster de Automation Suite:

1. Connect to ArgoCD.

2. Selecciona Aplicaciones.

3. Ve a fabric-installer.

4. Abre el panel DETALLES DE LA APLICACIÓN y desactiva la autorreparación.

5. Navega hasta la aplicación rancher-monitoring.

   

6. Abra el panel DETALLES DE LA APLICACIÓN y acceda a la pestaña MANIFIESTO.

   

7. Selecciona EDITAR y navega a la sección valores > prometheus > prometheusSpec .

8. Añada las remoteWriteconfiguraciones deseadas.

   Descubre las configuraciones disponibles para la característica de escritura remota.

   

9. Guarde la nueva configuración. La aplicación rancher-monitoring muestra OutOfSync hasta que se aplique la nueva configuración.

   Nota:

   Prometheus no necesita reiniciarse para aplicar las nuevas configuraciones de escritura remota.

   

   

10. Pruebe la integración de escritura remota deseada. Vuelve al paso 8 para añadir una nueva configuración.