500 errores y limitación de tasa en solicitudes S3 en ODF

Soluciones para errores 500 y limitación de tasa en solicitudes S3 en OpenShift Data Foundation, incluidos los problemas de asignación de memoria de NooBaa.

Descripción

Los servicios que envían solicitudes S3 a través de OpenShift Data Foundation (ODF) pueden encontrar limitaciones de tasa o respuestas de error interno del servidor 500. En ODF, la gestión del almacenamiento la gestiona NooBaa. Cuando el número de solicitudes supera un umbral, NooBaa asigna memoria adicional. Si esa asignación supera los límites de CPU o memoria configurados en la implementación de NooBaa, el eliminador de falta de memoria (OOM) puede terminar el pod.

Esta terminación provoca interrupciones del servicio, aceleración de solicitudes y respuestas de error.

Solución

Para abordar el problema, debes aumentar los límites de CPU y memoria y las solicitudes para la implementación de NooBaa para que pueda manejar los picos de carga de trabajo sin ser cancelado. Ajustar los límites es la resolución principal, mientras que aumentar las solicitudes ayuda a mejorar la asignación de recursos.

Lleve a cabo los pasos siguientes:

1. Recupera el BackingStore relevante ejecutando el siguiente comando:

   oc get backingstores.noobaa.io -n openshift-storage
   

2. Parche el BackingStore para aumentar los límites de recursos de CPU y memoria ejecutando el siguiente comando:

   oc patch BackingStore -n openshift-storage <backing-store-name> --type='merge' -p '{
     "spec": {
       "pvPool": {
         "resources": {
           "limits": {
             "cpu": "1000m",
             "memory": "4000Mi"
           },
           "requests": {
             "cpu": "500m",
             "memory": "500Mi"
           }
         }
       }
     }
   }'
   

BackingStore puede tardar varios minutos en volver a un estado activo después de aplicar el parche.