Longhorn のすべてのレプリカでエラーが発生する

説明

Longhorn レプリカがエラーステートになっていて手動で復旧する必要がある場合、ボリュームをアタッチできず、デタッチステートのままになることがあります。

ボリュームを手動で復旧する必要があるかどうかを確認するには、次のコマンドを実行します。

kubectl  logs -l app=longhorn-manager  -n longhorn-system  -c longhorn-manager --prefix=true  --tail=-1  |grep "set engine salvageRequested to true" | grep <PV NAME>kubectl  logs -l app=longhorn-manager  -n longhorn-system  -c longhorn-manager --prefix=true  --tail=-1  |grep "set engine salvageRequested to true" | grep <PV NAME>

出力例:

2023-11-20T18:22:16.667609096+11:00 time="2023-11-20T07:22:16Z" level=info msg="All replicas are failed, set engine salvageRequested to true" accessMode=rwo controller=longhorn-volume frontend=blockdev migratable=false node=rpa-suite-dev-01.it.csiro.au owner=rpa-suite-dev-01.it.csiro.au state=detaching volume=pvc-031fd6bc-9cfe-420a-9213-da38509d733a2023-11-20T18:22:16.667609096+11:00 time="2023-11-20T07:22:16Z" level=info msg="All replicas are failed, set engine salvageRequested to true" accessMode=rwo controller=longhorn-volume frontend=blockdev migratable=false node=rpa-suite-dev-01.it.csiro.au owner=rpa-suite-dev-01.it.csiro.au state=detaching volume=pvc-031fd6bc-9cfe-420a-9213-da38509d733a

解決策

この問題を修正するには、次の手順に従います。

ワークロードポッドをスケールダウンします。

次のコマンドを実行して、関連するボリュームのレプリカを見つけます。

kubectl get replicas.longhorn.io -n longhorn-system |grep <PV_NAME>kubectl get replicas.longhorn.io -n longhorn-system |grep <PV_NAME>

次のコマンドを実行して、関連する PV の replicas.longhorn.io オブジェクトを編集し、spec.failedat フィールドを空 (““) に設定します。
```
kubectl get replicas.longhorn.io -n longhorn-system |grep <PV_NAME>kubectl get replicas.longhorn.io -n longhorn-system |grep <PV_NAME>
```
ワークロードポッドをスケールアップします。