移行中にクライアントが503 AWSエラー「ServiceUnavailable」を取得しています
環境
StorageGRID
問題
- 単一のバケットへの移行中にクライアントがHTTP応答コード503を受信しています。
2024-06-18 08:34:27.731 [3485-7fe5aa300700] LOG CLOUD AWS-SDK [WARN] 2024-06-18 08:34:27.731 AWSErrorMarshaller [140624379512576] Encountered AWSError 'ServiceUnavailable': Please reduce your request rate.
2024-06-18 08:34:27.731 [3485-7fe5aa300700] LOG CLOUD AWS-SDK [ERROR] 2024-06-18 08:34:27.731 AWSClient [140624379512576] HTTP response code: 503
- 問題は、スレッドを12以上に増やすときにのみ観察されます。
- StorageGRIDが一部のノードでCPU利用率が高いと報告する。
- StorageGRIDでCassandraの高レイテンシとタイムアウトが発生します。