S3 Browserで、大容量ファイルのアップロード時にServer Unavailableと報告される
環境
- NetApp StorageGRID
- ベアメタルベースのノード
- S3 Browser(他のアプリケーションに影響する可能性があります)
問題
S3 Browserに大容量ファイルをアップロードしようとすると、S3 Browserから""と表示される
Server unavailable
Bycast.log
レポート:Jul 1317:23:20 <nodename> ADE: |12563451 0477510131 S3RQ CSEN2023-07-13T17:23:20.726909| NOTICE 0089 e7693aca94f3d63 S3RQ: S3error response: RequestId=1689181912355014, TraceId=e7693aca94f3d63,Resource=/<filename>?partNumber=1&uploadId=0L2rrN9oJwNo9PRW58zM0vZAafdv5gcFtolZ0vL1u8v8m5UDqP0fQuU_jw,HTTP Method=PUT, HTTP Status Code=503, X-Forwarded-For: '<ip address>',ErrorMsg=ServiceUnavailable, ErrorType=Internal,CustomErrorMessage={<none>}, Details={Failed to execute cql at consistency TWO: SELECT * FROM storagegrid.s3_multipart_uploads_by_bucket WHEREbucket_id = '245C45D6-219D-11EE-88A1-D3E000B7D9E5' AND key ='<filename>' AND upload_id ='0L2rrN9oJwNo9PRW58zM0vZAafdv5gcFtolZ0vL1u8v8m5UDqP0fQuU_jw' - Cassandra DriverError(Read timeout):'Operation timed out - received only 5 responses.' DetailedInfo:[consistency: ALL, responses_received: 5, responses_required: 6,data_present: 1]}
Cassandra
system.log
がノードの稼働/停止を報告しているINFO [GossipTasks:1] <date><time> Gossiper.java (line 1260) InetAddress /<ip address> is now DOWN
INFO [GossipTasks:1] <date><time> Gossiper.java (line 1260) InetAddress /<ip address> is now UP
[Support]>[Diagnostics]を実行すると、サーバノードから高いディスクレイテンシ(最大秒)が報告される