ステータスコード 500 のオブジェクトを取得できません。エラーコード: InternalError
環境
NetApp StorageGRID の略
問題
Status Code: 500; Error Code: InternalErrorアプリケーション側からでオブジェクトを取得できません。
00:00:06.074 [ERROR] call:1284 - [Attr:H20220127224229][MetaObject ID:H20220127224229/2bD548e53e0077f4ba0a8b9abe7fd5e8950at5wiRgDu] Get MetaDataObject from Netapp failed: We encountered an internal error. Please try again. (Service: Amazon S3; Status Code: 500; Error Code: InternalError; Request ID: 1643299204299971)- 該当するオブジェクトファイル は、 NetApp StorageGRID GUI の ILM オブジェクトメタデータ検索で検索できます。

bycast.logに、影響を受けるノード上の以下のようなログが表示されます。
Jan 28 01:49:19 node14 ADE: |12835068 0876556914 S3RQ %DED 2022-01-28T01:49:19.066558| NOTICE 0137 S3RQ: S3 error response: RequestId=1643334559040622, Resource=/metaobj/H20220127224229/2bD548e53e0077f4ba0a8b9abe7fd5e8950at5wiRgDu, HTTP Status Code=500, ErrorMsg=InternalError, ErrorType=Client, CustomErrorMessage={We encountered an internal error. Please try again.}, Details={unexpected error (GERR). details: ,}Jan 28 01:49:19 node14 ADE: |12835068 0876556913 HTSM %DED 2022-01-28T01:49:19.066654| NOTICE 0595 HTSM: Connection 1643334559040622/10.185.11.107 GET /metaobj/H20220127224229/2bD548e53e0077f4ba0a8b9abe7fd5e8950at5wiRgDu (child: -/-, --F--p-): Shutting down (from {876556913@12835068})Jan 28 01:49:19 node14 ADE: |12835068 0876556913 HTSM %DED 2022-01-28T01:49:19.066675| NOTICE 0638 HTSM: Connection 1643334559040622/10.185.11.107 GET /metaobj/H20220127224229/2bD548e53e0077f4ba0a8b9abe7fd5e8950at5wiRgDu (child: -/-, --FS-p-): Delaying shutdown - still processing data from networkJan 28 01:49:19 node14 ADE: |12835068 0876556913 HTSM ENCR 2022-01-28T01:49:19.067738| NOTICE 0706 HTSM: Connection 1643334559040622/10.185.11.107 GET /metaobj/H20220127224229/2bD548e53e0077f4ba0a8b9abe7fd5e8950at5wiRgDu (child: -/-, --FSC--): Network read error: end of stream- OS /var/local\log\ メッセージ に
talpa-deny、影響を受けるノード上のが表示されます。
Jan 27 14:54:01 node14 kernel: talpa-deny: Access denied while closing /var/local/rangedb/6/p/1B/09/00pxF{dm@qQ_Z0^%uFD2 on behalf of process ldr[263471/264697] owned by 1002(1002)/1000(1000) <0>