アプリケーションが StorageGRID S3 バケット内の一部のファイルを読み取ることができません
環境
StorageGRID 11.5.0.3 以前
問題
- アプリケーションが StorageGRID S3 バケット内の一部のファイルを読み取ることができません。
- Spark プログラムのようなアプリケーションは、読み取り範囲を実行し
Read timed outてエラーを表示します。
例
21/11/17 17:32:44 WARN TaskSetManager: Lost task 5.0 in stage 47990.0 (TID 1953528, 10.42.63.16, executor 1): java.net.SocketTimeoutException: Failed to re-open s3a://bucket/datalake/db/its/its_sto...snappy.parquet at 1703781 on s3a://bucket/datalake/db/its/its_sto...snappy.parquet: com.amazonaws.SdkClientException: Unable to execute HTTP request: Read timed out