fess-ds-s3プラグインのsoftware.amazon.awssdk:s3を2.30.33に更新したら、
Caused by: software.amazon.awssdk.core.exception.SdkClientException: Unable to execute HTTP request: fess-0.localhost (SDK Attempt Count: 4)
みたいな例外が出るようになった…。何かなと思ったら、これにあるように、endpointを指定している場合は、forcePathStyle(true)も必要になっていた。なので、追加したら解決した。