Ruby Backup gem在上传到S3时失败.37分钟后连接复位

Question

备份为250MB。我认为这不是很大，但问题似乎随着规模的扩大而增加。

从下面的备份宝石中登录。

注意时间跨度；上传大约37分钟后，我重新设置了连接。

[2015/10/30 09:20:40][message] Storage::S3 started transferring '2015.10.30.09.20.01.myapp_postgres.tar' to bucket 'myapp-backups'.
[2015/10/30 09:57:06][error]   ModelError: Backup for Back up PostgreSQL (myapp_postgres) Failed!
[2015/10/30 09:57:06][error]   An Error occured which has caused this Backup to abort before completion.
[2015/10/30 09:57:06][error]   Reason: Excon::Errors::SocketError
[2015/10/30 09:57:06][error]   Connection reset by peer

Answer 1

您是否尝试过错误处理选项，该选项会重新传输文件中失败的部分：

store_with S3 do |s3|
  s3.max_retries = 10
  s3.retry_waitsec = 30
end

同时保持区块大小较小：

store_with S3 do |s3|
  s3.chunk_size = 5 # MiB
end

您可能还想使用"拆分器"选项。

Answer 2

我想现在使用ruby xz压缩到一个较小的文件中，以便发送更压缩的文件并临时修补它，然后尝试查看

Excon.defaults[:write_timeout] = 500

或更多