全球主机交流论坛

标题: 有偿求助 wget下载R2文件缓慢 [打印本页]

作者: radiogaga 时间: 2023-7-28 23:35
标题: 有偿求助 wget下载R2文件缓慢
本帖最后由 radiogaga 于 2023-7-28 23:38 编辑

我使用R2存储大文件，每个文件都超过1GB，使用的我的域名
我将缓存规则设置为不缓存我的文件，因为我担心我会违反CF相关条款2.8。

这是一个测试文件：https://file.1323123.xyz/dd/windows/teddysun/zh-cn_windows11_22h2.xz

我使用wget下载文件遇到了两个问题，
一个是有时我wget文件在我的vps中，速度会由20MB/s变得很慢，最后稳定在1~3MB/s。
我不知道为什么，我的vps通过bbr下载速度是1Gbps。

第二个是如何提高wget速度，我的vps带宽大部分是1Gbps，但wget R2文件速度只有20MB/s左右，接近150Mbps。
我不确定这是 wget 工具的问题，还是 cloudflare R2 的限制，还是我的 vps 的问题。

最后，我的大部分vps都是hetzner OVH digitalocean，所以我不认为vps提供商与R2的网络连接不好

请问大家有遇到过吗？20元有偿感谢各位大佬

作者: 半世烟尘 时间: 2023-7-29 00:59

root@vps52259843:~# wget https://file.1323123.xyz/dd/windows/teddysun/zh-cn_windows11_22h2.xz
--2023-07-29 00:58:10-- https://file.1323123.xyz/dd/windows/teddysun/zh-cn_windows11_22h2.xz
Resolving file.1323123.xyz (file.1323123.xyz)... 104.21.92.234, 172.67.200.26, 2606:4700:3032::6815:5cea, ...
Connecting to file.1323123.xyz (file.1323123.xyz)|104.21.92.234|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 3915518372 (3.6G) [application/x-xz]
Saving to: ‘zh-cn_windows11_22h2.xz’
zh-cn_windows11_22h2.xz 30%[==========================> ] 1.12G 20.3MB/s eta 2m 24s

复制代码

你要不查下你的硬盘IO看看？

作者: 小猪佩奇 时间: 2023-7-29 01:00
把v6关掉？或者降低v6的优先级

作者: lsin 时间: 2023-7-29 01:04

半世烟尘发表于 2023-7-29 00:59
你要不查下你的硬盘IO看看？

你这不就是楼主说的20M

作者: hardwar 时间: 2023-7-29 01:05
本帖最后由 hardwar 于 2023-7-29 01:14 编辑

如果你用 R2，那 2.8 已经是历史了。

https://blog.cloudflare.com/updated-tos/

Finally, we made it clear that customers can serve video and other large files using the CDN so long as that content is hosted by a Cloudflare service like Stream, Images, or R2. This will allow customers to confidently innovate on our Developer Platform while leveraging the speed, security, and reliability of our CDN.

最后，我们明确表示，客户可以使用 CDN 提供视频和其他大型文件，只要这些内容由 Stream、Images 或 R2 等 Cloudflare 服务托管。这将使客户能够自信地在我们的开发者平台上进行创新，同时利用我们 CDN 的速度、安全性和可靠性。

不过，这么大的文件 CF 应该也不会缓存吧。

再然后，我用斯巴达拉也是 20 MB/s，既然大家这么一致，应该是 CF 限速了吧。

作者: 半世烟尘 时间: 2023-7-29 01:09

lsin 发表于 2023-7-29 01:04
你这不就是楼主说的20M

一个是有时我wget文件在我的vps中，速度会由20MB/s变得很慢，最后稳定在1~3MB/s。

楼主是说最后稳定在1~3，我下载了一部分，一直是20左右浮动，没出现过1~3MB/s的情况

作者: czkwg8 时间: 2023-7-29 02:20
建议直接换aria2多线程下载
aria2c -s 8 -x 8

作者: radiogaga 时间: 2023-7-29 08:41

hardwar 发表于 2023-7-29 01:05
如果你用 R2，那 2.8 已经是历史了。

https://blog.cloudflare.com/updated-tos/

如果文件刚好接近500MB 给R2开启强制缓存我想可能仍然会违反条款，所以我设置的都不缓存

我使用rclone速度很快可以跑到带宽的85%，不知道是不是rclone多线程的原因

作者: radiogaga 时间: 2023-7-29 08:45

半世烟尘发表于 2023-7-29 00:59
你要不查下你的硬盘IO看看？

不会不是IO 你这速度和我一样我提工单问问吧

作者: radiogaga 时间: 2023-7-29 08:47

半世烟尘发表于 2023-7-29 01:09
楼主是说最后稳定在1~3，我下载了一部分，一直是20左右浮动，没出现过1~3MB/s的情况 ...

1~3MB/s 是偶尔出现的情况

欢迎光临全球主机交流论坛 (https://443502.xyz/)