这种分布式文件下载方案有现成的工具解决吗？
資深大佬 : Inn0Vat10n 7
在小规格 ecs 上部署了爬虫，想要同步数据到本地但是出带宽只有 1MB （学生优惠机）速度很慢，我在想如果我买多台这样的学生机（ 10 元每月比起带宽费用便宜多了），然后并发从多台小规格机器上拉取数据，不就可以达到更高的带宽下载了吗？多台学生机通过内网传输，拆分大文件为多个分片，然后我本地再并发从多台机器同时拉取多个分片再进行组装，这样的功能有现成的工具可以实现吗？
大佬有話說 (14)
这种分布式文件下载方案有现成的工具解决吗？
-
資深大佬 : ackoly切割成多个文件，分布在多个目录，nfs 挂载多台机子，然后用 rsync 同步就可以
-
資深大佬 : opengps如果不介意费用问题，可以先把文件内网传到 oss，然后走 oss 的公网流量（付费）下载
-
資深大佬 : opengps你买多台学生机，需要分布在多个帐号下，内网并没有直接打通，所以这条路并不太好走，绕的太远了
-
資深大佬 : yuzo555@opengps 都学生机了怎么可能不介意费用问题哈哈
-
資深大佬 : Rheinmetal搞个海外 vps 试试？ 说不定爬国内资源反而快
其实数据不多的话 oss 也不贵 -
資深大佬 : bowser1701@opengps 学生机内网可以云企业网。
-
主 資深大佬 : Inn0Vat10n@opengps
@Rheinmetal
数据量比较大，买 OSS 不如加带宽 -
資深大佬 : swullingBT 做种下载就行，
-
主 資深大佬 : Inn0Vat10n10 台学生机也就 100/月，10M 带宽的单机费用。。。
-
資深大佬 : aheadlead@Inn0Vat10n #7 你也不说多少数据量…… 如果只有百来 G，妥妥的 OSS 快啊
-
資深大佬 : wjhjd163学生机不能多开
要多开得多账号
不同账号内网不通 只能走公网 -
資深大佬 : supermoonieoss 不用想了
-
主 資深大佬 : Inn0Vat10n@aheadlead 10GB/天左右
-
主 資深大佬 : Inn0Vat10n@opengps
@wjhjd163
内网不通那没办法了。。。OSS 目前看来是最优了 -