海外服务器约 20T 的数据怎样传回国内比较方便?

2022-03-04 11:32:43 +08:00
 laqow

一堆医学图片数据,合作学校提供了一个 HTTP 服务下载,每压缩包 300M 。 最理想大概是有人能在当地下载然后把硬盘带回来,但大概联系不到这样的人。用电信 100M 光纤直接下的话起初速度 30MBit/s ,但过一段时间会降到 2MBit/s ,感觉是网络波动降的速度。

请问这个大小的数据用哪类服务加速下载比较方便省钱?如果用 VPS 、GN2 等中转的话怎样配置?

10520 次点击
所在节点    宽带症候群
87 条回复
laqow
2022-03-04 23:43:13 +08:00
非常感谢各位朋友帮忙支招,目前计划先分配几个同学挂着下。后面按大家建议的方法逐个试一下,看看电信有没有不限流的方案或 CN2 能办理,不行再试试 AWS 、阿里 OSS 什么的。
@kandaakihito @bclerdx 唉元宇宙是这个样子的了
@jZEdn7k4 @crazydd 这么想确实是,可能也是搞个门槛。对方单个主机挂这么大个数据还是走 HTTP 的 POST 下载也是离谱。
@mobobye 谢谢,尝试一下,只是对面服务器只有一个 IP 出来没别的镜像不知道有没有用。
PatrickLe
2022-03-05 00:13:40 +08:00
2T 一个包,做成 10 个种子,种子名字改成“三上悠亚经典作品集合”这样的名字,发到 1024 、色花,然后你国内电脑可以开着 qBittorrent 这样的 BT 软件下载了,有全国的 LSP 们帮你加速下载,20T 小意思,你网速不拉胯几天就下完了,不花一分钱
zzw1998
2022-03-05 00:37:33 +08:00
直接寄 FedEx ,全球三天到,最省事不折腾
2NUT
2022-03-05 01:15:02 +08:00
@PatrickLe #62 笑了,如果不是商业数据可以一试
just1
2022-03-05 01:18:37 +08:00
10m/s 都要二十几天,更别说家宽达量限速........
kingcanfish
2022-03-05 01:46:58 +08:00
@PatrickLe 诶 别说 你他娘的还真是个天才
irainsoft
2022-03-05 01:58:40 +08:00
20T 肯定是邮寄最快了,两三天差不多就到了
HiLyy
2022-03-05 04:20:37 +08:00
可以用这个网站: https://www.backblaze.com/b2/cloud-storage-pricing.html

上传到他们网站,$5/TB/月,20T 一个月$100,然后他们家提供邮寄服务,8TB $189 ,要是把硬盘再寄回,这笔钱可以退给你。
HiLyy
2022-03-05 04:23:30 +08:00
@jsyzdej 快递怎么知道你的硬盘上没有数据,插电脑上检查每个扇区都为 0 ?
Actrace
2022-03-05 09:14:38 +08:00
tmp.link 可解,速度一般都能到 20MB/s 左右。
zzlhr
2022-03-05 10:42:49 +08:00
webrtc 传?
windyskr
2022-03-05 11:34:05 +08:00
celeron533
2022-03-05 12:24:50 +08:00
对方提供程序下载。。。NBIA 相关?
celeron533
2022-03-05 12:26:18 +08:00
另外你提到“当地人下载”,海外很多宽带限制流量,超过会减速或者额外收费。最好是在那个学校里直接内网下载搞定,再寄回。
peterpei
2022-03-05 13:53:41 +08:00
你这个程序其实是请求了不同的 range 吧,程序问题倒是没什么
所以其实解决方案很简单
Step1. 写一个 /联系对方获得每个分块的下载链接
Step2. *因为你是百兆带宽* 所以可以同时开 3 个腾讯云 hk 轻量服务器下载(上传限速 30mpbs X3 差不多你的电信也就跑满了 而且轻量服务器每月限制带宽 1TB)
Step3. 达到 1TB 的轻量服务器可以直接删掉了,两天差不多两块钱吧
这些数据差不多两天可以迁移,也就是说两天可以迁移 3TB ,不到两周就弄完
实际花销应该不到 60r
当然如果可以 py 一个千兆网,应该两三天就弄好
peterpei
2022-03-05 13:58:04 +08:00
或者租个大盘鸡用 bypy
然后就开个百度会员
levenwindy
2022-03-05 19:46:10 +08:00
@SenLief 跑不了,联通跑 onedrive 可能快一点,但是电信 200k~500k ,高峰期 50k 都有可能
wanwaneryide
2022-03-07 08:49:17 +08:00
@laqow 又不是一个文件就 20T ,现在网盘一般都有个 4 5T 的样子,下载到网盘里面的就直接下载到本地,然后删除网盘里面的文件不行嘛
laqow
2022-03-07 10:56:15 +08:00
感谢各位帮忙。问了一下电信现在没有流量限制了,应该挂着下数据量大也不会直接封号,但掉速是难免的,我估计是 TCP 协议和电信一些小动作。
@HiLyy 这个牛逼了
@PatrickLe 这根本导不出来啊
@peterpei 不是 range ,是分好块的多个文件。对方提供的程序就是根据用户名设备在本地算个 hash ,类似 http://.../?hash=..&part=..这样,只是请求参数放 POST 了,然后大概是不支持 range 了。感觉网盘应该没办法直接用 POST 请求,提速方法感觉还是需要找个好的线路或者中介 VPS 。不过好在一个块只有 300M ,把 hash 抓包下来用 curl 伪造一下可以实现多个 300M 同时下载。
@celeron533 只可惜没这样的同学,也没有直接寄硬盘的服务
@windyskr 终于知道这个盒子是什么了
ghostwwg
2022-03-07 17:34:53 +08:00
迅雷行不行。。可以的话买个 VIP

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://tanronggui.xyz/t/837904

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX