V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
dishangyijiao
V2EX  ›  程序员

从国外向国内传大量数据的方案

  •  
  •   dishangyijiao · 2023-11-30 22:05:42 +08:00 · 4353 次点击
    这是一个创建于 366 天前的主题,其中的信息可能已经有所发展或是发生改变。

    会有一些视频素材,需要从国外传到国内,使用国内外各大云盘的方案并不是很好,想问下有没有其他更好的方案。

    34 条回复    2023-12-04 13:45:48 +08:00
    gregy
        1
    gregy  
       2023-11-30 22:11:11 +08:00   ❤️ 1
    onedrive 或者 sharepiont 在国内国外的速度都不错。
    记得买国际版的,别买世纪互联代理的。
    我用 115 在国内外的速度感觉还可以,毕竟 115 底层是用阿里云对象存储来存数据的。
    另外建议 OP 说一下数据量,使用的地区,有没有时效要求之类的。
    herozzm
        2
    herozzm  
       2023-11-30 22:14:04 +08:00   ❤️ 5
    用中国邮政快递硬盘?
    hongfs
        3
    hongfs  
       2023-11-30 22:22:36 +08:00
    多大
    Perry
        4
    Perry  
       2023-11-30 22:25:29 +08:00 via iPhone
    找回国朋友把硬盘带回来
    cc666
        5
    cc666  
       2023-11-30 22:35:49 +08:00
    多大?预算多少?
    先上传到 S3 ,然后阿里云开一台虚拟机或者云函数下载并上传到阿里云 OSS ,然后本地使用 OSS 下载怎么样
    速度应该完全可以,就是成本问题
    dann73580
        6
    dann73580  
       2023-11-30 22:39:23 +08:00
    素材有多大?预算有多少?
    lc1450
        7
    lc1450  
       2023-11-30 22:52:21 +08:00
    用 PT 类似的方法?
    flynaj
        8
    flynaj  
       2023-11-30 23:25:15 +08:00 via Android
    rsyncthing 直接上就行,只要你带宽够。
    dianso
        9
    dianso  
       2023-12-01 00:02:35 +08:00
    syncthing

    这几天传了 2000T 的数据了,我家里 500M 移动宽带能跑满
    caomingjun
        10
    caomingjun  
       2023-12-01 00:39:06 +08:00 via Android
    @dianso 你搞啥要 2000T ,有那么大硬盘吗
    dianso
        11
    dianso  
       2023-12-01 01:41:54 +08:00
    @caomingjun #10 错了,是 2000G ,一个网盘,syncthing 能跑满速度的
    expy
        12
    expy  
       2023-12-01 08:19:16 +08:00
    就几 T 这种开个 https 直接拉吧,直连速度不行就搞个 vps 反向代理下。
    Actrace
        13
    Actrace  
       2023-12-01 08:25:25 +08:00
    钛盘挺适合这种场景。
    wanwaneryide
        14
    wanwaneryide  
       2023-12-01 10:01:38 +08:00
    先传到 tg ,然后 tg 开个会员再下载
    lll5758
        15
    lll5758  
       2023-12-01 10:22:05 +08:00
    你能有多大.全部拷贝到硬盘里,坐飞机回来,最快
    binbin0915jjpp
        16
    binbin0915jjpp  
       2023-12-01 10:28:47 +08:00
    迅雷云盘开会员下载
    binbin0915jjpp
        17
    binbin0915jjpp  
       2023-12-01 10:29:10 +08:00
    磁力链 (手动狗头)
    VonLea
        18
    VonLea  
       2023-12-01 11:19:36 +08:00
    服务器 alist 挂载百度云,转存,本地百度云下载

    超过 1T 百度云,小于 1T rclone 挂载 onedrive 转存( onedrive 限制单个文件小于 15G )
    xausky
        19
    xausky  
       2023-12-01 11:25:59 +08:00
    16T 以下都用 syncthing 慢慢跑吧,16T 以上找硬盘运回来。
    laqow
        20
    laqow  
       2023-12-01 12:03:59 +08:00
    租个大流量跳板机装 croc 的 relay server
    sNullp
        21
    sNullp  
       2023-12-01 12:13:40 +08:00
    你有多大,我正好有几个空闲 4T 的硬盘,可以以硬盘价寄给你。
    winguse
        22
    winguse  
       2023-12-01 12:24:19 +08:00
    买一个 CN2 的 VPS ,避开国内晚高峰(我观察是北京时间晚上 8 点到 12 点),用它做中转就可以。

    当然有钱可以直接上 CN2 GIA 。
    Xusually
        23
    Xusually  
       2023-12-01 12:28:34 +08:00
    找个 CN2GIA 的 VPS 中转,开 rsync
    gabon
        24
    gabon  
       2023-12-01 12:42:53 +08:00 via iPhone
    找个 pt 站,分享出去,再用 qbittorrent 拖回来。
    guo4224
        25
    guo4224  
       2023-12-01 12:55:22 +08:00
    各家云的对象存储
    dotw2x
        26
    dotw2x  
       2023-12-01 13:10:52 +08:00
    马斯克已经亲身示范了如何快速传输大量数据:物理搬硬盘。
    killva4624
        27
    killva4624  
       2023-12-01 13:13:26 +08:00
    云盘传输其实挺好的,或者用云对象传输,除了速度以外记得要考虑断点传输问题。
    yinheli
        28
    yinheli  
       2023-12-01 13:24:20 +08:00
    各大云厂商都有迁移服务,如果没找到产品可以问他们客服,都是往对象存储迁移,下行带宽流量基本都是免费的,关键是你那边的出口,想办法降本就行。

    比如阿里云: https://help.aliyun.com/document_detail/609512.html
    dishangyijiao
        29
    dishangyijiao  
    OP
       364 天前
    @gregy 日本或者美国,每月大概有 100-500G ,时效性一个月足够。
    dishangyijiao
        30
    dishangyijiao  
    OP
       364 天前
    @gregy 刚理解错了,时效性一般一周以内。
    dishangyijiao
        31
    dishangyijiao  
    OP
       364 天前
    @herozzm 这个有点太慢吧
    dishangyijiao
        32
    dishangyijiao  
    OP
       364 天前
    素材主要是视频,预算大概每月 10 美元。
    gregy
        33
    gregy  
       363 天前
    @dishangyijiao
    我没测试过日本使用 OneDrive 的速度。
    我纽约的 VPS 使用 rclone 5 线程上传下载 OneDrive 能有 60-70Mb/s ,卢森堡的 VPS 能有 40-50Mb/s
    北京联通使用 rclone 5 线程上传是 10-15Mb/s (家用带宽的上限)使用 IDM 下载的速度看情况,10 个任务,每个任务 5 线程,好的时候能有 70-80Mb/s 。差的时候可能十几 M ,特别差的时候只有几 M 。

    我买的是国际版的 OneDrive for Business Plan 2 。一个用户一个月 10 刀,一个用户最大可以获得 5T 空间,如果每月购买不少于 5 个用户,可以获得无限的空间。不过现在 OneDrive for Business Plan 2 已经从微软官网下架了,只能通过特定链接购买。也不知道这个 Plan 2 还能用多久,OP 可以看看其他的计划。
    网上有白嫖 1T OneDrive 的方法,OP 可以先白嫖一个试试速度。我没测试过白嫖的版本速度上会不会有差别。

    国外上传和下载可以用 Windows 自带的 OneDrive 客户端,国内下载可以用 alist 之类软件的挂载 OneDrive 然后用 IDM 下载(我用的是 zfile ),比微软自带的客户端速度要快很多。国内上传的话我用的是 rclone 。
    dishangyijiao
        34
    dishangyijiao  
    OP
       363 天前
    @gregy 好的,感谢这么详细的回复,我试试这种方案。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2576 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 05:47 · PVG 13:47 · LAX 21:47 · JFK 00:47
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.