TB 级小文件备份方案

資深大佬 : daimaosix 11

服务器存放了大概 50T 的小文件数据，并且在不断增长中，目前想把这些数据备份到国内网盘上，但好像没有合适的增量备份方案，不知道各位有其他想法吗？

大佬有話說 (33)

資深大佬 : alexkkaa

国内网盘？ gdrive 他不香吗
主資深大佬 : daimaosix

@alexkkaa 服务器都在国内，gdrive 用不了啊
資深大佬 : superrichman

妈耶 50t 数据，你还是买几块硬盘备份比较靠谱。
資深大佬 : alexkkaa

@daimaosix 可以挂个代理试试
主資深大佬 : daimaosix

@superrichman emmmm，硬盘要买好几块…而且主要是本地的网络不行，备份太慢了
主資深大佬 : daimaosix

@alexkkaa 太慢了老哥，50T 真不知道要备份到什么时间了….
資深大佬 : renmu

看看国内哪家对象存储有解决方案，网盘应该是解决不了你的问题了
資深大佬 : yuzo555

还是存到对象存储吧。

新文件主动上传（或使用提供的 API 远程抓取）到对象存储，部分服务商（七牛、腾讯）提供镜像存储功能，如果新文件上传后一定会被访问，也可以设置镜像存储来同步新文件。
老文件使用他们提供的迁移工具慢慢迁移咯。
資深大佬 : AntonChen

阿里云 oss 归档存储
資深大佬 : aver4vex

文件加密，名字都改成番号，群发各种 bt 论坛。
資深大佬 : GoLand

https://juicefs.com/

jfs 了解一下，比较靠谱。
資深大佬 : a719114136

个人还是公司的，公司的话可以考虑 hdfs 以及其他分布式文件系统。
个人的话还是多买一个硬盘每天定时拷贝吧
資深大佬 : Mai1me

50t 数据用国内网盘备份
应该是家里有矿了。
資深大佬 : SingeeKing

国内几乎唯一靠谱的方式是买硬盘做 RAID5 或者 RAID10，要不然就不考虑成本去买阿里腾讯的归档存储

国外的话，短时间 G Suite （自己买，不是白嫖）无限容量足够
主資深大佬 : daimaosix

@GoLand 没看明白这个是干啥的老哥
主資深大佬 : daimaosix

@GoLand 共享文件系统，如果存储用的都是第三方云厂商的，怎么看他定价还有一个自己的存储定价，专业版 0.13/GiB/月
資深大佬 : efaun

冷备份或者磁带备份成本低又有保障
資深大佬 : flynaj

50t 一套 6t 硬盘就要 10 个。没有哪家的网盘这么大吧
資深大佬 : isnullstring

直接买硬盘备份不好么，备份恢复速度又快
价格也比任意云存便宜
資深大佬 : huihuilang

用 115 吧，淘宝 1tb 充值打折才 10 块钱。。。50tb 也就几百块钱的事情。。。另外本地再搞个冷备份吧
資深大佬 : hyshuang2006

50T ？信息没给全，怎么提供合适的建议。说不定有前面累积的数据都可以归档。
主資深大佬 : daimaosix

@flynaj 用 115 可以

@huihuilang 是的，用的 115
資深大佬 : zakokun

这种一般都是弄对象存储啊, 方便检索和下载
資深大佬 : hst001

直接买硬盘去机房拷贝吧，之后每天定时远程备份
資深大佬 : ceyes

aws S3 了解一下？
資深大佬 : msg7086

自己买硬盘本地慢慢下最靠谱了。
放云，你就不怕账号没了文件取不回来？
云当作第二备份倒是可以。第一备份还是放在自己手里好些。
資深大佬 : tankren

还不如本地再备份一遍呢
資深大佬 : flynaj

@daimaosix #22 115 我看官网 500 块一年有 5T,50T 一年就要 5000.
資深大佬 : GoLand

@daimaosix jfs 其实做的事就是让你像访问本地文件系统一样访问 oss，数据还是存在 oss
主資深大佬 : daimaosix

@flynaj 去淘宝买兑换码，5T 大概 30 块钱左右，永久生效，无上限。
資深大佬 : efaun

@GoLand #29 我也看了下这个网站，但是他说的 1T 免费空间没懂，是注册了账号就可以使用他存储 1T 的数据（使用他提供的空间，就是一个免费网盘），还是可以通过他往自己的 oss 存 1T 的数据（使用自己的空间，类似 multcloud ）？
資深大佬 : flynaj

@daimaosix 怎么可能，要真是这样只能说明 115 要跑路了。30 块怎么都不够一年的电费。
資深大佬 : wanguorui123

50T 小文件，要传 n 久吧