glusterfs+zfs 存海量小文件,是不是选错方案了?
資深大佬 : mushokumunou 6
iops 性能很差,是不是选错方案了? 本来想优化下的,搜了不少关于小文件+gluster 和 zfs 的关键字,发现小文件不适合。 遂对选型产生了质疑。
一开始只是想简单的组个软 raid,集个群做存储后端而已。 没太在意应用场景。感觉方向错了。。。。
文件基本在 256k,最大 1m,用于 ipfs 存储。
大佬有話說 (8)
iops 性能很差,是不是选错方案了? 本来想优化下的,搜了不少关于小文件+gluster 和 zfs 的关键字,发现小文件不适合。 遂对选型产生了质疑。
一开始只是想简单的组个软 raid,集个群做存储后端而已。 没太在意应用场景。感觉方向错了。。。。
文件基本在 256k,最大 1m,用于 ipfs 存储。
确定了在做个各种文件系统的性能对比
如果在 200T 内
一般的 sata + hw raid 6+ ssd cached 架构绰绰有余
一组 3 台 200T 上下的 满足大部分使用场景需求了
对应调整下 raid 的读写缓存策略
文件系统使用 xfs,小文件存储 块那个设置小点节省空间