未分類 1 6 月 2020 压缩大文件,比如 200G 或者 500G 的文件,有啥相对快速的方案嘛? 压缩大文件,比如 200G 或者 500G 的文件,有啥相对快速的方案嘛? 資深大佬 : tyit 1 看具体情况吧。一般瓶颈在压缩算法。有的快,但压缩率低。有的压缩算法支持并行,可以多线程。 大佬有話說 (10) 資深大佬 : gargar 采用存档压缩。。。。这算不算是有效的回答。。。 資深大佬 : evilic @evilic 这应该叫打包吧,压缩的目的不是让文件变小吗 資深大佬 : deasty 关键词 parallel ziphttps://www.nongnu.org/lzip/plzip.html 資深大佬 : nightwitch @deasty #3 我认为方便传输也算是压缩的目的之一。。。举例来说,一个由单张 4M 大小 jpg 组成的一个 500G 文件夹传输起来可能会让人等好久的,压缩之后在传输的时候速度就会很快呀。 資深大佬 : evilic LZMZ2 可以跑多线程但是瓶颈说不定是 IO 。。。 資深大佬 : learningman @evilic 你这个需求打个 tar 就行了,只有 IO 作为瓶颈压缩解压的时间绝对大于那 5%3%的压缩率省下来的时间 資深大佬 : learningman 更高的速度通常都是以更低的压缩比为代价的,你需要根据场景自行权衡。LZ 可以试试 lz4, lzo 資深大佬 : aloxaf pied piper你值得拥有 [手动狗头] 資深大佬 : zhujoen @zhujoen 不是会引来老鼠 資深大佬 : noreplay 我觉得主的问题,可以改为,“linux 下有哪些压缩软件,支持多线程压缩?”