其他分享
首页 > 其他分享> > 比pigz性能更好的pzstd

比pigz性能更好的pzstd

作者:互联网

通过pzstd替代目前pigz

资料显示的性能对比

对比

机械硬盘测试

pigz

解压21-30分钟

time  tar --use-compress-program=pigz  -xvpf lung_1130_211216.tgz

宿主机磁盘性能不稳定 测试可能存在偏差

sync;/usr/bin/time -p bash -c "(dd if=/dev/zero of=test.dd  bs=1M count=20000)"

pzstd --rm -r -19 -p 16 --ultra  lung_pigz/

pzstd

压缩31-35分钟

time tar --use-compress-program=pzstd    -cvpPf    lungpzstd.tgz  lung

解压30分钟

tar --use-compress-program=pzstd  -xvpf  lungpzstd.tgz

固态硬盘测试

压缩对比

pzstd

pigz

文件大小对比

解压对比

zstd

time  tar --use-compress-program=zstd  -xvpf DrWise_1130_zstd.tgz

pigz

time  tar --use-compress-program=pigz   -xvpf DrWise_1130_pigz.tgz

结论,在性能足够好的ssd磁盘上,zstd的优势更为明显,在机械硬盘上测试2种命令均打满io。

参考文档

https://fossies.org/linux/zstd/contrib/pzstd/README.md

https://www.cnx-software.com/2016/12/19/facebook-zstandard-zstd-pzstd-data-compression-tools-deliver-high-performance-efficiency/

https://tech.meituan.com/2021/01/07/pack-gzip-zstd-lz4.html

标签:更好,--,zstd,tgz,program,pzstd,pigz
来源: https://blog.csdn.net/xujiamin0022016/article/details/122740550