ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

比pigz性能更好的pzstd

2022-01-29 11:03:17  阅读:232  来源: 互联网

标签:更好 -- zstd tgz program pzstd pigz


通过pzstd替代目前pigz

资料显示的性能对比

对比

机械硬盘测试

pigz

解压21-30分钟

time  tar --use-compress-program=pigz  -xvpf lung_1130_211216.tgz

宿主机磁盘性能不稳定 测试可能存在偏差

sync;/usr/bin/time -p bash -c "(dd if=/dev/zero of=test.dd  bs=1M count=20000)"

pzstd --rm -r -19 -p 16 --ultra  lung_pigz/

pzstd

压缩31-35分钟

time tar --use-compress-program=pzstd    -cvpPf    lungpzstd.tgz  lung

解压30分钟

tar --use-compress-program=pzstd  -xvpf  lungpzstd.tgz

固态硬盘测试

压缩对比

pzstd

pigz

文件大小对比

解压对比

zstd

time  tar --use-compress-program=zstd  -xvpf DrWise_1130_zstd.tgz

pigz

time  tar --use-compress-program=pigz   -xvpf DrWise_1130_pigz.tgz

结论,在性能足够好的ssd磁盘上,zstd的优势更为明显,在机械硬盘上测试2种命令均打满io。

参考文档

https://fossies.org/linux/zstd/contrib/pzstd/README.md

https://www.cnx-software.com/2016/12/19/facebook-zstandard-zstd-pzstd-data-compression-tools-deliver-high-performance-efficiency/

https://tech.meituan.com/2021/01/07/pack-gzip-zstd-lz4.html

标签:更好,--,zstd,tgz,program,pzstd,pigz
来源: https://blog.csdn.net/xujiamin0022016/article/details/122740550

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有