讓gzip壓縮速度加快的解決方法是什么

讓gzip壓縮速度加快的解決方法是什么，相信很多沒有經(jīng)驗(yàn)的人對(duì)此束手無(wú)策，為此本文總結(jié)了問(wèn)題出現(xiàn)的原因和解決方法，通過(guò)這篇文章希望你能解決這個(gè)問(wèn)題。

pig是是什么

代碼如下:

A parallel implementation of gzip for modernmulti-processor, multi-core machines。

簡(jiǎn)單的說(shuō)，就是支持并行的gzip。廢話不多說(shuō)，開始測(cè)試。

pig默認(rèn)用當(dāng)前邏輯cpu個(gè)數(shù)來(lái)并發(fā)壓縮，無(wú)法檢測(cè)個(gè)數(shù)的話，則并發(fā)8個(gè)線程。

一、測(cè)試壓縮包文件1

代碼如下:

壓縮前
-rw-r--r-- 1 root root 2474772480 Dec  3 19:54 dbs.tar</p> <p>1、gzip測(cè)試
壓縮耗時(shí)，CPU最高：101.6%
real    2m18.042s
user    2m10.204s
sys     0m6.876s</p> <p>解壓縮耗時(shí)，CPU最高：101.6%
real    0m26.756s
user    0m20.175s
sys     0m6.580s</p> <p>壓縮后
-rw-r--r-- 1 root root 2349563863 Dec  3 19:54 dbs.tar.gz</p> <p>2、pigz測(cè)試
并發(fā)8線程(默認(rèn))：
壓縮耗時(shí)，CPU最高：832%
real    0m21.710s
user    2m31.229s
sys     0m9.101s</p> <p>解壓縮耗時(shí)，CPU最高：199%
real    0m13.239s
user    0m11.791s
sys     0m12.426s</p> <p>并發(fā)4線程：
壓縮耗時(shí)，CPU最高：427.6%
real    0m38.299s
user    2m30.701s
sys     0m8.369s</p> <p>解壓縮耗時(shí)，CPU最高：202%
real    0m13.294s
user    0m12.154s
sys     0m11.862s</p> <p>壓縮后
-rw-r--r-- 1 root root 2350161547 Dec  3 19:54 dbs.tar.gz</p> <p>二、測(cè)試壓縮包文件2
壓縮前
-rw-r--r-- 1 root root 5248890880 Dec  3 20:26 mysql-5.5.28-linux2.6-x86_64.tar</p> <p>1、gzip測(cè)試
壓縮耗時(shí)，CPU最高：101%
real    6m20.524s
user    6m2.466s
sys     0m7.410s</p> <p>解壓縮耗時(shí)，CPU最高： 101%
real    0m58.893s
user    0m46.258s
sys     0m11.944s</p> <p>壓縮后
-rw-r--r-- 1 root root 1410045513 Dec  3 20:26 mysql-5.5.28-linux2.6-x86_64.tar.gz</p> <p>2、pigz測(cè)試
并發(fā)8線程(默認(rèn))：
壓縮耗時(shí)，CPU最高： 799%
real    1m11.908s
user    6m36.717s
sys     0m9.860s</p> <p>解壓縮耗時(shí)，CPU最高：179%
real    0m33.188s
user    0m38.069s
sys     0m16.728s</p> <p>并發(fā)4線程：
壓縮耗時(shí)，CPU最高： 418%
real    1m41.547s
user    6m36.782s
sys     0m9.806s</p> <p>解壓縮耗時(shí)，CPU最高： 179%
real    0m33.120s
user    0m37.500s
sys     0m16.956s</p> <p>壓縮后
-rw-r--r-- 1 root root 1406061442 Dec  3 20:26 mysql-5.5.28-linux2.6-x86_64.tar.gz

1、pigz默認(rèn)用法(默認(rèn)并發(fā)線程是邏輯cpu個(gè)數(shù))可比gzip快5.3倍，CPU消耗則是gzip的8倍，壓縮比則相當(dāng)；
2、并發(fā)8線程對(duì)比4線程提升：41.2%，16線程對(duì)比8線程提升：27.9%，32線程對(duì)比16線程提升：3%；
3、在對(duì)壓縮效率要求較高、但對(duì)短時(shí)間內(nèi)CPU消耗較高不受影響的場(chǎng)景，使用pigz非常合適。

看完上述內(nèi)容，你們掌握讓gzip壓縮速度加快的解決方法是什么的方法了嗎？如果還想學(xué)到更多技能或想了解更多相關(guān)內(nèi)容，歡迎關(guān)注億速云行業(yè)資訊頻道，感謝各位的閱讀！