Linux - 多線程壓縮日志

這里有17個G的日志文件,使用多線程壓縮2分23秒即可壓縮完成3.2G的壓縮,6倍的壓縮比,普通壓縮則要使用7分50秒,整整多出了3倍,我們看看是怎么使用的。

使用方法

安裝pigz

yum install pigz -y
# 或者
apt-get install pigz

壓縮(使用8個CPU)

time tar -cf - logdir | pigz -p 8 > logdir.tgz

解壓縮

time pigz -p 8 -d logdir.tgz

速度是非常之快的,大家可以自行測試。


?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 這里有17個G的日志文件,使用多線程壓縮2分23秒即可壓縮完成3.2G的壓縮,6倍的壓縮比,普通壓縮則要使用7分5...
    大豬大豬閱讀 1,158評論 0 17
  • 這里有17個G的日志文件,使用多線程壓縮2分23秒即可壓縮完成3.2G的壓縮,6倍的壓縮比,普通壓縮則要使用7分5...
    大豬大豬閱讀 240評論 0 1
  • 這里有17個G的日志文件,使用多線程壓縮2分23秒即可壓縮完成3.2G的壓縮,6倍的壓縮比,普通壓縮則要使用7分5...
    kikiki1閱讀 99評論 0 1
  • 這里有17個G的日志文件,使用多線程壓縮2分23秒即可壓縮完成3.2G的壓縮,6倍的壓縮比,普通壓縮則要使用7分5...
    大豬大豬閱讀 222評論 0 0
  • > 這里有17個G的日志文件,使用多線程壓縮2分23秒即可壓縮完成3.2G的壓縮,6倍的壓縮比,普通壓縮則要使用7...
    kikiki5閱讀 272評論 0 2

友情鏈接更多精彩內(nèi)容