Pcompress 2.0 发布,并行压缩管理工具 - 开源中国社区
Pcompress 2.0 发布,并行压缩管理工具
oschina 2013年04月27日

Pcompress 2.0 发布,并行压缩管理工具

oschina oschina 发布于2013年04月27日 收藏 11 评论 1

有免费的MySQL,为什么还要买? >>>  

并行压缩管理工具 Pcompress 2.0 发布了,该版本引入全新的全局去重功能,优化了网络上传输大数据等。

pcompress是一种实用工具,做并行分裂成块的输入数据压缩/解压缩和重复数据删除。它具有模块化结构,包括支持LZMA算 法,BZIP2,PPMD等,CRC64块校验等多种算法。捆绑LZMA压缩的SSE优化。它还实现了内容感知的重复数据删除和块级增量压缩功能的基础上 半拉宾指纹图谱计划。它具有低的元数据开销和重叠的I / O和压缩,以达到最大的并行。它还捆绑了一个简单的slab分配器,以加快重复类似的块分配。它可以工作在管道模式,从标准输入读取和写入到 stdout。它还提供了一些自适应压缩在多种算法,每块试图确定在给定块的最佳模式。

本站文章除注明转载外,均为本站原创或编译。欢迎任何形式的转载,但请务必注明出处,尊重他人劳动共创开源社区。
转载请注明:文章转载自 开源中国社区 [http://www.oschina.net]
本文标题:Pcompress 2.0 发布,并行压缩管理工具
分享
评论(1)
最新评论
0
winrar那个东东不知道是不是并行压缩的。
顶部