1：最主流的四种
gzip 压缩比较高，不可 split (行文件)，hadoop 自带 （apache 协议）
lzo 支持 split，但需要额外的索引文件，自定安装（ GPL 协议）
snappy 压缩速度快，压缩比一般，不可 split (行文件)，自定安装（ GPL 协议）
bzip 压缩比最高，但是压缩慢，自定安装
压缩格式gzip/snappy/lzo/bzip2 比较与总结_zzhongcy的博客-CSDN博客_lzo压缩比例
1. Data Modeling in Hadoop - Hadoop Application Architectures [Book]
2：列存文件即使使用 gzip和 snappy 也是可以 sp
最后
以上就是机灵凉面最近收集整理的关于大数据压缩算法总结的全部内容，更多相关大数据压缩算法总结内容请搜索靠谱客的其他文章。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复