hive数据压缩的优点和缺点

hive数据压缩的优点和缺点

优点：

1. 减少存储磁盘空间，降低单节点的磁盘IO。
2. 减少网络传输带宽 。

缺点：需要花费额外的时间/CPU做压缩和解压缩计算。

常用压缩格式推荐使用：Snappy格式

开启map输出压缩

 

开启reduce输出压缩

 

来源：CSDN

作者：ponslee

链接：https://blog.csdn.net/u011110301/article/details/104216082