压缩方式选择

压缩方式选择时重点考虑:压缩/解压缩速度、压缩率(压缩后存储大小)、压缩后是否可以支持切片。

Gzip压缩

优点:压缩率比较高; 

缺点:不支持切片;压缩/解压速度一般;

Bzip2压缩

优点:压缩率高;支持切片 

缺点:压缩/解压速度慢。

Lzo压缩

优点:压缩/解压速度比较快;支持切片

缺点:压缩率一般;想支持切片需要额外创建索引。

Snappy压缩

优点:压缩和解压缩速度快; 

缺点:不支持切片;压缩率一般; 

你可能感兴趣的:(hadoop)