Hadoop集群启用Snappy压缩

详解Hadoop集群启用Snappy压缩功能的配置步骤

- 查看Hadoop中checknative命令的用法及功能说明。

- 查看Hadoop支持的压缩类型

- 将已编译并支持Snappy压缩的hadoop-2.7.2.tar.gz文件复制到hadoop102节点的/opt/software目录下。

- 将hadoop-2.7.2.tar.gz解压至当前目录。

在/opt/software/hadoop-lib/native目录下找到Snappy压缩相关的动态链接库文件，说明你的Hadoop环境已经具备了Snappy压缩能力。

将位于/opt/software/hadoop-lib/native目录下的所有文件复制到开发集群中的相同路径下，确保本地库文件的完整迁移，以便于Hadoop在运行时能顺利调用其本地组件。

- 分发集群部署

- 重新检查Hadoop支持的压缩格式类型。

- 重启Hadoop集群及Hive服务