1. 确保Hadoop已安装

在开始配置HDFS压缩之前，请确保你的CentOS系统已经安装了Hadoop。如果没有安装， 可以使用以下命令进行安装：

sudo yum install hadoop

2. 配置Hadoop的压缩设置

2.1 配置core-site.xml

编辑$HADOOP_HOME/etc/hadoop/core-site.xml文件，添加或修改以下配置项：

    
        io.compression.codec
        org.apache.hadoop.io.compress.SnappyCodec
    
    
        io.compression.codecSnappy.class
        org.apache.hadoop.io.compress.SnappyCodec
    
    
        io.compression.codec.lzo.class
        org.apache.hadoop.io.compress.LzoCodec
    
    
        io.compression.codec.bzip2.class
        org.apache.hadoop.io.compress.BZip2Codec
    
    
        io.compression.codec.gzip.class
        org.apache.hadoop.io.compress.GzipCodec
    
    
        io.compression.codec.zlib.class
        org.apache.hadoop.io.compress.ZlibCodec
    

2.2 配置hdfs-site.xml

    
        dfs.datanode.max.xceivers
        10
    
    
        dfs.datanode.max.xceivers.per.datanode
        10
    
    
        dfs.namenode.max.xceivers
        10
    
    
        dfs.namenode.max.xceivers.per.datanode
        10
    
    
        dfs.replication
        3
    
    
        dfs.supported.compression_types
        org.apache.hadoop.io.compress.SnappyCodec,org.apache.hadoop.io.compress.LzoCodec,org.apache.hadoop.io.compress.BZip2Codec,org.apache.hadoop.io.compress.GzipCodec,org.apache.hadoop.io.compress.ZlibCodec
    
    
        dfs.encrypt.data.transfer
        false
    
    
        dfs.datanode.max.xceivers
        10
    
    
        dfs.datanode.max.xceivers.per.datanode
        10
    
    
        dfs.namenode.max.xceivers
        10
    
    
        dfs.namenode.max.xceivers.per.datanode
        10
    
    
        dfs.replication
        3
    
    
        dfs.supported.compression.types
        org.apache.hadoop.io.compress.SnappyCodec,org.apache.hadoop.io.compress.LzoCodec,org.apache.hadoop.io.compress.BZip2Codec,org.apache.hadoop.io.compress.GzipCodec,org.apache.hadoop.io.compress.ZlibCodec
    
    
        dfs.encrypt.data.transfer
        false
    

3. 重启Hadoop服务

配置完成后重启Hadoop服务以使配置生效：

sudo systemctl restart hadoop-namenodesudo systemctl restart hadoop-datanodesudo systemctl restart hadoop-resourcemanagersudo systemctl restart hadoop-nodemanager

4. 验证压缩配置

你可以压缩配置是否生效：

hdfs dfsadmin -report

查看输出中的Compression Codec字段，确认是否显示了你配置的压缩编解码器。

5.

通过以上步骤，你可以在CentOS上成功配置HDFS的压缩。根据你的具体需求，可以调整压缩编解码器和压缩级别。

---