一、 高大可用性概述

在数据存储领域，高大可用性是至关关键的。HDFS作为Hadoop生态系统中的核心组件，其高大可用性直接关系到整个巨大数据平台的稳稳当当性。本文将带你一步步深厚入Linux下HDFS的高大可用性配置。

二、 配置准备

在开头配置之前，确保你的Linux服务器已安装优良Hadoop，并且个个节点的基础周围已经配置优良。

三、 安装与格式化NameNode

先说说在NameNode节点上格式化NameNode：

hdfs namenode -format

接着，启动NameNode：

hdfs --daemon start namenode

四、配置JournalNode

编辑`hdfs-site.xml`文件，添加JournalNode的配置：

    dfs.nameservices
    mycluster


    dfs.ha.namenodes.mycluster
    nn1,nn2


    dfs.namenode.rpc-address.mycluster.nn1
    nn1:8020


    dfs.namenode.rpc-address.mycluster.nn2
    nn2:8020


    dfs.namenode.http-address.mycluster.nn1
    nn1:50070


    dfs.namenode.http-address.mycluster.nn2
    nn2:50070


    dfs.ha.zookeeper.quorum
    master:2181,slave1:2181,slave2:2181

五、启动JournalNode

在全部JournalNode节点上启动JournalNode服务：

hdfs --daemon start journalnode

六、启动NameNode

在其中一个NameNode节点上启动NameNode：

hdfs --daemon start namenode

七、同步NameNode元数据

在另一个NameNode节点上同步元数据：

    dfs.namenode.shared.edits.dir
    qjournal://jn1:8485;jn2:8485;jn3:8485/mycluster

八、启动DataNode

在全部DataNode节点上启动DataNode：

hdfs --daemon start datanode

九、验证HA配置

用`hdfs haadmin`命令验证HA配置是不是成功：

hdfs haadmin -getServiceState nn1
hdfs haadmin -getServiceState nn2

注意：当Hbase或者flume等其他柔软件要保证连接的高大可用时除了修改上述配置文件，还非...不可把hadoop的core-site.xml和hdfs-site.xml两个配置文件复制到相应的柔软件的conf目录下。

十、 配置客户端

确保客户端配置文件`core-site.xml`中包含以下配置：

• 保存优良几个副本，且给容错机制，副本丢失或宕机自动恢复。默认存3份。
• 运行在廉价的机器上。
• 适合巨大数据的处理。许多巨大？许多细小？HDFS支持许多种数据规模。

编辑`hdfs-site.xml`文件， 设置以下参数：

# bin/hdfs haadmin -getServiceState nn1
active
# bin/hdfs haadmin -getServiceState nn2
standby

十一、启动SecondaryNameNode

在SecondaryNameNode节点上启动SecondaryNameNode：

hdfs namenode -bootstrapStandby

十二、

Hadoop HA集群，帮你在实际干活中更优良地应对巨大数据挑战。

---