hadoop多集群搭建 PDF 下载_Java知识分享网-免费Java资源下载

失效链接处理

hadoop多集群搭建 PDF 下载

本站整理下载：

链接：https://pan.baidu.com/s/1mxmjVWtIKjtvbtxSyIIGdg

提取码：xk32

相关截图：

主要内容：

前提：

每台namenode设置免密码登录

每台namenode与datanode之间设置免密码登录

第一步，删除每台机器下的masters文件夹（如果有）

rm -rf /hadoop/masters

// 集群后，edit由JN管理，不再需要seconnamenode

第二步，删除每台机器下的临时文件目录（如果有）

rm -rf /opt/hadoop

第三步，编辑hdfs-size文件

vi hadoop/etc/hadoop/hdfs-size.xml

首先删除configuration下的所有内容

内容：

<name>dfs.nameservices</name>

<value>mycluster</value> //自定义jn名称

</property>

<name>dfs.ha.namenodes.mycluster</name> // mycluster为上面配置的名称

<value>nn1,nn2</value>// namenode主机名称，自定义

</property>

<name>dfs.namenode.rpc-address.mycluster.nn1</name> // rpc协议配置

</property>

<name>dfs.namenode.rpc-address.mycluster.nn2</name>

</property>

<name>dfs.namenode.http-address.mycluster.nn1</name> // http协议配置

</property>

<name>dfs.namenode.http-address.mycluster.nn2</name> // http协议配置

</property>

<name>dfs.namenode.shared.edits.dir</name>

<value>qjournal://jnip1:8485;jnip2:8485;jnip3:8485/mycluster</value> // 配置JN机器

</property>

<name>dfs.client.failover.proxy.provider.mycluster</name>

<value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>

</property>

<name>dfs.ha.fencing.methods</name>

<value>sshfence</value>

</property>

<name>dfs.ha.fencing.ssh.private-key-files</name>

<value>ssh私钥路径</value> // 配置ssh私钥路径

</property>

<name>dfs.journalnode.edits.dir</name>

<value>/opt/journalnode</value> //JN的edit存放目录

</property>

<name>dfs.ha.automatic-failover.enabled</name> // 启用namnode出错后自动切换机器

</property>

第四步，编辑core-size文件

vi /hadoop/etc/hadoop/core-size.xml

内容：

<name>fs.defaultFS</name>

</property>

<name>hadoop.tmp.dir</name>

<value>/opt/hadoop</value> //hadoop临时文件目录

</property>

<name>ha.zookeeper.quorum</name>

<value>ip1:2181,ip2:2181,ip3:2181</value> //zk主机地址

</property>

最新Java全栈就业实战课程(免费)

springcloud分布式电商秒杀实战课程

IDEA永久激活

66套java实战课程无套路领取

锋哥开始收Java学员啦！

Python学习路线图

hadoop多集群搭建 PDF 下载

Java1234官方群25：
Java1234官方群25：	838462530