失效链接处理 |
hadoop集群搭建手册 PDF 下载
本站整理下载:
相关截图:
主要内容:
一. 环境准备
1.在VituralBox中选择Linux Ubuntu 64位操作系统作为系统环境。基于原生 Hadoop 2,在 Hadoop 2.6.0 (stable) 版本下验证通过,可适合任何 Hadoop 2.x.y 版本。(在这里我们使用hadoop2.7.1的版本进行搭建)
2.使用节点作为集群环境(这里我们使用三个节点):
一个为hadoop01(Master)节点,局域网IP为192.168.56.101;
一个为hadoop02(Slave1)节点,局域网IP为192.168.56.102;
一个为hadoop03(Slave2)节点,局域网IP为192.168.56.103
二.虚拟机准备工作
1.在虚拟机hadoop01节点上配置hadoop用户,安装SSH server(无密码登陆),安装Java环境,安装hadoop并完成配置内容。
2.在其他节点(hadoop02, hadoop03)上也配置好hadoop用户,安装SSH server,安装Java环境,然后将hadoop01节点上的 /usr/local/hadoop 目录复制到其他 (hadoop02,hadoop03) 节点上。
我们可以完成一个虚拟机hadoop01的这四项配置,选择复制作为hadoop02,hadoop03
节点,这样节省大量时间。
三.网络配置准备
搭建集群的网络标准的需求为:
(1)虚拟机可以访问外网;
(2)虚拟机之间可以互相访问;
(3)虚拟机与宿主机(主机)可以互相访问。
解决方案为:设置3个网卡
1.在VirtualBox中→管理→主机网络管理器,创建并手动配置网卡,例如ip地址为:192.168.56.1 (网络掩码)netmask 255.255.255.0,选择关闭DHCP
|