失效链接处理 |
hadoop伪分布式搭建 PDF 下载
本站整理下载:
相关截图:
主要内容:
1、将下载后的压缩包上传到虚拟机的/usr/iflytek目录下,并将其解压
命令:tar -zxvf hadoop-2.5.0-cdh5.3.6.tar.gz -C /usr/iflytek/
2、在SecureCRT中:
(1)进入hadoop-2.5.0-cdh5.3.6目录下并查看该目录下内容:
命令:cd /iflytek/hadoop-2.5.0-cdh5.3.6
ls
(2)进入etc目录,查看该目录下内容:
命令:cd etc/
ls
(3)进入hadoop目录,修改hadoop目录下相关文件的配置内容
(4)为了便于修改文件,使用notepad++连接虚拟机,找到iflytek下面的etc,点击修改相关配置
a.在hadoop-env.sh中配置jdk的路径
b.在core-site.xml中配置(注:标点符号需要是英文)
配置namenode目录 在hadoop-2.5.0-cdh5.3.6创建data目录,data目录下创建namenode,datanode文件夹(同级)
(fn为主机名)
c.配置hdfs-site.xml文件
在data目录下创建tmp文件夹
dfs.name.dir为namenode目录,dfs.data.dir为DataNode目录
dfs.tmp.dir为临时目录;dfs.replication为副本(暂定为1)
d.配置mapred-site.xml文件
在notepad++中找到mapred-site.xml.template文件右键重命名.template,编辑配置文件
e.设置yarn-site.xml文件
f.修改slaves文件(将hostname改成虚拟机的主机名)
3、在SecureCRT中配置etc下的profile
4、格式化namenode(出现报错需要重新格式化,删除所有配置文件),格式化不出现error则成功
5、启动hadoop的hdfs
jps查看启动结果:
6、启动hdfs中MapReduce,并查看启动结果
7、打开虚拟机的网页输入http://192.168.88.101:50700查看是否配置完成
|