加载《Hadoop伪分布式安装部署_上机操作》成功,点击此处阅读
首页 →文档下载

Hadoop伪分布式安装部署_上机操作

以下为《Hadoop伪分布式安装部署_上机操作》的无排版文字预览,完整内容请下载

上机操作——Hadoop伪分布集群安装

实验目的

1、熟练掌握Hadoop伪分布模式安装流程

2、培养独立完成Hadoop伪分布安装的能力

实验内容

在只安装Linux系统的虚拟机上,安装Hadoop2.6.0伪分布模式。请按照实验步骤完成Hadoop的集群部署并根据实验步骤中的提示,按要求写出执行命令或者是给出运行效果截图。

实验步骤

1. 切换到root用户下来进行操作,给出执行命令:

su root

2.关闭防火墙,给出执行命令:

systemctl stop firewalld

3.禁止防火墙开机自启,给出执行命令:

systemctl disable firewalld

4.输入vi /etc/sysconfig/network,更改主机名为master

修改hosts文件,输入vi /etc/hosts

在文件最后行加上IP地址及对应的主机名,给出添加内容:

/

5.输入reboot,重启网络

6.配置SSH免***免密码登陆,给出需要执行的命令:

ssh-keygen -t rsa

ssh-copy-id master

测试ssh配置是否正确,给出测试的命令:

ssh master

7.关闭selinux,请给出需要打开的配置文件:

vi /etc/selinux/config

给出修改内容的截图:

/

8.配置HDFS

/usr/local/src目录用来存放安装的框架。

创建/opt/software目录,用来存放相关安装工具:jdk安装包jdk-7u75-linux-x64.tar.gz及hadoop安装包hadoop-2.6.0-cdh5.4.5.tar.gz。给出创建/opt/software目录的命令:

mkdir /opt/software

使用Xftp工具将jdk安装包jdk-8u112-linux-x64.tar.gz及hadoop安装包hadoop-2.6.0-cdh5.4.5.tar.gz上传到/opt/software目录

9.安装jdk,将/opt/software目录下jdk-8u112-linux-x64.tar.gz 解压缩到/usr/local/src目录下。给出执行的解压缩命令:

tar -zxvf /opt/software/ jdk-8u112-linux-x64.tar.gz -C /usr/local/src

切换到/usr/local/src目录下,将jdk1.8.0_112目录重命名为java,给出执行命令:

cd /usr/local/src

10.下面来修改环境变量:系统环境变量或用户环境变量。我们在这里修改系统环境变量。打开系统环境变量的文件,给出执行命令:

vi /etc/profile

配置java的环境变量到/etc/profile文件,给出配置的内容:

export JAVA_HOME=/usr/local/src/java

export PATH=$PATH:$JAVA_HOME/bin

输入Esc, 进入vi命令模式,输入 :wq 进行保存。

让环境变量生效,给出执行命令:

source /etc/profile

执行完毕后,可以输入java,来测试环境变量是否配置正确。请给出测试运行效果截图:

/

11.下面安装hadoop,切换到/opt/software目录下,将hadoop-2.6.0-cdh5.4.5.tar.gz解压缩到/usr/local/src目录下。给出执行的解压缩命令:

cd /opt/software

为了便于操作,将hadoop 内容过长,仅展示头部和尾部部分文字预览,全文请查看图片预览。 e.xml,打开yarn-site.xml配置文件。添加到标签之间。给出配置内容的截图:

/ 26.启动yarn,给出执行命令:

start-yarn.sh

27.输入jps,查看当前运行的进程。如果正常启动,除了有之前启动的3个进程:NameNode、DataNode、SecondaryNameNode,还会增加2个进程:NodeManager、ResourceManager给出运行效果截图:

/

28.给出yarn界面浏览器访问方式对应的url:

192.168.146.160:8088

给出运行效果截图:

/

至此,Hadoop 伪分布模式已经安装完成!

[文章尾部最后300字内容到此结束,中间部分内容请查看底下的图片预览]

以上为《Hadoop伪分布式安装部署_上机操作》的无排版文字预览,完整内容请下载

Hadoop伪分布式安装部署_上机操作由用户“Tibers丶晓”分享发布,转载请注明出处
XXXXX猜你喜欢
回顶部 | 首页 | 电脑版 | 举报反馈 更新时间2021-05-14 15:51:32
if(location.host!='wap.kao110.com'){location.href='http://wap.kao110.com/html/a9/bc/60489.html'}ipt>if(location.host!='wap.kao110.com'){location.href='http://wap.kao110.com/html/a9/bc/60489.html'}ipt>