以下为《Hadoop伪分布式安装部署_上机操作》的无排版文字预览,完整内容请下载
上机操作——Hadoop伪分布集群安装
实验目的
1、熟练掌握Hadoop伪分布模式安装流程
2、培养独立完成Hadoop伪分布安装的能力
实验内容
在只安装Linux系统的虚拟机上,安装Hadoop2.6.0伪分布模式。请按照实验步骤完成Hadoop的集群部署并根据实验步骤中的提示,按要求写出执行命令或者是给出运行效果截图。
实验步骤
1. 切换到root用户下来进行操作,给出执行命令:
su root
2.关闭防火墙,给出执行命令:
systemctl stop firewalld
3.禁止防火墙开机自启,给出执行命令:
systemctl disable firewalld
4.输入vi /etc/sysconfig/network,更改主机名为master
修改hosts文件,输入vi /etc/hosts
在文件最后行加上IP地址及对应的主机名,给出添加内容:
/
5.输入reboot,重启网络
6.配置SSH免***免密码登陆,给出需要执行的命令:
ssh-keygen -t rsa
ssh-copy-id master
测试ssh配置是否正确,给出测试的命令:
ssh master
7.关闭selinux,请给出需要打开的配置文件:
vi /etc/selinux/config
给出修改内容的截图:
/
8.配置HDFS
/usr/local/src目录用来存放安装的框架。
创建/opt/software目录,用来存放相关安装工具:jdk安装包jdk-7u75-linux-x64.tar.gz及hadoop安装包hadoop-2.6.0-cdh5.4.5.tar.gz。给出创建/opt/software目录的命令:
mkdir /opt/software
使用Xftp工具将jdk安装包jdk-8u112-linux-x64.tar.gz及hadoop安装包hadoop-2.6.0-cdh5.4.5.tar.gz上传到/opt/software目录
9.安装jdk,将/opt/software目录下jdk-8u112-linux-x64.tar.gz 解压缩到/usr/local/src目录下。给出执行的解压缩命令:
tar -zxvf /opt/software/ jdk-8u112-linux-x64.tar.gz -C /usr/local/src
切换到/usr/local/src目录下,将jdk1.8.0_112目录重命名为java,给出执行命令:
cd /usr/local/src
10.下面来修改环境变量:系统环境变量或用户环境变量。我们在这里修改系统环境变量。打开系统环境变量的文件,给出执行命令:
vi /etc/profile
配置java的环境变量到/etc/profile文件,给出配置的内容:
export JAVA_HOME=/usr/local/src/java
export PATH=$PATH:$JAVA_HOME/bin
输入Esc, 进入vi命令模式,输入 :wq 进行保存。
让环境变量生效,给出执行命令:
source /etc/profile
执行完毕后,可以输入java,来测试环境变量是否配置正确。请给出测试运行效果截图:
/
11.下面安装hadoop,切换到/opt/software目录下,将hadoop-2.6.0-cdh5.4.5.tar.gz解压缩到/usr/local/src目录下。给出执行的解压缩命令:
cd /opt/software
为了便于操作,将hadoop 内容过长,仅展示头部和尾部部分文字预览,全文请查看图片预览。 e.xml,打开yarn-site.xml配置文件。添加到标签之间。给出配置内容的截图:
/ 26.启动yarn,给出执行命令:
start-yarn.sh
27.输入jps,查看当前运行的进程。如果正常启动,除了有之前启动的3个进程:NameNode、DataNode、SecondaryNameNode,还会增加2个进程:NodeManager、ResourceManager给出运行效果截图:
/
28.给出yarn界面浏览器访问方式对应的url:
192.168.146.160:8088
给出运行效果截图:
/
至此,Hadoop 伪分布模式已经安装完成!
[文章尾部最后300字内容到此结束,中间部分内容请查看底下的图片预览]
以上为《Hadoop伪分布式安装部署_上机操作》的无排版文字预览,完整内容请下载
Hadoop伪分布式安装部署_上机操作由用户“Tibers丶晓”分享发布,转载请注明出处