Hadoop伪分布式安装部署实验
⽂章⽬录
Hadoop安装部署实验
⼀、安装虚拟机
1. 软件、系统镜像
2. 创建虚拟机
1. 打开VMware，选择创建虚拟机
2. 选择⾃定义（⾼级），下⼀步
3. 选择稍后安装操作系统
4. 选择Linux，版本，下⼀步。
5. 根据⾃⼰的需要设置虚拟机名称和存放位置，下⼀步
6. 根据⾃⼰电脑的配置设置合适的处理器数量。（安装图形化桌⾯系统尽量设置⼤⼀点）
7. 根据⾃⼰电脑的配置设置合适的内存⼤⼩。（安装图形化桌⾯系统尽量设置⼤⼀点）
8. 设置虚拟机⽹络连接模式。（NAT）
9. 选择I/O控制器类型，LSI Logic下⼀步。
10. 选择磁盘类型，SCSI，下⼀步。
11. 选择创建新虚拟磁盘，下⼀步。
12. 根据⾃⼰的需要分配磁盘容量，勾选将虚拟磁盘拆分成多个⽂件（⽅便⽤储存设备拷贝复制虚拟机到其他设备），下⼀步。
13. 指定磁盘⽂件存储位置，下⼀步。
14. 此处选择⾃定义硬件，也可以设置处理器与内存。因为计划安装图像化桌⾯系统（占⽤系统资源很多），所以分配CPU4核和内存
4G。
⼆、安装CentOS8
1. 右击刚创建的虚拟机，选择设置。
2. 选择CD/DVD，勾选启动时连接，再选择使⽤ISO映像⽂件最后选择浏览，到下载好的系统镜像⽂件，最后确定。
3. 开启此虚拟机。
4. 开启虚拟机后，⿏标点进⿊窗⼝，使⽤键盘⽅向键选择第⼀项，安装CentOS 8，回车，系统开始⾃动安装。
5. 选择安装过程中使⽤的语⾔，这⾥选择中⽂、简体中⽂（中国），点击继续。
6. 点击⽹络和主机名，设置⽹络。
7. ⾸先打开⽹卡开关，然后查看是否能获取到IP地址(虚拟机⽹络适配器默认使⽤NAT模式)，更改主机名，点击应⽤，点击完成。
8. 点击软件选择（S），选择需要安装的软件系统。
9. 选择带GUI的服务器或⼯作站（安装完成后进⼊图形化桌⾯系统）然后点击完成。（若选择服务器或最⼩安装或定制操作系统虚拟化主
机，安装完成后进⼊命令⾏系统）。
10. 选择安装⽬的地（此处可进⾏磁盘划分）。
11. 选择我要配置分区，然后点击完成。
12. 在弹出界⾯中，点击加号，选择/boot，给boot分区分200M，最后点击添加挂载点。
13. 然后以同样的办法给其他分区分配空间，分配完成后点击完成。
14. 弹出更改摘要界⾯，点击接受更改。
15. 选择开始安装
16. 点击ROOT密码，设置完ROOT密码后点击完成。
17. 点击创建⽤户，输⼊⽤户名密码后点击完成(可以设置此账户为管理员)。
18. 等待系统安装完毕重启系统。
三、Hadoop的伪分布式的安装部署
xshell下载1. 安装jdk与配置环境变量
下载
利⽤xshell将安装包复制到主⽬录的software⽂件夹下
利⽤ tar -命令将其解压
配置环境变量
vim /etc/profile
在⽂件最后⼀⾏加⼊：
修改完成后不会⽴即⽣效，需要执⾏source命令来让它⽣效。
source /etc/profile
输⼊java会有回显信息，输⼊java- version命令会有版本的显⽰则表⽰JDK安装成功
2. 安装Hadoop与配置环境变量
下载Hadoop-2.8.0
与jdk⼀样的操作配置环境变量
同样需要执⾏source命令来让他⽣效
输⼊Hadoop验证是否安装成功
3. 修改配置⽂件
第⼀个配置⽂件hadoop-env.sh：
第⼆个配置⽂件l：
第三个配置⽂件l：
第四个配置⽂件plate:
⾸先把名字改为 l 后再配置
第五个配置⽂件l:
四、启动Hadoop
1. 先关闭防⽕墙（或者全部打开hadoop涉及到的端⼝）
service firewalld stop
service firewalld status
2. > 格式化Hadoop节点信息
hadoop namenode -format
### 很多信息会跳出，其中有⼀句话可以看到成功格式化
INFO common.Storage: Storage directory home/admin/software/hadoop/hadoop-2.8.0/hdfs/tmp/dfs/data has been successfully formatted. ###
节点信息只能格式化⼀次
3. 启动HDFS
start-dfs.sh
查看当前hdfs状态
4. 启动yarn
start-yarn.sh
查看当前服务
5. Hadoop⾃带的管理页⾯
node21:50070
五、实验测试
版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。
发表评论