准备三台虚拟机。
本文中ip分别设置为192.168.137.101、192.168.137.102、192.168.137.103.
步骤1-4使用root用户,步骤5及以后使用hadoop用户。
1、配置主机名和域名,开通防火墙端口
2、创建用户和用户组(3台均配置)
3、创建环境搭建目录,并设置权限给hadoop用户(3台均配置)
4、时钟同步(3台均配置)
5、ssh免密登录(3台均配置)
6、安装jdk(3台均配置)
7、上传hadoop安装包并解压(3台均配置)
8、配置文件修改(3台均配置)
(1)hadoop配置文件
(2)hdfs配置文件
(3)yarn配置文件
vim yarn-site.xml
vim mapred-site.xml
9、配置环境变量(3台均配置)
10、创建hdfs存储文件路径
11、初始并启动hdfs和yarn集群(只需在hadoop01上操作)
(1)初始化
(2)启动集群
(3)验证
访问 http://192.168.137.101:9870/dfshealth.html#tab-datanode
访问 http://192.168.137.101:8088/cluster/nodes
12、关闭hdfs集群和yarn集群
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
如需转载请保留出处:https://bianchenghao.cn/bian-cheng-ri-ji/24701.html