1.建立在伪分布式的基础上。伪分布式搭建请参考Hadoop3.1虚拟机上伪分布式模式搭建
2。虚拟机准备。该集群使用2.8.3版本和3.X版本。除了端口号不同之外,没有太大区别
192.168.44.10 m.gsm-guard.net 192.168.44.11 m.gsm-guard.net 192.168.44.12 m.gsm-guard.net
3。关闭防火墙,因为需要开放的端口太多,而且在测试环境中,为了避免干扰,先关闭防火墙
systemctl 停止防火墙
4。三个虚拟机之间开启ssh免密登录,账号hadoop
ssh-keygen -t rsa 生产密钥 ssh-copy-id 192.168.44.10 释放密钥
5。配置JAVA_HOME
${HADOOP_HOME}/etc/hadoop目录下的三个脚本 m.gsm-guard.net 纱线环境.sh m.gsm-guard.net 需要配置JAVA_HOME变量,完整路径: 导出JAVA_HOME=/home/java/jdk1.8.0_201
6。三个节点之间的功能分配
m.gsm-guard.net:NameNode,DataNode,NodeManager #NameNode 和 secondaryNameNode 不能在同一节点上 m.gsm-guard.net:DataNode,ResourceManager,NodeManager #ResourceManager需要单独的节点 m.gsm-guard.net:SecondaryNameNode,DataNode,NodeManager #每个节点上都可以放置DataNode
7。集群配置
7.1 core-site.xml
fs.defaultFS 相关推荐
2023年IT行业:哪些工作机
IT行业国家排名揭晓:科技巨头
企业并购案例论文题目,与操作:
IT行业未来发展前景:技术、市
年网络安全重大事件:网络战无声
风云激荡的科技江湖,巨头们的崛
a股科技龙头公司名单,揭秘A股
全球网络安全企业100强有哪些
it行业新技术有哪些方面,革命
科技股份龙头股:引领未来,实现
年企业并购大事件:策略、影响与
数据新闻背后的故事:如何通过案
IT行业全球排名榜:揭示数字时
IT行业地域分布大揭秘:谁将成
it行业就业前景好吗知乎,充满
科技公司总市值排行榜最新,战:
科技行业巨头有哪些公司上市,全
市值前十的科技公司有哪些,市值
全球网络安全事件案例分析:经验
万花筒:从人工智能到区块链,再
科技股份龙头老大,领跑时代的创
年企业并购案例分析报告:揭示商
数据新闻案例分析模板怎么写,挖
it行业全球排名第一,排名第一