导航：首页 > 互联网科技 >

Hadoop 部署之环境准备(一)

发表于：2025-12-02 作者：千家信息网编辑

千家信息网最后更新 2025年12月02日，一、软硬件规划ID主机类型主机名IP应用软件操作系统硬件配置1物理机namenode01192.168.1.200jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-

千家信息网最后更新 2025年12月02日Hadoop 部署之环境准备(一)

一、软硬件规划

ID	主机类型	主机名	IP	应用软件	操作系统	硬件配置
1	物理机	namenode01	192.168.1.200	jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1	CentOS7.4	6核CPU、8G内存、250存储
2	物理机	datanode01	192.168.1.201	jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1	CentOS7.4	6核CPU、8G内存、250存储
3	物理机	datanode02	192.168.1.202	jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1	CentOS7.4	6核CPU、8G内存、250存储
4	物理机	datanode03	192.168.1.203	jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1	CentOS7.4	6核CPU、8G内存、250存储

我这里规划的角色不是太好，如果是四台机器，建议大家按照我们下面的分配

ZooKeeper
ZooKeeper Server：namenode01
HDFS
NameNode：namenode01
SecondaryNameNode：namenode01
DataNode：datanode[01-03]
YARN
ResourceManager：namenode01
NodeManager：datanode[01-03]
HBase
Master：namenode01
RegionServer：datanode[01-03]
Hive
HiveServer2：namenode01
Hive Metastore Server：namenode01
Spark
Master：namenode01
Worker：datanode[01-03]

二、主机名解析

修改四台服务器的主机名。

192.168.1.200 namenode01 hbase01 spark01 hive01 cluster1192.168.1.201 datanode01 hbase02 spark02 zk01 mysql01192.168.1.202 datanode02 hbase03 spark03 zk02192.168.1.203 datanode03 hbase04 spark04 zk03

三、配置 SSH 互信

在namenode01节点上面进行操作。

ssh-keygen -t rsassh-copy-id namenode01ssh-copy-id datanode01ssh-copy-id datanode02ssh-copy-id datanode03

四、创建用户

创建用户（4台机器相同操作）

useradd hadoop && echo '123456' |passwd --stdin hadoop

使用命令visudo设置用户权限（4台机器相同操作），添加如下内容：

hadoop    ALL=(ALL)       ALL

五、JDK 的安装

下载JDK1.8，可以选择下载rpm包，直接安装即可使用。
https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

很赞哦！

主机内存物理存储机器用户相同规划配置操作系统内容命令应用软件建议服务器权限硬件类型系统节点数据库的安全要保护哪些东西数据库安全各自的含义是什么生产安全数据库录入数据库的安全性及管理数据库安全策略包含哪些海淀数据库安全审计系统建立农村房屋安全信息数据库易用的数据库客户端支持安全管理连接数据库失败ssl安全错误数据库的锁怎样保障安全用友网络安全边际 .db 是什么数据库服务器每天不定时重启一次数据库大容量如何提高性能关于网络安全的知识要点数据库分库技巧服务器监测软件做软件开发的产品助理打印机网络安全密码是多少软件开发企业技术培训广东智慧党建软件开发软件关于ai网络安全手抄报上的句子网络安全工程师和黑客帆软内置服务器开机运行天津技术软件开发服务价钱大流量服务器攻击网站的方法人间地狱服务器管理员德国网络安全研究网络安全不传播 2018网络安全法知识考试数据库leftjoin的用法数据库图像模糊儿童基因数据库的筹建方向网络安全监测屏作用宣城自建存储服务器找哪家群晖服务器创建管理员黑魂3无法连接服务器怎么联机常州基础网络技术服务网络安全征文五年级400字作文数据融合网络安全

千家信息网