Hadoop1.2.1集群如何搭建

这篇文章主要为大家展示了"Hadoop1.2.1集群如何搭建"，内容简而易懂，条理清晰，希望能够帮助大家解决疑惑，下面让小编带领大家一起研究并学习一下"Hadoop1.2.1集群如何搭建"这篇文章吧。

Hadoop集群搭建(-v1.2.1)

1. 官网下载安装包(版本: 1.2.1) 2. 安装依赖

• Java 和 ssh

3. 解压安装包，添加HADOOP_HOME变量到/etc/profile 4. 搭建集群

1. 机器规划(三台小集群)

2. 在三台机器上创建相同的用户: hadoop

3. 在三台机器上分别配置/etc/hosts

192.168.10.1 master slave1 192.168.10.2 slave2 192.168.10.3 slave3

4. 在三台机器上建立ssh-key，并设置免密码登陆

   $ ssh-keygen -t dsa$ cat ~/ssh/id_dsa.pub >> ~/ssh/authorized_keys

   
   

将authorized_keys文件内容复制到另外两台主机的~/ssh/authorized_keys文件中 5. 将Hadoop安装包复制到三台机器中，修改Hadoop中的配置文件 - conf/Hadoop-env.sh export JAVA_HOME=path-to-jdk - conf/core-site.xml xml fs.default.name hdfs://master:9000 hadoop.tmp.dir /var/tmp/hadoop - conf/hdfs-site.xml xml dfs.repliation 3 - conf/mapred-site.xml xml mapred.job.tracker hdfs://master:9001 - conf/master master - conf/slave text slave1 slave2 slave3

5. 启动Hadoop服务

$ bin/hadoop namenode -format  #格式化hdfs$ bin/start-all.sh  # 启动所有进程查看集群状态:http://localhost:50030  # MapReduce的Web页面http://localhost:50070  # HDFS的Web页面或$ hadoop dfsadmin -report

6. 停止Hadoop服务 bin/stop-all.sh

以上是"Hadoop1.2.1集群如何搭建"这篇文章的所有内容，感谢各位的阅读！相信大家都有了一定的了解，希望分享的内容对大家有所帮助，如果还想学习更多知识，欢迎关注行业资讯频道！