千家信息网

Hadoop中Hdfs如何配置

发表于:2026-10-31 作者:千家信息网编辑
千家信息网最后更新 2026年10月31日,小编给大家分享一下Hadoop中Hdfs如何配置,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!1、配置slaves,修改c
千家信息网最后更新 2026年10月31日Hadoop中Hdfs如何配置

小编给大家分享一下Hadoop中Hdfs如何配置,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

1、配置slaves,修改conf/slaves
data-dfs
复制hadoop-2.20.1目录以及所有文件到DataNode和Client
scp-rp/data/soft/hadoop-2.20.1192.168.1.12:/data/soft
scp-rp/data/soft/hadoop-2.20.1192.168.1.13:/data/soft

2、格式化Hdfs文件系统namenode,进入hadoop目录

[master@hadoop]$bin/hadoopnamenode-format输入Y,(注意区分大小写.这里一定要输入大写的Y,否刚不会成功format文件系统)
不出意外,应该会提示格式化成功。如果不成功,就去hadoop/logs/目录下去查看日志文件。

3、启动Hdfs分布式文件系统
Hadoop Hdfs配置时还要启动Hdfs分布式文件系统。进入hadoop目录,在bin/下面有很多启动脚本,可以根据自己的需要来启动。
*start-all.sh启动所有的Hadoop守护。包括namenode,datanode,jobtracker,tasktrack
*stop-all.sh停止所有的Hadoop
*start-mapred.sh启动Map/Reduce守护。包括Jobtracker和Tasktrack
*stop-mapred.sh停止Map/Reduce守护
*start-dfs.sh启动HadoopDFS守护.Namenode和Datanode
*stop-dfs.sh停止DFS守护

启动所有守护
[master@hadoop]bin/start-all.sh//会自动找到conf/slaves文件里的IP或者机器名,启动相应的slaves服务端
同样,如果要停止hadoop,则[master@hadoop]$bin/stop-all.sh

4、HDFS操作
再来看一下Hadoop Hdfs配置过程中对HDFS进行的操作。进入Hadoop目录,运行bin/目录的hadoop命令,可以查看Haoop所有支持的操作及其用法,这里以几个简单的操作为例。

建立目录
[master@hadoop]$bin/hadoopdfs-mkdirtestdir
在HDFS中建立一个名为testdir的目录

复制文件
[master@hadoop]$bin/hadoopdfs-put
/home/dbrg/large.ziptestfile.zip
把本地文件large.zip拷贝到HDFS的根目录/user/dbrg/下,文件名为testfile.zip

查看现有文件
[master@hadoop]$bin/hadoopdfs-ls
行hadoop程序时,中途我把它终止了,然后再向hdfs加文件或删除文件时,出现Namenodeisinsafemode错误:
rmr:org.apache.hadoop.dfs.SafeModeException:Cannotdelete/user/hadoop/input.Namenodeisinsafemode
解决的命令:
bin/hadoopdfsadmin-safemodeleave#关闭safemode。本就关于Hadoop Hdfs配置方面的内容就介绍到这里

以上是"Hadoop中Hdfs如何配置"这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注行业资讯频道!

文件 目录 配置 系统 成功 内容 篇文章 分布式 命令 格式 输入 不出意外 不怎么 大写 大小 大部分 拷贝 方面 日志 更多 数据库的安全要保护哪些东西 数据库安全各自的含义是什么 生产安全数据库录入 数据库的安全性及管理 数据库安全策略包含哪些 海淀数据库安全审计系统 建立农村房屋安全信息数据库 易用的数据库客户端支持安全管理 连接数据库失败ssl安全错误 数据库的锁怎样保障安全 互联网科技公司排名 互联网科技工作委员会主任 科技平台互联网 互联网巨头反垄断金融科技 狮子座互联网科技 齐家互联网科技 赫美联合互联网科技 佰商互联网科技有限公司 中正互联网科技招聘 广西拼得多互联网科技有限公司 中国的互联网科技企业的崛起 互联网金融科技公司干啥的 世界互联网科技公司市值排名 上海京穆互联网科技有限公司 广州千川互联网科技有限公司 21世纪互联网科技成就 互联网科技数字货币 宇信科技在杭州互联网排第几 神州科技互联网有限公司 上海同邻互联网科技有限公司规模 华服互联网科技怎么样 互联网金融监管科技数据 新华互联网科技学院 互联网与未来科技 互联网科技与大数据专业 洛阳昕诺飞互联网科技有限公司 互联网科技和信息 工业互联网等科技实现智能化赋能 互联网科技手抄报图片 互联网金融金融科技
0