使用HBase自带的import工具导入数据遇到的两个问题
发表于:2025-11-07 作者:千家信息网编辑
千家信息网最后更新 2025年11月07日,因为开发环境需要迁移,将原来HBase中的表使用 org.apache.hadoop.hbase.mapreduce.Export 工具序列化到hdfs后下载出来,在新的开发环境中导入。导入时遇到了两
千家信息网最后更新 2025年11月07日使用HBase自带的import工具导入数据遇到的两个问题
因为开发环境需要迁移,将原来HBase中的表使用 org.apache.hadoop.hbase.mapreduce.Export 工具序列化到hdfs后下载出来,在新的开发环境中导入。导入时遇到了两个问题。
问题一:导入失败提示User hbase cannot submit applications to queue root.hbase
解决方法:
登录到yarn集群管理节点Resource Manager机器上/etc/hadoop 路径 ,修改fair-scheduler.xml
vi /etc/hadoop/fair-scheduler.xml,新增以下内容(所有的Resource Manager节点都需要修改),保存退出。不需要重启集群和组件
1 drf hdfs,hbase,hive hbase 100 mb,10 vcores 10240 mb,50 vcores 50
问题二:导入失败,终端没有按正常进度走,也没有相关错误提示。
查看yarn 中的job日志发现如下信息
解决方法:
去系统下查看hbase的id为uid=482(hbase)而yarn的配置中有一项为"min.user.id"最小用户id这里配置了1000。修改为300后问题排除。
这个配置的作用是"允许的最小 Linux 用户 ID。用于阻止其他超级用户。"
问题
用户
配置
最小
方法
环境
节点
集群
开发
提示
两个
工具
作用
信息
内容
序列
日志
机器
系统
组件
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
数据库安装实例名称无效
昆山电脑网络技术员
太阳风网络安全
佛山集中控制分布式服务器
新能源汽车软件开发是干嘛呢
服务器如果没有硬盘能开机吗
提高软件开发效率应该尽量采用
软件 网络安全 ppt
网络安全支持与促进演讲稿
数据库升级流程图
陌曦互联网科技有限公司
小白学网络安全看哪些书
计算机网络技术在国外的地位
高能预警网络安全综述报告
新时达万能服务器
数据库分类及区别是什么意思
软件开发hr如何面试题
软件开发使用合同范本
网络安全公众号制作
易当网络安全工程师
登lol服务器连接异常
网络安全局一级巡视员
千千静听歌词秀连接服务器失败
数据库求男女的平均年龄
网络安全故障排查流程步骤
深圳企业管理软件开发
广西运营软件开发方案
网络安全上360和百度
群晖服务器管理员账号
昆明fil服务器介绍