fs.defaultFS变更使spark-sql查询hive失败是怎么回事
发表于:2026-11-02 作者:千家信息网编辑
千家信息网最后更新 2026年11月02日,这篇文章将为大家详细讲解有关fs.defaultFS变更使spark-sql查询hive失败是怎么回事,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。我们在将hdfs
千家信息网最后更新 2026年11月02日fs.defaultFS变更使spark-sql查询hive失败是怎么回事
我们在将hdfs换成⾼可⽤后,我们的namede地址发⽣变更,也就是我们的fs.defaultFS发⽣变更后, 需要注意:这些修改会影响到我们的hive的正常运⾏,因为我们hive在建表的时候,其实已经改变了该表 的数据存放路径。会导致我们在提交spark脚本【执⾏spark-sql】的脚本,报错。如下图所示:⼀直显 示,读取⽼的hdfs的namenode路径。
这⾥,我们可以访问我们的hive元数据表 SDS,如下图所示:发现还是以未升级前的namenode地 址,也就是master:9000。
因此,我们需要修改这些存储信息,有两种⽅式: 在装有hive的节点执⾏命令 查询元数据信息是否发⽣更改
此时,hive的元数据信息已经发生变更,可以正常使用
这篇文章将为大家详细讲解有关fs.defaultFS变更使spark-sql查询hive失败是怎么回事,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。
直接修改表的信息 利⽤hive⾃带的⼯具
metatool -updateLocation
metatool -updateLocation hdfs://bi hdfs://master:9000/
metatool -listFSRoot
关于"fs.defaultFS变更使spark-sql查询hive失败是怎么回事"这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。
信息
数据
查询
篇文章
回事
也就是
更多
脚本
路径
不错
实用
内容
命令
地址
数据表
文章
时候
知识
节点
还是
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
互联网金融科技
互联网黑科技
亿人帮互联网科技有限公司
互联网是不是新科技
科技类互联网
互联网科技金融
互联网 卓越科技
迪茉互联网科技
互联网科技上市公司
深圳期待互联网科技
互联网科技汛
互联网科技热点资讯
华服互联网科技官网
本届互联网博览会上的黑科技
燊美集互联网科技有限公司
山东有哪些互联网科技公司
张召忠谈中国互联网科技
张家口科技产业互联网平台
青岛易易互联网科技
杭州科技互联网公司有哪些
天津市摩尔互联网科技
平安科技 互联网
青岛互联网科技公司
互联网科技和信息
朱啸虎曾投资哪些互联网科技企业
江苏苏星互联网科技有限公司
工业互联网科技成果转化
广州智享互联网科技
重庆科技产业互联网有哪些
科技发展第三阶段互联网时代