记一次CDH集群迁移产生的问题——HIVE

本文介绍: 1. metadata.Ses s ionHi v eMetaSt o reCli e nt；2. MapRedu ce 任务卡住

生产环境CDH集群迁移到新的环境，迁移之后使用Hive Cli e nt方执行任务一直失败。

问题1：metadata.Ses s ionHiveMetaSt o reCli e nt

产生报错：

FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

看起来是hive元数据存储有问题，所以查看了一下配置 hive-site.xml

发现没有配置用户名和密码，于是增加配置

在机器上测试执行 hive -e “show database s;”依然报一样的错。于是查看与MetaSto re其他有关的配置，突然发现 hive.metastore.uri s 配置的是迁移前的集群配置的地址，于是修改并重启。

这时候执行 show database s；可以成功。

问题2：MapRedu ce 任务卡住

本来以为没问题了，这时候，执行insert任务的时候，一直卡住

看了一下执行日志

发现没有执行reduce任务，于是再次查看配置，怀疑是分配相关的还有问题，果然就看到 hive.zookeeper.quor u m配置还是用的迁移前的地址….于是修改并重启。

重新执行insert代码可以正常执行了

总结

迁移集群一定要检查好配置，尤其是复制黏贴来的！！！

本次相关的配置修改：

原文地址:https://blog.csdn.net/fox _233/ar ti cle/details/134836391

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。

如若转载，请注明出处：http://www.7code.cn/show_50138.html

如若内容造成侵权/违法违规/事实不符，请联系代码007邮箱：su wngjj01@126.com 进行投诉反馈，一经查实，立即删除！

声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。

相关文章

发表回复 取消回复

发表回复取消回复