本文介绍: ## 问题描述 1. 今天在跑hive sql时候报错;FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask【从hive log找到错误提示】,蛮无语的,也看不出啥原因导致的。。。 2. 在网上查了蛮久的,找到一个解决方案 ## 解决方案 【[参考方案](https://blog.csdn.net/decsjdz/article/details/94561573)】 1. 参考

问题描述

  1. 今天在跑hive sql时候报错;FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask【从hive log找到错误提示】,蛮无语的,也看不出啥原因导致的。。。
  2. 在网上查了蛮久的,找到一个解决方案

解决方案

参考方案

  1. 参考错误原因:
Cause:
The above issue occurs when there are multiple jobs triggered and Hive removes a session directory for some application failure while Tez Application Master is still using it. The Tez Application Master staging directory is part of Hive Scratch directory which is controlled by the Hive Session.
Solution:
To resolve this issue, block the closing of sessions until tez AM shuts down中文描述就是这个样子:】
当触发多个作业,并且当Tez application Master仍在使用时,Hive删除某个应用程序故障会话目录时,就会出现上述问题。
Tez application Master暂存目录是Hive Scratch目录的一部分,该目录由Hive session控制解决方案:要解决问题,请阻止会话关闭,直到tez AM关闭
  1. 执行sql设置set tez.client.asynchronousstop=false然后就正常执行了。。。

【未完待续-…先正常能跑,有时间了再深入研究下】

原文地址:https://blog.csdn.net/qq_43408367/article/details/128601584

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任

如若转载,请注明出处:http://www.7code.cn/show_45466.html

如若内容造成侵权/违法违规/事实不符,请联系代码007邮箱suwngjj01@126.com进行投诉反馈,一经查实,立即删除

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注