[HADOOP] 하이브 - SELECT COUNT (*)가와 TEZ 작업하지만 MR 작동하지
HADOOP하이브 - SELECT COUNT (*)가와 TEZ 작업하지만 MR 작동하지
나는 마루 데이터와 하이브 외부 테이블이있다.
내가 표에서 SELECT COUNT (*)를 실행하면 TEZ와 함께 실패합니다.
실행 엔진은 MR로 변경 될 때 그러나 그것은 작동합니다. 이 TEZ에 실패 왜 어떤 생각? 나는 TEZ에 다음과 같은 오류를 받고 있어요 :
해결법
-
==============================
1.당신은 HDFS에 tez.tar.gz 파일을 넣어해야합니다. 나는 당신이되고이 단계를 놓칠 것 같아요.
당신은 HDFS에 tez.tar.gz 파일을 넣어해야합니다. 나는 당신이되고이 단계를 놓칠 것 같아요.
HDFS에 응용 프로그램 폴더를 만들
hdfs dfs -mkdir -p /hadoop/apps/tez/
Tejhktrkgajhfile을 넣어
hdfs dfs -put /usr/hadoop/tez/lib/tez.tar.gz /hadoop/apps/tez/
해당 폴더 및 타르에 권한을 부여
hdfs dfs -chown -R $HDFS_USER:$HADOOP_USER /hadoop hdfs dfs -chmod -R 555 /hadoop/apps/tez hdfs dfs -chmod -R 444 /hadoop/apps/tez/tez.tar.gz
from https://stackoverflow.com/questions/49503973/hive-select-count-not-working-with-tez-with-but-works-with-mr by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] HIVE_STATS_JDBC_TIMEOUT 및 방법에 대한 모든 업데이트는 소스 레벨에서를 건너 뛰려면 (0) | 2019.09.20 |
---|---|
[HADOOP] 윈도우에서 HBase를 연결할 수 없습니다 (0) | 2019.09.20 |
[HADOOP] 하둡의 상단에 서블릿 컨테이너? (0) | 2019.09.20 |
[HADOOP] 는 하둡 코어-site.xml 파일을 찾을 수 없기 때문에 스파크 작업이 실패합니다 (0) | 2019.09.20 |
[HADOOP] 하둡 맵퍼로 다중 입력 (0) | 2019.09.20 |