[HADOOP] 클라우 데라에서 실행되지 단어 수
HADOOP클라우 데라에서 실행되지 단어 수
나는 아마존 EC2의 리눅스 RHEL 7.2 인스턴스에서 클라우 데라 5.8을 설치했습니다. 나는 SSH로 로그인하고 난 다음 명령을 맵리 듀스 작업을 시험하기위한 단어 수 예제를 실행하려합니다 :
hadoop jar /opt/cloudera/parcels/CDH-5.8.0-1.cdh5.8.0.p0.42/lib/hadoop-mapreduce/hadoop-mapreduce-examples.jar wordcount archivo.txt output
문제는 단어 수의 프로그램이 차단되도록하고 그렇지 출력을 생성한다. 만 다음과 같은 메시지가 표시됩니다 :
16/08/11 13:10:02 INFO client.RMProxy: Connecting to ResourceManager at ip-172-31-22-226.ec2.internal/172.31.22.226:8032
16/08/11 13:10:03 INFO input.FileInputFormat: Total input paths to process : 1
16/08/11 13:10:03 INFO mapreduce.JobSubmitter: number of splits:1
16/08/11 13:10:04 INFO mapreduce.JobSubmitter: Submitting tokens for job: job_1470929244097_0007
16/08/11 13:10:04 INFO impl.YarnClientImpl: Submitted application application_1470929244097_0007
16/08/11 13:10:04 INFO mapreduce.Job: The url to track the job: http://ip-172-31-22-226.ec2.internal:8088/proxy/application_1470929244097_0007/
16/08/11 13:10:04 INFO mapreduce.Job: Running job: job_1470929244097_0007
그리고 "실행"이후 차단됩니다. 이후 나는 차단 해제에 대한 Ctrl + C를 눌러해야하고 그렇지 출력을 생성합니다.
이유를 아는 사람? 나는 그것이 아마 구성 문제라고 생각하고 내가되는 DataNode에 등 새로운입니다.
고마워요.
해결법
-
==============================
1.어떤 자원 (지도 또는 감속기 슬롯)이없는 것처럼, 작업이 자원을 기다리고 찾습니다. 당신의 작업 상태를 확인할 수 있습니다.
어떤 자원 (지도 또는 감속기 슬롯)이없는 것처럼, 작업이 자원을 기다리고 찾습니다. 당신의 작업 상태를 확인할 수 있습니다.
http://ip-172-31-22-226.ec2.internal:8088
from https://stackoverflow.com/questions/38902620/wordcount-not-running-in-cloudera by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 스파크 스트리밍 작업에 broadcast_1의 broadcast_1_piece0를 가져 오지 못했습니다 (0) | 2019.10.21 |
---|---|
[HADOOP] 중복 된 항목을 삽입 Sqoop을 수출 (0) | 2019.10.21 |
[HADOOP] 통역 하이브 제플린의 JDBC 인터프리터에서 찾을 수 없습니다 (0) | 2019.10.21 |
[HADOOP] 데이터 노드 오류 하이브에 트위터 심리 분석을위한 쿼리를 실행하는 동안 (0) | 2019.10.21 |
[HADOOP] 하이브에 대한 질문 (0) | 2019.10.21 |