복붙노트

[HADOOP] 클라우 데라에서 실행되지 단어 수

HADOOP

클라우 데라에서 실행되지 단어 수

나는 아마존 EC2의 리눅스 RHEL 7.2 인스턴스에서 클라우 데라 5.8을 설치했습니다. 나는 SSH로 로그인하고 난 다음 명령을 맵리 듀스 작업을 시험하기위한 단어 수 예제를 실행하려합니다 :

 hadoop jar /opt/cloudera/parcels/CDH-5.8.0-1.cdh5.8.0.p0.42/lib/hadoop-mapreduce/hadoop-mapreduce-examples.jar wordcount archivo.txt output

문제는 단어 수의 프로그램이 차단되도록하고 그렇지 출력을 생성한다. 만 다음과 같은 메시지가 표시됩니다 :

16/08/11 13:10:02 INFO client.RMProxy: Connecting to ResourceManager at ip-172-31-22-226.ec2.internal/172.31.22.226:8032

16/08/11 13:10:03 INFO input.FileInputFormat: Total input paths to process : 1

16/08/11 13:10:03 INFO mapreduce.JobSubmitter: number of splits:1

16/08/11 13:10:04 INFO mapreduce.JobSubmitter: Submitting tokens for job: job_1470929244097_0007

16/08/11 13:10:04 INFO impl.YarnClientImpl: Submitted application application_1470929244097_0007

16/08/11 13:10:04 INFO mapreduce.Job: The url to track the job: http://ip-172-31-22-226.ec2.internal:8088/proxy/application_1470929244097_0007/

16/08/11 13:10:04 INFO mapreduce.Job: Running job: job_1470929244097_0007

그리고 "실행"이후 차단됩니다. 이후 나는 차단 해제에 대한 Ctrl + C를 눌러해야하고 그렇지 출력을 생성합니다.

이유를 아는 사람? 나는 그것이 아마 구성 문제라고 생각하고 내가되는 DataNode에 등 새로운입니다.

고마워요.

해결법

  1. ==============================

    1.어떤 자원 (지도 또는 감속기 슬롯)이없는 것처럼, 작업이 자원을 기다리고 찾습니다. 당신의 작업 상태를 확인할 수 있습니다.

    어떤 자원 (지도 또는 감속기 슬롯)이없는 것처럼, 작업이 자원을 기다리고 찾습니다. 당신의 작업 상태를 확인할 수 있습니다.

    http://ip-172-31-22-226.ec2.internal:8088
    
  2. from https://stackoverflow.com/questions/38902620/wordcount-not-running-in-cloudera by cc-by-sa and MIT license