[HADOOP] 하둡 단일 노드 설치 2.5.1 후 작업 추적기와 JobTracker를 참조 할 수없는

하둡 단일 노드 설치 2.5.1 후 작업 추적기와 JobTracker를 참조 할 수없는

새로운 스피 2.5.1 하둡합니다. 이미 이전에 하둡 1.0.4를 설치 한 것처럼, 내가 설치 프로세스가 같은 것 때문에 튜토리얼 다음 다음을 생각했다.

http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster/

모든 것은 괜찮다고, 심지어 내가 코어를 site.xml에서 이러한 설정을 준

<name>fs.default.name</name>

  <value>hdfs://localhost:54310</value>

하지만 난 여러 사이트에 9000이 값을 보았다.

또한 yarn.xml으로 변경됩니다.

나는 맵리 듀스 작업을 실행할 때 여전히 모든 것이 잘 작동합니다. 하지만 내 질문은

내가 명령 JPS을 실행할 때 그것은 나에게이 출력을 제공합니다 ..

hduser@secondmaster:~$ jps

5178 ResourceManager

5038 SecondaryNameNode

4863 DataNode

5301 NodeManager

4719 NameNode

6683 Jps

나는 JPS에서 작업 추적기 및 작업 추적기를 참조니까. 실행이 악마는 어디. 그리고 내가 할 수 맵리 듀스 작업을 실행하는 데 얼마나이 deamons없이.

감사,

Sreelatha K.

해결법

1. ==============================

   1.이후 하둡 버전 하둡 2.0에서 기본 처리 프레임 워크는 클래식 맵리 듀스에서 원사로 변경되었습니다. 당신은 당신이 원사에 JobTracker를, 태 스커를 볼 수 원사를 사용하고 있습니다. 은 JobTracker 및 Tasktracker은 원사에서 각각 자원 관리자와 Nodemanager로 대체됩니다.

   이후 하둡 버전 하둡 2.0에서 기본 처리 프레임 워크는 클래식 맵리 듀스에서 원사로 변경되었습니다. 당신은 당신이 원사에 JobTracker를, 태 스커를 볼 수 원사를 사용하고 있습니다. 은 JobTracker 및 Tasktracker은 원사에서 각각 자원 관리자와 Nodemanager로 대체됩니다.

   하지만 여전히 당신은 원사 대신 클래식 맵리 듀스 프레임 워크를 사용하는 옵션이 있습니다.

2. ==============================

   2.하둡 2에서 맵리 듀스 작업을 실행하기위한 다른 방법이라는 원사가있다. 당신이 yarn.xml에서 변경 한 이후, 맵리 듀스 처리는 기존의 맵리 듀스 프레임 워크를 사용하지 않는 원사를 사용하여 발생합니다. 그건 아마 당신이 TaskTracker와 JobTracker에가 JPS 명령을 실행 한 후 목록에 표시되지 않는 이유가 될 것. ResourceManager에와 NodeManager는 원사의 데몬 유의하십시오.

   하둡 2에서 맵리 듀스 작업을 실행하기위한 다른 방법이라는 원사가있다. 당신이 yarn.xml에서 변경 한 이후, 맵리 듀스 처리는 기존의 맵리 듀스 프레임 워크를 사용하지 않는 원사를 사용하여 발생합니다. 그건 아마 당신이 TaskTracker와 JobTracker에가 JPS 명령을 실행 한 후 목록에 표시되지 않는 이유가 될 것. ResourceManager에와 NodeManager는 원사의 데몬 유의하십시오.

3. ==============================

   3.YARN은 작업을-감소하는지도 작성 아파치 불꽃, 폭풍과 더 많은 도구와 통합 할 수 사용할 수 있습니다 리소스 관리자의 차세대

   YARN은 작업을-감소하는지도 작성 아파치 불꽃, 폭풍과 더 많은 도구와 통합 할 수 사용할 수 있습니다 리소스 관리자의 차세대

from https://stackoverflow.com/questions/26759422/unable-to-see-task-tracker-and-jobtracker-after-hadoop-single-node-installation by cc-by-sa and MIT license