복붙노트

[HADOOP] 원사 노드 관리자가 시작되지 않습니다. 오류 없음

HADOOP

원사 노드 관리자가 시작되지 않습니다. 오류 없음

Ubuntu 16.04에 Hadoop 2.7.4가 설치되어 있습니다. 의사 모드에서 실행하려고합니다. 모든 hadoop 파일, NameNode 및 DataNode 파일에 대해 마운트 된 '/ hadoop'파티션이 있습니다.

내 핵심 site.xml은 다음과 같습니다

<configuration>

<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>

</configuration>

내 hdfs-site.xml은 다음과 같습니다.

<configuration>

<property>
<name>dfs.replication</name>
<value>1</value>
</property>

<property>
<name>dfs.name.dir</name>
<value>/hadoop/nodes/namenode</value>
</property>

<property>
<name>dfs.data.dir</name>
<value>/hadoop/nodes/datanode</value>
</property>

</configuration>

내 mapred-site.xml은 다음과 같습니다.

<configuration>

<property>
<name>Map-Reduce.framework.name</name>
<value>yarn</value>
</property>

</configuration>

내 yarn-site.xml은 다음과 같습니다.

<configuration>

<property>
<name>yarn.nodemanager.aux-services</name>
<value>Map-Reduce_shuffle</value>
</property>

</configuration>

실행 후

$ start-dfs.sh 
$ start-yarn.sh
$ jps

다음 데몬이 실행되고 있습니다.

2800 ResourceManager
2290 NameNode
4242 Jps
2440 DataNode
2634 SecondaryNameNode

start-yarn.sh는 다음을 제공합니다.

$ start-yarn.sh
starting yarn daemons
starting resourcemanager, logging to /hadoop/hadoop-2.7.4/logs/yarn-abdy-resourcemanager-abdy-hadoop.out
localhost: starting nodemanager, logging to /hadoop/hadoop-2.7.4/logs/yarn-abdy-nodemanager-abdy-hadoop.out

nodemanager 데몬이 전혀 시작되지 않는 것 같습니다. 이 문제를 해결하기 위해 2 일 동안 시도했지만 해결 방법을 찾지 못하는 것 같습니다. 누군가 나를 안내해주세요.

해결법

  1. ==============================

    1.먼저 네임 노드를 포맷해야합니다 :

    먼저 네임 노드를 포맷해야합니다 :

    hadoop namenode -format
    

    그런 다음 다음을 실행하십시오.

    hadoop namenode -format
    

    네임 노드의 포맷이 완료되면 다음 명령을 실행합니다.

    start-dfs.sh
    start-yarn.sh
    
  2. from https://stackoverflow.com/questions/46703007/yarn-nodemanager-not-starting-up-getting-no-errors by cc-by-sa and MIT license