[HADOOP] 우분투 마스터와 윈도우 슬레이브를 이용한 Hadoop 클러스터 설정

우분투 마스터와 윈도우 슬레이브를 이용한 Hadoop 클러스터 설정

안녕하세요 저는 Hadoop을 처음 사용합니다.

Hadoop 버전 (2.2.0)

목표 :

아래 질문과의 관계 설정 :

질문 :

언급했듯이 이것은 구현 계획보다는 실험으로 더 많습니다. 우리의 마지막 env는 완전히 리눅스에있을 것입니다. 제안 해 주셔서 감사합니다.

해결법

1. ==============================

   1.당신은 hadoop을 배치하는보다 표준적인 방법으로 더 많은 성공을 거둘 수 있습니다. 마스터와 노예를위한 우분투 VM을 사용해보십시오.

   당신은 hadoop을 배치하는보다 표준적인 방법으로 더 많은 성공을 거둘 수 있습니다. 마스터와 노예를위한 우분투 VM을 사용해보십시오.

   모든 프로세스가 단일 VM에서 실행되는 의사 배포 배포를 시도 할 수도 있으므로 여러 OS를 고려하지 않아도됩니다.

2. ==============================

   2.나는 같은 사용자 이름으로 만 작업했습니다. 일반적으로 SSH는 -l 명령을 사용하여 다른 로그인 이름으로 로그인 할 수 있습니다. 그러나 이것은 까다로울 수 있습니다. 슬레이브 파일에 슬레이브를 나열해야합니다.

   나는 같은 사용자 이름으로 만 작업했습니다. 일반적으로 SSH는 -l 명령을 사용하여 다른 로그인 이름으로 로그인 할 수 있습니다. 그러나 이것은 까다로울 수 있습니다. 슬레이브 파일에 슬레이브를 나열해야합니다.

   최소한 https://hadoop.apache.org/docs/r0.19.1/cluster_setup.html#Slaves 매뉴얼에서 사용자 이름을 추가 할만한 것을 찾지 못했습니다. 슬레이브 conf 파일의 slavenode에 -l login_name을 추가하여 작동하는지 확인하는 것이 좋습니다.

from https://stackoverflow.com/questions/21301109/hadoop-cluster-configuration-with-ubuntu-master-and-windows-slave by cc-by-sa and MIT license