[HADOOP] AWS EMR에서 원사를 다시 시작하는 방법
HADOOPAWS EMR에서 원사를 다시 시작하는 방법
Hadoop 2.6.0 (emr-4.2.0 이미지)을 사용하고 있습니다. yarn-site.xml에서 약간의 변경을가했으며 변경 사항을 적용하기 위해 원사를 다시 시작하려고합니다.
이 작업을 수행 할 수있는 명령이 있습니까?
해결법
-
==============================
1.수정 (2011 년 10 월 26 일) : 자세한 방법은 AWS에서 공식적으로 게시했습니다. https://aws.amazon.com/premiumsupport/knowledge-center/restart-service-emr/.
수정 (2011 년 10 월 26 일) : 자세한 방법은 AWS에서 공식적으로 게시했습니다. https://aws.amazon.com/premiumsupport/knowledge-center/restart-service-emr/.
-
==============================
2.Google에서 올 사람들에게
Google에서 올 사람들에게
EMR에서 서비스를 다시 시작하려면 다음 작업을 수행하십시오.
예를 들어, YARN Resource Manager 서비스의 이름은 hadoop-yarn-resourcemanager입니다.
참고 : 중지 / 시작이 필요합니다. restart 명령을 사용하지 마십시오.
ps를 사용하여 프로세스를 확인한 다음 로그 디렉토리 / var / log /에 오류가 있는지 로그 파일에서 확인하십시오.
출처 : https://aws.amazon.com/premiumsupport/knowledge-center/restart-service-emr/
-
==============================
3.수행하려는 작업이 로그 집계를 사용하는 것이면 실제로 로그 집계가 활성화 된 클러스터를 문서에서 설명한대로 더 쉽게 만들 수 있습니다.
수행하려는 작업이 로그 집계를 사용하는 것이면 실제로 로그 집계가 활성화 된 클러스터를 문서에서 설명한대로 더 쉽게 만들 수 있습니다.
http://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-plan-debugging.html
emr-4.3.0을 사용하는 경우 실제로 활성화됩니다.
from https://stackoverflow.com/questions/34953319/how-to-restart-yarn-on-aws-emr by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 아파치 헬릭스 대 YARN (0) | 2019.07.05 |
---|---|
[HADOOP] Hadoop : 데이터 노드 프로세스가 종료되었습니다. (0) | 2019.07.05 |
[HADOOP] HDFS가 청취하고있는 포트 번호를 찾으십시오. (0) | 2019.07.05 |
[HADOOP] Hadoop 안전 모드 복구 - 너무 오래 걸림! (0) | 2019.07.05 |
[HADOOP] 테이블 크기 (행 수)를 빠르게 찾기위한 하이브 쿼리 (0) | 2019.07.05 |