복붙노트

[HADOOP] 역사 UI가 작동하지 스파크 | Ambari | 실

HADOOP

역사 UI가 작동하지 스파크 | Ambari | 실

나는 HDFS, 원사, 호스트에서 실행되는 불꽃 같은 서비스를 제공 Ambari를 사용하여 하둡 클러스터 설정을 가지고있다. 내가 마스터 원사로 클러스터 모드에서 샘플 스파크 파이를 실행하면 응용 프로그램이 성공적으로 실행됩니다 나는 자원 관리자 로그에서 동일하게 볼 수 있습니다.

내가 역사의 링크를 클릭하면, 그것은 스파크 역사 UI를 표시하지 않습니다. 어떻게 활성화 / 동일하게 볼 수 있습니다?

해결법

  1. ==============================

    1.당신의 스파크 역사 서버가 이미 불꽃은 defaults.conf 파일에 spark.yarn.historyServer.address를 찾고에 의해 구성되어 있는지 먼저 확인합니다.

    당신의 스파크 역사 서버가 이미 불꽃은 defaults.conf 파일에 spark.yarn.historyServer.address를 찾고에 의해 구성되어 있는지 먼저 확인합니다.

    https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.3.6/bk_installing_manually_book/content/ch19s04s01.html : 구성되지 않은 경우,이 링크를 클릭하면 서버를 구성 할 수 있도록해야한다

    이미 구성된 경우, 히스토리 서버 호스트가 클러스터의 모든 노드에서 액세스 할 수 있는지 확인하고 또한 포트가 열려 있습니다.

  2. from https://stackoverflow.com/questions/41627985/spark-history-ui-not-working-ambari-yarn by cc-by-sa and MIT license