복붙노트

[HADOOP] yum을 사용하여 아파치 스파크 설치

HADOOP

yum을 사용하여 아파치 스파크 설치

내 조직의 HDP 상자에 스파크를 설치하는 과정에서입니다. 나는 냠 설치 불꽃을 실행하고 1.4.1 스파크 설치합니다. 어떻게 스파크 2.0를 설치합니까? 도와주세요!

해결법

  1. ==============================

    1.스파크 2는 HDP 2.5 (기술 미리보기로) 지원됩니다. 당신은 특정 HDP 2.5의 repo이 냠의 repo 디렉토리에 추가 한 후 같은를 설치할 수 있습니다. 스파크 1.6.2은 HDP 2.5 버전의 기본값입니다.

    스파크 2는 HDP 2.5 (기술 미리보기로) 지원됩니다. 당신은 특정 HDP 2.5의 repo이 냠의 repo 디렉토리에 추가 한 후 같은를 설치할 수 있습니다. 스파크 1.6.2은 HDP 2.5 버전의 기본값입니다.

    wget http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.5.0.0/hdp.repo
    
    sudo cp hdp.repo /etc/yum.repos.d/hdp.repo
    
    sudo yum install spark2-master
    

    또는 sudo는 냠 spark2를 설치 (또한 내가하려고 할 때 같은 일을 할 것 같다)

    HDP 2.5 http://hortonworks.com/products/data-center/hdp/에 무슨 새로운 참조

    REPOS의 전체 목록을 참조 https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.5.0/bk_release-notes/content/download-links-250.html

  2. from https://stackoverflow.com/questions/40711924/installing-apache-spark-using-yum by cc-by-sa and MIT license