[HADOOP] 일식을 통합하고 2.6 하둡하는 방법
HADOOP일식을 통합하고 2.6 하둡하는 방법
내 우분투 14.04에서 하둡 2.6을 설치 한하지만 자바 API와 하둡에서 코드를 실행하려고 할 때, 나는 jar 파일을 내 보낸 단자를 실행해야합니다. 하둡과 일식을 구성하고 직접 이클립스에서 하둡을위한 자바 코드를 실행하는 방법은 없나요?
해결법
-
==============================
1.일식과 하둡-2.6.0 통합
일식과 하둡-2.6.0 통합
1 단계 : 하둡 - 이클립스 플러그인 2.6.0 항아리 다운로드
2 단계 : 이클립스 폴더의 플러그인 디렉토리에 일식의지도-줄 플러그인을 복사 - sudo는 CP /home/hdfs/Downloads/hadoop-eclipse-plugin-2.6.0.jar / 옵션 / 일식 / 플러그인 / 다시 시작 명령을 사용하여 일식 - / 옵션 / 일식 / 일식 -vm /usr/local/jdk1.8.0_05/bin/java -vmargs -Xmx1024m elcipse 때문에 X11 포워딩 문제로 다가오고 있지 않은 경우, "SUX"를 사용해보십시오 대신 "SU"는 "HDFS"으로 전환하는 동안.
3 단계 : 일식 $의 ECLIPSE_HOME / 일식을 시작합니다
4 단계 : Eclipse 메뉴를 클릭에서, 창 -> Perspective 열기 -> 기타 -> 맵리 듀스
5 단계 : 하단 맵리 듀스 아이콘에서 새로운 하둡 위치를 추가합니다
6 단계 : $ HADOOP_HOME에 지정된 $ HADOOP_HOME 리콜 / conf의 / mapred-site.xml 파일, HDFS 포트 (9000)에 규정 된 리콜을 위해 맵리 듀스 및 HDFS 실행 포트를 입력, 맵리 듀스 포트 (9001) / conf의 / 코어를 site.xml 입력 하둡 사용자 이름
7 단계 : 하둡 위치가 추가되면, DFS 위치는 이클립스 프로젝트 탐색기 창에 표시 / 보일 것이다, (윈도우 ->보기 표시 -> 프로젝트 탐색기)
단계 8 : Hadoop을 추가하면, DFS의 위치는 프로젝트 탐색기 창에 표시 / 보일 것이다
9 단계 : 오른쪽 DFS 위치를 클릭하고 연결을 클릭
10 단계 : 성공적으로 연결되면, 모든 DFS 폴더를 표시합니다.
11 단계 : 당신은 HDFS 위치에 파일을 업로드, 디렉토리를 만들 오른쪽에 나열된 디렉토리 중 하나를 클릭하여 로컬 파일을 다운로드 할 수 있습니다.
from https://stackoverflow.com/questions/35911467/how-to-integrate-eclipse-and-hadoop-2-6 by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] executeSQL에서 SelectHiveQL 아파치 NiFi에 동적으로 값을 전달하는 방법 (0) | 2019.10.20 |
---|---|
[HADOOP] Sqoop2 서버를 시작 하둡 구성 클래스를 찾을 수 없습니다 (1.99.7) (0) | 2019.10.20 |
[HADOOP] 하둡에 ElasticSearch 쿼리를 전달하는 방법 (0) | 2019.10.20 |
[HADOOP] 동적 oozie 파라미터를 계산 (MR의 행동 이경 수) (0) | 2019.10.20 |
[HADOOP] 하이브 오류 : java.lang.Exception 상위 : 자식 오류 (0) | 2019.10.20 |