[HADOOP] WebHDFS을 사용하여 파일을 복사
HADOOPWebHDFS을 사용하여 파일을 복사
(의 말)하자 HDFS에서 파일을 복사 할 수있는 방법이 있나요 : HDFS에 // 구 : // 새 첫번째 다시 업로드 한 다음 파일을 다운로드하지 않고?
해결법
-
==============================
1.WebHDFS에 대해 알고 있지만, 이것은 하둡 distcp을 사용하여 달성하지 마십시오. 이 명령은 다음과 같은 :
WebHDFS에 대해 알고 있지만, 이것은 하둡 distcp을 사용하여 달성하지 마십시오. 이 명령은 다음과 같은 :
hadoop distcp hdfs://old_nn:8020/old/location/path.file hdfs://new_nn:8020/new/location/path.file
from https://stackoverflow.com/questions/36445154/copy-a-file-using-webhdfs by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 전제 스파크 자바 프로그램에 독립을 사용하여 GCS 파일 읽기 (0) | 2019.09.18 |
---|---|
[HADOOP] 클라우 데라 하이브 : 어디 JSON-serde-1.3.7 jar 파일을 추가합니다 (0) | 2019.09.18 |
[HADOOP] 가장 좋은 방법은 Sqoop을, HDFS와 하이브를 작동하려면 (0) | 2019.09.18 |
[HADOOP] 어떻게 하이브, 돼지, Sqoop을하고 스파크의 이전 버전과 하둡-3.0.0의 호환성이 (0) | 2019.09.18 |
[HADOOP] 오류 : 감속기 단계에서 Java 힙 공간 (0) | 2019.09.18 |