[HADOOP] WebHDFS 대 HttpFS
HADOOPWebHDFS 대 HttpFS
WebHDFS REST API와 HttpFS의 차이점은 무엇입니까?
내가 올바르게 이해하면 :
제가 맞습니까?
다른 것 대신에 하나를 사용하는 것이 언제 좋을까요?
해결법
-
==============================
1.귀하의 질문과 관련된 기사를 읽었습니다. 다음은 링크입니다.
귀하의 질문과 관련된 기사를 읽었습니다. 다음은 링크입니다.
https://www.linkedin.com/today/post/article/20140717115238-176301000-accessing-hdfs-using-the-webhdfs-rest-api-vs-httpfs
WebHDFS 대 HttpFs WebHDFS와 HttpF의 주요 차이점 : WebHDFS는 클러스터의 모든 노드에 대한 액세스가 필요하며 일부 데이터를 읽으면 해당 노드에서 직접 전송되지만 HttpF에서는 단일 노드가 "게이트웨이"와 비슷한 역할을하여 단일 노드가됩니다 클라이언트 노드로의 데이터 전송 지점. 따라서 HttpF는 대용량 파일 전송 중에 숨 막힐 수 있지만 좋은 점은 HDFS에 액세스하는 데 필요한 풋 프린트를 최소화한다는 것입니다.
from https://stackoverflow.com/questions/25033729/webhdfs-vs-httpfs by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 클래스 패스 내의 디폴트의 hadoop jar를 오버라이드 (override)합니다. (0) | 2019.07.07 |
---|---|
[HADOOP] Java에서 HDFS로 작성하면 "minReplication 대신 0 개의 노드로만 복제 할 수 있습니다" (0) | 2019.07.07 |
[HADOOP] hadoop fs -copyToLocal 명령을 사용하여 기존 파일을 덮어 쓰는 방법 (0) | 2019.07.07 |
[HADOOP] 지도 축소 : ChainMapper 및 ChainReducer (0) | 2019.07.07 |
[HADOOP] Eclipse로 Hadoop 맵핑 / 축소 작업 개발, 테스트 및 디버깅 (0) | 2019.07.07 |