복붙노트

[HADOOP] Hadoop-common, Hadoop-core 및 Hadoop-client의 차이점은 무엇입니까?

HADOOP

Hadoop-common, Hadoop-core 및 Hadoop-client의 차이점은 무엇입니까?

나는 Hadoop에 대해 더 최신이며 Hadoop-common, Hadoop-core 및 Hadoop-client의 차이점을 알고 싶습니다.

그건 그렇고, 주어진 클래스에 대해, 어떤 이슈가 Maven에 포함되어 있는지 어떻게 알 수 있습니까? 예를 들어, 어느 것이 org.apache.hadoop.io.Text?

해결법

  1. ==============================

    1.하이 레벨 관점에서 Hadoop-common, Hadoop-core 및 Hadoop-client 간의 차이점에 대한 몇 가지 추가 세부 정보를 제공합니다.

    하이 레벨 관점에서 Hadoop-common, Hadoop-core 및 Hadoop-client 간의 차이점에 대한 몇 가지 추가 세부 정보를 제공합니다.

    일반적으로 YARN에 제출하거나 MR 작업을 실행하거나 HDFS에서 파일에 액세스하는 응용 프로그램을 빌드하는 개발자는 Hadoop-client 라이브러리를 사용합니다.

  2. ==============================

    2.Hadoop지도 축소 응용 프로그램을 빌드하려면 hadoop 클라이언트 종속성 만 있으면됩니다. (새 API 사용). hadoop-hdfs, hadoop-common, hadoop-clientapp, hadoop-yarn-api와 같은 종속성은이 문제에서 해결됩니다.

    Hadoop지도 축소 응용 프로그램을 빌드하려면 hadoop 클라이언트 종속성 만 있으면됩니다. (새 API 사용). hadoop-hdfs, hadoop-common, hadoop-clientapp, hadoop-yarn-api와 같은 종속성은이 문제에서 해결됩니다.

  3. ==============================

    3.테크노피아에서

    테크노피아에서

    다른 모든 모듈과 마찬가지로 Hadoop Common은 하드웨어 오류가 일반적이며 Hadoop Framework에 의해 소프트웨어에서 자동으로 처리되어야한다고 가정합니다.

    Hadoop Common은 Hadoop Core라고도합니다.

    Hadoop 클라이언트 라이브러리는 클러스터에 데이터를로드하고, 데이터를 처리하는 방법을 설명하는 Map Reduce 작업을 제출 한 다음 작업 완료시 작업 결과를 검색하거나 봅니다. 이 기사를 한번보세요.

    이 Apache 링크는 Hadoop Client 라이브러리의 종속성 목록을 제공합니다.

  4. from https://stackoverflow.com/questions/28856096/differences-between-hadoop-common-hadoop-core-and-hadoop-client by cc-by-sa and MIT license