복붙노트

[HADOOP] Mesos 클러스터에서 Hadoop을 실행하는 방법은 무엇입니까?

HADOOP

Mesos 클러스터에서 Hadoop을 실행하는 방법은 무엇입니까?

Apache Mesos Cluster를 설정하고 Hadoop-Job을 실행하려고합니다. 여기에있는 문서는 내 수준이 아니므로 이해할 수 없으며 여기 누군가가 나를 설명 할 수 있습니다.

먼저 작동중인 Hadoop Cluster를 설정해야합니까? 또는 먼저 Mesos 클러스터를 설정하십시오. 어디서 노예를 가르키나요? Hadoop-slave 파일이나 등록 된 Mesos 슬레이브에서만 사용해야합니까?

해결법

  1. ==============================

    1.Mesos의 목표는 클러스터에 추상화를 실행하는 것입니다. Hadoop은 다른 클러스터들과 마찬가지로 1 개의 서비스가 될 것입니다. 이 작업을 수행하려면 먼저 Mesos 클러스터를 기본 구성 요소로 설정해야하며 Mesos 추상화를 사용하여 Hadoop과 같은 서비스를이 클러스터에 추가 할 수 있습니다.

    Mesos의 목표는 클러스터에 추상화를 실행하는 것입니다. Hadoop은 다른 클러스터들과 마찬가지로 1 개의 서비스가 될 것입니다. 이 작업을 수행하려면 먼저 Mesos 클러스터를 기본 구성 요소로 설정해야하며 Mesos 추상화를 사용하여 Hadoop과 같은 서비스를이 클러스터에 추가 할 수 있습니다.

    Mesosphere의 훌륭한 튜토리얼을 살펴보고 Mesos 위에 Hadoop을 실행하는 방법에 대해 자세히 설명하므로 시작하기에 좋습니다.

    또는이 회사는 최근 Amazon의 Elastic MapReduce와 유사한 Elastic Mesos 서비스를 시작했습니다. 따라서 모든 것을 구성해야하는 번거 로움을 겪지 않아도 Mesos의 Hadoop을 빨리 시작하려면이 기능을 시작하는 것이 좋습니다.

  2. ==============================

    2.Mesos WebUI에서 슬레이브가 나타나도록 mesos 클러스터를 설정하고 실행 한 후에는 다음 단계를 수행하여 hadoop을 추가 할 수 있습니다.

    Mesos WebUI에서 슬레이브가 나타나도록 mesos 클러스터를 설정하고 실행 한 후에는 다음 단계를 수행하여 hadoop을 추가 할 수 있습니다.

    또한 Mesosphere 자습서에서 의심되는 점을 참고하십시오. 최신 Mesos 버전이 아니기 때문에 모든 단계를 따르지 마십시오.

  3. from https://stackoverflow.com/questions/19939853/how-to-run-hadoop-on-a-mesos-cluster by cc-by-sa and MIT license