복붙노트

[HADOOP] Sqoop - YARN 대기열에 바인딩

HADOOP

Sqoop - YARN 대기열에 바인딩

따라서 mapreduce v2를 사용하면 특정 YARN 대기열에 바인딩을 사용하여 자원 및 우선 순위를 관리 할 수 ​​있습니다. 기본적으로

"hadoop jar /xyz.jar -D mapreduce.job.queuename = QUEUE1 / input / output"완벽하게 작동합니다.

sqoop 쿼리를 실행할 때 얀 큐 바인딩을 Sqoop과 어떻게 통합 할 수 있습니까?

즉. sqoop import \ --connect 'jdbc : // server'\ --target-dir \ 그리고 무엇?

해결법

  1. ==============================

    1.Sqoop에 대해서도 동일한 방법을 사용합니다.

    Sqoop에 대해서도 동일한 방법을 사용합니다.

    sqoop import -Dmapreduce.job.queuename=NameOfTheQueue\ --connect 'jdbc://server' \ --target-dir \
    

    mapreduce.job.queuename 매개 변수는 가져 오기 후, 연결 또는 다른 옵션 앞에 사용해야합니다.

  2. from https://stackoverflow.com/questions/29607451/sqoop-binding-to-yarn-queues by cc-by-sa and MIT license