[HADOOP] 색조 --workflow에서 Oozie 워크 플로우 종속성을 만드는 방법 - 편집기
HADOOP색조 --workflow에서 Oozie 워크 플로우 종속성을 만드는 방법 - 편집기
CDH 5.5.2 (색조 --workflow - 편집자)
==================================
우리는 다른 시스템 ERP 시스템에서 데이터를 sqooping, 그래서 우리는 편집기를 사용하여 서로 다른 독립적 인 oozie 워크 플로우를 생성 (--workflow 색상 - 편집기) (예 : - ERP1_workflow1, ERP2_workflow2, ERP3_workflow3, ERP4_workflow ... ERP7) 각 워크 플로우 우리는 우리가 몇 하이브 scripts.this을 가지고 또 하나의 워크 플로우 "final_workflow는"경우에만, 모두를 실행할 필요가있는 특정 time.Now @ 매일 실행됩니다 parallel.this을 실행하는 다른 워크 플로우를 40 ~ 50 Sqoop을의 command.hence 만들었습니다 제 (예 : - ERP1_workflow1, ERP2_workflow2, ERP3_workflow3, ERP4_workflow ... ERP7)이 성공적으로 완료된다.
당신이 따라야 할 oozie이 의존도를 달성하기 위해 / 단계를 제안 할 수 있습니다하십시오.
해결법
from https://stackoverflow.com/questions/35728616/how-to-create-oozie-workflow-dependencies-in-hue-workflow-editor by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 하이브에서 UDF 결과를 검색 (0) | 2019.10.19 |
---|---|
[HADOOP] 어떻게 스트림으로 STDOUT 인쇄 paramiko와 맵리 듀스 (0) | 2019.10.19 |
[HADOOP] HDFS 쓰는 동안 소켓 시간 초과 문제를 스파크 (0) | 2019.10.19 |
[HADOOP] 어떻게 JSON의 serde를 사용하여 하이브 테이블의 JSON 열을 구문 분석 할 수 있습니까? (0) | 2019.10.19 |
[HADOOP] 어떻게 혼자 HIVE에 대한 HDFS 복제 요인을 변경하려면 (0) | 2019.10.19 |