복붙노트

[HADOOP] Apache Knox Gateway는 Cloudera 4.5와 호환됩니까?

HADOOP

Apache Knox Gateway는 Cloudera 4.5와 호환됩니까?

현재 Hadoop 클러스터로 향후 프로젝트를 진행하고 있습니다. 클러스터 보안에 대한 정보를 찾아야합니다.

API Apache Knox Gateway를 찾았습니다. 현재 Cloudera 4.5와 협력하고 있습니다. 향후 Cloudera 5로 업그레이드 할 예정입니다.

내 문제는 Knox가 Cloudera 4.5 (http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH-Version-and-Packaging-Information/cdhvd_topic_3과 호환되지 않는 것 같습니다. html).

WebHDFS                   2.4.0 
WebHCat/Templeton         0.13.0    0.12.0  
Ozzie                     4.0.0
HBase/Stargate            0.98.0
Hive (via WebHCat)        0.13.0
Hive (via JDBC)           0.13.0

(http://knox.apache.org/books/knox-0-4-0/knox-0-4-0.html#Quick+Start)

웹 사이트에 따르면이 버전은 테스트 된 유일한 버전입니다. 누구든지이 API와 Cloudera 4.5에 경험이 있습니까?

작동하지 않으면 클러스터 보안을 유지하는 솔루션이 있습니까?

해결법

  1. ==============================

    1.먼저 Apache Knox는 REST API 액세스를 위해 클러스터 주변에서 보안을 제공하는 방법입니다. Hadoop 클러스터 내에서 kerberos 보안을 보증하는 것은 아닙니다. REST API의 범위를 엔터프라이즈로 확장하여 kerberos 지원 클러스터를 계속 보완합니다. 또한 최종 사용자 액세스를위한 몇 가지 추가 ID 솔루션 통합을 제공합니다.

    먼저 Apache Knox는 REST API 액세스를 위해 클러스터 주변에서 보안을 제공하는 방법입니다. Hadoop 클러스터 내에서 kerberos 보안을 보증하는 것은 아닙니다. REST API의 범위를 엔터프라이즈로 확장하여 kerberos 지원 클러스터를 계속 보완합니다. 또한 최종 사용자 액세스를위한 몇 가지 추가 ID 솔루션 통합을 제공합니다.

    원하는 것이 실제 Hadoop 보안 인 경우 Hadoop kerberos 배포 옵션을 찾아야합니다.

    이제 knox / CDH 호환성에 관해서는 ...

    Knox 0.4.0에 대해 지원되는 버전의 서비스 컴포넌트는 불행히도 CDH 4.5 릴리스에 제대로 맵핑되지 않습니다. 0.3.0 릴리스조차 CDH 4.5보다 최신 버전 인 것처럼 보입니다.

    HBase가 여전히 뒤쳐져 있지만 CDH 5.0은 더 나은 라인업으로 보입니다. 내가 여기에서 본 것-그것이 정확하다고 가정 할 수 있습니다.

    내 제안은 CDH 5에 대해 Apache Knox를 사용 해보고 어려움이있는 경우 녹스 커뮤니티에 참여하는 것입니다. 우리가 도울 수있는 해결 방법이있을 수 있습니다. REST 요구에 따라 필요한 것을 얻을 수 있도록 충분한 정렬이있을 수 있습니다.

  2. from https://stackoverflow.com/questions/23246530/is-apache-knox-gateway-compatible-with-cloudera-4-5 by cc-by-sa and MIT license