[HADOOP] 하이브에서 XML 파일을 처리하는 방법
HADOOP하이브에서 XML 파일을 처리하는 방법
하이브에서이 XML 파일을 처리하는 방법, I 출력 만 사용자 이름과 암호를 원하는
<?XML version=’1.0′ ?>
<DATA>
<USER USERNAME="ABC" FIRSTNAME="RAJ" LASTNAME="KUMAR" PASSWORD="123" />
<USER USERNAME="DEF" FIRSTNAME="VENKAT" LASTNAME="BALAJI" PASSWORD="123" />
</DATA>
CREATE TABLE user_xml(USERNAME string,PASSWORD string)
ROW FORMAT SERDE 'com.ibm.spss.hive.serde2.xml.XmlSerDe'
WITH SERDEPROPERTIES (
"column.xpath.USERNAME"="/DATA/USER/USERNAME/text()",
"column.xpath.PASSWORD"="/DATA/USER/PASSWORD/text()"
) STORED AS
INPUTFORMAT 'com.ibm.spss.hive.serde2.xml.XmlInputFormat'
OUTPUTFORMAT 'org.apache.hadoop.hive.ql.io.IgnoreKeyTextOutputFormat'
TBLPROPERTIES ("xmlinput.start"="<DATA","xmlinput.end"="</DATA>");
해결법
-
==============================
1.마지막으로 출력을 참조하십시오 가지고 https://community.hortonworks.com/articles/972/hive-and-xml-pasring.html
마지막으로 출력을 참조하십시오 가지고 https://community.hortonworks.com/articles/972/hive-and-xml-pasring.html
from https://stackoverflow.com/questions/50428444/how-to-handle-xml-file-in-hive by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 하둡 자바 클래스를 찾을 수 없습니다 (0) | 2019.10.01 |
---|---|
[HADOOP] 오류 하이브에서 HBase를에 삽입하는 동안 (0) | 2019.10.01 |
[HADOOP] S3AFileSystem는 - FileAlreadyExistsException 접두사는 디렉토리 트리의 파일 및 일부 경우 (0) | 2019.10.01 |
[HADOOP] 맵리 듀스는 집합의 최대 값을 찾기위한 방법 키 값 쌍을 설계? (0) | 2019.10.01 |
[HADOOP] , 데이터 삭제 후 어떤 방법을 하이브 외부 테이블을 드롭하지? (0) | 2019.10.01 |