[HADOOP] HDFS에 파일을 복사 할 수 없습니다
HADOOPHDFS에 파일을 복사 할 수 없습니다
나는 HDSF에 문제가 있습니다.
나는 그것으로 모든 파일을 복사 할 수 없습니다,하지만 난되는 DataNode에 충분한 공간이? 어쩌면 내가 나쁜 구성이?
해결법
-
==============================
1.당신은 내가 설정 파일에 대한 검사가이 파일을 해당에 필요한 모든 항목이 있는지 확인 말할 것입니다, 당신은 지정하지 않은 때문에 전혀 등의 정보에 따라 단계를, 당신이 얻을 제외하고 같은 구체적인 세부 사항을 제공한다 :
당신은 내가 설정 파일에 대한 검사가이 파일을 해당에 필요한 모든 항목이 있는지 확인 말할 것입니다, 당신은 지정하지 않은 때문에 전혀 등의 정보에 따라 단계를, 당신이 얻을 제외하고 같은 구체적인 세부 사항을 제공한다 :
코어를 site.xml에서, 당신은해야한다
<configuration> <property> <name>fs.default.name</name> <value>hdfs://ipaddress:port</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/home/$user/hdfs/tmp</value> <description>A base for other temporary directories.</description> </property> </configuration>
마찬가지로 HDFS-site.xml 파일이 있어야한다
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.data.dir</name> <value>/home/$user/hdfs/data</value> </property> <property> <name>dfs.name.dir</name> <value>/home/$user/hdfs/name</value> </property> </configuration>
그리고 마지막으로 mapred-site.xml 파일이 있어야한다
<configuration> <property> <name>mapred.job.tracker</name> <value>ip:port</value> </property> </configuration>
도움이 되었기를 바랍니다.
from https://stackoverflow.com/questions/24156138/cant-copy-file-into-hdfs by cc-by-sa and MIT license
'HADOOP' 카테고리의 다른 글
[HADOOP] 스파크에 맵리 듀스 (0) | 2019.10.23 |
---|---|
[HADOOP] 프로세스 구조화되지 않은 여러 라인 CSV 하둡 (0) | 2019.10.23 |
[HADOOP] 어떻게 하둡와 문자열 매칭 알고리즘을 구현하는 방법? (0) | 2019.10.23 |
[HADOOP] 스파크 RDD에서 combineByKey 및 aggregateByKey없이 지정된 출력을 얻는 방법 (0) | 2019.10.23 |
[HADOOP] 맵리 듀스를 사용하여 암호로 보호 된 zip 파일을 처리하면 [복제] (0) | 2019.10.23 |