메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


hdfs-site.xml에서 <value>를 지정시 file://형태로 지정하면 아래와 같은 오류가 발생하므로 <value>/engine/bigdata/hadoop/journal/data</value>형태로 지정해 준다.

hdfs-site.xml:     <name>dfs.journalnode.edits.dir</name>
hdfs-site.xml:     <value>file:///engine/bigdata/hadoop/journal/data</value>

---------->오류내용
Exception in thread "main" java.lang.IllegalArgumentException: Journal dir 'file:/home/bigdata/hadoop/journal/data' should be an absolute path
        at org.apache.hadoop.hdfs.qjournal.server.JournalNode.validateAndCreateJournalDir(JournalNode.java:112)
        at org.apache.hadoop.hdfs.qjournal.server.JournalNode.start(JournalNode.java:136)
        at org.apache.hadoop.hdfs.qjournal.server.JournalNode.run(JournalNode.java:126)
        at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)
        at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:84)
        at org.apache.hadoop.hdfs.qjournal.server.JournalNode.main(JournalNode.java:296)
"hadoop-bigdata-journalnode-IUDGTMP03.out" 7 lines, 620 characters
번호 제목 글쓴이 날짜 조회 수
221 fuseki의 endpoint를 이용한 insert, delete하는 sparql예시 총관리자 2018.02.14 105
220 https://github.com/Merck/Halyard프로젝트 컴파일및 배포/테스트 총관리자 2017.01.24 105
219 TopBraid Composer에서 SPIN 사용법 file 총관리자 2016.02.25 105
218 [TLS/SSL]Cloudera CDH6.3.4기준 Hue TLS설정 항목 총관리자 2022.05.13 104
217 kafkaWordCount.scala의 producer와 consumer 클래스를 이용하여 kafka를 이용한 word count 테스트 하기 총관리자 2016.08.02 104
216 RDF storage조합에대한 test결과(4store, Jena+HBase, Hive+HBase, CumulusRDF, Couchbase) 페이지 링크 총관리자 2016.05.26 103
215 php auction 프로그램 총관리자 2017.05.14 100
214 참고할만한 spark예제를 설명하는 사이트 총관리자 2016.11.11 100
213 kudu rebalance수행 command예시 총관리자 2022.01.17 99
212 원격에 있는 git를 받은후 기존repository삭제후 새로운 리포지토리에 연결하여 소스 등록 총관리자 2019.07.13 99
211 우분투 16.04LTS에 Jupyter설치 총관리자 2018.04.17 99
210 Jena는 기본적으로 multi thread환경을 지원하지 않는다. 총관리자 2016.08.16 99
209 Kudu tablet이 FAILED일때 원인 확인 방법 총관리자 2022.01.17 98
208 HBase write 성능 튜닝 file 총관리자 2017.07.18 98
207 It is indirectly referenced from required .class files 오류 발생시 조치방법 총관리자 2017.03.09 98
206 collection생성시 -shards와 -replicationFactor값을 잘못지정하면 write.lock for client xxx.xxx.xxx.xxx already exists오류가 발생한다. 총관리자 2016.04.28 98
205 impala session type별 표시되는 정보로 구분하는 방법 총관리자 2021.05.25 97
204 에러 추적(Error Tracking) 및 로그 취합(logging aggregation) 시스템인 Sentry 설치 총관리자 2018.03.14 96
203 [2.7.2] distribute-exclude.sh사용할때 ssh 포트변경에 따른 오류발생시 조치사항 총관리자 2018.01.02 96
202 시맨틱 관련 논문 모음 사이트 총관리자 2017.06.13 95

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로