메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Hadoop에서 Discommission시킨 노드를 ./conf/regionservers에서 제거하고 HBase를 restart했는데 Dead regionserver 목록에 표시되면서 HBase의 전반적인 성능에 악영향을 주는 경우가 있는데 이는 HDFS상에 있는 HBase의 dead regionserver가 여전히 WAL(보통 /hbase/WALs)에 존재하기 때문이다.

이때는 HDFS상에 존재하는 dead regionserver의 정보를 삭제해주면 된다.


1. HDFS상의 WALs목록을 확인한다.

hdfs dfs -ls /hbase/WALs

->

drwxr-xr-x   - root supergroup          0 2017-07-18 18:02 /hbase/WALs/gsda9,16020,1500283210109


2. 해당 폴더를 삭제한다.

hdfs dfs -rm -R /hbase/WALs/gsda9,16020,1500283210109


3. HBase를 재기동한다.

./bin/stop-hbase.sh

./bin/start-hbase.sh

번호 제목 날짜 조회 수
381 linux에서 특정 포트를 사용하는 프로세스 확인하기 2017.04.26 457
380 Spark에서 Serializable관련 오류및 조치사항 2017.04.21 5030
379 Caused by: java.lang.ClassNotFoundException: org.apache.spark.Logging 발생시 조치사항 2017.04.19 519
378 [Jsoup]특정페이지를 jsoup을 이용하여 파싱하는 샘플소스 2017.04.18 418
377 [jsoup]Jsoup Tutorial 2017.04.11 257
376 update를 많이 하면 heap memory가 많이 소진되고 최종적으로 OOM가 발생하는데 이에 대한 설명 2017.04.10 818
375 LUBM 개수별 hadoop HDFS data사이즈 정리 2017.04.06 214
374 Container killed by the ApplicationMaster. Container killed on request. Exit code is 143 Container exited with a non-zero exit code 143 TaskAttempt killed because it ran on unusable node 오류시 조치방법 2017.04.06 646
373 protege 설명및 사용법 file 2017.04.04 3025
372 streaming작업시 입력된 값에 대한 사본을 만들게 되는데 이것이 실패했을때 발생하는 경고메세지 2017.04.03 515
371 [메모리 덤프파일 분석] 2017.03.31 262
370 JavaStreamingContext를 이용하여 스트림으로 들어오는 문자열 카운트 소스 2017.03.30 212
369 nc -l 7777 : 7777포트에서 입력을 받는다. 2017.03.23 422
368 kafka-manager 1.3.3.4 설정및 실행하기 2017.03.20 702
367 spark 2.0.0의 api를 이용하는 예제 프로그램 2017.03.15 275
366 It is indirectly referenced from required .class files 오류 발생시 조치방법 2017.03.09 588
365 spark2.0.0에서 hive 2.0.1 table을 읽어 출력하는 예제 소스(HiveContext, SparkSession, SQLContext) 2017.03.09 284
364 spark에서 hive table을 읽어 출력하는 예제 소스 2017.03.09 180
363 spark에서 hive table을 읽어 출력하는 예제 소스 2017.03.09 561
362 [shell script]test.txt에 space로 분리된 내용을 일어들이는 예제 2017.02.21 409
위로