메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


hbase Hadoop의 Datanode를 Decommission하고 나서 HBase의 regionservers파일에 해당 노드명을 지웠는데 여전히 "Dead regionser"로 표시되는 경우 처리

총관리자 2018.01.25 14:12 조회 수 : 449

Hadoop에서 Discommission시킨 노드를 ./conf/regionservers에서 제거하고 HBase를 restart했는데 Dead regionserver 목록에 표시되면서 HBase의 전반적인 성능에 악영향을 주는 경우가 있는데 이는 HDFS상에 있는 HBase의 dead regionserver가 여전히 WAL(보통 /hbase/WALs)에 존재하기 때문이다.

이때는 HDFS상에 존재하는 dead regionserver의 정보를 삭제해주면 된다.


1. HDFS상의 WALs목록을 확인한다.

hdfs dfs -ls /hbase/WALs

->

drwxr-xr-x   - root supergroup          0 2017-07-18 18:02 /hbase/WALs/gsda9,16020,1500283210109


2. 해당 폴더를 삭제한다.

hdfs dfs -rm -R /hbase/WALs/gsda9,16020,1500283210109


3. HBase를 재기동한다.

./bin/stop-hbase.sh

./bin/start-hbase.sh

이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
501 compile할때와 exclude할때 대상을 표현하는 명칭이 다르므로 주의할것 2016.08.10 667
500 Kafka Offset Monitor로 kafka 상태 모니터링 하기 file 2016.11.08 654
499 동시에 많은 요청이 endpoint로 몰려서java.net.NoRouteToHostException가 발생하는 경우의 처리방법 2016.10.17 654
498 Job이 끝난 log을 볼수 있도록 설정하기 2016.05.30 650
497 kudu table와 impala(hive) table정보가 틀어져서 테이블을 읽지 못하는 경우(Error Loading Metadata) 조치방법 2023.11.10 645
496 Error: Could not find or load main class nodemnager 가 발생할때 해결하는 방법 2015.06.05 645
495 [Kudu]ERROR: Unable to advance iterator for node with id '2' for Kudu table 'impala::core.pm0_abdasubjct': Network error: recv error from unknown peer: Transport endpoint is not connected (error 107) 2023.03.16 644
494 db를 통째로 새로운 이름의 db로 복사하는 방법/절차 2017.11.14 638
493 Impala Admission Control 설정시 쿼리가 사용하는 메모리 사용량 판단 방법 2023.05.19 637
492 spark-submit 실행시 "java.lang.OutOfMemoryError: Java heap space"발생시 조치사항 2018.02.01 631
491 Error: java.lang.RuntimeException: java.lang.OutOfMemoryError 오류가 발생하는 경우 2018.09.20 630
490 Container killed by the ApplicationMaster. Container killed on request. Exit code is 143 Container exited with a non-zero exit code 143 TaskAttempt killed because it ran on unusable node 오류시 조치방법 2017.04.06 630
489 spark-shell실행시 "A read-only user or a user in a read-only database is not permitted to disable read-only mode on a connection."오류가 발생하는 경우 해결방법 2016.05.20 625
488 Scala에서 countByWindow를 이용하기(예제) 2018.03.08 612
487 spark client프로그램 기동시 "Error initializing SparkContext"오류 발생할때 조치사항 2016.05.27 610
486 외부 기기(usb, 하드)등 mount(연결)하기 2014.08.03 610
485 java.util.NoSuchElementException발생시 조치 2014.08.27 609
484 hive기동시 Caused by: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D 오류 발생시 조치사항 2016.09.25 608
483 Query 1234:1234 expired due to client inactivity(timeout is 5m)및 invalid query handle 2022.06.10 598
482 Hive MetaStore Server기동시 Could not create "increment"/"table" value-generation container SEQUENCE_TABLE since autoCreate flags do not allow it. 오류발생시 조치사항 2017.05.03 593
쓰기 태그
위로