메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


hbase Hadoop의 Datanode를 Decommission하고 나서 HBase의 regionservers파일에 해당 노드명을 지웠는데 여전히 "Dead regionser"로 표시되는 경우 처리

총관리자 2018.01.25 14:12 조회 수 : 494

Hadoop에서 Discommission시킨 노드를 ./conf/regionservers에서 제거하고 HBase를 restart했는데 Dead regionserver 목록에 표시되면서 HBase의 전반적인 성능에 악영향을 주는 경우가 있는데 이는 HDFS상에 있는 HBase의 dead regionserver가 여전히 WAL(보통 /hbase/WALs)에 존재하기 때문이다.

이때는 HDFS상에 존재하는 dead regionserver의 정보를 삭제해주면 된다.


1. HDFS상의 WALs목록을 확인한다.

hdfs dfs -ls /hbase/WALs

->

drwxr-xr-x   - root supergroup          0 2017-07-18 18:02 /hbase/WALs/gsda9,16020,1500283210109


2. 해당 폴더를 삭제한다.

hdfs dfs -rm -R /hbase/WALs/gsda9,16020,1500283210109


3. HBase를 재기동한다.

./bin/stop-hbase.sh

./bin/start-hbase.sh

이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
401 Scala를 이용한 Streaming예제 2018.03.08 511
400 elasticsearch 기동시 permission denied on key 'vm.max_map_count' 오류발생시 조치사항 2017.06.23 511
399 Elastic Search For Hadoop 2.2.0설치하기(5대 클러스터링) 2016.04.04 511
398 Hadoop - 클러스터 세팅및 기동 2015.04.28 509
397 [Cloudera 6.3.4, Kudu]]Service Monitor에서 사용하는 metric중에 일부를 blacklist로 설정하여 모니터링 정보 수집 제외하는 방법 2022.07.08 508
396 DeviceType이 o:motion-sensor_33 이거나 o:motion-sensor_32 경우의 sparql문장은 다음과 같다. 2017.08.16 508
395 Scala버젼 변경 혹은 상황에 맞게 Spark소스 컴파일하기 2016.05.31 507
394 [application수행 로그]Failed to read the application application_123456789012_123456시 조치 방법 2022.03.21 506
393 Java 8에서 pom.xml에 JavaDoc 관련 태그가 설정되어 있으나 오류등으로 실패하면 나머지 Maven작업이 종료되는 문제 해결 방법 2017.01.24 504
392 update(update와 delete->insert)사용시 주의/참고사항 2016.01.06 504
391 java.lang.IllegalArgumentException: Does not contain a valid host:port authority: master 오류해결방법 2015.05.06 502
390 [개발] 온라인 IDE - 개발 환경 구축 없어 어디서나 웹브라우저로 개발하기 2022.05.02 499
389 [tomcat] logrotate를 이용하여 catalina.out로그파일 일별로 로테이션 저장하기 file 2017.01.18 499
388 fuseki에 update하는 방법(java api이용)및 주의 사항 2015.12.30 498
387 fuseki가 제공하는 web ui를 통해서 dataset를 remove->create할 경우 동일한 동일한 이름으로 지정했을때 fuseki-server.jar가 뜨지 않는 현상 2017.02.03 497
» Hadoop의 Datanode를 Decommission하고 나서 HBase의 regionservers파일에 해당 노드명을 지웠는데 여전히 "Dead regionser"로 표시되는 경우 처리 2018.01.25 494
385 System Properties Comparison Elasticsearch vs. Hive vs. Jena file 2016.03.10 494
384 source, sink를 직접 구현하여 사용하는 예시 2019.05.30 493
383 like검색한 결과를 기준으로 집계를 수행하는 java 소스 2016.12.19 493
382 S2RDF를 실행부분만 추출하여 1건의 triple data를 HDFS에 등록, sparql을 sql로 변환, sql실행하는 방법및 S2RDF소스 컴파일 방법 2016.06.15 492
쓰기 태그
위로