Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.
Kudu tablet server 혹은 kudu master가 어떤 원인에 의해서 replica가 failed상태인 경우는 다음과 같이 wal디렉토리 및 data디렉토리의 데이터를 지워서 내부적으로 다시 생성되도록 하여 복구 해야 한다.
(단, Kudu의 replication factor가 3이상 이어야 하며 1인 경우 데이터가 영구 손실 될 수 있으니 주의해야 한다.)
0. wal및 data영역 데이터 백업(필요시)
1. tablet service or kudu master stop
2. wal disk directory의 모든 데이터및 폴더 삭제 : sudo rm -rf /data21/kudu/wal
3. kudu data disk directory의 모든 데이터 삭제(space로 구분) : sudo rm -r /data01/kudu/data01/*...../data19/kudu/data19/*
4. tablet service or kudu master start
5. 전체 클러스터 대상 kudu rebalance수행
댓글 0
| 번호 | 제목 | 날짜 | 조회 수 |
|---|---|---|---|
| 10 | 기준일자 이전의 hdfs 데이타를 지우는 shellscript 샘플 | 2019.06.14 | 594 |
| 9 | A Cluster의 HDFS 디렉토리및 파일을 사용자및 권한 유지 하여 다운 받아서 B Cluster에 넣기 | 2020.05.06 | 605 |
| 8 | W/F수행후 Logs not available for 1. Aggregation may not to complete. 표시되며 로그내용이 보이지 않은 경우 | 2020.05.08 | 2217 |
| 7 | missing block및 관련 파일명 찾는 명령어 | 2021.02.20 | 328 |
| » | [Kudu] tablet server 혹은 kudu master가 어떤 원인에 의해서 replica가 failed상태인 경우 복구하는 방법 | 2021.05.24 | 473 |
| 5 | drop table로 삭제했으나 tablet server에는 여전히 존재하는 테이블 삭제방법 | 2021.07.09 | 7943 |
| 4 | tablet별 disk사용량 확인하는 방법 | 2021.08.27 | 455 |
| 3 | hadoop nfs gateway설정 (Cloudera 6.3.4, CentOS 7.4 환경에서) | 2022.01.07 | 404 |
| 2 | kudu의 내부 table명 변경하는 방법 | 2022.11.10 | 656 |
| 1 | [Hadoop Encryption] Encryption Zone에 생성된 table에 Hue에서 insert 수행시 User:hdfs not allowed to do 'DECRYPT_EEK' ON 'testkey' 오류 | 2023.11.01 | 121 |