메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Kudu서비스의 WebUI(node01.gooper.com/8050)를 통해서 Memory(detail)탭을 클릭하면 설정된 최대 메모리와 현재 사용 현황을 확인 할 수 있다. 

화면의 Process memory usage에서 아래 값을 확인해서 Percentage consumed가 100%이상인 상태로 1일 이상 유지 되는 경우가 있는데 이경우 해당 table server에서 kudu서비스가 사용할 수 있는 최대치의 메모리를 사용했기 때문에 no server availabe상태가 되는것이므로 tablet server를 restart해서 메모리가 release되게 해줘야 한다. 

(정상적인 경우라면 메모리가 자동으로 release되어야 하는데 악성 쿼리 혹은 OS, Kudu 버그 등에 의해서 메모리가 release되지 않고 1일 이상 유지되는 경우가 있음)


Total consumption : 100G

Memory limit 100.00G

Percentage consumed 100%


*오류내용 : 

Error in Kudu table 'impala::DB명.table명': Timed out: Failed to write batch of 1432 ops to tablet 5trgy678996hjh after 455 attempt(s): Failed to write to server: (no server available): Write(tablet : 5trgy678996hjh, num_ops: 1432, num_attempts: 455) passwd its deadline: Illegal state: replica 456hfy38jghrugfhf3434 is not leader of this config: current role FOLLOWER (1 of 1808 similiar)

번호 제목 날짜 조회 수
530 schema.xml vs managed-schema 지정 사용하기 - 두개를 동시에 사용할 수는 없음 2017.07.09 3436
529 oozie 에서 sqoop action실행 에러 - 컬럼개수 차이 2014.07.17 3440
528 collection생성혹은 collection조회시 Plugin init failure for [schema.xml] fieldType "pdate": Error loading class 'solr.IntField' 오류 조치사항 2022.04.07 3440
527 compile할때와 exclude할때 대상을 표현하는 명칭이 다르므로 주의할것 2016.08.10 3451
526 oracle 접속 방식에 따른 --connect 지정 방법 2022.02.11 3452
525 sendmail + dovecot(pop3) + saslauthd 설치 2017.06.11 3453
524 How-to: Tune Your Apache Spark Jobs (Part 2) file 2016.10.31 3457
523 Spark Streaming으로 유실 없는 스트림 처리 인프라 구축하기 2016.03.11 3462
522 mybais #과 $의 차이점 2015.11.10 3465
521 Collections.sort를 이용한 List<Map<String, String>>형태의 데이타 정렬 소스 2016.12.15 3471
520 VPS에서는 root로 실행해도 swap파일을 만들지 못하게 만들어 두었지만 swap파일을 생성하는 방법 2017.06.20 3474
519 [Dovecot] -ERR [SYS/PERM] Permission denied 2017.06.13 3493
518 [vi]블럭 및 문서내 복사등에 관련된 명령어 2017.02.17 3497
517 halyard 1.3을 다른 서버로 이전하는 방법 2017.07.05 3500
516 [postgresql 9.x] PostgreSQL Replication 구축하기 2018.07.17 3510
515 컴퓨터 무한 재부팅 원인및 조치방법 file 2017.12.05 3512
514 [TLS]pkcs12형식의 인증서 생성및 jks형식 인증서 생성 커맨드 예시 2022.03.15 3512
513 [Ranger]RangerAdminRESTClient Error gertting pplicies; Received NULL response!!, secureMode=true, user=rangerkms/node01.gooper.com@ GOOPER.COM (auth:KERBEROS), serviceName=cm_kms 2023.06.27 3516
512 RDF4J의 rdf4j-server.war가 제공하는 RESTFul API를 이용한 CRUD테스트(트랜잭션처리) 2017.08.30 3517
511 원보드 컴퓨터 비교표 file 2014.08.04 3521
위로