메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Kudu서비스의 WebUI(node01.gooper.com/8050)를 통해서 Memory(detail)탭을 클릭하면 설정된 최대 메모리와 현재 사용 현황을 확인 할 수 있다. 

화면의 Process memory usage에서 아래 값을 확인해서 Percentage consumed가 95%이상 이면 필요시 tablet server를 restart해서 메모리가 release되게 해줘야 한다. 

(정상적인 경우라면 메모리가 자동으로 release되어야 하는데 악성쿼리 혹은 OS, Kudu 버그 등에 의해서 메모리가 relase되지 않고 1일 이상 유지되는 경우가 있음)


Total consumption : 50G

Memory limit 100.00G

Percentage consumed 50%



*오류 내용 : 

Error in Kudu table 'impala::DB명.table명': Timed out: Failed to write batch of 1432 ops to tablet 5trgy678996hjh after 455 attempt(s): Failed to write to server: (no server available): Write(tablet : 5trgy678996hjh, num_ops: 1432, num_attempts: 455) passwd its deadline: Remote error: Service unavailable: Soft memory limit exceeded (at 100.05% of capacity)



번호 제목 날짜 조회 수
421 github에 있는 프로젝트와 로컬에서 작업한 프로젝트 합치기 2016.11.22 535
420 원격의 origin/master를 기준으로 dev branch를 만들어 작업후 원격의 origin/dev에 push하는 방법 file 2016.11.22 550
419 Mountable HDFS on CentOS 6.x(hadoop 2.7.2의 nfs기능을 이용) 2016.11.24 452
418 S2RDF를 이용한 다른 버젼의 github링크 2016.12.02 274
417 Jena 2.3를 Hadoop 2.7.2의 NFS로 mount하고 fuseki를 이용하여 start할때 오류 메세지 2016.12.02 1644
416 jena의 data폴더를 hadoop nfs를 이용하여 HDFS상의 폴더에 마운트 시키고 fuseki를 통하여 inert를 시도했을때 transaction 오류 발생 2016.12.02 174
415 hbase startrow와 endrow를 지정하여 검색하기 샘플 2016.12.07 185
414 ResultSet에서 데이타를 List<Map<String,String>>형태로 만들어서 리턴하는 소스(Collections.sort를 이용한 정렬 가능) 2016.12.15 381
413 Collections.sort를 이용한 List<User>형태의 데이타 정렬(숫자, 문자에 대해서 각각 asc/desc및 복합정렬) 2016.12.15 399
412 Collections.sort를 이용한 List<Map<String, String>>형태의 데이타 정렬 소스 2016.12.15 360
411 mongodb aggregation query를 Java code로 변환한 샘플 2016.12.15 958
410 MongoDB에 있는 특정컬럼의 값을 casting(string->integer)하여 update하기 java 소스 2016.12.19 354
409 like검색한 결과를 기준으로 집계를 수행하는 java 소스 2016.12.19 493
408 Class.forName을 이용한 메서드 호출 샘플소스 2016.12.21 467
407 new Gson().toJson(new ObjectId())을 사용하면 값이 다르게 나오는 경우가 있음 2016.12.23 529
406 List<Map<String, String>>형태의 데이타에서 중복제거 하는 방법 2016.12.23 2046
405 Halyard - RDF4J와 Apache HBase를 이용하여 구현된 TripleStore이며 SPARQL 1.1쿼리를 지원한다. 2016.12.29 734
404 eclipse 3.1 단축키 정리파일 2017.01.02 118
403 [MemoryLeak분석]다수의 MongoCleaner 쓰레드가 Sleep상태에 있으면서 Full GC가 계속 발생되는 문제 해결방법 file 2017.01.11 355
402 spark 2.0.0를 windows에서 실행시 로컬 파일을 읽을때 발생하는 오류 해결 방법 2017.01.12 311
위로