메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


1. Event Server : 클러스터 이벤트 수집

2. Navigator Metadata : 클러스터 데이터 metadata수집및 관리기능

3. Navigator Audit : 클러스터 접근 상황 사건 기록

4. Service Monitor : 서비스및 수행중인 job에 관련된 metrics데이터 수집

5. Host Monitor : 호스트에 관련된 metrics데이터 수집

6. Alert Publisher : 클러스터 중요 이벤트를 설정된 smtp/snmp를 통하여 지정된 메일로 이메일 전송

7. Reports Manager : 클러스터 사용 사황(CPU, Memory, Disk) 통계


* CMS각 서비스 공통적으로 설정된 로그 크기

  Max Log Size : 200MB

  Maximum Log File Backups : 10개

번호 제목 날짜 조회 수
610 missing block및 관련 파일명 찾는 명령어 2021.02.20 2590
609 lombok설치방법 2020.06.20 1339
608 [sap] Error: java.io.IOException: SQLException in nextKeyValue 오류 발생 2020.06.08 2545
607 [kudu]테이블 drop이 안되고 timeout이 걸리는 경우 조치 방법 2020.06.08 2171
606 [oozie] oozie shell action에서 shellscript수행결과의 2개 변수를 decision 액션에서 사용하기 2020.06.05 2149
605 [Sentry]HDFS의 ACL을 Sentry와 연동후 테스트 2020.06.02 2505
604 [sqoop] mapper를 2이상으로 설정하기 위한 split-by컬럼을 찾을때 유용하게 활용할 수 있는 쿼리 2020.05.13 2364
603 mysql sqoop작업을 위해서 mysql-connector-java.jar을 추가하는 경우 확실하게 인식시키는 방법 2020.05.11 1789
602 W/F수행후 Logs not available for 1. Aggregation may not to complete. 표시되며 로그내용이 보이지 않은 경우 2020.05.08 3331
601 A Cluster의 HDFS 디렉토리및 파일을 사용자및 권한 유지 하여 다운 받아서 B Cluster에 넣기 2020.05.06 2058
600 impala external 테이블 생성시 컬럼과 라인 구분자를 지정하여 테이블 생성하는 예시 2020.02.20 2057
599 [Kerberos]Kerberos상태의 클러스터에 JDBC로 접근할때 케이스별 오류내용 2020.02.14 2411
598 cloudera서비스 중지및 기동순서 2020.02.14 2265
597 impala테이블 쿼리시 max_row_size 관련 오류가 발생할때 조치사항 2020.02.12 2146
596 hue.axes_accessattempt테이블 데이터 샘플 2020.02.10 1682
595 hue.desktop_document2의 type의 종류 2020.02.10 2513
594 hue db에서 사용자가 가지는 정보 확인 2020.02.10 3183
» Cloudera의 CMS각 컴포넌트의 역할 2020.02.10 2282
592 Namenode Metadata백업하는 방법 2020.02.10 2075
591 cloudera의 hue에서 사용자가 사용한 쿼리 목록 2020.02.07 2003
위로