메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


BDR의 Hive Replication중 Target Cluster의 Import HIve Metastore과정중에 "Specified catalog.database.table does not exist : hive.db명.table명"오류가 발생하면서 실패하는 경우가 있음.

이는 오류를 발생시킨 테이블이 Kudu table이면서 통계정보를 가지고 있는 경우 발생할 수 있는 bug성 오류이다. 

(현재 버젼의 BDR은 Kudu table이 대상이 아닌데 통계정보가 있는 Kudu table을 대상에 Hive Replication에 포함 시키는 bug가 있다고 cloudera 엔지니어가 가이드 하지만 모든 경우가 다 그렇지 않고 특정 DB의 경우만 발생하고 있는데.. 특정DB가 어떤것인지는 확인되지 않음)

임시조치는 오류를 발생시킨 테이블의 통계정보를 삭제하고 다시 Replication Policy를 수행해 주면 정상적으로 수행된다. 


*참고(테이블의 통계정보 삭제)

drop stats DB명.table명

번호 제목 날짜 조회 수
161 동일서버에서 LA와 LC동시에 기동하여 테스트 2014.04.01 1047
160 hadoop 기반 문서 검색 2014.09.25 1049
159 Using The ZooKeeper CLI에서 zkCli의 위치 2014.11.02 1057
158 mybatis와 spring을 org.apache.commons.dbcp2.BasicDataSource의 DataSource로 연동할때 DB설정(참고) 2016.10.31 1074
157 특정파일이 생성되어야 action이 실행되는 oozie job만들기(coordinator.xml) 2014.05.20 1080
156 oozie 에서 sqoop action실행 에러 - 컬럼개수 차이 2014.07.17 1081
155 postgresql-9.4에서 FATAL: remaining connection slots are reserved for non-replication superuser connections가 나올때 조치 2018.08.16 1085
154 [Magento]php7에 Composer를 이용하여 Magento 2.1.3 설치 file 2017.01.30 1097
153 dual table만들기 2014.05.16 1104
152 [백업] 리눅스 시스템 백업하기 (Linux System Backup) - TAR 사용 시스템 전체 백업 2022.01.19 1111
151 Impala의 Queries탭에서 여러조건으로 쿼리 찾기 2018.05.09 1114
150 unique한 값 생성 2014.04.25 1124
149 hive에서 insert overwrite directory.. 로 하면 default column구분자는 'SOH'혹은 't'가 됨 2014.05.20 1124
148 Flume과 Kafka를 사용한 초당 100만개 로그 수집 테스트 file 2016.10.31 1126
147 cloudera(python 2.7.5)에서 anaconda3로 설치한 외부 python(3.6.6)을 이용하여 pyspark를 사용하는 설정 2018.09.14 1126
146 Building a Cluster docs 2014.04.22 1129
145 "Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources"오류 발생시 조치사항 2016.05.25 1133
144 DataNode를 기동할때 "Block pool ID needed, but service not yet registered with NN" 오류 발생에 따른 조치사항 2018.05.28 1147
143 Current heap configuration for MemStore and BlockCache exceeds the threshold required for successful cluster operation 2017.07.18 1151
142 impala 설치/설정 2016.06.03 1161
위로