메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


hive의 메타정보 테이블을 MariaDB로 사용하는 경우 impala에서 table생성시 table의 comment나 column의 comment에 한글 입력시 깨지는 경우가 있는데 이는 default character set인 latin1을 사용하기 때문이다 .

그래서 character set를 utf8로 바꾸야 하는데 다음과 같이 수행한다. (관련 테이블은 hive에서 사용하는 TABLE_PARAMS, TBLS, COLUMN_V2 이렇게 3개의 테이블이다)


alter table metastore.TABLE_PARAMS convert to character set utf8;

하면 show full columns from metastore.TABLE_PARAMS의 varchar컬럼들의 Collation항목이 utf8_general_ci로 변경된다. 

번호 제목 날짜 조회 수
181 HDFS Balancer설정및 수행 2018.03.21 276
180 RDF storage조합에대한 test결과(4store, Jena+HBase, Hive+HBase, CumulusRDF, Couchbase) 페이지 링크 2016.05.26 276
179 kafkaWordCount.scala의 producer와 consumer 클래스를 이용하여 kafka를 이용한 word count 테스트 하기 2016.08.02 275
178 spark 2.0.0의 api를 이용하는 예제 프로그램 2017.03.15 274
177 S2RDF를 이용한 다른 버젼의 github링크 2016.12.02 274
176 Lagom프레임웍에서 제공하는 HelloWorld 테스트를 수행시 [unknown-version]오류가 발생하면서 빌드가 되지 않는 경우 조치사항 2017.12.22 273
175 shard3가 있는 서버에 문제가 있는 상태에서 solr query를 요청하는 경우 "no servers hosting shard: shard3" 오류가 발생하는 경우 조치사항 2018.01.04 271
174 RDF4J의 rdf4j-server.war가 제공하는 RESTFul API를 이용한 CRUD테스트(트랜잭션처리) 2017.08.30 270
173 elasticsearch 1.3.0에서 rdf및 hadoop plugin설치 2016.04.06 266
172 [Impala TLS/SSL이슈]RangerAdminRESTClient.java:151] Failed to get response, Error is: TrustManager is not specified 2023.02.02 263
» hive의 메타정보 테이블을 MariaDB로 사용하는 경우 table comment나 column comment에 한글 입력시 깨지는 경우 utf8로 바꾸는 방법. 2023.03.10 262
170 [메모리 덤프파일 분석] 2017.03.31 262
169 Spark Streaming으로 유실 없는 스트림 처리 인프라 구축하기 2016.03.11 262
168 format된 namenode를 다른 서버에서 다시 format했을때 오류내용 2016.09.22 261
167 DBCP Datasource(org.apache.commons.dbcp.BasicDataSource) 설정 및 속성 설명 2016.09.26 260
166 [jsoup]Jsoup Tutorial 2017.04.11 256
165 Error: IO_ERROR : java.io.IOException: Error while connecting Oozie server 2022.05.02 255
164 문자열을 숫자(integer)로 casting하기 2016.01.13 251
163 딥러닝 수학/알고리즘 '한국어' 강의 2016.04.10 249
162 solrcloud에 solrdf1.1설치하고 테스트 하기 2016.04.22 248
위로