메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Cloudera CDH/CDP impala테이블 쿼리시 max_row_size 관련 오류가 발생할때 조치사항

총관리자 2020.02.12 16:04 조회 수 : 815

쿼리문장 앞에set max_row_size="2mb"; 를 지정하고 쿼리를 수행하거나,  전체에 일괄 적용하기 위해서서는 아래와 같이 CM의 Impala 컴포넌트에 설정해준다.

CM->Impala->Configuration->Impala Daemon Query Options Advanced Configuration snippet(Safety Valve)(default_query_options) : "max_row_size=2mb"형태로 추가해주면 모든 쿼리에 default로 적용되는 설정이 됨


* 참고 : default값은 512KB이며 크게 적용할 수록 메모리를 많이 먹게 되므로 적절한 값을 사용할 것.

이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
320 W/F수행후 Logs not available for 1. Aggregation may not to complete. 표시되며 로그내용이 보이지 않은 경우 2020.05.08 2398
319 A Cluster의 HDFS 디렉토리및 파일을 사용자및 권한 유지 하여 다운 받아서 B Cluster에 넣기 2020.05.06 958
318 impala external 테이블 생성시 컬럼과 라인 구분자를 지정하여 테이블 생성하는 예시 2020.02.20 979
317 [Kerberos]Kerberos상태의 클러스터에 JDBC로 접근할때 케이스별 오류내용 2020.02.14 1240
316 cloudera서비스 중지및 기동순서 2020.02.14 807
» impala테이블 쿼리시 max_row_size 관련 오류가 발생할때 조치사항 2020.02.12 815
314 hue.axes_accessattempt테이블 데이터 샘플 2020.02.10 612
313 hue.desktop_document2의 type의 종류 2020.02.10 1098
312 hue db에서 사용자가 가지는 정보 확인 2020.02.10 2074
311 Cloudera의 CMS각 컴포넌트의 역할 2020.02.10 810
310 Namenode Metadata백업하는 방법 2020.02.10 934
309 cloudera의 hue에서 사용자가 사용한 쿼리 목록 2020.02.07 873
308 hive metadata(hive, impala, kudu 정보가 있음) 테이블에서 db, table, owner, location를 조회하는 쿼리 2020.02.07 1041
307 oozie WF에서 참고할만한 내용 2019.07.18 352
306 기준일자 이전의 hdfs 데이타를 지우는 shellscript 샘플 2019.06.14 1081
305 source, sink를 직접 구현하여 사용하는 예시 2019.05.30 550
304 kerberos설정된 상태의 spooldir->memory->hdfs로 저장하는 과정의 flume agent configuration구성 예시 2019.05.30 906
303 hive테이블의 물리적인 위치인 HDFS에 여러개의 데이터 파일이 존재할때 한개의 파일로 merge하여 동일한 테이블에 입력하는 방법 2019.05.23 1246
302 하둡 클러스터 전체 노드를 다시 기동하면 invalidate metadata를 수행해야 데이터가 틀어지지 않는다. 2019.05.20 772
301 Could not configure server becase SASL configuration did not allow the Zookeeper server to authenticate itself properly: javax.security.auth.login.LoginException: Checksum failed 2019.05.18 607
쓰기 태그
위로