Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다.
문의사항은 gooper@gooper.com로 메일을
보내주세요.
1. presto 0.63다운로드
http://central.maven.org/maven2/com/facebook/presto/presto-server/0.63/presto-server-0.63.tar.gz
2. 압축풀고 폴더명 변경
tar xvfz presto-server-0.63.tar.gz
mv presto-server-0.63 presto-server
3. /home/hadoop/presto-server/etc폴더를 만들고 설정파일을 생성한다.
가. node.properties파일
node.environment=production
node.id=ffffffff-ffff-ffff-ffff-ffffffffffff
node.data-dir=/home/hadoop/presto-server/data
나. hive.properties
connector.name=hive-hadoop2
hive.metastore.uri=thrift://localhost:9083
다. log.properties
com.facebook.presto=DEBUG
라. config.properties
coordinator=false
datasources=jmx,hive
http-server.http.port=8080
presto-metastore.db.type=h2
presto-metastore.db.filename=var/db/MetaStore
task.max-memory=1GB
discovery.uri=http://localhost:8080
마. jvm.config
-server
-Xmx16G
-XX:+UseConcMarkSweepGC
-XX:+ExplicitGCInvokesConcurrent
-XX:+CMSClassUnloadingEnabled
-XX:+AggressiveOpts
-XX:+HeapDumpOnOutOfMemoryError
-XX:OnOutOfMemoryError=kill -9 %p
-XX:PermSize=150M
-XX:MaxPermSize=150M
-XX:ReservedCodeCacheSize=150M
-Xbootclasspath/p:/home/hadoop/presto-server/lib/floatingdecimal-0.1.jar
바. ../presto-server/etc/calog/jmx.properties
connector.name=jmx
4. CLI툴 다운로드(presto-cli-0.63-executable.jar,)
압축해제 하여 명칭을 presto로 바꾼후 chmod 755로 실행권한 부여함
5.서버및 CLI실행
가. 서버실행 : ~/presto-server/bin/launcher start
나 .CLI실행: /home/hadoop/presto --server localhost:8080 혹은
/home/hadoop/presto --server localhost:8080 --catalog hive --schema default
다. CLI TEST : presto:default>select CAST(NULL AS BOOLEAN) AND TRUE;
댓글 0
번호 | 제목 | 글쓴이 | 날짜 | 조회 수 |
---|---|---|---|---|
10 | json serde사용법 | 총관리자 | 2014.04.17 | 1140 |
9 | json 값 다루기 | 총관리자 | 2014.04.17 | 1223 |
8 | hive에서 생성된 external table에서 hbase의 table에 값 insert하기 | 총관리자 | 2014.04.11 | 1754 |
7 | external partition table생성및 data확인 | 총관리자 | 2014.04.03 | 1072 |
» | 의사분산모드에서 presto설치하기 | 총관리자 | 2014.03.31 | 3051 |
5 | Hive Query Examples from test code (2 of 2) | 총관리자 | 2014.03.26 | 5033 |
4 | Hive Query Examples from test code (1 of 2) | 총관리자 | 2014.03.26 | 1050 |
3 | Hive java connection 설정 | 구퍼 | 2013.04.01 | 2013 |
2 | Hive 사용법 및 쿼리 샘플코드 | 구퍼 | 2013.03.07 | 2994 |
1 | Hive+mysql 설치 및 환경구축하기 | 구퍼 | 2013.03.07 | 2728 |