메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


1. sbt 다운로드/설치

http://www.scala-sbt.org/release/docs/Installing-sbt-on-Windows.html


2. sbt플러그인 설치

sbt에는 sbt플러그인을 설치해야 하며, 


https://github.com/typesafehub/sbteclipse/ 여기보고 자신의 sbt 버전에 맞게  

~/.sbt/0.13/plugins/plugins.sbt 파일에 다음 내용을 추가합니다.


addSbtPlugin("com.typesafe.sbteclipse" % "sbteclipse-plugin" % "3.0.0")


3. 프로젝트 생성및 eclipse에서 import가능한 sbt프로젝트 만들기

원래 자바 개발하던 때처럼 사용할 workspace를 하나 만들고, 그 아래에 프로젝트 디렉터리를 하나 만들어줍니다. 

그 디렉터리에서 sbt eclipse 라고 실행하면 이클립스 프로젝트를 만들어줍니다.

이 때 build.sbt는 만들어주지 않으므로 아래의 예와 같이 build.sbt파일을 만들어줍니다. 


name := "icbms"


version := "1.1"


scalaVersion := "2.11.8"


libraryDependencies += "org.apache.spark" %% "spark-core" % "1.5.0" % "provided"


libraryDependencies += "org.apache.spark" %% "spark-sql" % "1.5.0"


4. import하기

이제 만들어진 프로젝트를 이클립스 내에서 import 하면 됩니다. 


5. sbt package

해당 프로젝트 밑에 가서 console창에서 sbt package를 하면 *.jar파일이 생성됨(eclipse에서는 안되남??)


*참고

libraryDependencies에 항목을 추가하고 난 다음에는 sbt eclipse 명령을 이클립스 외부에서 다시 실행해주고 이클립스에서 프로젝트를 새로 고침해주면 됩니다.

번호 제목 날짜 조회 수
241 Impala Admission Control 설정시 쿼리가 사용하는 메모리 사용량 판단 방법 2023.05.19 672
240 java.lang.ClassNotFoundException: org.apache.hadoop.util.ShutdownHookManager 오류조치사항 2015.05.20 673
239 root가 localhost에서 mysql로 접근하지 못하는 경우의 해결방법(패스워드) 2014.09.10 675
238 anaconda3 (v5.2) 설치및 머신러닝 관련 라이브러리 설치 절차 2018.07.27 675
237 hadoop의 data디렉토리를 변경하는 방법 2014.08.24 676
236 spark, kafka, mariadb, jena, springframework등을 이용하여 공통모듈을 jar로 만들기 위한 build.gradle파일(참고용) 2016.08.19 681
235 Drools 6.0 - 비즈니스 룰 기반으로 간단한 룰 애플리케이션 만들기 file 2016.07.18 683
234 원격지에서 zio공유기를 통해서 노트북의 mysql접속을 허용하는 방법 2014.09.07 689
233 컬럼및 라인의 구분자를 지정하여 sqoop으로 데이타를 가져오고 hive테이블을 생성하는 명령문 2018.08.03 694
232 not leader of this config: current role FOLLOWER 오류 발생시 확인방법 2022.01.17 695
231 Tracking URL = N/A 가발생하는 경우 - 환경설정값을 잘못설정하는 경우에 발생함 2015.06.17 696
230 hadoop 클러스터 실행 스크립트 정리 2018.03.20 699
229 kafka로 부터 메세지를 stream으로 받아 처리하는 spark샘플소스(spark의 producer와 consumer를 sbt로 컴파일 하고 서버에서 spark-submit하는 방법) 2016.07.13 700
228 kafka-manager 1.3.3.4 설정및 실행하기 2017.03.20 702
227 spark-shell을 실행하면 "Attempted to request executors before the AM has registered!"라는 오류가 발생하면 2018.06.08 704
226 HDFS 파일및 디렉토리 생성시 생성방법에 따라 권한이 다르게 부여된다. 2022.05.30 704
225 uEnv.txt위치및 내용 2014.07.09 711
224 Apache Spark와 Drools를 이용한 CEP구현 테스트 2016.07.15 713
223 conda를 이용한 jupyterhub(v0.9)및 jupyter설치 (v4.4.0) 2018.07.30 714
222 lubuntu 호스트 네임변경 2014.08.03 723
위로