메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


sqoop작업중에 NoSuchElementException이 발생하는 이유는 테이블명.java파일이 생성된후 table이 변경되고 java파일에 변경사항이 반영되지 않아서 인데 이때는 java파일이 위치하고 있는 /tmp/.../compile/...../ABC.JAVA파일을 찾아서 class파일과 같이

삭제해주면 sqoop 가 다시 생성하는데 이때 변경된 테이블 정보가 반영된다.

또한가지.. hdfs에 있는 컬럼의 개수와 테이블의 개수를 비교해 보고 차이가 있는지 확인해야 한다.

번호 제목 날짜 조회 수
82 hbase CustomFilter만들기 (0.98.X이상) 2015.05.08 1126
81 znode /hbase recursive하게 지우기 2015.05.06 1369
80 java.lang.IllegalArgumentException: Does not contain a valid host:port authority: master 오류해결방법 2015.05.06 616
79 hadoop 2.6.0 기동(에코시스템 포함)및 wordcount 어플리케이션을 이용한 테스트 2015.05.05 4079
78 oozie 4.1 설치 - maven을 이용한 source compile on hadoop 2.5.2 with postgresql 9.3 2015.04.30 1370
77 hive 0.13.1 설치 + meta정보는 postgresql 9.3에 저장 2015.04.30 1026
76 HBase 0.98.12(1.2.5) for hadoop2 설치-5대에 완전분산모드 (HDFS HA상테) 2015.04.29 1487
75 Hadoop - 클러스터 세팅및 기동 2015.04.28 942
74 zookeeper 3.4.6 설치(3대) 2015.04.28 1752
73 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable원인 2015.04.27 1169
72 bananapi 5대(ubuntu계열 리눅스)에 yarn(hadoop 2.6.0)설치하기-ResourceManager HA/HDFS HA포함, JobHistory포함 2015.04.24 19612
71 scan의 startrow, stoprow지정하는 방법 2015.04.08 1223
70 SASL configuration failed: javax.security.auth.login.LoginException: java.lang.NullPointerException 오류 해결방법 2015.04.02 1079
69 kafka의 re-balance를 이용하여 consumer를 multi thread로 돌려서 topic의 partitions을 활용 2015.03.31 1505
68 lateral view 예제 2014.09.18 1425
67 root가 localhost에서 mysql로 접근하지 못하는 경우의 해결방법(패스워드) 2014.09.10 798
66 banana pi에 hive 0.13.1+mysql(metastore)설치 file 2014.09.09 2559
65 sqoop작업시 hdfs의 개수보다 더많은 값이 중복되어 oracle에 입력되는 경우가 있음 2014.09.02 4294
» java.util.NoSuchElementException발생시 조치 2014.08.27 1473
63 hadoop의 data디렉토리를 변경하는 방법 2014.08.24 1273
위로