메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


sqoop oozie 에서 sqoop action실행 에러 - 컬럼개수 차이

총관리자 2014.07.17 14:02 조회 수 : 1142

아래와 같은 오류는 hdfs파일에 있는 컬럼의 개수보다 table에 있는 컬럼의 개수가 많을 때 발생한다.
--------------------------------------------------------------------------------
java.io.IOException: Can't export data, please check task tracker logs
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:112)
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:39)
at org.apache.hadoop.mapreduce.Mapper.run(Mapper.java:145)
at org.apache.sqoop.mapreduce.AutoProgressMapper.run(AutoProgressMapper.java:64)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:764)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:364)
at org.apache.hadoop.mapred.Child$4.run(Child.java:255)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1190)
at org.apache.hadoop.mapred.Child.main(Child.java:249)
Caused by: java.util.NoSuchElementException
at java.util.ArrayList$Itr.next(ArrayList.java:834)
at TB_KRI_MASTER.__loadFromFields(TB_KRI_MASTER.java:552)
at TB_KRI_MASTER.parse(TB_KRI_MASTER.java:446)
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:83)
... 10 more

java.io.IOException: Can't export data, please check task tracker logs
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:112)
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:39)
at org.apache.hadoop.mapreduce.Mapper.run(Mapper.java:145)
at org.apache.sqoop.mapreduce.AutoProgressMapper.run(AutoProgressMapper.java:64)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:764)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:364)
at org.apache.hadoop.mapred.Child$4.run(Child.java:255)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1190)
at org.apache.hadoop.mapred.Child.main(Child.java:249)
Caused by: java.util.NoSuchElementException
at java.util.ArrayList$Itr.next(ArrayList.java:834)
at TB_KRI_MASTER.__loadFromFields(TB_KRI_MASTER.java:552)
at TB_KRI_MASTER.parse(TB_KRI_MASTER.java:446)
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:83)
... 10 more

java.io.IOException: Can't export data, please check task tracker logs
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:112)
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:39)
at org.apache.hadoop.mapreduce.Mapper.run(Mapper.java:145)
at org.apache.sqoop.mapreduce.AutoProgressMapper.run(AutoProgressMapper.java:64)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:764)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:364)
at org.apache.hadoop.mapred.Child$4.run(Child.java:255)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1190)
at org.apache.hadoop.mapred.Child.main(Child.java:249)
Caused by: java.util.NoSuchElementException
at java.util.ArrayList$Itr.next(ArrayList.java:834)
at TB_KRI_MASTER.__loadFromFields(TB_KRI_MASTER.java:552)
at TB_KRI_MASTER.parse(TB_KRI_MASTER.java:446)
at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:83)
... 10 more
이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
101 로그 파일에 대해 Elasticsearch 사용하기 2014.09.25 1516
100 호튼웍스 하둡을 검색엔진과 연동하는 방법과 아키텍쳐 2014.09.25 1282
99 hadoop 기반 문서 검색 2014.09.25 1122
98 하둡 분산 파일 시스템을 기반으로 색인하고 검색하기 2014.09.25 1061
97 lateral view 예제 2014.09.18 843
96 root가 localhost에서 mysql로 접근하지 못하는 경우의 해결방법(패스워드) 2014.09.10 747
95 mysql 5.5.34-0ubuntu0.13.04용 설치/진행 화면 2014.09.10 1210
94 apt-get install mysql-server수행시 "404 Not Found" 오류발생시 조치방법 2014.09.10 1579
93 banana pi에 hive 0.13.1+mysql(metastore)설치 file 2014.09.09 2545
92 원격지에서 zio공유기를 통해서 노트북의 mysql접속을 허용하는 방법 2014.09.07 1036
91 sqoop작업시 hdfs의 개수보다 더많은 값이 중복되어 oracle에 입력되는 경우가 있음 2014.09.02 4288
90 java.util.NoSuchElementException발생시 조치 2014.08.27 1426
89 hadoop의 data디렉토리를 변경하는 방법 2014.08.24 1118
88 시스템날짜를 현재 정보로 동기화 하는 방법(rdate, ntpdate이용) 2014.08.24 1132
87 FAILED: IllegalStateException Variable substitution depth too large: 40 오류발생시 조치사항 2014.08.19 1653
86 원보드 컴퓨터 비교표 file 2014.08.04 899
85 외부 기기(usb, 하드)등 mount(연결)하기 2014.08.03 661
84 데이타 제공 사이트 링크 2014.08.03 636
83 lubuntu 호스트 네임변경 2014.08.03 1008
» oozie 에서 sqoop action실행 에러 - 컬럼개수 차이 2014.07.17 1142
쓰기 태그
위로