sqoop sqoop작업시 hdfs의 개수보다 더많은 값이 중복되어 oracle에 입력되는 경우가 있음

총관리자 2014.09.02 16:00 조회 수 : 4213

sqoop작업시 success이면서 hdfs의 개수보다 rdbms에 들어가는 자료의 개수가 더 많아(중복되면서) 지는 경우가 있는데..

이는 버그로 보이며 update key로 지정하는 컬럼의 수를 최소로 만드는 등의 오류를 유도하여 확인하는 방법이

있다.

*참고 : https://stackoverflow.com/questions/39137254/sqoop-export-inserting-duplicate-entries

번호	제목	날짜	조회 수
741	VirtualBox에 ubuntu 설치 하기 (12.10)	2013.03.04	1945
740	우분투 root 패스워드 설정하기	2013.03.04	1394
739	메이븐 (maven) 설치 및 이클립스 연동하기	2013.03.06	2489
738	Hadoop 설치 및 시작하기	2013.03.06	2076
737	Hadoop wordcount 소스 작성	2013.03.06	2066
736	이클립스에서 생성한 jar 파일 hadoop 으로 실행하기	2013.03.06	3015
735	ExWordCount jar파일	2013.03.06	1561
734	Hadoop Cluster 설치 (Hadoop+Zookeeper+Hbase)	2013.03.07	4063
733	Hive+mysql 설치 및 환경구축하기	2013.03.07	2799
732	Hive 사용법 및 쿼리 샘플코드	2013.03.07	3081
731	hadoop 설치(3대)	2013.03.07	2688
730	hadoop설치시 참고사항	2013.03.08	2293
729	MySQL 다운로드 및 리눅스에서 간단 컴파일 설치	2013.03.08	1950
728	checking for termcap functions library... configure: error: No curses/termcap library found	2013.03.08	4187
727	../depcomp: line 512 exec : g++ : not found	2013.03.08	2145
726	org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-root/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible.	2013.03.11	14837
725	HBase 설치하기 – Pseudo-distributed	2013.03.12	2819
724	HBase 설치하기 – Fully-distributed	2013.03.12	3792
723	Cacti로 Hadoop 모니터링 하기	2013.03.12	2504
722	org.apache.hadoop.hbase.PleaseHoldException: Master is initializing	2013.03.15	2876

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL