메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Hue의 메타정보를 담고 있는 여러 테이블 중에서 desktop_document테이블과 desktop_document2은 다음과 같은 관계를 가지고 있다.

일단 coordinator와 workflow를 기준을 보면 처음에 생성될때 두 테이블에 모두 데이터가 들어가며 desktop_document.object_id에 desktop_document2.id값이 들어가 있다. 

변경/수정/삭제들이 발생할때 desktop_document2테이블의 is_history와 is_trashed값이 0 혹은 1로 변경되며 히스토리성 정보가 기록된다. 

desktop_document.object_id는 항상 desktop_document2의 마지막 id를 가지고 있어 최근의 정보를 가지고 있게 된다.  


1. copy하면 is_history가 1이되며 새로운 id가 생성되어 삽입된다. 

2. delete하며 is_trashed가 1이된다.

3. workflow를 export했다가 delete하고 그대로 import하면 is_trashed가 0이되면서 이전 상태로 그대로 복원된다. 

(hue에서 export하면 전체 workflow가 모두 export되며 복구가 필요한 workflow만 찾아서 [{}, {}]형태로 따로 json만들어서 복구해야 한다.)

번호 제목 날짜 조회 수
441 spark에서 hive table을 읽어 출력하는 예제 소스 2017.03.09 561
440 [2.7.2] distribute-exclude.sh사용할때 ssh 포트변경에 따른 오류발생시 조치사항 2018.01.02 560
439 [oneM2M]Ontologies used for oneM2M 2017.08.02 559
438 scan의 startrow, stoprow지정하는 방법 2015.04.08 558
437 small file 한개 파일로 만들기(text file 혹은 parquet file의 테이블) 2022.07.04 557
436 Namenode Metadata백업하는 방법 2020.02.10 556
435 Cloudera Hadoop and Spark Developer Certification 준비(참고) 2018.05.16 555
434 원보드 컴퓨터 비교표 file 2014.08.04 555
433 bash는 PS1 변수를 통해 프롬프트의 모양을 바꿀 수 있다. 2016.03.30 554
432 Kudu tablet이 FAILED일때 원인 확인 방법 2022.01.17 553
431 DataSetCreator실행시 "Illegal character in fragment at index"오류가 나는 경우 조치방안 2016.06.17 552
430 TransmitData() to failed: Network error: Recv() got EOF from remote (error 108) 오류 현상 2019.02.15 551
429 root계정으로 MariaDB설치후 mysql -u root -p로 db에 접근하여 바로 해줘야 하는일..(케릭터셑은 utf8) 2015.10.02 550
428 queryTranslator실행시 NullPointerException가 발생전에 java.lang.ArrayIndexOutOfBoundsException발생시 조치사항 2016.06.16 548
427 [TLS]TLS용 사설 인증서 변경 혹은 신규 지정시 No trusted certificate found 오류 발생시 확인및 조치사항 2022.03.15 547
426 [CDP7.1.7][Replication]Table does not match version in getMetastore(). Table view original text mismatch 2024.01.02 543
425 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable원인 2015.04.27 539
424 servlet-api를 jar형태로 build할때 포함하지 말고 java 설치 위치의 jre/lib/ext에 복사하여 사용하는것이 좋다. 2016.08.10 538
423 Cannot create /var/run/oozie/oozie.pid: Directory nonexistent오류 2014.06.03 537
422 여러 홈페이지를 운영하거나 혹은 서버에 가입한 사용자들에게 홈페이지 계정을 나누어 줄수 있도록 설정/계정 생성방법 2018.01.23 535
위로