메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Hue의 메타정보를 담고 있는 여러 테이블 중에서 desktop_document테이블과 desktop_document2은 다음과 같은 관계를 가지고 있다.

일단 coordinator와 workflow를 기준을 보면 처음에 생성될때 두 테이블에 모두 데이터가 들어가며 desktop_document.object_id에 desktop_document2.id값이 들어가 있다. 

변경/수정/삭제들이 발생할때 desktop_document2테이블의 is_history와 is_trashed값이 0 혹은 1로 변경되며 히스토리성 정보가 기록된다. 

desktop_document.object_id는 항상 desktop_document2의 마지막 id를 가지고 있어 최근의 정보를 가지고 있게 된다.  


1. copy하면 is_history가 1이되며 새로운 id가 생성되어 삽입된다. 

2. delete하며 is_trashed가 1이된다.

3. workflow를 export했다가 delete하고 그대로 import하면 is_trashed가 0이되면서 이전 상태로 그대로 복원된다. 

(hue에서 export하면 전체 workflow가 모두 export되며 복구가 필요한 workflow만 찾아서 [{}, {}]형태로 따로 json만들어서 복구해야 한다.)

번호 제목 날짜 조회 수
461 CDH 5.14.2 설치중 agent설치에서 실패하는 경우 확인/조치 2018.05.22 593
460 TLS/SSl설정시 방법및 참고 사항 2021.10.08 592
459 기준일자 이전의 hdfs 데이타를 지우는 shellscript 샘플 2019.06.14 592
458 It is indirectly referenced from required .class files 오류 발생시 조치방법 2017.03.09 587
457 Windows7 64bit 환경에서 Apache Spark 2.2.0 설치하기 2017.07.26 583
456 시스템날짜를 현재 정보로 동기화 하는 방법(rdate, ntpdate이용) 2014.08.24 583
455 CDH에서 Sentry 개념및 설정 file 2018.06.21 582
454 Eclipse실행시 Java was started but returned exit code=1이라는 오류가 발생할때 조치방법 2016.11.07 581
453 spark-sql실행시 The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH오류 발생시 조치사항 2016.06.09 581
452 [kudu]테이블 drop이 안되고 timeout이 걸리는 경우 조치 방법 2020.06.08 579
451 Incompatible clusterIDs오류 원인및 해결방법 2016.04.01 577
450 impala,hive및 hdfs만 접근가능하고 파일을 이용한 테이블생성가능하도록 hue 권한설정설정 2018.09.17 576
449 데이타 제공 사이트 링크 2014.08.03 576
448 Impala daemon기동시 "Could not create temporary timezone file"오류 발생시 조치사항 2018.03.29 575
447 lagom에서 제공하는 초기 생성기능을 이용하여 생성한 프로젝트의 소스 파악 2018.01.16 574
446 kudu 테이블 metadata강제 삭제시 발생하는 오류 메세지 2022.01.12 571
445 kafka 0.9.0.1 for scala 2.1.1 설치및 테스트 2016.05.02 569
444 Cloudera의 API를 이용하여 impala의 실행되었던 쿼리 확인하는 예시 2018.05.03 568
443 [우분투] suppoie 채굴 프로세스 발생시 자동으로 삭제하는 shell프로그램 2018.04.01 568
442 Ubuntu 16.04 LTS에 Hive 2.1.1설치하면서 "Version information not found in metastore"발생하는 오류원인및 조치사항 2017.05.03 567
위로