메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


HDFS HDFS에서 quota 설정 방법및 확인 방법

총관리자 2022.03.30 13:38 조회 수 : 392

SpaceQuota설정은 다음과 같이 한다. (예, 50G를 설정하려면 150G로 설정해야 3X replica를 포함해서 50G까지의 파일을 저장할 수 있다)
 -> sudo -u hdfs kinit -kt /var/lib/keytab/hdfs.keytab hdfs   (Kerberos설정된 경우에 수행)
 -> sudo -u hdfs hdfs dfsadmin -setSpaceQuota 150G /user/shd001     (shd001 HDFS폴더에 spacequota를 지정하는 경우)
 -> sudo -u hdfs hdfs dfsadmin -setSpaceQuota 150G /user/hive/warehouse/prj001db.db   (prj001db에 spacequota를 지정하는 경우)

*참고 : prj001db에 할당된 quota를 확인하는 방법 : sudo -u hdfs hdfs dfs -count -q -v /user/hive/warehosue/prj001db.db

이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
281 Spark에서 KafkaUtils.createStream()를 이용하여 이용하여 kafka topic에 접근하여 객채로 저장된 값을 가져오고 처리하는 예제 소스 2017.04.26 393
» HDFS에서 quota 설정 방법및 확인 방법 2022.03.30 392
279 우분투 16.04 설치후 APM (Apache2, PHP, MySQL) 설치 2017.01.29 392
278 권한회수 및 권한부여 명령 몇가지 2017.11.16 391
277 editLog의 문제로 발생하는 journalnode 기동 오류 발생시 조치사항 2017.09.14 390
276 sendmail + dovecot(pop3) + saslauthd 설치 2017.06.11 390
275 cloudera-scm-agent 설정파일 위치및 재시작 명령문 2018.03.29 389
274 fuseki webUI를 통해서 전체 카운트를 하면 급격하게 메모리를 소모해 버리는 문제가 있음 file 2017.04.28 389
273 Cluster Install -> Provide Login Credentials에서 root가 아닌 다른 사용자를 지정하는 경우 "Exhausted available authentication methods"오류 발생시 조치방법 2018.05.22 388
272 spark-submit으로 spark application실행하는 다양한 방법 2016.05.25 387
271 Oracle 12c DB의 LOB타입 컬럼이 있는 테이블을 import할 때 주의 할 사항 2022.09.14 385
270 drools에서 drl관련 로그를 기록하기 위한 클래스 파일 2016.07.21 385
269 ResultSet에서 데이타를 List<Map<String,String>>형태로 만들어서 리턴하는 소스(Collections.sort를 이용한 정렬 가능) 2016.12.15 381
268 쿠버네티스(k8s) 설치 및 클러스터 구성하기 2019.10.19 379
267 [CentOS] 네트워크 설정 2018.03.26 378
266 [sbt] sbt 0.13.11 를 windows에 설치하고 scala프로그램을 compile해서 jar파일 만들기 2016.07.11 378
265 sparql 1.1 BIND(if() as ?bind변수) 버그로 추정되는 문제점및 해결방안 -> select 문에 (if(,,) as ?bind변수) file 2016.01.21 378
264 Components of the Impala Server 2018.03.21 377
263 schema.xml vs managed-schema 지정 사용하기 - 두개를 동시에 사용할 수는 없음 2017.07.09 376
262 No broker partitions consumed by consumer thread오류 발생시 확인/조치할 사항 2016.09.02 375
쓰기 태그
위로