메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Hadoop [2.7.2] distribute-exclude.sh사용할때 ssh 포트변경에 따른 오류발생시 조치사항

총관리자 2018.01.02 17:54 조회 수 : 562

distribute-exclude.sh파일(hdfs-site.xml파일에 지정된 "dfs.hosts.exclude"값을 이용(사용법: ./sbin/distribute-exclude.sh ./etc/hadoop/nodes.exclude)하여 exclude할 노드 정보 파일을 각 네임 노드 서버에 복사하는 스크립트)에서 scp 명령을 사용하는 부분이 있는데 아래와 같이 -P옵션을 부여하여 저장하고 실행한다.


  scp "$excludeFilenameLocal" "$namenode:$excludeFilenameRemote"


을 찾아서 아래와 같이 수정/저장하고 실행시켜준다.


  scp -P 10022 "$excludeFilenameLocal" "$namenode:$excludeFilenameRemote"


*참고 : distribute-exclude.sh을 실행후 refresh-namenodes.sh을 실행시켜주어야 네임노드에 변경사항이 반영된다.

이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
321 github에 있는 프로젝트와 로컬에서 작업한 프로젝트 합치기 2016.11.22 536
320 .gitignore파일에 지정되지 않은 파일이 ignore되는 경우 확인방법 2016.11.22 465
319 특정 커밋 시점(commit id를 기준으로)으로 돌리기(reset) 2016.11.21 189
318 Github를 이용하는 전체 흐름 이해하기 2016.11.18 146
317 특정 단계의 commit상태로 만들기(이렇게 하면 중간에 반영된 모든 commit를 history가 삭제된다) 2016.11.17 377
316 git 초기화(Windows에서 Git Bash사용) 2016.11.17 246
315 spark notebook 0.7.0설치및 설정 2016.11.14 464
314 참고할만한 spark예제를 설명하는 사이트 2016.11.11 186
313 Kafka Offset Monitor로 kafka 상태 모니터링 하기 file 2016.11.08 663
312 Eclipse실행시 Java was started but returned exit code=1이라는 오류가 발생할때 조치방법 2016.11.07 581
311 [SparkR]SparkR 설치 사용기 1 - Installation Guide On Yarn Cluster & Mesos Cluster & Stand Alone Cluster file 2016.11.04 341
310 데이타 분석및 머신러닝에 도움이 도움이 되는 사이트 2016.11.04 455
309 java스레드 덤프 분석하기 file 2016.11.03 185
308 centos 6에서 mariadb 5.1 to 10.0 으로 upgrade 2016.11.01 202
307 Spark Streaming 코드레벨단에서의 성능개선 2016.10.31 291
306 Flume과 Kafka를 사용한 초당 100만개 로그 수집 테스트 file 2016.10.31 1127
305 Flume을 이용한 데이타 수집시 HBase write 성능 튜닝 file 2016.10.31 724
304 How-to: Build a Complex Event Processing App on Apache Spark and Drools file 2016.10.31 360
303 How-to: Tune Your Apache Spark Jobs (Part 2) file 2016.10.31 221
302 mybatis와 spring을 org.apache.commons.dbcp2.BasicDataSource의 DataSource로 연동할때 DB설정(참고) 2016.10.31 1074
쓰기 태그
위로