메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


  1. 기존에 banana pi에 외장하드, SDcard가 장착되고 SDcard를 통해서 부팅중인 경우에 변경하는 방법임
  2. banana pi를 부팅한다.
  3. mkdir /mnt/root 로 root폴더를 만든다
  4. mkdir /mnt/root2 로 root2폴더를 만든다
  5. mount /dev/mmcblk0p2 /mnt/root 로 마운트를 시킨다
  6. mount /dev/sda1 /mnt/root2로 마운트 시킨다
  7. cp -arf /mnt/root/* /mnt/root2/로 복사하려는 내용을 모두 복사한다
  8. halt구문으로 banana pi를 끈다
  9. SDCard를 꺼내서 windows컴퓨터에서 넣는다.
  10. Windows탐색기에서 여러파일들(script.bin, uEnv.txt, uImage)을 볼수 있는다. 그중에서 uEnv.txt파일을 열어서 수정한다
  11. uEnv.txt내용중 root=/dev/mmcblk0p2을 /dev/sda1로 바꾸고 저장한다.
aload_script=fatload $device $partition 0x43000000 /script.bin;
aload_kernel=fatload $device $partition 0x48000000 /uImage;bootm 0x48000000
uenvcmd=run aload_script aload_kernel
bootargs=console=ttyS0,115200 console=tty0 disp.screen0_output_mode=EDID:1280x720p60 hdmi.audio=EDID:0 root=/dev/mmcblk0p2 rootfstype=ext4 elevator=deadline rootwait

 

  1. SDCard를 다시 banana pi에 다시 장착한다.
  2. 부팅한다.

 

-------------------------------------------------------------------------------------------------------------------------------------

참고적으로 hadoop의 home디렉토리를 /home/hadoop 이외의 경로로 변경했다면 /home/hadoop위치로 변경해주고 해야 한다.

  1. root로 ssh접속이 가능하도록 /etc/ssh/sshd_config파일을 수정한다(root로 실행한다)
  • vi /etc/ssh/sshd_config
  • PermitRootLogin without-password에서 without-password를 yes로 변경
  • service ssh restart로 ssh를 다시 기동해준다.
  • root로 ssh로그인한다
  • usermod /home/hadoop hadoop으로 hadoop의 home디렉토리를 변경한다.
  1. 나머지는 "부팅을 외장하드에서 하도록 변경하는 방법" 따른다.
  2. root로 로그인하지 않으면 아래와 같은 오류가 발생한다.

        root@master:/root# usermod -d /home/hadoop hadoop   
        usermod: user hadoop is currently used by process 1293 

번호 제목 날짜 조회 수
301 build할때 unmappable character for encoding MS949 에러 발생시 조치사항 2016.08.03 415
300 모두를 위한 머신러닝과 딥러닝의 강의 file 2016.09.27 413
299 Not enough replica available for query at consistency QUORUM가 발생하는 경우 2017.06.21 412
298 jena jar파일실행시 org.apache.jena.tdb.TDB.init에서 java.lang.NullPointerException발생시 조치사항 2016.08.19 409
297 [shell script]test.txt에 space로 분리된 내용을 일어들이는 예제 2017.02.21 408
296 spark submit용 jar파일을 만드는 sbt 용 build.sbt설정 파일(참고용) 2016.08.19 408
295 hadoop클러스터를 구성하던 서버중 HA를 담당하는 서버의 hostname등이 변경되어 문제가 발생했을때 조치사항 2016.07.29 408
294 SCM서비스를 추가하는 동안 Unexpected error. Unable to verify database connection. 오류발생시 확인 사항 2018.06.08 405
293 Cloudera설치중 실패로 여러번 설치하는 과정에 "Running in non-interactive mode, and data appears to exist in Storage Directory /dfs/nn. Not formatting." 오류가 발생시 조치하는 방법 2018.03.29 405
292 kafka의 re-balance를 이용하여 consumer를 multi thread로 돌려서 topic의 partitions을 활용 2015.03.31 404
291 [보안/인증]javax.net.ssl.SSLHandshakeException: sun.security.validator.ValidatorException: PKIX path building failed: sun.security.provider.certpath.SunCertPathBuilderException: unable to find valid certification path to requested target발생 원인/조치내용 2023.10.24 403
290 [shellscript] 함수에 배열을 인자로 주어서 처리하는 방법 2019.07.16 403
289 hbase CustomFilter만들기 (0.98.X이상) 2015.05.08 403
288 mysql sqoop작업을 위해서 mysql-connector-java.jar을 추가하는 경우 확실하게 인식시키는 방법 2020.05.11 401
287 [Oozie]Disk I/O error: Failed to open HDFS file dhfs://..../tb_aaa/....OPYING 2019.02.15 400
286 hadoop nfs gateway설정 (Cloudera 6.3.4, CentOS 7.4 환경에서) 2022.01.07 399
285 solr 데몬이 떠있는 동안 hadoop이 다운되는 경우 Index dir 'hdfs://mycluster/user/../core_node2/data/index/' of core 'gc_shard1_replica2' is already locked라논 오류가 발생하는데 이에 대한 조치사항 2018.01.04 399
284 Cleaning up the staging area file시 'cannot access' 혹은 'Directory is not writable' 발생시 조치사항 2017.05.02 396
283 Collections.sort를 이용한 List<User>형태의 데이타 정렬(숫자, 문자에 대해서 각각 asc/desc및 복합정렬) 2016.12.15 395
282 lagom의 online-auction-java프로젝트 실행시 외부의 kafka/cassandra를 사용하도록 설정하는 방법 2017.10.12 393
위로