728x90

Bootcamp/Hadoop 4

[sqoop] file 보내기, 백업sql 저장, sqoop

file을 보내주는데 scp를 활용한다. scp ./subway.sql hadoop@hyul-server:/home/hadoop hadoop@hyul-server에 들어가 백업file를 열어준다. mysql -uroot -p비밀번호 hivedb < ~/subway.sql 다시 mysql로 로그인을 한 뒤 확인하면 mysql -uroot -p비밀번호 show databases; use hivedb show tables; 저장이 된걸 확인할 수 있다. 이제 sqoop을 설치할 것이다. wegt https://archive.apache.org/dist/sqoop/1.99.7/sqoop-1.99.7-bin-hadoop200.tar.gz tar xvfz sqoop-1.99.7-bin-hadoop200.tar.gz..

Bootcamp/Hadoop 2024.01.10

[Hadoop] Hadoop 설치& 기초

내가 해야할 것 1. 데이터에 대해서 제대로 정의할 줄 알 것 2. 면접에 나오는 용어 정리 해볼 것 # Hadoop 할 때 체크 할 것 1. 자바 설치가 되었는가 java -version 2. JAVA_HOME 설정 되어 있는지 확인 echo $JAVA_HOME - which java - vim ~/.bashrc - export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64 - source ~/.bashrc - echo $JAVA_HOME # 하둡 설치 1. 하둡 설치 - cd ~ - wget https://dlcdn.apache.org/hadoop/common/hadoop-3.3.6/hadoop-3.3.6.tar.gz - tar xvfz hadoop-3.3.6.tar...

Bootcamp/Hadoop 2024.01.02
728x90