Shell 3

[ Linux ] SCP 오류

SCP는 Secure copy의 줄임말로 호스트간에 파일을 안전하게 옮기는 수단 중 하나이다. SCP 를 이용하여 다른 장비로 파일을 보낼려고 명령어를 사용하다가 특정 장비는 해당 에러가 발생했다. Host key verification failed. root 로 해도 안되고, 네트워크도 다 문제 없었는데 이유를 몰라서 열심히 삽질을 헀다. SCP는 SSH 프로토콜을 기반으로 되어있다. 해당 에러는 ~/.ssh/known_hosts 파일에 가고싶은 곳에 host 네임이 등록이 안되어있어서 발생한거 였다. 그래서 보내고 싶은 장비로 ssh로 한번 연결해주면 known_hosts 파일에 자동으로 등록되고, 그 후에 SCP 명령어를 사용하면 된다. 보안때문에 발생하는 문제였다.

Error 해결 2023.04.09

[ Linux / Window ] DNS 설정하기

DNS의 풀네임은 Domain Name System으로 인터넷 프로토콜이다. 일상생활 속에서 많이 사용하고 있는 유용한 프로토콜이다. IP 주소를 사람들이 쉽게 사용할 수 있도록 문자로 사용할 수 있게 도와주는 역할을 한다. 대다수의 사람들이 네이버의 주소가 무엇이냐고 물어보았을 때. www.naver.com을 알고 있어도 223.130.200.104라고 대답하는 사람은 거의 없을 것이다. 번외로 ip 주소를 확인하는 방법은 cmd에 nslookup 명령어를 사용하면 알 수 있다. 그러면 4개의 IP주소가 나오는데. 이게 4개가 네이버주소이다. 4개 중 아무거나 쳐도 네이버가 나온다. 본론으로 DNS를 설정하는 방법에 대해 알아보자. [Window] File Path : C:\Windows\System3..

Linux 2022.08.05

[ Hadoop ] HDFS 에 파일 UPLOAD 하기

HIVE에 데이터를 LOAD 하는 방법은 여러가지가 있다. LOCAL DATA를 바로 LOAD하는 방법도 있지만, HDFS에 적재하고 LOAD하는 방법도 있다. (HDFS : Hadoop Distributed File System) 여기서는 HDFS에 파일을 적재하는 방법에 대해 설명하는 글이다. 당연히 Hadoop 이 설치되어있고, 현재 구동 중인 상태여야 가능하다. 1. Hadoop을 구동시키고, 터미널에 접속한다. 2. HDFS에 DATA를 넣을 폴더를 먼저 만든다. (있다면 굳이 안들어도 된다.) $ hadoop fs -mkdir [폴더이름] 2-1. -ls 명령어를 입력하면 현재 위치의 파일(폴더포함)들 목록을 볼 수 있다. $ hadoop fs -ls 3. put 명령어를 통해서 파일을 upl..

HADOOP 2022.02.25