Jerry's a development book

  • 홈
  • 카테고리
  • 방명록
  • 태그

cloudera 2

[ Impala ] ExecQueryFlnstances rpc query_id failed 에러 해결

VM환경에 Hadoop을 설치하고, 간단한 테스트를 하기 위해서 데이터를 25만건 정도 테이블에 넣다가, 이러한 에러가 발생했다. ExecQueryFlnstances rpc query_id failed. Memory limit exceeded Query could not start because the backend Impala daemon is over its memory limit Error occurred on backend quickstart cloudera:22000 Memory left in process limit: -171.87 MB.. 메모리 관련해서 에러가 발생하였는데, 어떠한 쿼리를 써도 저러한 에러가 동일하게 발생했다. 해결하는 방법은 cloudera MANAGER에 들어가서 해당 ..

HADOOP 2022.03.07

[ Hadoop ] HDFS 에 파일 UPLOAD 하기

HIVE에 데이터를 LOAD 하는 방법은 여러가지가 있다. LOCAL DATA를 바로 LOAD하는 방법도 있지만, HDFS에 적재하고 LOAD하는 방법도 있다. (HDFS : Hadoop Distributed File System) 여기서는 HDFS에 파일을 적재하는 방법에 대해 설명하는 글이다. 당연히 Hadoop 이 설치되어있고, 현재 구동 중인 상태여야 가능하다. 1. Hadoop을 구동시키고, 터미널에 접속한다. 2. HDFS에 DATA를 넣을 폴더를 먼저 만든다. (있다면 굳이 안들어도 된다.) $ hadoop fs -mkdir [폴더이름] 2-1. -ls 명령어를 입력하면 현재 위치의 파일(폴더포함)들 목록을 볼 수 있다. $ hadoop fs -ls 3. put 명령어를 통해서 파일을 upl..

HADOOP 2022.02.25
1
프로필사진

https://blog.naver.com/dlwpgjs0723 여행 및 일상 블로그는 이쪽으로 ~

  • 분류 전체보기 (45)
    • Deep-Learning (3)
    • Coding_TEST (10)
    • Project_Log (5)
    • Linux (8)
    • CS(Computer Science) (2)
    • JAVA (2)
    • HADOOP (4)
    • SQL (6)
    • Error 해결 (3)
    • 꿀팁 모음 (2)
방명록

Tag

baekjoon, SQL, Object Detection, DBeaver, hadoop, Shell, TMax, DBMS, linux, 코딩, 프로그래머스, 코딩테스트연습, tibero, 백준, 파이썬분석, Python, 데이터분석, 코딩테스트, 파이썬, EPL,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

Archives

Calendar

  2025. 05  
일 월 화 수 목 금 토
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

  • 여행 및 일상 기록 블로그

티스토리툴바

개인정보

  • 티스토리 홈
  • 포럼
  • 로그인

단축키

내 블로그

내 블로그 - 관리자 홈 전환
Q
Q
새 글 쓰기
W
W

블로그 게시글

글 수정 (권한 있는 경우)
E
E
댓글 영역으로 이동
C
C

모든 영역

이 페이지의 URL 복사
S
S
맨 위로 이동
T
T
티스토리 홈 이동
H
H
단축키 안내
Shift + /
⇧ + /

* 단축키는 한글/영문 대소문자로 이용 가능하며, 티스토리 기본 도메인에서만 동작합니다.