본문 바로가기

[Hive]

Hadoop의 구성 요소

728x90
반응형

Hadoop에는 다음과 같은 구성 요소가 있다.

Hadoop Common

Hadoop 도구 및 라이브러리 모음이다.

 

Hadoop HDFS

Hadoop의 저장 장치는 HDFS(Hadoop 분산 파일 시스템)이다.

HDFS는 분산 방식으로 데이터를 저장한다.

HDFS는 네임 노드와 데이터 노드라는 두 부분으로 구성된다.

네임 노드는 하나만 있지만 데이터 노드는 여러 개로 구성이 가능하다.

 

Hadoop MapReduce

Hadoop의 처리 단위는 MapReduce이다.

MapReduce 기법으로 슬레이브 노드에서 처리가 이루어지며, 최종 결과는 마스터 노드로 전달된다.

 

Hadoop YARN

Hadoop의 YARN은 Yet Another Resource Negotiator의 약어이다.

Hadoop의 자원 관리 단위로 Hadoop 버전2에 구성 요소로 포함되어 있다.

단일 머신의 과부하를 방지하기 위해 클러스터 리소스를 관리하는 역할을 담당한다.

 

반응형