(→기타) |
(→기타) |
||
| 15번째 줄: | 15번째 줄: | ||
==기타== | ==기타== | ||
*[[Flume]] (데이터 수집하여 HDFS에 | *[[Flume]] (데이터 수집하여 HDFS에 저장) | ||
*[[Sqoop]] (DBMS 데이터를 HDFS로 입출력) | *[[Sqoop]] (DBMS 데이터를 HDFS로 입출력) | ||
*[[Oozie]] (하둡 Workflow 스케줄러) | *[[Oozie]] (하둡 Workflow 스케줄러) | ||
2013년 2월 22일 (금) 15:01 판
1 개요
- Hadoop ecosystem
- 하둡 연동 사례
- 하둡 생태계
하둡이 설치된 서버에 하둡과 연동되는 다른 소프트웨어들을 함께 설치하여 사용하는 경우가 많다. <img src='http://siliconangle.com/files/2011/11/HDP.png' />
- HDFS: 분산파일시스템
- MapReduce: 분산병렬처리 환경+프레임워크
- Hive: SQL기반 DW
- Pig: 데이터-흐름 기반의 스크립트 언어
- HBase: 컬럼 구조 저장소[1]
- Zookeeper: 클러스터 시스템 관리
2 기타
3 같이 보기
4 주석
- ↑ HDFS는 수정/삭제가 어렵지만, HBase는 타임스탬프를 덧붙여 가능
로그인하시면 댓글을 쓸 수 있습니다.
{{ comment.name }}
{{ comment.created | snstime }}
-
{{comment.page_title}} ―{{comment.name}}