(→개요) |
(→개요) |
||
| (사용자 2명의 중간 판 6개는 보이지 않습니다) | |||
| 1번째 줄: | 1번째 줄: | ||
==개요== | ==개요== | ||
;Apache Sqoop | ;Apache Sqoop, Sqoop | ||
;스쿱 | ;아파치 스쿱, 스쿱 | ||
*DBMS 데이터를 HDFS로 입출력 | * 관계형DB와 하둡 간 데이터를 전송하는 CLI 애플리케이션 | ||
* | * DBMS 데이터를 HDFS로 입출력 | ||
*Hadoop 기반 시스템과 연동가능 | * DBMS로부터 데이터를 import/export | ||
:Hive, HBase로 테이블 이전 가능 | * 하둡용 ETL 도구 | ||
:Oozie로 import/export 자동화 | * Hadoop 기반 시스템과 연동가능 | ||
*[[ | : Hive, HBase로 테이블 이전 가능 | ||
: Oozie로 import/export 자동화 | |||
* [[JDBC]] 기반 | |||
[[File:Apache_Sqoop_logo.svg|330px]] | |||
==개념도== | ==개념도== | ||
| 24번째 줄: | 28번째 줄: | ||
*[[HBase]] | *[[HBase]] | ||
*[[Oozie]] | *[[Oozie]] | ||
*[[Flume]] | |||
==참고 | ==참고== | ||
* | * {{영어위키백과|Sqoop}} | ||
*https://cwiki.apache.org/SQOOP/home.data/Apache_Sqoop.pdf | * https://cwiki.apache.org/SQOOP/home.data/Apache_Sqoop.pdf | ||
[[분류: 하둡]] | [[분류: 하둡]] | ||
2019년 5월 31일 (금) 23:03 기준 최신판
1 개요[ | ]
- Apache Sqoop, Sqoop
- 아파치 스쿱, 스쿱
- 관계형DB와 하둡 간 데이터를 전송하는 CLI 애플리케이션
- DBMS 데이터를 HDFS로 입출력
- DBMS로부터 데이터를 import/export
- 하둡용 ETL 도구
- Hadoop 기반 시스템과 연동가능
- Hive, HBase로 테이블 이전 가능
- Oozie로 import/export 자동화
- JDBC 기반
2 개념도[ | ]
<img src='http://hochul.net/blog/wp-content/uploads/2012/10/sqoop_import_export1.png' style='width:600px'/>
3 아키텍처 1[ | ]
- → Map Task를 통해 import/export 처리
4 아키텍처 2[ | ]
<img src='https://blogs.apache.org/sqoop/mediaresource/a04e8f6f-4d1e-4ee9-b726-af4e078599cf' style='width:600px'/>
5 같이 보기[ | ]
6 참고[ | ]
로그인하시면 댓글을 쓸 수 있습니다.
{{ comment.name }}
{{ comment.created | snstime }}
-
{{comment.page_title}} ―{{comment.name}}