개발 및 관리/정보시스템감리사
하둡이란? 궁금합니다. 공부해야지요...
HighLighter
2020. 9. 4. 17:57
반응형
이름 | 기능 | 설명 |
Flume | 데이터 수집 | 데이터 발생원으로부터 데이터를 수집해 하둡 파일 시스템에 안정적으로 저장 |
Sqoop | RDBMS 연동 | 기존 레거시 시스템의 데이터를 하둡에 로딩하거나 처리 결과를 다시 RDBMS에 저장할 수 있게 도와줌 |
Elasticsearch | 검색엔진 | 데이터에 대한 검색 수행 |
HBASE, Cassandra | NoSQL | 대용량 데이터를 분산된 서버에 구조적으로 저장행 실시간 저장, 조회 기능을 제공하는 구조적 데이터 저장소 |
Hive, Pig | 하이레벨 스크립트 언어 |
하둡에 저장된 데이터를 맵리듀스 프로그램을 만들지 않고 SQL과 유사한 스크립트를 이용해 데이터 처리 기능 제공 |
마후트 | 기기 학습 | 하둡 맵리듀스에서 실행되는 머신 러닝 라이브러리 |
Hue | 모니터링 | 하둡을 모니터링, 관리하는 기능을 수행 |
ZooKeeper | 분산 코디네이터 | 분산된 환경에서의 자원 제어, 분산 메타 데이터 관리 등의 기능 수행 |
반응형