반응형

이름 기능 설명
Flume 데이터 수집 데이터 발생원으로부터 데이터를 수집해 하둡 파일 시스템에 안정적으로 저장
Sqoop RDBMS 연동 기존 레거시 시스템의 데이터를 하둡에 로딩하거나 처리 결과를 다시 RDBMS에 저장할 수 있게 도와줌
Elasticsearch 검색엔진 데이터에 대한 검색 수행
HBASE, Cassandra NoSQL 대용량 데이터를 분산된 서버에 구조적으로 저장행 실시간 저장, 조회 기능을 제공하는 구조적 데이터 저장소
Hive, Pig 하이레벨
스크립트 언어
하둡에 저장된 데이터를 맵리듀스 프로그램을 만들지 않고 SQL과 유사한 스크립트를 이용해 데이터 처리 기능 제공
마후트 기기 학습 하둡 맵리듀스에서 실행되는 머신 러닝 라이브러리
Hue 모니터링 하둡을 모니터링, 관리하는 기능을 수행
ZooKeeper 분산 코디네이터 분산된 환경에서의 자원 제어, 분산 메타 데이터 관리 등의 기능 수행
반응형