-
로그정보를 수집하여 하나의 저장소(DB, Elasticsearch 등)에 출력해주는 시스템
-
아래 그림과 같은 오픈소스 데이터 수집 엔진
-
Filebeat와 연동을 한다면, 파일에 축적되고 있는 로그데이터를 하나의 저장소로 보낼 수도 있고, 카프카의 토픽에 누적되어 있는 메시지들을 가져와 하나의 저장소로 보낼 수도 있음
-
실시간 파이프라인 기능
-
다양한 입력 차원에서 데이터를 수집 및 분석, 가공 및 통합해 다양한 목적지에 저장하는 파이프라인을 쉽게 구축할 수 있음
-
연동하기 간단한 입력 필터와 출력 플러그인과 같이 다양한 플러그인을 제공
-
대용량 데이터와 각종 데이터 형식을 통합하고 정규화하는 프로세스 구축 가능