데이터 수집기 Fluentd 이해하기 (v1.0)

Fluentd 빅데이터 시대가 오면서 데이터 수집기는 여러 방면에서 사용이 되는데, 대표적인 데이터 수집기는 ELK에서 사용되는 Logstash와 Fluentd로 나뉜다. Fluentd는 쿠버네티스와 같은 CNCF 재단에 속해 있는 범용 로그 수집용 오픈소스 프로젝트로써 C와 Ruby로 개발되었다. logstash에 비해 안정성이 높고 아키텍쳐가 단순한 편이며 메모리 또한 적게 쓰는 편이다. Fluentd 주요 특징 Unified Logging with JSON Fluentd의 데이터 구조는 JSON 형태로 되어 있다. downstream data processing이 JSON으로 제공되어 더욱 쉽고, 이는 유연한 스키마를 유지하면서 accessible한 structure를 제공해준다. Pluggable..