[k8s] Kubernetes 로그 - EFK 개요

EFK란?

Elasticsearch+Fluent Bit/Fluentd+Kibana의 조합을 말합니다. 각각의 앞글자를 따서 EFK라고 합니다. 로그데이터를 수집, 저장, 분석하고 시각화하는 데 사용되는 오픈 소스 스택입니다.

Flunetd와 Fluent Bit란?

Fluentd는 다양한 소스에서 여러 목적지로 로그를 수집, 처리 및 라우팅 하도록 설계된 공급업체 중립적인 오픈 소스 로그 수집기입니다.

Fluent Bit는 임베디드 리눅스, 게이트웨이, 컨테이너화된 에코시스템과 같이 가볍고 리소스가 제한된 환경을 위해 명시적으로 설계된 공급업체 중립 오픈소스 로그 수집기입니다. Fluented와 마찬가지로 Fluent Bit은 다양한 소스에서 여러 목적지로 로그를 수집, 처리 및 라우팅 하는 데 능숙합니다.

Fluentd와 Fluent Bit의 차이점은 아래의 그림과 같습니다.

Fluentd & Fluent Bit | Fluent Bit: Official Manual

Fluentd와 Fluent Bit에 대해서 자세한 내용은 공식 문서를 참고하시길 바랍니다.

Elasticsearch란?

Elasticsearch는 Apache Lucene을 기반으로 구축된 분산 검색 및 분석 엔진, 확장 가능한 데이터 저장소, 벡터 데이터베이스입니다. 프로덕션 규모의 워크로드에서 속도와 관련성에 최적화되어 있습니다. Elasticsearch를 사용하여 모든 모양과 크기의 데이터를 거의 실시간으로 검색, 인덱싱, 저장 및 분석할 수 있습니다.

Elasticsearch basics | Elasticsearch Guide [8.15] | Elastic

Kibana란?

Kibana는 데이터 시각화 및 분석 도구입니다. Elasticsearch에서 저장된 데이터를 쉽게 시각화하고 탐색할 수 있는 웹 인터페이스를 제공합니다. Kibana는 다음과 같은 이유로 사용됩니다.

• 로깅과 로그 분석
• 인프라 매트릭과 컨테이너 모니터링
• 애플리케이션 성능 모니터링
• 위치기반 정보 데이터 분석과 시각화
• 보안 분석 및 비즈니스 분석
• 웹 인터페이스를 통한 Elastic Stack 인스턴스를 모니터링하며 관리 및 보안

Kibana—your window into Elastic | Kibana Guide [8.15] | Elastic

이 다음 글은 EFK 구축에 대해 작성하겠습니다.