본문 바로가기

Monitoring/Log Analytics

(2)
[Logstash] Logstash란? Logstash란? 데이터 집계, 변환, 저장 서버의 데이터 처리 파이프라인인 오픈 소스 Logstash는 다양한 소스에서 데이터를 수집하여 변환한 후 자주 사용하는 저장소로 전달합니다. Logstash는 형식이나 복잡성과 관계 없이 데이터를 동적으로 수집, 전환, 전송합니다. grok을 이용해 비구조적 데이터에서 구조를 도출하여 IP 주소에서 위치 정보 좌표를 해독하고, 민감한 필드를 익명화하거나 제외시키며, 전반적인 처리를 손쉽게 해줍니다. 입력: 모든 형태, 크기, 소스의 데이터 수집 (ex. Filebeat) 데이터는 여러 시스템에 다양한 형태로 보관된 경우가 많습니다. Logstash는 일반적인 다수의 소스에서 동시에 이벤트를 가져오는 다양한 입력을 지원합니다. 로그, 메트릭, 웹 애플리케이션,..
[Filebeat] 파일비트(Filebeat)란? Filebeat 경량 로그 수집기 Filebeat는 로그와 파일을 경량화된 방식으로 전달하고 중앙 집중화하여 작업을 보다 간편하게 만들어 주는 역할을 합니다. Filebeat 사용 예시: 모니터링하려는 각 시스템에 Filebeat 설치 수집할 로그 파일의 위치 명시 로그 데이터를 필드로 파싱하고 Elasticsearch로 전송 Kibana에서 로그 데이터 시각화 Filebeat 개요 파일비트(Filebeat)는 로그 데이터를 전달하고 중앙 집중화하기 위한 경량 전달자입니다. 서버에 에이전트로 설치된 파일비트는 사용자가 지정한 로그 파일이나 위치를 모니터링하고 로그 이벤트를 수집하여 인덱싱을 위해 Elasticsearch 또는 Logstash로 전달합니다. Filebeat를 시작하면 내가 로그 데이터 위치..