logstash

Logstash Pipeline-to-Pipeline Communucation을 사용하면 길이가 너무 긴 설정 파일을 줄일 수 있지 않을까 싶어 사용해 봤어요. 그리고 설정을 다른 input에서 재사용하기도 좋을 것 같아서..! 한 번 사용해 보았습니다. 🥰00. 실습 환경Windows 10Elasticsearch 7.10.2Logstash 7.10.2Kibana 7.10.2Filebeat 7.10.2Git BashElasticsearch와 Kibana가 실행된 상태로 진행했어요. Elasticsearch와 Kibana 설치 및 실행에 대한 내용은 여기에 포함되어 있지 않아요. 01. 실습 파일 준비하기실습을 진행하기 위해 임의로 로그 파일을 생성했어요.access.logerror.logtransact..

Elasticsearch에 인덱스를 추가할 때, index-20241111 과 같이 날짜를 넣어 보려고 합니다.근데 Logstash에서 Elasticsearch에 데이터를 인입한 시간이 기록되는 @timestamp는 UTC 기준이에요..!!Logstash에서 Elasticsearch 인덱스 한국 시간(KST) 추가해서 생성하기Logstash에서 수집한 데이터를 Elasticsearch에 저장할 때, KST를 인덱스명에 사용하고 싶다면 ruby 코드를 활용해 날짜를 선언하여 사용해야 합니다. Logstash 설정 파일(.conf)를 보며 설명드릴게요 😊input { beats { port => 5044 }}filter { ruby { code => "event.set('index_day'..

00. 실습 환경 Apache 2.0 License 내에서 사용할 수 있는 기능만 포함된 OSS 버전을 활용하여 실습하였습니다. CentOS 7.9 Elasticsearch OSS 7.10.2 Logstash OSS 7.10.2 Kibana OSS 7.10.2 Filebeat OSS 7.10.2 Java 11 여기서는 공식 홈페이지에서 다운로드 받은 후 CentOS 서버로 파일을 옮겨 설치하는 방식으로 환경을 구축하였으며, 다른 방식으로 환경 구축을 하고 싶다면 공식 문서를 참고하시길 바랍니다. 01. Elasticsearch 환경 구축 Elasticsearch 설치 공식 홈페이지에서 Elasticsearch RPM 버전을 다운로드 받은 후, CentOS 서버에 업로드합니다. 서버에 업로드가 완료되면, ..