벡터 0.3.0

이번 주에는 로그 데이터, 메트릭 및 이벤트를 수집, 변환 및 저장하도록 설계된 무료 Vector 유틸리티 버전 0.3.0이 출시되었습니다.

Rust 언어로 작성되어 유사 언어에 비해 성능이 뛰어나고 RAM 소비가 적은 것이 특징입니다. 또한 정확성과 관련된 기능, 특히 전송되지 않은 이벤트를 디스크의 버퍼에 저장하고 파일을 회전하는 기능에 많은 관심을 기울입니다.

구조적으로 Vector는 하나 이상의 메시지를 수신하는 이벤트 라우터입니다. 출처, 선택적으로 이러한 메시지에 적용 변형, 하나 이상의 사람에게 보냅니다. 배수구.

다음이 구현되었습니다.

소스

• 파일 - 하나 이상의 로컬 파일에서 이벤트를 지속적으로 읽습니다.
• statsd - UDP를 통해 StatsD 프로토콜을 통해 이벤트를 지속적으로 수신합니다.
• stdin - 표준 입력 스트림에서 이벤트를 지속적으로 읽습니다.
• syslog - Syslog 5424 프로토콜을 통해 이벤트를 지속적으로 수신합니다.
• tcp - TCP 소켓에서 이벤트를 지속적으로 읽습니다.
• 벡터 - 다른 Vector 인스턴스로부터 이벤트를 수신합니다.

변환

• add_fields - 이벤트에 추가 필드를 추가합니다.
• field_filter — 필드 값으로 이벤트 필터링;
• grok_parser — Grok 형식으로 필드 값을 구문 분석합니다.
• json_parser - JSON 형식으로 필드 값을 구문 분석합니다.
• lua - Lua 스크립트를 사용하여 이벤트를 변환합니다.
• regex_parser - 정규 표현식을 사용하여 필드 값 변환
• Remove_fields — 이벤트에서 필드 제거;
• 토크나이저 - 필드 값을 토큰으로 분할합니다.

배수구

• aws_cloudwatch_logs - AWS CloudWatch에 로그를 보냅니다.
• aws_kinesis_streams - AWS Kinesis로 이벤트 전송
• aws_s3 - AWS S3에 이벤트를 일괄 전송합니다.
• 블랙홀 - 테스트 목적으로 이벤트를 파괴합니다.
• 콘솔 - 이벤트를 표준 출력이나 표준 오류로 보냅니다.
• elasticsearch - ElasticSearch에 이벤트를 보냅니다.
• http — 임의의 HTTP URL로 이벤트를 보냅니다.
• kafka - 이벤트를 Kafka로 보냅니다.
• splunk_hec - Splunk HTTP 수집기로 이벤트를 보냅니다.
• tcp — 이벤트를 TCP 소켓으로 보냅니다.
• 벡터 - 이벤트를 다른 Vector 인스턴스로 보냅니다.

버전 0.3.0에는 Lua, Grok, 정규식 및 토크나이저에 대한 지원이 추가되었습니다.

출처 : linux.org.ru