वेक्टर एक्सएनयूएमएक्स

या आठवड्यात, लॉग डेटा, मेट्रिक्स आणि इव्हेंट्स एकत्रित करण्यासाठी, रूपांतरित करण्यासाठी आणि जतन करण्यासाठी डिझाइन केलेल्या विनामूल्य वेक्टर युटिलिटीची आवृत्ती 0.3.0 जारी करण्यात आली.

रस्ट भाषेत लिहिल्या जात असल्याने, त्याच्या अॅनालॉगच्या तुलनेत उच्च कार्यक्षमता आणि कमी RAM वापराद्वारे दर्शविले जाते. याव्यतिरिक्त, अचूकतेशी संबंधित फंक्शन्सवर जास्त लक्ष दिले जाते, विशेषतः, डिस्कवरील बफरमध्ये न पाठवलेल्या घटना जतन करण्याची क्षमता आणि फायली फिरवण्याची क्षमता.

वास्तुशास्त्रीयदृष्ट्या, वेक्टर हा एक इव्हेंट राउटर आहे जो एक किंवा अधिक संदेश प्राप्त करतो स्रोत, वैकल्पिकरित्या या संदेशांवर अर्ज करणे परिवर्तने, आणि त्यांना एक किंवा अधिक पाठवत आहे नाले.

खालीलप्रमाणे अंमलबजावणी करण्यात आली आहे

स्त्रोत

• फाइल - एक किंवा अधिक स्थानिक फायलींमधील इव्हेंटचे सतत वाचन;
• statsd - UDP द्वारे StatsD प्रोटोकॉलद्वारे इव्हेंटची सतत पावती;
• stdin - मानक इनपुट प्रवाहातील घटनांचे सतत वाचन;
• syslog - Syslog 5424 प्रोटोकॉलद्वारे इव्हेंटची सतत पावती;
• tcp - TCP सॉकेटमधून इव्हेंटचे सतत वाचन;
• वेक्टर - दुसर्‍या वेक्टर उदाहरणावरून इव्हेंट प्राप्त करणे.

परिवर्तने

• add_fields - कार्यक्रमांमध्ये अतिरिक्त फील्ड जोडणे;
• field_filter — फील्ड मूल्यानुसार इव्हेंट फिल्टरिंग;
• grok_parser — Grok फॉरमॅटमध्ये फील्ड व्हॅल्यू पार्स करणे;
• json_parser - JSON फॉरमॅटमध्ये फील्ड व्हॅल्यू पार्स करणे;
• lua - लुआ स्क्रिप्ट वापरून घटना रूपांतरित करणे;
• regex_parser - नियमित अभिव्यक्ती वापरून फील्ड मूल्ये रूपांतरित करणे;
• remove_fields — इव्हेंटमधून फील्ड काढून टाकणे;
• टोकनायझर - फील्ड मूल्ये टोकनमध्ये विभाजित करणे.

नाले

• aws_cloudwatch_logs - AWS CloudWatch वर लॉग पाठवा;
• aws_kinesis_streams - AWS Kinesis ला इव्हेंट पाठवत आहे;
• aws_s3 - बॅचमध्ये कार्यक्रम AWS S3 वर पाठवणे;
• ब्लॅकहोल - घटनांचा नाश, चाचणीसाठी हेतू;
• कन्सोल - मानक आउटपुट किंवा मानक त्रुटीवर इव्हेंट पाठवा;
• elasticsearch - ElasticSearch वर इव्हेंट पाठवणे;
• http — अनियंत्रित HTTP URL वर इव्हेंट पाठवणे;
• kafka - काफ्काला कार्यक्रम पाठवणे;
• splunk_hec - Splunk HTTP कलेक्टरला इव्हेंट पाठवणे;
• tcp — TCP सॉकेटवर इव्हेंट पाठवणे;
• वेक्टर - दुसर्‍या वेक्टर उदाहरणावर इव्हेंट पाठवा.

आवृत्ती 0.3.0 ने Lua, Grok, रेग्युलर एक्स्प्रेशन्स आणि टोकनायझरसाठी समर्थन जोडले आहे.

स्त्रोत: linux.org.ru