AOL ने Moloch 2.3 नेटवर्क ट्रॅफिक इंडेक्सिंग सिस्टम प्रकाशित केले

AOL कंपनी सोडले नेटवर्क पॅकेट्स कॅप्चर करणे, संग्रहित करणे आणि अनुक्रमित करणे यासाठी प्रणालीचे प्रकाशन मोलोच 2.3, जे रहदारी प्रवाहाचे दृष्यदृष्ट्या मूल्यांकन करण्यासाठी आणि नेटवर्क क्रियाकलापाशी संबंधित माहिती शोधण्यासाठी साधने प्रदान करते. कोड सी भाषेत लिहिलेला आहे (Node.js/JavaScript मधील इंटरफेस) आणि द्वारा वितरित Apache 2.0 अंतर्गत परवानाकृत. Linux आणि FreeBSD वर कामाला सपोर्ट करते. तयार संकुल CentOS आणि Ubuntu च्या विविध आवृत्त्यांसाठी तयार.

2012 मध्ये व्यावसायिक नेटवर्क पॅकेट प्रोसेसिंग प्लॅटफॉर्मसाठी एक ओपन रिप्लेसमेंट तयार करण्याच्या उद्दिष्टाने हा प्रकल्प तयार करण्यात आला होता जो AOL रहदारीच्या प्रमाणात वाढवू शकतो. एओएलमध्ये नवीन प्रणालीच्या अंमलबजावणीमुळे त्याच्या सर्व्हरवर तैनातीमुळे पायाभूत सुविधांवर संपूर्ण नियंत्रण मिळवणे शक्य झाले आणि खर्चात लक्षणीय घट झाली - सर्व एओएल नेटवर्कमधील रहदारी पूर्णपणे कॅप्चर करण्यासाठी मोलोच वापरणे वापरताना समान रक्कम खर्च करते. व्यावसायिक उपाय पूर्वी, तो फक्त एका नेटवर्कवर रहदारी कॅप्चर करण्यासाठी खर्च केला जात होता. सिस्टीम प्रति सेकंद दहापट गिगाबिट्स वेगाने ट्रॅफिकवर प्रक्रिया करण्यासाठी स्केल करू शकते. संग्रहित डेटाची मात्रा केवळ उपलब्ध डिस्क ॲरेच्या आकारानुसार मर्यादित आहे.
इंजिन-आधारित क्लस्टरमध्ये सत्र मेटाडेटा अनुक्रमित केला जातो Elasticsearch.

Moloch मध्ये मूळ PCAP स्वरूपात रहदारी कॅप्चर आणि अनुक्रमित करण्यासाठी तसेच अनुक्रमित डेटामध्ये द्रुत प्रवेशासाठी साधने समाविष्ट आहेत. जमा केलेल्या माहितीचे विश्लेषण करण्यासाठी, एक वेब इंटरफेस ऑफर केला जातो जो तुम्हाला नॅव्हिगेट, शोध आणि नमुने निर्यात करण्यास अनुमती देतो. तसेच प्रदान केले API, जे तुम्हाला PCAP फॉरमॅटमध्ये कॅप्चर केलेल्या पॅकेट्सबद्दलचा डेटा आणि JSON फॉरमॅटमधील पार्स केलेल्या सत्रांबद्दलचा डेटा थर्ड-पार्टी ॲप्लिकेशन्समध्ये ट्रान्सफर करण्याची परवानगी देते. PCAP फॉरमॅटचा वापर वायरशार्क सारख्या विद्यमान रहदारी विश्लेषकांसह एकीकरण मोठ्या प्रमाणात सुलभ करतो.

मोलोचमध्ये तीन मूलभूत घटक असतात:

• ट्रॅफिक कॅप्चर सिस्टीम हे ट्रॅफिकचे निरीक्षण करण्यासाठी, पीसीएपी फॉरमॅटमध्ये डंप डिस्कवर लिहिण्यासाठी, कॅप्चर केलेले पॅकेट पार्स करण्यासाठी आणि सत्रांबद्दल मेटाडेटा (एसपीआय, स्टेटफुल पॅकेट तपासणी) आणि इलास्टिकसर्च क्लस्टरला प्रोटोकॉल पाठवण्यासाठी मल्टी-थ्रेडेड सी अॅप्लिकेशन आहे. पीसीएपी फाइल्स एनक्रिप्टेड स्वरूपात संग्रहित करणे शक्य आहे.
• Node.js प्लॅटफॉर्मवर आधारित वेब इंटरफेस, जो प्रत्येक ट्रॅफिक कॅप्चर सर्व्हरवर चालतो आणि अनुक्रमित डेटा ऍक्सेस करण्याशी संबंधित विनंत्यांवर प्रक्रिया करतो आणि PCAP फाइल्स द्वारे हस्तांतरित करतो. API.
• Elasticsearch वर आधारित मेटाडेटा स्टोरेज.

वेब इंटरफेस अनेक पाहण्याचे मोड प्रदान करतो - सामान्य आकडेवारी, कनेक्शन नकाशे आणि नेटवर्क क्रियाकलापांमधील बदलांवरील डेटासह व्हिज्युअल आलेख ते वैयक्तिक सत्रांचा अभ्यास करण्यासाठी साधनांपर्यंत, वापरलेल्या प्रोटोकॉलच्या संदर्भात क्रियाकलापांचे विश्लेषण करणे आणि PCAP डंपमधून डेटा पार्स करणे.

В नवीन प्रदर्शित:

• Elasticsearch मध्ये अनुक्रमणिका साठी टाइपलेस स्वरूप वापरण्यासाठी एक संक्रमण केले आहे.
• लुआमध्ये ट्रॅफिक कॅप्चर फिल्टरची उदाहरणे जोडली.
• QUIC प्रोटोकॉलच्या 46-मसुदा आवृत्तीसाठी समर्थन लागू केले गेले आहे.
• प्रोटोकॉल पार्स करण्यासाठी कोड पुन्हा तयार केला गेला आहे, ज्यामुळे इथरनेट आणि आयपी स्तर प्रोटोकॉलसाठी पार्सर लिहिणे शक्य झाले आहे.
• arp, bgp, igmp, isis, lldp, ospf आणि pim प्रोटोकॉल, तसेच अज्ञात unkEthernet आणि unkIpProtocol प्रोटोकॉलसाठी पार्सरसाठी नवीन पार्सर प्रस्तावित केले आहेत.
• निवडकपणे पार्सर अक्षम करण्यासाठी पर्याय जोडला (डिसेबलपार्सर).
• सेटिंग्ज पृष्ठावर सेट केलेले, चार्टवर कोणतेही पूर्णांक फील्ड प्रदर्शित करण्याची क्षमता वेब इंटरफेसमध्ये जोडली गेली आहे.
• आलेख आणि शीर्षके आता अँकर केली जाऊ शकतात आणि पृष्ठ स्क्रोल करताना हलवू शकत नाहीत.
• बहुतेक नेव्हिगेशन बार डीफॉल्टनुसार लपलेले किंवा संकुचित केलेले असतात.

स्त्रोत: opennet.ru