D'fhoilsigh AOL córas innéacsaithe tráchta líonra Moloch 2.3

Cuideachta AOL scaoileadh scaoileadh córais chun paicéid líonra a ghabháil, a stóráil agus a innéacsú Moloch 2.3, a sholáthraíonn uirlisí chun sreafaí tráchta a mheasúnú go radhairc agus chun faisnéis a chuardach a bhaineann le gníomhaíocht líonra. Tá an cód scríofa i dteanga C (comhéadan i Node.js/JavaScript) agus dáilte ag ceadúnaithe faoi Apache 2.0. Tacaíonn sé le hobair ar Linux agus FreeBSD. Réidh pacáistí ullmhaithe le haghaidh leaganacha éagsúla de CentOS agus Ubuntu.

Cruthaíodh an tionscadal in 2012 agus é mar sprioc ionad oscailte a chruthú d’ardán próiseála paicéad líonra tráchtála a d’fhéadfadh scála a dhéanamh de réir toirte tráchta AOL. Mar gheall ar chóras nua a chur i bhfeidhm in AOL bhíothas in ann smacht iomlán a bhaint amach ar an mbonneagar mar gheall ar imscaradh ar a fhreastalaithe agus costais a laghdú go suntasach - ag baint úsáide as Moloch chun trácht a ghabháil go hiomlán i ngach líonra AOL costas an méid céanna agus nuair a úsáidtear é. réiteach tráchtála Roimhe seo, caitheadh ​​​​é ar thrácht a ghabháil ar líonra amháin. Is féidir leis an gcóras scála a dhéanamh chun trácht a phróiseáil ar luasanna na ndeicheanna gigabuit in aghaidh an tsoicind. Ní chuirtear teorainn le méid na sonraí stóráilte ach amháin ag méid an eagar dioscaí atá ar fáil.
Déantar meiteashonraí an tseisiúin a innéacsú sa bhraisle inneall-bhunaithe Elasticsearch.

Áiríonn Moloch uirlisí chun trácht a ghabháil agus a innéacsú i bhformáid PCAP dúchais, chomh maith le rochtain thapa ar shonraí innéacsaithe. Chun an fhaisnéis carntha a anailísiú, tairgtear comhéadan gréasáin a ligeann duit samplaí a nascleanúint, a chuardach agus a onnmhairiú. Chomh maith leis sin ar fáil API, a ligeann duit sonraí faoi phaicéid gafa a aistriú i bhformáid PCAP agus seisiúin pharsáilte i bhformáid JSON chuig feidhmchláir tríú páirtí. Simplíonn úsáid na formáid PCAP go mór comhtháthú le hanailíseoirí tráchta atá ann cheana féin ar nós Wireshark.

Tá trí chomhpháirt bhunúsacha i Moloch:

  • Is feidhmchlár il-snáithithe C é an córas um ghabháil tráchta chun monatóireacht a dhéanamh ar thrácht, ag scríobh dumpaí i bhformáid PCAP chuig diosca, ag parsáil paicéid gafa agus ag seoladh meiteashonraí faoi sheisiúin (SPI, iniúchadh paicéad Stateful) agus prótacail chuig an mbraisle Elasticsearch. Is féidir comhaid PCAP a stóráil i bhfoirm chriptithe.
  • Comhéadan gréasáin bunaithe ar an ardán Node.js, a ritheann ar gach freastalaí gabhála tráchta agus a phróiseálann iarratais a bhaineann le rochtain a fháil ar shonraí innéacsaithe agus comhaid PCAP a aistriú trí API.
  • Stóráil meiteashonraí bunaithe ar Elasticsearch.

Soláthraíonn an comhéadan gréasáin roinnt modhanna féachana - ó staitisticí ginearálta, léarscáileanna naisc agus graif amhairc le sonraí ar athruithe ar ghníomhaíocht líonra go huirlisí chun staidéar a dhéanamh ar sheisiúin aonair, anailís a dhéanamh ar ghníomhaíocht i gcomhthéacs na bprótacal a úsáidtear agus sonraí ó dhumpaí PCAP a pharsáil.

D'fhoilsigh AOL córas innéacsaithe tráchta líonra Moloch 2.3

D'fhoilsigh AOL córas innéacsaithe tráchta líonra Moloch 2.3

D'fhoilsigh AOL córas innéacsaithe tráchta líonra Moloch 2.3

D'fhoilsigh AOL córas innéacsaithe tráchta líonra Moloch 2.3

В scaoileadh nua:

  • Tá aistriú déanta chuig formáid gan chló a úsáid le haghaidh innéacsú in Elasticsearch.
  • Cuireadh samplaí de scagairí gabhála tráchta i Lua leis.
  • Tá tacaíocht don leagan 46 dréacht de phrótacal QUIC curtha i bhfeidhm.
  • Athoibríodh an cód do phrótacail pharsála, rud a fhágann gur féidir parsálaithe a scríobh le haghaidh prótacail Ethernet agus IP.
  • Tá parsálaithe nua molta do na prótacail arp, bgp, igmp, isis, lldp, ospf agus pim, chomh maith le parsálaithe do na prótacail anaithnid unkEthernet agus unkIpProtocol.
  • Cuireadh rogha leis parsálaithe a dhíchumasú go roghnach (disableParsers).
  • Tá an cumas aon réimse slánuimhir a thaispeáint ar chairteacha, atá socraithe ar an leathanach socruithe, curtha leis an gcomhéadan gréasáin.
  • Is féidir graif agus teidil a reoite anois agus gan bogadh agus an leathanach á scrollú.
  • Tá an chuid is mó de na barraí nascleanúna i bhfolach nó laghdaithe de réir réamhshocraithe.

Foinse: oscailtenet.ru

Add a comment