Všetkým prajem dobrý deň! Svoj debutový článok na habr chcem venovať veľmi zaujímavej téme – systému kontroly kvality internetu RIPE Atlas. Čiastočne sa moje záujmy dotýkajú otázok skúmania internetu alebo kyberpriestoru (termín, ktorý rýchlo získava na popularite, najmä v akademických kruhoch). Materiálov o RIPE Atlas na internete, vrátane habr, je hojnosť, ale zdali sa mi nedostatočne celistvé. Väčšina článku vychádza z informácií z oficiálnej stránky. a vlastné úvahy.

Namiesto predslovu
Regionálnym internetovým registrátorom (RIR), ktorého zodpovednosť sa rozprestiera na Európu, Strednú Áziu a Blízky východ, je RIPE NCC (Réseaux IP Européens Network Coordination Centre – Sieťový koordinačný centrum európskych IP sietí). RIPE NCC je nezisková organizácia so sídlom v Holandsku. Podporuje funkčnosť internetu. Poskytuje IP adresy a čísla autonómnych systémov miestnym poskytovateľom internetu a veľkým organizáciám.
Jedným z vedúcich projektov RIPE NCC, zameraných na skúmanie stavu internetu, je RIPE Atlas (zahájený na konci roku 2010), ktorý sa stal pokračovaním Služby testovacieho merania dopravy (Test Traffic Measurement Service), ktorá prestala fungovať v roku 2014.
RIPE Atlas je globálna sieť senzorov, ktoré vykonávajú aktívne merania stavu internetu. V súčasnosti je v sieti RIPE Atlas tisíce senzorov a ich počet neustále rastie. RIPE NCC agreguje zhromaždené údaje a podmienene zadarmo ich poskytuje užívateľom v priebehu.
Rozvoj siete prebieha na základe dobrovoľnej inštalácie senzorov užívateľmi vo svojej infraštruktúre, za čo získavajú „kredity“, ktoré môžu minúť na vykonanie zaujímavých meraní s využitím iných senzorov.
Aplikácie RIPE Atlas zvyčajne zahŕňajú:
- sledovanie dostupnosti svojej siete z rôznych bodov na internete;
- skúmanie a diagnostiku problémov v sieti pomocou rýchlej a flexibilnej kontroly pripojenia;
- v systéme monitorovania vlastnej siete;
- monitorovanie dostupnosti infraštruktúry DNS;
- kontrolu pripojenia prostredníctvom protokolu IPv6.
RIPE Atlas
Ako som už povedal, RIPE Atlas je systém senzorov umiestnených v sieti Internet, ktorý je pod jednotným administratívnym riadením. Okrem bežných senzorov (Probes) existujú aj pokročilejšie – ankory (Anchors).
K polovici roku 2020 má systém RIPE Atlas viac ako 11 tisíc aktívnych senzorov a viac než 650 aktívnych ankrov, ktoré spolu vykonávajú viac ako 25 tisíc meraní a dosahujú vyše 10 tisíc výsledkov za sekundu.
Na grafoch nižšie je znázornený rast počtu senzorov a ankrov.


A na nasledujúcich obrázkoch je zobrazená mapa sveta s vyznačením umiestnenia senzorov a ankrov.


Napriek regionálnemu statusu RIPE NCC, sieť RIPE Atlas pokrýva takmer celý svet, pričom Rusko patrí do top 5 krajín podľa počtu nainštalovaných senzorov (568), spolu s Nemeckom (1562), USA (1440), Francúzskom (925) a Spojeným kráľovstvom (610).
Riadiace servery
Pri skúmaní práce senzora sa zistilo, že pravidelne (každé 4 minúty) kontroluje spojenie s niektorými objektmi v sieti, medzi ktorými sú aj koreňové DNS servery a uzly s doménovými menami ako „ctr-sin02.atlas.ripe.net“, ktoré predpokladám sú riadiacimi servermi siete RIPE Atlas.
Na oficiálnej stránke som nenašiel informácie o riadiacich serveroch, ale môžem predpokladať, že ich úlohou je spravovať senzory a zhromažďovať a spracovávať dáta. Ak je moja domnienka správna, existuje najmenej 6 riadiacich serverov, z toho 2 sú v USA, 2 v Holandsku, 1 v Nemecku a 1 v Singapure. Na všetkých serveroch je otvorený port 443.
Ak má niekto viac informácií o riadiacich serveroch siete RIPE Atlas – prosím, objasnite túto otázku.
Senzor

Senzor RIPE Atlas je malé zariadenie (TP-Link 3020), ktoré je napájané z USB a pripojené k Ethernet portu smerovača pomocou sieťového kábla. V závislosti od modelu môže mať senzor čipset Atheros AR9331, 400 MHz, 4 MB flash a 32 MB RAM alebo čipset MediaNek MT7628NN, 575 MHz, 8 MB flash a 64 MB RAM.
Ankor

Ankér je vylepšený senzor s výrazne vyšším výkonom a schopnosťou merania. Ide o zariadenie v štandardnej 19-palcovej konfigurácii na hardvérovej platforme APU2C2 alebo APU2E2 s 4-jadrovým procesorom s frekvenciou 1 GHz, 2 GB RAM, 3 portami Gigabit Ethernet a 250 GB SSD úložiskom. .
Inštalácia a správa senzora
Ako som už povedal, senzory sa distribujú zadarmo s cieľom ich inštalácie do vašej infraštruktúry. Pri žiadosti o senzor je potrebné uviesť krajinu, mesto a číslo autonómneho systému, kde bude umiestnený. V odpovedi na moju žiadosť mi RIPE NCC zaslalo nasledujúcu správu.
Žiaľ, vaša žiadosť momentálne nespĺňa naše kritériá na získanie hardvérového senzora. Aj keď je naším cieľom čo najširšie rozširovať senzory RIPE Atlas, zdá sa, že už existuje dostatočné množstvo zariadení pripojených buď v rámci vášho zadaného ASN, alebo v sieti, o ktorú ste požiadali, alebo v krajine, v ktorej ste požiadali.
Nebojte sa. V takom prípade môžete nainštalovať softvérový senzor, napríklad na virtuálny stroj, domácí server alebo router – neexistujú obmedzenia na miesto a autonómny systém. Podporujú sa distribúcie CentOS, Debian, Raspbian a Turris OS. Na nasadenie je potrebné stiahnuť a nainštalovať príslušný softvér, napríklad z .
Inštalácia softvérového senzora je dosť jednoduchá. Napríklad na inštaláciu v CentOS 8 je potrebné vykonať tieto príkazy:
curl -O 'https://ftp.ripe.net/ripe/atlas/software-probe/centos8/noarch/ripe-atlas-repo-1-2.el8.noarch.rpm'yum install ripe-atlas-repo-1-2.el8.noarch.rpm a zaregistrovať senzor, pričom je potrebné poskytnúť SSH kľúč, ktorý sa nachádza v /var/atlas-probe/etc/probe_key.pub, ako aj uviesť číslo autonómneho systému a svoje mesto. V liste pripomenuli potrebu správneho uvedenia umiestnenia senzora.
Správa senzora sa obmedzuje na možnosť zdieľania meracieho zdroja s inými používateľmi, nastavenia upozornení na výpadky, ako aj na štandardné sieťové nastavenia (adresa, predvolená brána atď.).
Merania
Konečne sme sa dostali k vykonávaniu meraní. Nastavenie úloh na vykonávanie meraní sa uskutočňuje z osobného účtu. Tam sa tiež môžete pozrieť na výsledky.
Vytvorenie merania pozostáva z troch krokov: výber typu merania, výber snímača, výber obdobia merania.
Merania môžu byť nasledujúcich typov: ping, traceroute, DNS, SSL, HTTP, NTP. Podrobné nastavenia konkrétneho typu merania, s výnimkou špecifických, určených konkrétnym protokolom alebo nástrojom, zahŕňajú: cieľovú adresu, protokol sieťovej úrovne, počet paketov v meraní a čas medzi meraniami, veľkosť paketu a čas medzi paketmi, stupeň náhodného posunu času začiatku odosielania paketov.
Výber snímačov je možný podľa ich identifikátora alebo krajiny umiestnenia, regiónu, autonómneho systému, tagu atď.
Obdobie vykonávania meraní je určené časom začiatku a skončenia.
Výsledky meraní sú dostupné na webovej stránke v osobnom účte, ktoré je možné získať aj vo formáte json. Vo všeobecnosti výsledky meraní predstavujú kvantitatívne ukazovatele charakterizujúce dostupnosť určitého uzla alebo služby.
Pre používateľa sú možnosti meraní prezentované širokým, ale veľmi obmedzeným spektrom. Je však jasné, že možnosti systému predpokladajú generáciu paketov prakticky akejkoľvek konfigurácie, čo otvára oveľa širšie možnosti na meranie stavu siete Internet.
Nižšie je uvedený príklad neupravených výsledkov jednorazových meraní s nastaveniami podľa predvoleného stavu. V meraniach typu ping, traceroute a SSL bol ako cieľ vybraný IP adresa habr.com, DNS — IP adresa DNS servera Google, NTP — IP adresa NTP servera ntp1.stratum2.ru. Vo všetkých meraniach bol použitý jeden snímač, umiestnený vo Vladivostoku.
Ping
[{"fw":4790,"lts":18,"dst_name":"178.248.237.68","af":4,"dst_addr":"178.248.237.68","src_addr":"192.168.0.10","proto":"ICMP","ttl":55,"size":48,"result":[{"rtt":122.062873},{"rtt":121.775641},{"rtt":121.807897}],"dup":0,"rcvd":3,"sent":3,"min":121.775641,"max":122.062873,"avg":121.882137,"msm_id":26273241,"prb_id":4428,"timestamp":1594622562,"msm_name":"Ping","from":"5.100.99.178","type":"ping","group_id":26273241,"step":null,"stored_timestamp":1594622562}]Traceroute
[{"fw":4790,"lts":19,"endtime":1594622643,"dst_name":"178.248.237.68","dst_addr":"178.248.237.68","src_addr":"192.168.0.10","proto":"ICMP","af":4,"size":48,"paris_id":1,"result":[{"hop":1,"result":[{"from":"192.168.0.1","ttl":64,"size":76,"rtt":7.49},{"from":"192.168.0.1","ttl":64,"size":76,"rtt":1.216},{"from":"192.168.0.1","ttl":64,"size":76,"rtt":1.169}]},{"hop":2,"result":[{"from":"5.100.98.1","ttl":254,"size":28,"rtt":1.719},{"from":"5.100.98.1","ttl":254,"size":28,"rtt":1.507},{"from":"5.100.98.1","ttl":254,"size":28,"rtt":1.48}]},---DATA OMITED---,{"hop":10,"result":[{"from":"178.248.237.68","ttl":55,"size":48,"rtt":121.891},{"from":"178.248.237.68","ttl":55,"size":48,"rtt":121.873},{"from":"178.248.237.68","ttl":55,"size":48,"rtt":121.923}]}],"msm_id":26273246,"prb_id":4428,"timestamp":1594622637,"msm_name":"Traceroute","from":"5.100.99.178","type":"traceroute","group_id":26273246,"stored_timestamp":1594622649}]DNS
[{"fw":4790,"lts":146,"dst_addr":"8.8.8.8","af":4,"src_addr":"192.168.0.10","proto":"UDP","result":{"rt":174.552,"size":42,"abuf":"5BGAgAABAAEAAAAABGhhYnIDY29tAAABAAHADAABAAEAAAcmAASy+O1E","ID":58385,"ANCOUNT":1,"QDCOUNT":1,"NSCOUNT":0,"ARCOUNT":0},"msm_id":26289620,"prb_id":4428,"timestamp":1594747880,"msm_name":"Tdig","from":"5.100.99.178","type":"dns","group_id":26289620,"stored_timestamp":1594747883}]SSL
[{"fw":4790,"lts":63,"dst_name":"178.248.237.68","dst_port":"443","method":"TLS","ver":"1.2","dst_addr":"178.248.237.68","af":4,"src_addr":"192.168.0.10","ttc":106.920213,"rt":219.948332,"cert":["-----BEGIN CERTIFICATE-----nMIIGJzCCBQ+gAwIBAg ---DATA OMITED--- yd/teRCBaho1+Vn-----END CERTIFICATE-----"],"msm_id":26289611,"prb_id":4428,"timestamp":1594747349,"msm_name":"SSLCert","from":"5.100.99.178","type":"sslcert","group_id":26289611,"stored_timestamp":1594747352}]NTP
[{"fw":4790,"lts":72,"dst_name":"88.147.254.230","dst_addr":"88.147.254.230","src_addr":"192.168.0.10","proto":"UDP","af":4,"li":"no","version":4,"mode":"server","stratum":2,"poll":8,"precision":0.0000076294,"root-delay":0.000518799,"root-dispersion":0.0203094,"ref-id":"5893fee5","ref-ts":3803732581.5476198196,"result":[{"origin-ts":3803733082.3982748985,"receive-ts":3803733082.6698465347,"transmit-ts":3803733082.6698560715,"final-ts":3803733082.5099263191,"rtt":0.111643,"offset":-0.21575},{"origin-ts":3803733082.5133042336,"receive-ts":3803733082.7847337723,"transmit-ts":3803733082.7847442627,"final-ts":3803733082.6246700287,"rtt":0.111355,"offset":-0.215752},{"origin-ts":3803733082.6279149055,"receive-ts":3803733082.899283886,"transmit-ts":3803733082.8992962837,"final-ts":3803733082.7392635345,"rtt":0.111337,"offset":-0.2157}],"msm_id":26289266,"prb_id":4428,"timestamp":1594744282,"msm_name":"Ntp","from":"5.100.99.178","type":"ntp","group_id":26289266,"stored_timestamp":1594744289}]Záver
Systém RIPE Atlas je užitečný nástroj, ktorý umožňuje takmer v reálnom čase sledovať dostupnosť objektov a služieb na internete.
Údaje získané pomocou siete RIPE Atlas môžu byť cenné pre operátorov sietí, výskumníkov, technickú komunitu a všetkých, ktorí sa zaujímajú o zdravé fungovanie internetu a chcú sa dozvedieť viac o základných sieťových štruktúrach a prúdoch dát, ktoré podporujú fungovanie internetu na globálnej úrovni.
P.S. RIPE Atlas nie je osamotený; existujú aj iné podobné nástroje, napríklad .
Zdroj: habr.com
