Programski jezik P4

Programski jezik P4
P4 je programski jezik dizajniran za programiranje pravila usmjeravanja paketa. Za razliku od jezika opće namjene poput C ili Pythona, P4 je predmetno orijentiran jezik s nizom konstrukcija optimiziranih za mrežno usmjeravanje.

P4 je jezik otvorenog koda, licenciran i podržan od strane nevladine organizacije pod nazivom P4 Language Consortium. Također ga podržavaju Open Networking Foundation (ONF) i Linux Foundation (LF) — dvije najveće krovne organizacije u projektima s otvorenim kodom u oblasti mrežnih tehnologija.
Jezik je prvotno izmišljen 2013. godine i opisan 2014. u dokumentu SIGCOMM CCR pod nazivom "Neovisan o protokolima, programiranje procesora za usmjeravanje paketa".

Od svog nastanka, P4 eksponencijalno raste i razvija se, brzo postajući standard za opis prijenosa paketa mrežnim uređajima, uključujući mrežne adaptore, preklopnike i usmjerivače.

"SDN je transformirao mrežnu industriju, a P4 podiže SDN na novu razinu, osiguravajući programabilnost u oblasti usmjeravanja", rekao je Guru Parulkar, izvršni direktor Open Networking Foundation.

Jezik P4 je prvotno kreirala grupa inženjera i istraživača iz Google-a, Intela, Microsoft Research-a, Barefoot-a, Princetona i Stanforda. Cilj je bio jednostavan: razviti jezik koji bi programer mogao naučiti za jedan dan i koristiti za precizno opisivanje načina na koji se paketi prenose u mreži.

Od samog početka, P4 je razvijan kao neovisan o cilju (tj. program napisan u P4 mogao bi biti preveden bez promjena za izvođenje na različitim ciljevima, kao što su ASIC, FPGA, CPU, NPU i GPU).

Također, jezik je neovisan o protokolu (tj. P4 program može opisivati postojeće standardne protokole ili se koristiti za određivanje novih prilagodljivih načina adresiranja).

U industriji se P4 koristi za programiranje uređaja. Moguće je da će u budućnosti Internet-RFC i standardi IEEE također uključivati specifikaciju P4.

P4 se može koristiti kako za programabilne, tako i za uređaje s fiksnom funkcijom. Na primjer, koristi se za precizno bilježenje ponašanja prekidača u API-jevima sučelja za apstrakciju prekidača (SAI), koji se koriste u OS-u prekidača s otvorenim izvorom SONiC. P4 se također koristi u projektu ONF Stratum za opisivanje ponašanja prebacivanja putem brojnih stacionarnih i programabilnih uređaja.

Opis ponašanja prekidača i mrežnih adaptera prvi put omogućava stvaranje preciznog izvršnog modela cijele mreže prije implementacije. Veliki pružatelji oblaka mogu potpuno testirati i otkloniti poteškoće u mreži koristeći softver, što značajno smanjuje vrijeme i troškove testiranja interakcije u laboratorijima, bez potrebe za skupom opremom.

Korištenjem P4, pružatelji mrežne opreme mogu očekivati zajedničko osnovno ponašanje usmjeravanja u svim proizvodima, što omogućava ponovnu upotrebu infrastrukture za testiranje, pojednostavljuje razvoj softvera za upravljanje i, na kraju, garantira kompatibilnost.

Naravno, P4 se može koristiti za pisanje programa koji opisuju potpuno nove načine usmjeravanja. Na primjer, P4 se široko koristi za telemetriju i mjerenja u podatkovnim centrima, mrežama poduzeća i pružatelja usluga.

Istraživačka zajednica također se aktivirala. Nekoliko vodećih akademskih istraživačkih grupa u mrežnim tehnologijama objavilo je zanimljive nove primjene temeljene na programima P4, uključujući balansiranje opterećenja, usklađene protokole i keširanje vrijednosti ključa. Stvara se nova paradigma programiranja, inovacije se premještaju iz hardvera u softver, što omogućava pojavu mnogih nepredviđenih, novih i genijalnih ideja.

Zajednica programera značajno je doprinijela razvoju koda, uključujući kompajlere, pipeline programe, obrasce ponašanja, API-je, testne okruženja, aplikacije i mnogo više. Posvećeni programeri nalaze se u kompanijama kao što su Alibaba, AT&T, Barefoot, Cisco, Fox Networks, Google, Intel, IXIA, Juniper Networks, Mellanox, Microsoft, Netcope, Netronome, VMware, Xilinx i ZTE; iz univerziteta, uključujući BUPT, Cornell, Harvard, MIT, NCTU, Princeton, Stanford, Technion, Tsinghua, UMass i USI; i projekti otvorenog koda, kao što su CORD, FD.io, OpenDaylight, ONOS, OvS, SAI i Stratum, naglašavaju činjenicu da je P4 nezavistan javni projekat.

Tipična generacija kontrolera za jezik P4:

Programski jezik P4

Perspektive primjene

Programski jezik P4
Budući da je jezik namijenjen aplikacijama rutiranja, spisak zahtjeva i opcija dizajna se razlikuje u odnosu na jezike opće namjene. Osnovne karakteristike jezika su:

  1. Nezavisnost od ciljne implementacije;
  2. Nezavisnost od korištenih protokola;
  3. Rekonfigurabilnost polja.

Nezavisnost od ciljne implementacije

P4 programi se razvijaju tako da ne ovise o implementaciji, što znači da se mogu kompajlirati za mnoge različite vrste izvršnih mašina, kao što su procesori opće namjene, FPGA, sistemi na čipu, mrežni procesori i ASIC. Ove različite vrste mašina poznate su kao P4 ciljevi, i za svaki cilj je potreban kompajler koji će konvertovati izvorni P4 kod u model ciljnog prekidača. Kompajler može biti ugrađen u ciljno uređaj, vanjski softver ili čak oblačna usluga. Budući da su mnogi od prvotnih ciljeva za P4 programe korišteni za jednostavno prebacivanje paketa, veoma često možete čuti termin 'P4 prekidač', čak i ako je upotreba 'P4 cilj' tačnija.

Nezavisnost od korištenih protokola

P4 je nezavistan od protokola. To znači da jezik nema ugrađenu podršku za uobičajene protokole kao što su IP, Ethernet, TCP, VxLAN ili MPLS. Umjesto toga, P4 programer opisuje formate zaglavlja i imena polja potrebnih protokola u programu, koji se zatim interpretiraju i obrađuju prevedenim programom i ciljnim uređajem.

Rekonfigurabilnost polja

Nezavisnost od protokola i model apstraktnog jezika omogućavaju rekonstrukciju — P4 ciljevi moraju moći da menjaju obradu paketa nakon implementacije sistema. Ova mogućnost tradicionalno se povezuje sa rutiranjem putem procesora opšte namene ili mrežnih procesora, a ne integrisanih kola sa fiksnim funkcijama.

Iako je jezik bez elemenata koji bi mogli sprečiti optimizaciju određenog seta protokola, te optimizacije su nevidljive autoru jezika i mogu, na kraju, smanjiti fleksibilnost sistema i ciljeva, kao i njihovu rekonstrukciju.

Ove karakteristike jezika prvobitno su postavljene od strane njegovih kreatora sa fokusom na široku upotrebu u mrežnoj infrastrukturi.

Jezik se već koristi u mnogim kompanijama:

1) Hipermasivni centri podataka;

Kineska kompanija Tencent je najveća investiciona kompanija na svetu i jedna od najvećih venture capital firmi. Njene podružnice, kako u Kini tako i u drugim zemljama, specijalizovane su za razne oblasti visokotehnološkog biznisa, uključujući različite internet usluge, razvoj u oblasti veštačke inteligencije i elektronskih zabava.

P4 i programabilno rutiranje su napredne tehnologije koje se koriste u mrežnoj arhitekturi kompanije.

Kao jedan od kreatora, Google ponosno ističe brzo usvajanje P4 u mrežnoj industriji, a posebno u oblasti arhitektonskog projektovanja centara podataka.

2) Komercijalne kompanije;

Goldman Sachs, koristeći prednosti saradnje sa zajednicom otvorenog koda i razvoja zajedničkih standarda i rešenja, već sada uvodi inovacije u mrežnu infrastrukturu i pruža najbolje rešenja za klijente.

3) Proizvodnja;

Cela mrežna industrija će imati koristi od jezika kao što je P4, koji nedvosmisleno definiše ponašanje preusmeravanja. Takođe smatra i Cisco, prebacujući svoje asortimane proizvoda na korišćenje ovog jezika.

Juniper Networks je uključio P4 i P4 Runtime u niz proizvoda i obezbeđuje programski pristup ugrađenom procesoru Juniper i njegovom programskoj osnovi.

Ruijie Networks aktivno podržava P4 i prednosti koje donosi mrežama. Pomoću P4, kompanija može da stvara i isporučuje vrhunska rešenja za širok spektar klijenata.

4) Telekomunikacijski provajderi;

AT&T je bio jedan od prvih podržavalaca P4, jedan od prvih koji je koristio P4 za definisanje ponašanja koje je želeo da vidi u mrežama, i koji koristi uređaje za programabilno preusmeravanje P4 u svojoj mreži.

U Deutsche Telekom jeziku se koristi za prototipizaciju ključnih mrežnih funkcija u okviru programa Access 4.0.

5) Poluprovodnička industrija;

Jezik je omogućio realizaciju nove paradigme prenošenja softverskih mogućnosti na vertikalu mrežnog usmjeravanja od strane kompanije Barefoot.

Xilinx je bio jedan od osnivača P4.org i aktivno je učestvovao u razvoju jezika P4, implementirajući ga u programabilnim platformama zasnovanim na FPGA za opremu SmartNIC i NFV, izdajući jedan od prvih P416 kompajlera kao deo dizajna SDNet.

6) Softver.

U kompaniji VMware smatraju da P4 stvara ogromnu energiju, inovacije i zajednicu koja vodi ka značajnim i neophodnim transformacijama u mreži. VMware je izvorno bila deo ovog industrijskog pokreta, jer je nova talas inovacija izazvana softverskim pristupima koji proširuju mogućnosti infrastrukture i realizuju ih u najnovijim proizvodima.

Dakle, P4 je jezik programiranja koji nije zavistan od cilja i protokola, koji industrija i naučna zajednica koriste za jednoznačno definisanje ponašanja usmeravanja paketa kao programa, koji se zatim može kompajlirati za više ciljeva. Danas ciljevi uključuju hardverske i softverske prekidače, hipervizorske prekidače, NPU, grafičke procesore, FPGA, SmartNIC i ASIC.

Glavne karakteristike jezika značajno proširuju sfere njegove primene i omogućavaju brzu implementaciju u arhitekture mreža.

Odakle početi

P4 je otvoreni projekat, sve aktuelne informacije nalaze se na sajtu P4.org

Link na repozitorijum https://github.com/p4lang, gde možete dobiti izvorne kodove primera i edukativne materijale.

Plugin za Eclipse sa podrškom za P4, ali možemo preporučiti P4 Studio od kompanije Barefoot.

Programski jezik P4

Razgovaraćemo o osnovnim apstrakcijama jezgra:

Definicija naslova — omogućuju određivanje protokolskih naslova.

U definiciji naslova se određuje:

  • opis formata paketa i imena polja naslova
  • fiksna i promenljiva dozvoljena polja

Na primer

zaglavlje Ethernet_h{
    bitdstAddr;
    bitsrcAddr;
    bitetherType;
}

zaglavlje IPv4_h{
    bit  verzija;
    bit  ihl;
    bit  diffserv;
    bit  ukupnaDužina;
    bit  identifikacija;
    bit  flagovi;
    bit  fragOffset;
    bit  ttl;
    bit  protokol;
    bit  hdrChecksum;
    bit  srcAddr;
    bit  dstAddr;
    varbit  opcije;
}

Parseri — njihova uloga je da analiziraju naslove.

Sledeći primer parsera će odrediti prelazak stanje mašine iz jednog početnog stanja u jedno od dva ciljna:

Programski jezik P4

parser MyParser(){
 state start{transition parse_ethernet;}
 state parse_ethernet{
    packet.extract(hdr.ethernet);
    transition select(hdr.ethernet.etherType){
        TYPE_IPV4: parse_ipv4;
        default: accept;
        }
    }…
}

Tabele — sadrže stanja mašine povezujući korisničke ključeve sa radnjama. Akcije — opis onoga kako upravljati paketom.

Tabele sadrže stanja (određena na upravljačkom nivou) za preusmeravanje paketa, opisuje jedinicu akcije Match-Action.

Usaglašavanje paketa se vrši po:

  • Tačnom podudaranju
  • Najdužem Match-u sa prefiksom (LPM)
  • Tromoj usaglašenosti (maskiranju)

table ipv4_lpm{
    čita{
        ipv4.dstAddr: lpm;
    } akcije {
        proslijedi();
    }
}

Sve moguće radnje moraju biti unapred definisane u tabelama.

Radnje se sastoje od koda i podataka. Podaci dolaze sa upravljačkog nivoa (na primer, IP adrese / brojevi portova). Određeni, bezpetljasti primitivni mogu biti zadati direktno u radnji, ali količina komandi mora biti predvidiva. Stoga radnje ne mogu sadržati nikakve petlje ili uslovne operatore.

akcija ipv4_forward(macAddr_t dstAddr, egressSpec_t port){
    standard_metadata.egress_spec = port;
    hdr.ethernet.srcAddr = hdr.ethernet.dstAddr;
    hdr.ethernet.dstAddr = dstAddr;
    hdr.ipv4.ttl = hdr.ipv4.ttl - 1;
}

Match-Action moduli — radnje za kreiranje ključa pretraživanja, pretragu u tabeli, izvršavanje radnji.

Tipičan primer modula je prikazan na slici:

Programski jezik P4

Tok kontrole — definiše redosled primene Match-Action modula. Ovo je imperativni program koji definiše logiku visokog nivoa i redosled Match-Action. Tok kontrole povezuje sve objekte, postavljajući nivo upravljanja.

Spoljni objekti — to su specifični objekti sa jasno definisanom arhitekturom i API interfejsima. Na primer, izračunavanje kontrolne sume, registri, brojači, itd.

spoljašnji registruj{
    registruj(bit veličina);
    void čitaj(out T rezultat, in bit indeks);
    void upiši(in bit indeks, in T vrednost);
}

spoljašnji Checksum16{
  Checksum16();    //konstruktor
  void clear();    //pripremi jedinicu za izračunavanje
  void update(in T data);    //dodaj podatke u kontrolnu sumu
  void remove(in T data);  //ukloni podatke iz postojeće kontrolne sume
  bitget(); //dohvati kontrolnu sumu za podatke dodane od poslednjeg brisanja
}

Metapodaci — strukture podataka povezane sa svakim paketom.

Postoje 2 vrste metapodataka:

  Korisnički metapodaci (prazna struktura za sve pakete)
    Ovde možete staviti sve što želite
    Dostupno tokom celog pipeline-a
    prikladno za korišćenje u vlastite svrhe, na primer, za čuvanje heša paketa

  Unutrašnji metapodaci — obezbeđeni arhitekturom
    Ulazna i izlazna vrata se definišu ovde
    Vreme označeno kada je paket stavljen u red, dubina reda
    multicast hash / multicast queue
    Prioritet paketa, važnost paketa
    Specifikacija izlaznog porta (na primjer, izlazna queue)

P4 kompajler

P4C generira:

  1. Runtime data plane
  2. API za upravljanje stanjem mašine u data plane

Programski jezik P4

Primjer programskog svitča na jeziku P4

Izvorni kodovi se mogu preuzeti iz repozitorija.

p4lang/p4c-bm: generira JSON konfiguraciju za bmv2
p4lang/bmv2: softverski preklopnik koji razumije bmv2 JSON konfiguracije

Na slici je prikazana shema kompilacije projekta:

Programski jezik P4

Manipulacije sa tabelama, registrima za čitanje, brojačima:

  • postavi_tabelu_predefinisanu <table name> <action name> <action parameters>
  • dodaj_tabelu <table name> <action name> <match fields> => &lt;akcija
    parameters> [priority]
  • izbriši_tabelu <table name> <entry handle>


U izvornih kodovima je navedena aplikacija simple_switch_CLI za lakše korištenje API-ja programskog svitča.

Ove i druge primjere možete preuzeti iz repozitorija.

Programski jezik P4

P.S. Početkom ljeta, kompanija Intel je potpisala ugovor o kupovini Barefoot Networks, s ciljem brzog zadovoljavanja potreba korisnika Hyperscale Cloud. Kako je izjavio Navin Shenoy (izvršni potpredsjednik i generalni direktor Data Center grupe u Intel Corporation) — ovo će omogućiti Intelu da pruži veće radne opterećenja i više mogućnosti za klijente datacentara.

Po mom ličnom mišljenju, ne treba zaboraviti da je kompanija Intel lider u proizvodnji FPGA čipova i da ima odličnu sredinu Quartus. Znači, može se očekivati da će s dolaskom u Intel, kompanija Barefoot ne samo proširiti svoju proizvodnu liniju, već i da Quartus i P4 Studio čekaju ozbiljna ažuriranja i proširenje linije Toffino i Toffino 2.

Zvanični član P4 zajednice — kompanija Faktor grup.

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster