Programovací jazyk P4

Programovací jazyk P4
P4 — je programovací jazyk určený na programovanie pravidiel smerovania paketov. Na rozdiel od všeobecne používaných jazykov, ako sú C alebo Python, je P4 predmetovo orientovaný jazyk s radom konštrukcií optimalizovaných pre sieťové smerovanie.

P4 — je jazyk s otvoreným zdrojovým kódom, licencovaný a podporovaný neziskovou organizáciou zvanou P4 Language Consortium. Taktiež ho podporujú Open Networking Foundation (ONF) a Linux Foundation (LF) — dve najväčšie zastrešujúce organizácie v projektoch s otvoreným zdrojovým kódom v oblasti sieťových technológií.
Jazyk bol pôvodne navrhnutý v roku 2013 a opísaný v roku 2014 v dokumente SIGCOMM CCR s názvom „Protokolom nezávislé programovanie procesora smerovania paketov“.

Od svojho vzniku P4 exponenciálne rastie a vyvíja sa, rýchlo sa stáva štandardom na opísanie prenosu paketov sieťovými zariadeniami, vrátane sieťových adaptérů, prepínačov a smerovačov.

„SDN transformovalo sieťový priemysel a P4 posúva SDN na novú úroveň, zabezpečuje programovateľnosť v oblasti smerovania“, povedal Guru Parulkar, výkonný riaditeľ Open Networking Foundation.

Jazyk P4 bol pôvodne vytvorený skupinou inžinierov a výskumníkov z Google, Intel, Microsoft Research, Barefoot, Princeton a Stanford. Cieľ bol jednoduchý: vytvoriť jazyk, ktorý je ľahko použiteľný a ktorý sa software developer dokáže naučiť za deň a používať na presné opísanie toho, ako sa pakety prenášajú v sieti.

Od začiatku bol P4 vyvíjaný ako cieľovo nezávislý (t.j. program napísaný v P4 mohol byť zkompilovaný bez zmien na vykonávanie na rôznych cieľoch, ako sú ASIC, FPGA, CPU, NPU a GPU).

Jazyk je tiež protokolovo nezávislý (t.j. program P4 môže opisovať existujúce štandardné protokoly alebo môže byť použitý na stanovenie nových prispôsobiteľných režimov adresovania).

V priemysle sa P4 používa na programovanie zariadení. Možno v budúcnosti Internet-RFC a štandardy IEEE tiež zahrnú špecifikáciu P4.

P4 sa dá použiť ako pre programovateľné, tak aj pre zariadenia s pevne danou funkciou. Napríklad, používa sa na presné zaznamenávanie správania prepínačového potrubia v API rozhraniach rozhrania abstrakcie prepínača (SAI), ktoré používajú operačné systémy prepínačov s otvoreným zdrojovým kódom SONiC. P4 sa taktiež používa v projekte ONF Stratum na popis správania prepínania prostredníctvom rôznych statických a programovateľných zariadení.

Opis správania prepínača a sieťových adaptérů prvýkrát umožňuje vytvorenie presného vykonateľného modelu celej siete pred nasadením. Veľkí poskytovatelia cloudu môžu úplne testovať a ladovať sieť pomocou softvéru, čo výrazne skracuje čas a náklady na testovanie interakcií v laboratóriu, bez potreby nákladného vybavenia.

Použitím P4 môžu dodávatelia sieťového vybavenia počítať s celkovým základným správaním smerovania vo všetkých produktoch, čo umožňuje opätovné využitie testovacej infraštruktúry, zjednodušuje vývoj softvéru na správu a v konečnom dôsledku zaručuje kompatibilitu.

Samozrejme, P4 sa dá použiť na písanie programov, ktoré popisujú úplne nové spôsoby smerovania. Napríklad, P4 sa široko používa na telemetriu a merania v dátových centrách, podnikových sieťach a u poskytovateľov služieb.

Výskumná komunita sa taktiež aktivizovala. Niekoľko popredných akademických výskumných tímov v oblasti sieťových technológií publikovalo zaujímavé nové aplikácie založené na programoch P4, vrátane vyvažovania záťaže, koordinovaných protokolov a kešovania hodnôt kľúčov. Vzniká nová paradigmatická paradigma programovania, inovácie sa presúvajú z hardvéru do softvéru, čo umožňuje vznik mnohých prekvapivých, nových a geniálnych nápadov.

Komunita vývojárov významne prispela k vývoju kódu, vrátane kompilátorov, konvenčných programov, behaviorálnych modelov, API rozhraní, testovacích prostredí, aplikácií a mnohého ďalšieho. Oddaní vývojári sú v spoločnostiach ako Alibaba, AT&T, Barefoot, Cisco, Fox Networks, Google, Intel, IXIA, Juniper Networks, Mellanox, Microsoft, Netcope, Netronome, VMware, Xilinx a ZTE; na univerzitách vrátane BUPT, Cornell, Harvard, MIT, NCTU, Princeton, Stanford, Technion, Tsinghua, UMass a USI; a v projektoch s otvoreným zdrojom vrátane CORD, FD.io, OpenDaylight, ONOS, OvS, SAI a Stratum, čo podčiarkuje fakt, že P4 je nezávislý verejný projekt.

Typická generácia ovládačov pre jazyk P4:

Programovací jazyk P4

Možnosti aplikácie

Programovací jazyk P4
Keďže jazyk je určený pre aplikácie smerovania, zoznam požiadaviek a dizajnových možností sa líši v porovnaní s jazykmi všeobecného použitia. Hlavnými znakmi jazyka sú:

  1. Nezávislosť od cieľovej implementácie;
  2. Nezávislosť od použitých protokolov;
  3. Prekonfigurovateľnosť polí.

Nezávislosť od cieľovej implementácie

Programy P4 sú navrhnuté tak, aby neboli závislé od implementácie, týkajúce sa komplikovateľnosti na množstvo rôznych typov výkonných strojov, ako sú procesory všeobecného použitia, FPGA, systémy na čipe, sieťové procesory a ASIC. Tieto rôzne typy strojov sú známe ako ciele P4, pričom pre každý cieľ je potrebný kompilátor na konverziu zdrojového kódu P4 na model cieľového prepínača. Kompilátor môže byť integrovaný do cieľového zariadenia, externého softvéru alebo dokonca cloudovej služby. Keďže mnohé z pôvodných cieľov pre programy P4 sa používali na jednoduchú prepínačovú paketovú komunikáciu, veľmi často sa dá počuť termín „prepínač P4“, aj keď použitie „cieľ P4“ je presnejšie.

Nezávislosť od použitých protokolov

P4 je nezávislé od protokolov. To znamená, že jazyk nemá vstavanú podporu pre bežné protokoly, ako sú IP, Ethernet, TCP, VxLAN alebo MPLS. Namiesto toho programátor P4 popisuje formáty hlavičiek a názvami polí požadovaných protokolov v programe, ktoré sú následne interpretované a spracované skompilovaným programom a cieľovým zariadením.

Prekonfigurovateľnosť polí

Nezávislosť od protokolu a model abstraktného jazyka umožňujú rekonfigurovateľnosť — ciele P4 by mali mať možnosť zmeniť spracovanie paketov po nasadení systému. Táto možnosť je tradične spojená s routovaním pomocou procesorov všeobecného určenia alebo sieťových procesorov, a nie integrovaných obvodov s pevnými funkciami.

Hoci jazyk neobsahuje nič, čo by mohlo brániť optimalizácii konkrétneho súboru protokolov, tieto optimalizácie sú pre autora jazyka neviditeľné a môžu nakoniec znížiť flexibilitu systému a jeho ciele a rekonfigurovateľnosť.

Tieto charakteristiky jazyka boli pôvodne navrhnuté jeho tvorcami s orientáciou na široké využitie v sieťovej infraštruktúre.

Jazyk sa už teraz využíva v mnohých spoločnostiach:

1) Hyperškálovacie dátové centrá;

Čínska spoločnosť Tencent je najväčšou investičnou spoločnosťou na svete a jednou z najväčších rizikových spoločností. Dcérske spoločnosti Tencent, či už v samotnej Číne alebo v iných krajinách, sa špecializujú na rôzne oblasti vysoko technologického podnikania, vrátane internetových služieb, vývoja v oblasti umelej inteligencie a elektronických zábav.

P4 a programovateľné routovanie sú pokročilé technológie, ktoré sa využívajú v architektúre siete spoločnosti.

Ako jeden z tvorcov, Google s hrdosťou oslavuje rýchle prijatie P4 v sieťovom priemysle, najmä v oblasti architektonického navrhovania dátových centier.

2) Komerčné spoločnosti;

Goldman Sachs, využívajúc výhody spolupráce s komunitou otvoreného zdroja a vývoja spoločných štandardov a riešení, už teraz prináša inovácie do sieťovej infraštruktúry a poskytuje najlepšie riešenia pre klientov.

3) Výroba;

Celý sieťový priemysel získa výhody z takého jazyka ako P4, ktorý jednoznačne definuje správanie preposielania. To si myslí aj Cisco, ktoré prenáša svoje produktové rady na využitie tohto jazyka.

Juniper Networks zahrnulo P4 a P4 Runtime do viacerých produktov a zabezpečuje programový prístup k integrovanému procesoru Juniper a jeho programovému kódu.

Ruijie Networks je aktívnym podporovateľom P4 a výhod, ktoré prináša sieťam. Pomocou P4 môže spoločnosť vytvárať a dodávať najlepšie riešenia vo svojej triede pre široké spektrum klientov.

4) Telekomunikační poskytovatelia;

AT&T bola jedným z prvých podporovateľov P4, jednou z prvých, ktorá použila P4 na definovanie správania, ktoré chcela vidieť v sieťach, a používala zariadenia na programovateľné presmerovanie P4 vo svojej sieti.

Na Deutsche Telekom sa jazyk používa na vytváranie prototypov kľúčových sieťových funkcií v rámci programu Access 4.0.

5) Polovodičový priemysel;

Jazyk umožnil realizovať novú paradigmu prenášania možností softvéru do dimenzie smerovania siete spoločnosťou Barefoot.

Xilinx bol jedným zo zakladateľov P4.org a aktívne sa podieľal na vývoji jazyka P4 a jeho zavedení do programovateľných platforiem založených na FPGA pre zariadenia SmartNIC a NFV, pričom vydal jeden z prvých kompilátorov P416 ako súčasť dizajnu SDNet.

6) Softvér.

V spoločnosti VMware sa domnievajú, že P4 vytvára obrovskú energiu, inovácie a komunitu, ktorá vedie k významným a potrebným transformáciám v sieťach. VMware bola pôvodne súčasťou tohto odvetvového hnutia, keďže nová vlna inovácií je spôsobená softvérovými prístupmi, ktoré rozširujú možnosti infraštruktúry a realizujú ich v najnovších produktoch.

P4 teda nie je závislý od účelu a nie je závislý od protokolu programovací jazyk, ktorý sa používa priemyslom a vedeckou komunitou na jednoznačné definovanie správania smerovania paketov ako programu, ktorý môže byť následne skompilovaný pre viacero účelov. Dnes tie účely zahŕňajú hardvérové a softvérové prepínače, hypervízorové prepínače, NPU, grafické procesory, FPGA, SmartNIC a ASIC.

Hlavné črty jazyka značne rozširujú jeho aplikačné oblasti a zabezpečujú jeho rýchlu implementáciu do architektúr sietí.

Z čoho začať

P4 je otvorený projekt, všetky aktuálne informácie sú dostupné na stránke P4.org

Odkaz na repozitár https://github.com/p4lang, kde môžete získať zdrojové kódy príkladov a vzdelávacie materiály.

Plug-in pre Eclipse s podporou P4, ale môžeme odporučiť P4 Studio od spoločnosti Barefoot.

Programovací jazyk P4

Rozoberieme hlavné abstrahácie jadra:

Definovanie hlavičiek — pomocou nich sa určujú hlavičky protokolu.

V definovaní hlavičiek sa určuje:

  • popis formátov paketov a názvy polí hlavičiek
  • pevné a variabilné povolené polia

napríklad

hlavný nadpis Ethernet_h{
    bitdstAddr;
    bitsrcAddr;
    bitetherType;
}

hlavný nadpis IPv4_h{
    bitverzia;
    bitihl;
    bitdiffserv;
    bittotalLen;
    bitidentifikácia;
    bitvlajky;
    bitfragOffset;
    bitttl;
    bitprotokol;
    bithdrChecksum;
    bitsrcAddr;
    bitdstAddr;
    varbitmožnosti;
}

Parsers — ich úlohou je analyzovať hlavičky.

Nasledujúci príklad parsera určí prechod konečného stavu stroja z jedného počiatočného stavu do jedného z dvoch konečných:

Programovací jazyk P4

parsingový nástroj MôjParser(){
 stav začiatok{prechod parse_ethernet;}
 stav parse_ethernet{
    packet.extract(hdr.ethernet);
    prechod select(hdr.ethernet.etherType){
        TYPE_IPV4: parse_ipv4;
        predvolené: prijatý;
        }
    }…
}

Tabuľky — obsahujú stavy stroja, ktoré spájajú používateľské kľúče s akciami. Akcie — opis toho, ako by sa mali manipulovať balíky.

Tabuľky obsahujú stavy (určené na riadiacej úrovni) pre posielanie paketov, opisujú jednotku akcie Match-Action

Súlad paketov sa vykonáva podľa:

  • Presného súladu
  • Najdlhšieho Match s prefixom (LPM)
  • Trojnásobného súladu (maskovania)

table ipv4_lpm{
    číta{
        ipv4.dstAddr: lpm;
    } actions {
        posunúť();
    }
}

Všetky možné akcie musia byť v tabuľkách definované vopred.

Akcie pozostávajú z kódu a údajov. Údaje pochádzajú z riadiacej úrovne (napríklad IP adresy / čísla portov). Určené, bezcyklové primitívy môžu byť zadané priamo v akcii, ale počet príkazov musí byť predvídateľný. Preto akcie nemôžu obsahovať žiadne cykly ani podmienečné príkazy.

akcia ipv4_forward(macAddr_t dstAddr, egressSpec_t port){
    standard_metadata.egress_spec = port;
    hdr.ethernet.srcAddr = hdr.ethernet.dstAddr;
    hdr.ethernet.dstAddr = dstAddr;
    hdr.ipv4.ttl = hdr.ipv4.ttl - 1;
}

Moduly Match-Action — akcie na vytvorenie vyhľadávacieho kľúča, vyhľadávanie v tabuľke, vykonávanie akcií.

Typický príklad modulu je znázornený na obrázku:

Programovací jazyk P4

Tok riadenia — určuje poradie použitia modulov Match-Action. Ide o imperatívny program, ktorý definuje logiku na vysokej úrovni a sekvenciu Match-Action. Tok riadenia spája všetky objekty, ustanovujúc úroveň riadenia.

Externé objekty — to sú špecifické objekty s presne definovanou architektúrou a rozhraním API. Napríklad výpočty kontrolného súčtu, registry, počítadlá, počítadlá atď.

extern registruj{
    registruj(bit veľkosť);
    void čítaj(out T výsledok, in bit index);
    void zapisuj(in bit index, in T hodnota);
}

extern Kontrolný súčet16{
  Kontrolný súčet16();    //konstruktér
  void vyčisti();    //pripravte jednotku na výpočty
  void aktualizuj(in T data);    //pridajte údaje do kontrolného súčtu
  void odstrániť(in T data);  //odstrániť údaje z existujúceho kontrolného súčtu
  bitzískať(); //získať kontrolný súčet pre údaje pridané od posledného vyčistenia
}

Metadáta — dátové štruktúry spojené s každým paketom.

Existujú 2 typy metadát:

  Používateľské metadáta (prázdna štruktúra pre všetky pakety)
    Môžete sem vložiť všetko, čo chcete
    Dostupné počas celej doby pipeline
    praktické na používanie podľa vašich potrieb, napríklad na uloženie hashu paketu

  Interné metadáta — zabezpečuje architektúra
    Vstupný port, výstupný port sú určené tu
    Časová pečiatka, kedy bol paket zaradený do fronty, hĺbka fronty
    multicast hash / multicast queue
    Priorita пакета, важnosť пакeta
    Špecifikácia výstupného portu (napríklad, výstupná fronta)

Kompilátor P4

P4 kompilátor (P4C) generuje:

  1. Runtime dátovej roviny
  2. API na správu stavu stroja v dátovej rovine

Programovací jazyk P4

Príklad programového prepínača v jazyku P4

Zdrojové kódy si môžete stiahnuť z repozitára.

p4lang/p4c-bm: vytvára JSON konfiguráciu pre bmv2
p4lang/bmv2: programový prepínač, ktorý rozumie JSON konfiguráciám verzie bmv2

Na obrázku je schéma kompilácie projektu:

Programovací jazyk P4

Manipulácie s tabuľkami, registračným mechanizmom čítania, počítadlom:

  • nastaviť_predvolené <table name> <action name> <action parameters>
  • pridať stôl <table name> <action name> <match fields> => &lt;akcia
    parameters> [priority]
  • zmazať tabuľku <table name> <entry handle>


V zdrojových kódoch je program simple_switch_CLI pre pohodlné používanie API programového prepínača.

Tento a ďalšie príklady si môžete stiahnuť z repozitára.

Programovací jazyk P4

P.S. Na začiatku leta spoločnosť Intel podpísala dohodu o získaní spoločnosti Barefoot Networks s cieľom rýchlo uspokojiť potreby používateľov Hyperscale Cloud. Ako uviedol Navin Shenoy (výkonný viceprezident a generálny riaditeľ skupiny Data Center Group spoločnosti Intel Corporation) — to umožní spoločnosti Intel poskytovať väčšie pracovné zaťaženia a viac možností pre zákazníkov dátových centier.

Podľa môjho osobného názoru netreba zabúdať, že spoločnosť Intel je lídrom vo výrobe čipov FPGA a má vynikajúce prostredie Quartus. To znamená, že s príchodom do Intelu môže spoločnosť Barefoot nielen rozšíriť svoju výrobnú líniu, ale aj Quartus a P4 Studio čakajú vážne aktualizácie a rozšírenie línie Toffino a Toffino 2.

Oficiálny účastník komunity P4 — spoločnosť Faktor grup.

Zdroj: habr.com

Kúpte si spoľahlivý hosting pre webové stránky s ochranou proti DDoS, VPS VDS servery 🔥 Kúpte si spoľahlivý hosting pre webové stránky s ochranou proti DDoS, VPS VDS servery | ProHoster