Koliko TPS imate u svom blokčejnu?

Omiljeni pitanje o svakoj distribuiranoj sistemu od netehničkog stručnjaka je "Koliko tps ima vaš blockchain?" Međutim, broj koji je navedeno u odgovoru obično ima malo zajedničkog s onim što bi ispitivač želeo čuti. U stvarnosti, on je želeo da pita "da li vaš blockchain odgovara mojim poslovnim zahtevima", a ti zahtevi nisu jedan broj, već mnoštvo uslova — ovde i otpornost mreže, i zahteva za konačnošću, veličine, priroda transakcija i mnogi drugi parametri. Tako da odgovor na pitanje "koliko tps" verovatno neće biti jednostavan i gotovo nikada neće biti potpun. Distribuirani sistem sa desetinama i stotinama čvorova, koji obavljaju prilično složene proračune, može se nalaziti u ogromnom broju različitih stanja, povezanih s stanjem mreže, sadržajem blockchain-a, tehničkim kvarovima, ekonomskim problemima, napadima na mrežu i mnogim drugim razlozima. Faze u kojima su mogući problemi s performansama se razlikuju od tradicionalnih usluga, a server blockchain mreže je mrežna usluga koja kombinuje funkcije baze podataka, web servera i torrent klijenta, što ga čini izuzetno složenim u pogledu opterećenja na sve pod-sisteme: procesor, memoriju, mrežu, skladište.

Zbog toga što su decentralizovane mreže i blockchaini prilično specifični i neobični softver za programere centralizovanog softvera, želeo bih da osvetlim važne aspekte performansi i otpornosti decentralizovanih mreža, pristupe njihovom merenju i pronalaženju uskih grla. Razmotrićemo različite probleme performansi koji ograničavaju brzinu pružanja usluga korisnicima blockchain-a i istaknuti karakteristike koje su specifične za ovu vrstu softvera.

Faze zahteva usluge od strane klijenta blockchain-a

Da bi se pošteno govorilo o kvalitetu bilo koje više-manje složene usluge, treba uzeti u obzir ne samo prosečne vrednosti, već i maksimalne/minimalne, medijane i percentile. Teoretski, može se govoriti o 1000 tps u nekom blockchainu, ali ako je 900 transakcija završeno velikom brzinom, dok je 100 „zapelo“ nekoliko sekundi, prosek sakupljen za sve transakcije nije baš poštena metrika za klijenta koji nije mogao da završi transakciju za nekoliko sekundi. Vremenska „jama“, uzrokovana propuštenim rundama konsenzusa ili deljenjem mreže, može značajno pokvariti uslugu koja je na testnim platformama pokazivala odlične performanse.

Da bismo identifikovali takve uska grla, potrebno je dobro razumeti faze u kojima pravi blockchain može imati poteškoća u pružanju usluga korisnicima. Hajde da opišemo ciklus isporuke i procesiranja transakcije, kao i dobijanja novog stanja blockchaina, iz kojeg klijent može biti siguran da je njegova transakcija obrađena i uzeta u obzir.

  1. transakcija se formira na klijentu
  2. transakcija se potpisuje na klijentu
  3. klijent bira jednu od nodova i šalje joj svoju transakciju
  4. klijent se prijavljuje za ažuriranja state database nodova, čekajući rezultate izvršenja svoje transakcije
  5. noda širi transakciju kroz p2p mrežu
  6. nekoliko ili jedan BP (block producer) procesiraju akumulirane transakcije, ažurirajući state database
  7. BP formira novi blok, obradivši potrebno količinu transakcija
  8. BP širi novi blok kroz p2p mrežu
  9. novi blok se dostavlja nodu, kojem se klijent obraća
  10. noda ažurira state database
  11. noda primećuje ažuriranje koje se odnosi na klijenta i šalje mu obaveštenje o transakciji

Sada ćemo detaljnije razraditi ove faze i opisati potencijalne probleme s performansama na svakoj fazi. Za razliku od centraliziranih sustava, također ćemo razmotriti izvršavanje koda na klijentima mreže. Prilično često, prilikom mjerenja tps, vrijeme obrade transakcija se prikuplja s nodova, a ne s klijenta — to nije posve pošteno. Klijentu nije bitno koliko je brzo nod obradio njegovu transakciju, najvažnije je za njega kada će vjerodostojne informacije o toj transakciji, uključene u blockchain, postati dostupne njemu. Upravo ova metriku i jest, suštinski, vrijeme izvršenja transakcije. To znači da različiti klijenti, čak i kada šalju istu transakciju, mogu dobiti potpuno različita vremena, koja zavise od kanala, opterećenja i blizine nodova, i slično. Stoga je izuzetno važno mjeriti to vrijeme na klijentima, jer je upravo taj parametar potrebno optimizovati.

Priprema transakcije na strani klijenta

Započnimo s prva dva stavka: transakcija se formira i potpisuje od strane klijenta. Iako zvuči čudno, to također može biti bottleneck performansi blockchaina s gledišta klijenta. To je neobično za centralizirane servise, koji sve proračune i operacije s podacima preuzimaju za sebe, dok klijent jednostavno priprema kratki zahtjev koji može zatražiti veliki obim podataka ili proračuna, dobivajući konačan rezultat. U blockchainima, klijentski kod postaje sve moćniji, dok je blockchain jezgro sve lakše, a massive computational tasks se obično prebacuju na klijentski softver. U blockchainima postoje klijenti koji mogu pripremati jednu transakciju prilično dugo (govorim o različitim merkle proof-ima, succinct proof-ima, threshold potpisima i drugim složenim operacijama na strani klijenta). Dobar primjer lagane on-chain verifikacije i teške pripreme transakcije na klijentu je dokaz pripadnosti listi na osnovu Merkle-tree. članak.

Također, ne smijemo zaboraviti da klijentski kod ne samo da šalje transakcije u blokčejn, već prvo traži stanje blokčejna — a ova aktivnost može utjecati na opterećenje mreže i blokčejn nodova. Stoga, prilikom mjerenja, razborito je emulirati ponašanje klijentskog koda što je moguće potpunije. Čak i ako u vašem blokčejnu postoje obični lagani klijenti koji stavljaju običan digitalni potpis na najjednostavniju transakciju prijenosa nekog sredstva, svake godine količina računalnih operacija na klijentu i dalje raste, kriptoalgoritmi postaju snažniji, i ovaj dio procesiranja može postati značajan bottleneck u budućnosti. Stoga budite oprezni i ne propustite situaciju kada u transakciji koja traje 3.5 sekundi, 2.5 sekundi odlazi na pripremu i potpisivanje transakcije, a 1.0 sekunda na slanje u mrežu i čekanje odgovora. Za procjenu rizika od pojave ovog bottlenecka treba prikupljati metrike sa klijentskih mašina, a ne samo s blokčejn nodova.

Slanje transakcije i praćenje njenog statusa

Sljedeća faza je slanje transakcije odabranom blokčejn nodu i dobivanje statusa njenog prihvaćanja u bazu transakcija. Ova faza je slična običnom pozivu bazi podataka, nod mora zapisati transakciju u bazu i početi distribuirati informacije o njoj kroz p2p mrežu. Pristup procjeni performansi ovdje je sličan procjeni rada tradicionalnih mikrosusreta Web API, pri čemu se same transakcije u blokčejnima mogu ažurirati, aktivno mijenjati status. Uopće, ažuriranje informacija o transakciji u nekim blokčejnima može se dogoditi više puta, na primjer prilikom prebacivanja između forkova lanca ili kada BP izvješćuju o namjeri uključivanja transakcije u blok. Ograničenja na obim ovog bazena i broj transakcija u njemu mogu utjecati na performanse blokčejna. Ako je bazen transakcija zagušen do maksimalne moguće veličine, ili ne stane u radnu memoriju — performanse mreže mogu naglo opasti. Blokčejni nemaju centralizirana sredstva zaštite od protoka spam poruka, i, ako blokčejn podržava transakcije velikih obujama i niske naknade, to može dovesti do prekomjernog punjenja bazena transakcija — to je još jedan potencijalni bottleneck performansi.

U blockchainima, klijent šalje transakciju bilo kojoj čvoru koji mu se sviđa, a hash transakcije je obično poznat klijentu čak i prije slanja, tako da ono što mu je potrebno je uspostaviti vezu i nakon prijenosa čekati kada će blockchain promijeniti svoje stanje uključujući njegovu transakciju. Primijetimo da mjerenjem "tps" možemo dobiti potpuno različite rezultate za različite načine povezivanja sa čvorom blockchaina. To može biti obični HTTP RPC ili WebSocket, koji omogućava implementaciju obrasca „pretplate“. U drugom slučaju, klijent će primiti obavijest ranije, a čvor će potrošiti manje resursa (pretežno memorije i prometa) na odgovore o stanju transakcije. Stoga, kada mjerimo „tps“, potrebno je uzeti u obzir način povezivanja klijenata sa čvorovima. Dakle, za ocjenu rizika od pojave ovog bottleneck-a, benchmark blockchaina treba biti u stanju emulirati klijente i sa WebSocket i sa HTTP RPC zahtjevima, u omjerima koji odgovaraju stvarnim mrežama, kao i mijenjati karakter transakcija i njihovu veličinu.

Za ocjenu rizika od pojave ovog bottleneck-a potrebno je također prikupljati metrike s klijentskih mašina, a ne samo s blockchain čvorova.

Prijenos transakcija i blokova putem p2p mreže

U blockchainima, za prijenos transakcija i blokova između učesnika koristi se peer-to-peer (p2p) umrežavanje. Transakcije se šire mrežom, počevši od jednog od čvorova, sve dok ne dođu do peer-ova - block producer-a, koji upakuju transakcije u blokove i putem istog p2p proširuju nove blokove svim čvorovima mreže. Osnova većine savremenih p2p mreža su različite modifikacije Kademlia protokola. Evo dobar kratki pregled ovog protokola, a Evo — članak s različitim mjerenjima u mreži BitTorrent, prema kojem se može razumjeti - da su ove vrste mreža složenije i manje predvidive nego rigorozno konfigurirana mreža centralizovane usluge. Također, Evo članak o mjerenju raznih zanimljivih metrika za čvorove Ethereum.

Ukratko, svaki peer u ovakvim mrežama održava svoju vlastitu dinamičku listu drugih peer-eva, kod kojih traži blokove informacija koji su adresirani prema sadržaju. Kada primi zahtjev, peer ili isporučuje potrebne informacije, ili proslijeđuje zahtjev sljedećem pseudonarandnom peer-u iz liste, a kada dobije odgovor, proslijedi ga onome ko je tražio i na neko vrijeme ga kešira, isporučujući taj blok informacija ranije sljedeći put. Na taj način popularne informacije završavaju u velikom broju keševa kod mnogih peer-eva, dok se nepovoljne postepeno istiskuju. Peer-evi vode evidenciju o tome koliko informacija je ko kome predao, a mreža nastoji stimulirati aktivne davatelje, povećavajući njihov rejting i osiguravajući im viši nivo usluga, automatski istiskujući neaktivne sudionike iz lista peer-eva.

Dakle, sada treba proširiti transakciju kroz mrežu, kako bi je block-producer-i vidjeli i uključili u blok. Nodo aktivno "dijeli" novu transakciju svim zainteresovanima i sluša mrežu, čekajući blok u čijem će indeksu biti potrebna transakcija, kako bi obavijestio čekajućeg klijenta. Vrijeme dok mreža razmjenjuje informacije o novim transakcijama i blokovima u p2p mrežama, zavisi od veoma velikog broja faktora: broja poštenih, radnih nodova u blizini (sa mrežne tačke gledišta), "zagrijanosti" keševa tih nodova, veličine blokova, transakcija, prirode promjena, geografije mreže, broja nodova i još mnogih faktora. Kompleksna mjerenja metrika performansi u ovakvim mrežama su složen posao, potrebno je istovremeno procijeniti vrijeme obrade zahtjeva i kod klijenata, i kod peer-eva (blockchain nodova). Problemi u bilo kojem od p2p mehanizama, netočno istiskivanje i keširanje podataka, neučinkovito upravljanje listama aktivnih peer-eva, i mnoštvo drugih faktora mogu postati uzrok kašnjenja, koja utiču na efikasnost cijele mreže u cjelini, i ovaj bottleneck — najteži je za analizu, testiranje i interpretaciju rezultata.

Obrada lanca blokova i ažuriranje state database

Najvažniji dio rada blockchaina je konsenzus algoritam, njegova primjena na nove blokove dobivene iz mreže i procesiranje transakcija s upisivanjem rezultata u state database. Dodavanje novog bloka u lanac i sljedeće biranje glavnog lanca trebaju raditi što je brže moguće. Međutim, u stvarnom životu „trebalo bi“ ne znači „radi“, i možemo, na primjer, zamisliti situaciju u kojoj se dvije duge konkurentne lance neprekidno prebacuju između sebe, mijenjajući metapodatke tisuća transakcija u pool-u pri svakom prebacivanju, stvarajući neprekidne povratke stanja state database. Ova faza, u smislu određivanja bottleneck-a, jednostavnija je od mrežnog p2p sloja, jer su izvršavanje transakcija i konsenzus algoritam strogo determinirani, i ovdje je lakše mjeriti bilo što.
Glavno je ne pomiješati nasumičnu degradaciju performansi ove faze s problemima u mreži — nodovi sporije dostavljaju blokove i informacije o glavnoj vezi, i za vanjskog klijenta to može izgledati kao spora mreža, iako problem leži potpuno negdje drugdje.

Za optimizaciju performansi u ovoj fazi korisno je prikupljati i nadgledati metrike s samih nodova, i uključiti one koje se odnose na ažuriranje state-database: broj blokova koji se obrađuju na nodu, njihova veličina, broj transakcija, broj prebacivanja između fork-ova lanaca, broj nevalidnih blokova, vrijeme rada virtualne mašine, vrijeme zaključavanja podataka itd. To će pomoći da se ne pomiješaju mrežni problemi s greškama u algoritmima procesiranja lanaca.

Virtualna mašina koja obrađuje transakcije može biti koristan izvor informacija koje mogu optimizirati rad blockchaina. Količina alokacija memorije, broj read/write instrukcija, i druge metrike koje se odnose na efikasnost izvršavanja koda kontrakata mogu pružiti puno korisnih informacija razvojnim timovima. U isto vrijeme, pametni ugovori su programi, što znači da teoretski mogu trošiti bilo koje resurse: cpu/memory/network/storage, tako da je procesiranje transakcija prilično neodređena faza, koja se dodatno mijenja prilikom prelaska između verzija i promjene koda kontrakata. Stoga, metrike koje se odnose na procesiranje transakcija također su potrebne za efikasnu optimizaciju performansi blockchaina.

Dobijanje obaveštenja klijenta o uključivanju transakcije u blockchain

Ovo je završna faza dobijanja usluge od strane klijenta u blockchainu; u poređenju sa drugim fazama, ovde nema velikih troškova, ali treba imati u vidu mogućnost dobijanja obimnog odgovora od nod-a (na primer, pametan ugovor koji vraća niz podataka). U svakom slučaju, ovaj trenutak je najvažniji za onoga ko postavlja pitanje "koliki je tps u vašem blockchainu?", jer se u tom trenutku beleži vreme dobijanja usluge.

Na ovom mestu mora biti prisutno slanje ukupnog vremena koje je klijent potrošio čekajući odgovor od blockchain-a, jer će upravo to vreme korisnik očekivati kao potvrdu u svom aplikaciji, a optimizacija tog vremena je glavni zadatak developera.

Zaključak

Kao rezultat, možemo opisati tipove operacija koje se izvode u blockchain-ima i podeliti ih u nekoliko kategorija:

  1. kriptografske transformacije, izgradnja dokaza
  2. peer-to-peer umrežavanje, replikacija transakcija i blokova
  3. obrada transakcija, izvršavanje pametnih ugovora
  4. primena izmena u blockchain-u na state database, ažuriranje podataka o transakcijama i blokovima
  5. read-only zahtevi prema state database, API blockchain nod-a, subscription servisi

Tehnički zahtevi za nodove savremenih blockchain-a su izuzetno ozbiljni — potreban je brz CPU za kriptografiju, velika količina RAM-a za skladištenje i brzo pristupanje state database-u, mrežno povezivanje koje koristi veliki broj istovremeno otvorenih veza i obiman storage. Ovi visoki zahtevi i mnoštvo različitih tipova operacija neizbežno dovode do toga da resursi kod nodova mogu biti nedovoljni, i tada bilo koja od ranije razmatranih faza može postati novi bottleneck za ukupne performanse mreže.

Kada razvijate i ocenjujete performanse blokčejna, morate uzeti u obzir sve ove aspekte. Za to je potrebno prikupljati i analizirati metrike istovremeno sa klijenata i čvorova mreže, tražiti korelacije među njima, procenjivati vreme pružanja usluga klijentima, uzimajući u obzir sve glavne resurse: cpu/memory/network/storage, i razumeti kako se oni koriste i utiču jedni na druge. Sve ovo čini poređenje brzina različitih blokčejna u smislu „koliko TPS“ izuzetno nezahvalnim poslom, jer postoji ogroman broj različitih konfiguracija i stanja. U velikim centralizovanim sistemima, klasterima od stotina servera, ovi problemi su takođe složeni i zahtevaju prikupljanje velikog broja različitih metrika, ali u blokčejnima, zbog p2p mreža, virtuelnih mašina, pametnih ugovora, unutrašnje ekonomije, broj stepeni slobode je znatno veći, što čini testiranje čak i na nekoliko servera nepouzdanom i daje samo izuzetno približne vrednosti, gotovo bez veze sa stvarnošću.

Dakle, prilikom razvoja u jezgru blokčejna, za procenu performansi i odgovor na pitanje „da li je bolje u poređenju sa poslednjim putom“ koristimo prilično složen softver koji orkestrira pokretanje blokčejna sa desetina čvorova i automatskim pokretanjem benchmarka i prikupljanjem metrika; bez ovih informacija izuzetno je teško otkloniti greške u protokolima koji rade sa mnogim učesnicima.

Dakle, kada dobijete pitanje „koliko TPS ima vaš blokčejn?“, ponudite sagovorniku čaj i pitajte da li je spreman da se upozna sa desetinama grafikona, kao i da sasluša sve tri kutije problema performansi blokčejna i vaša rešenja za njih...

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster