{"id":35091,"date":"2019-10-31T22:02:18","date_gmt":"2019-10-31T19:02:18","guid":{"rendered":"https:\/\/prohoster.info\/blog\/19-golov-gidry-bolshoj-obzor-programmy\/"},"modified":"2019-10-31T22:02:18","modified_gmt":"2019-10-31T19:02:18","slug":"19-golov-gidry-bolshoj-obzor-programmy","status":"publish","type":"post","link":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/19-golov-gidry-bolshoj-obzor-programmy","title":{"rendered":"19 glava hidre. Veliki pregled programa","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"<p>Konferencija \u0107e se odr\u017eati 11-12. srpnja u Sankt Peterburgu <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/?utm_source=habr&amp;utm_medium=453832\">Hydra<\/a><\/noindex>, posve\u0107ena razvoju paralelnih i distribuiranih sustava. Kvaliteta Hydre je u tome \u0161to okuplja izvrsne znanstvenike (koje obi\u010dno mo\u017eete prona\u0107i samo na inozemnim znanstvenim konferencijama) i poznate prakti\u010dne in\u017eenjere u veliki program na sjeci\u0161tu znanosti i prakse.<\/p>\n<p><\/p>\n<p>Hydra je jedna od na\u0161ih najva\u017enijih konferencija u posljednjih nekoliko godina. Pred nju je prethodila vrlo ozbiljna priprema, odabir govornika i predavanja. O tome je <noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/jugru\/blog\/453952\/\">pro\u0161log tjedna objavljen Habr intervju<\/a><\/noindex> s direktorom tvrtke JUG.ru Group, Aleksejem Fedorovim (<noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/users\/23derevo\/\" class=\"user_link\">23derevo<\/a><\/noindex>). <\/p>\n<p><\/p>\n<p>Mi <noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/jugru\/blog\/445730\/\">ve\u0107 smo pri\u010dali<\/a><\/noindex> ) o tri va\u017ena sudionika, utemeljitelja teorije distribuiranih sustava \u2014 Lesliju Lamportu, Mauriceu Herlihyju i Michaelu Scottu. Vrijeme je da detaljnije razgovaramo o cijelom programu!<\/p>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/55b262908f46159cbd3638f00772215c.jpeg\" style=\"display:block;margin: 0 auto;\" \/><\/p>\n<p><noindex><a rel=\"nofollow\" name=\"habracut\"><\/a><\/noindex><\/p>\n<h2 id=\"motivaciya\">Motivacija<\/h2>\n<p><\/p>\n<p>Ako se bavite programiranjem, na ovaj ili onaj na\u010din se susre\u0107ete s vi\u0161edretveno\u0161\u0107u i distribuiranim ra\u010dunanjem. Stru\u010dnjaci u relevantnim podru\u010djima rade s njima izravno, no distribuiranost nas o\u010digledno promatra od svuda: u svakom vi\u0161ejezgrenom ra\u010dunalu ili distribuiranoj usluzi postoji ne\u0161to \u0161to paralelno izvr\u0161ava izra\u010dune.<\/p>\n<p><\/p>\n<p>Postoji mnogo konferencija koje obra\u0111uju odre\u0111ene aspekte primijenjenog programiranja. S druge strane spektra imamo specijalizirane znanstvene \u0161kole koje u obliku predavanja otkrivaju ogromne koli\u010dine slo\u017eene teorije. Na primjer, paralelno s Hydrom u Petersburgu se odr\u017eava <noindex><a rel=\"nofollow\" href=\"https:\/\/sptdc.ru\/?utm_source=habr&amp;utm_medium=453832\">\u0161kola SPTDC<\/a><\/noindex>. <strong>Na konferenciji Hydra potrudili smo se spojiti i \u010distu praksu, i znanost, i sve \u0161to je na njihovom sjeci\u0161tu.<\/strong> <\/p>\n<p><\/p>\n<p>Razmislite o ovome: \u017eivimo u nevjerojatnom vremenu kada se mo\u017eemo u\u017eivo susresti s osniva\u010dima onog podru\u010dja znanosti i in\u017eenjerstva kojim se bavimo. Fizi\u010dari se ne mogu susresti ni s Newtonom ni s Einsteinom \u2014 vlak je oti\u0161ao. No, uz nas jo\u0161 uvijek \u017eive oni koji su stvorili temelje teorije distribuiranih sustava, osmislili popularne programske jezike, prvi to realizirali u radne prototipove. Ti ljudi nisu napustili svoj rad na pola puta, upravo sada se bave aktualnim zadatcima na svjetski poznatim sveu\u010dili\u0161tima i kompanijama, i predstavljaju najve\u0107e izvore znanja i iskustva danas. <\/p>\n<p><\/p>\n<p>S druge strane, mogu\u0107nost susreta s njima obi\u010dno ostaje samo teoretska: malo tko od nas mo\u017ee neprekidno pratiti javne doga\u0111aje na nekom Sveu\u010dili\u0161tu u Rochesteru, kako bi se potom uputio u SAD i vratio se na predavanje kod Mikea Scott-a. Posjetiti sve sudionike Hydre ko\u0161talo bi pravo malo bogatstvo, ne ra\u010dunaju\u0107i neizmjerno utro\u0161enog vremena (iako to zvu\u010di kao zanimljiv izazov).<\/p>\n<p><\/p>\n<p>S druge strane, imamo brojne vrhunske in\u017eenjere koji upravo sada rade na aktualnim problemima distribuiranih sustava, i oni sigurno imaju puno toga za re\u0107i. No, problem je u tome \u2014 njihovo vrijeme je skupo. <em>radi<\/em>Da, ako si zaposlenik Microsofta, Googlea ili JetBrainsa, vjerojatnost da \u0107e\u0161 sresti jednog od poznatih govornika na internom doga\u0111aju naglo raste, ali op\u0107enito \u2014 to se ne doga\u0111a svaki dan.<\/p>\n<p><\/p>\n<p>Tako konferencija Hydra obavlja va\u017enu funkciju koju ve\u0107ina od nas ne mo\u017ee sami ostvariti \u2014 na jednom mjestu i u isto vrijeme okuplja ljude \u010dije ideje ili \u010dija komunikacija mogu promijeniti va\u0161 \u017eivot. Pretpostavljam da raspodijeljeni sustavi i neke slo\u017eene fundamentalne stvari nisu potrebne svima. Mo\u017ee\u0161 provesti cijeli \u017eivot programiraju\u0107i CRUD aplikacije na PHP-u i ostati sasvim sretan. No, koji ih trebaju \u2014 to je tvoja \u0161ansa.<\/p>\n<p><\/p>\n<p>Od prvog najavljivanja konferencije Hydra na Habr-u pro\u0161lo je ve\u0107 dosta vremena. Tijekom tog vremena, odra\u0111en je ogroman posao \u2014 i evo, imamo popis gotovo svih predavanja. Nema uspavljuju\u0107ih jednostrukih algoritama, samo \u010disti distribuirani hardcore! Zavr\u0161imo s op\u0107im rije\u010dima i pogledajmo \u0161to imamo sada na raspolaganju.<\/p>\n<p><\/p>\n<h2 id=\"keynouty\">Keynote-ovi<\/h2>\n<p><\/p>\n<p>Keynote-ovi zapo\u010dinju i zaklju\u010duju dane konferencije. Obi\u010dno, svrha otvaraju\u0107eg keynote-a jest postaviti op\u0107i duh i smjer konferencije. Zatvaraju\u0107i keynote dovr\u0161ava pri\u010du i obja\u0161njava kako \u017eivjeti sa znanjem i vje\u0161tinama ste\u010denim tijekom dana konferencije. Po\u010detak i kraj: ono \u0161to \u0107e se bolje pamtiti i op\u0107enito ima pove\u0107anu va\u017enost.<\/p>\n<p><\/p>\n<h3 id=\"cliff-click--the-h2o-distributed-kv-algorithmhttpshydraconfru2019talks1urihjc39wzahcg3lbxbtqutm_sourcehabrutm_medium453832\">Cliff Click \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/1urihjc39wzahcg3lbxbtq\/?utm_source=habr&amp;utm_medium=453832\">The H2O distributed K\/V algorithm<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/2a1b4f1e305a3c4f32dc88e84cfe504f.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Cliff je legenda svijeta Jave. Krajem 90-ih, za svoju doktorsku disertaciju napisao je rad pod nazivom <noindex>\u201eCombining Analyses, Combining Optimizations\u201c<\/noindex>, koja je nakon nekog vremena postala osnova za HotSpot JVM Server Compiler. Nakon dvije godine ve\u0107 je radio u Sun Microsystems-u na JVM-u i pokazao cijelom svijetu da JIT ima pravo na postojanje. Cijela ova pri\u010da o tome da je Java jedan od najbr\u017eih modernih runtime-a s najpametnijim i najbr\u017eim optimizacijama zapo\u010dela je upravo s Cliffom Clickom. Na samom po\u010detku se smatralo da, ako je ne\u0161to dostupno stati\u010dkom kompajleru - ne treba ni poku\u0161avati s JIT-om. Zahvaljuju\u0107i radu Cliffa i tima, svi novi jezici po\u010deli su se razvijati s idejom o JIT-kompilaciji prema zadanim postavkama. Bez sumnje, to nije bio posao samo jednog \u010dovjeka, ali Cliff je odigrao vrlo va\u017enu ulogu.<\/p>\n<p><\/p>\n<p>Na uvodnoj keynote prezentaciji, Cliff \u0107e govoriti o drugom svom poduhvatu - <noindex><a rel=\"nofollow\" href=\"https:\/\/github.com\/h2oai\/h2o-3\">H20<\/a><\/noindex>, platformi za distribuirano i skalabilno strojno u\u010denje za industrijsku primjenu. Preciznije - o distribuiranom skladi\u0161tu parova \"klju\u010d-vrijednost\" unutar njega. To je vrlo brzo skladi\u0161te s mno\u0161tvom zanimljivih svojstava (t\u010dni popis se mo\u017ee na\u0107i u <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/1urihjc39wzahcg3lbxbtq\/?utm_source=habr&amp;utm_medium=453832\">opisu<\/a><\/noindex>), koja omogu\u0107ava kori\u0161tenje sli\u010dnih rje\u0161enja u matematici streaminga velikih podataka.<\/p>\n<p><\/p>\n<p>Jo\u0161 jedna prezentacija s kojom \u0107e se Cliff predstaviti je - <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/2jix5mst7iduyp9linqhfj\/?utm_source=habr&amp;utm_medium=453832\">The Azul Hardware Transactional Memory experience<\/a><\/noindex>. Drugi dio njegove biografije - deset godina <noindex>rada u Azul<\/noindex>, gdje je modernizirao i pobolj\u0161ao mnogo toga u hardveru i tehnolo\u0161kom stacku Azul: JIT-kompajleri, runtime, model niti, obrada gre\u0161aka, rad sa stakom, hardverski prekidi, u\u010ditavanje klasa i tako dalje - znate na \u0161to mislim.<\/p>\n<p><\/p>\n<p>Najzanimljiviji dio zapo\u010deo je kada su stvorili hardver za veliki biznis - superkompjuter za pokretanje Jave. To je bila prili\u010dno inovativna stvar, posebno prilago\u0111ena Javi, koja ima posebne zahtjeve - barijere memorije za \u010ditanje za nisko-laganu sakupljanje sme\u0107a, nizovi s provjerom granica, virtualni pozivi\u2026 Jedna od najkul tehnologija je hardverska transakcijska memorija. Cijeli L1 bilo kojeg od 864 jezgri mogao je sudjelovati u transakcijskom zapisu, \u0161to je posebno va\u017eno za rad s blokadama u Javi (synchronized-blokovi mogu raditi paralelno sve dok ne do\u0111e do stvarnog sukoba po memoriji). No, lijepa ideja se raspala o surovu stvarnost - i u ovoj prezentaciji, Cliff \u0107e govoriti za\u0161to HTM i STM nisu najprikladniji za prakti\u010dne potrebe vi\u0161eslojnih ra\u010dunalnih operacija.<\/p>\n<p><\/p>\n<h3 id=\"michael-scott--dual-data-structureshttpshydraconfru2019talkslnhqpq8cz5kzgjmhlqpicutm_sourcehabrutm_medium453832\">Michael Scott \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/lnhqpq8cz5kzgjmhlqpic\/?utm_source=habr&amp;utm_medium=453832\">Dvojne podatkovne strukture<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/5270050098dc1230d469e60362b6930a.jpeg\" style=\"display:block;margin: 0 auto;\" \/> <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Michael_L._Scott\">Michael Scott<\/a><\/noindex> \u2014 profesor ra\u010dunalnih znanosti na Sveu\u010dili\u0161tu Rochester, s kojim ga je sudbina spojila <noindex>ve\u0107 34 godine<\/noindex>, a na rodnom sveu\u010dili\u0161tu Wisconsin\u2013Madison, bio je dekan pet godina. Bavi se istra\u017eivanjem paralelnog i distribuiranog programiranja te dizajniranja jezika, a podu\u010dava i studente.<\/p>\n<p><\/p>\n<p>Cijeli svijet poznaje Michaela zahvaljuju\u0107i ud\u017ebeniku <noindex><a rel=\"nofollow\" href=\"https:\/\/www.amazon.com\/Programming-Language-Pragmatics-Michael-Scott\/dp\/0124104096\/ref=sr_1_1?crid=265ZYWXFSUF4&amp;keywords=programming+language+pragmatics&amp;qid=1558916067&amp;s=gateway&amp;sprefix=Programming+Language+Pragmatics%2Caps%2C324&amp;sr=8-1\">\u00abProgramming Language Pragmatics\u00bb<\/a><\/noindex>, \u010dije je posljednje izdanje objavljeno relativno nedavno \u2014 2015. godine. Njegov rad <noindex><a rel=\"nofollow\" href=\"http:\/\/web.mit.edu\/6.173\/www\/currentsemester\/readings\/R06-scalable-synchronization-1991.pdf\">\u00abAlgorithms for scalable synchronization on shared-memory multiprocessors\u00bb<\/a><\/noindex> dobila je <noindex><a rel=\"nofollow\" href=\"https:\/\/ru.wikipedia.org\/wiki\/%D0%9F%D1%80%D0%B5%D0%BC%D0%B8%D1%8F_%D0%94%D0%B5%D0%B9%D0%BA%D1%81%D1%82%D1%80%D1%8B\">dobio je Dijkstra nagradu<\/a><\/noindex> kao jedan od najpoznatijih u podru\u010dju distribuiranih ra\u010dunalnih sustava i <noindex><a rel=\"nofollow\" href=\"https:\/\/www.cs.rochester.edu\/u\/scott\/papers\/1991_TOCS_synch.pdf\">otvoreno je dostupna<\/a><\/noindex> u online knji\u017enici Sveu\u010dili\u0161ta Rochester. Tako\u0111er ga mo\u017eete znati kao autora onog algoritma Michael-Scott iz <noindex><a rel=\"nofollow\" href=\"https:\/\/www.cs.rochester.edu\/u\/scott\/papers\/1996_PODC_queues.pdf\">\u00abSimple, Fast, and Practical Non-Blocking and Blocking Concurrent Queue Algorithms\u00bb<\/a><\/noindex>.<\/p>\n<p><\/p>\n<p>\u0160to se ti\u010de svijeta Jave, tu je situacija posebna: zajedno s Dougom Leom razvio je te neblokiraju\u0107e algoritme i sinkronizirane redove, na kojima rade Java biblioteke. Upravo \u0107e o tome govoriti keynote \u00abDvojne podatkovne strukture\u00bb \u2014 implementacija ovih struktura u Java SE 6 omogu\u0107ila je deset puta bolje performanse <code>java.util.concurrent.ThreadPoolExecutor<\/code>. Ako vas unaprijed zanima \u0161to su te tzv. \u00abdvojne podatkovne strukture\u00bb, o tome postoji <noindex><a rel=\"nofollow\" href=\"https:\/\/www.cs.rochester.edu\/research\/synchronization\/pseudocode\/duals.html\">odgovaraju\u0107i rad<\/a><\/noindex>. <\/p>\n<p><\/p>\n<h3 id=\"maurice-herlihy--blockchains-and-the-future-of-distributed-computinghttpshydraconfru2019talks6ayncxk5m9q7g6dn80b7bcutm_sourcehabrutm_medium453832\">Maurice Herlihy \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/6ayncxk5m9q7g6dn80b7bc\/?utm_source=habr&amp;utm_medium=453832\">Blockchain i budu\u0107nost distribuiranog ra\u010dunalstva<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/807a70783be0a9825a85eca0e73b6a70.jpeg\" style=\"display:block;margin: 0 auto;\" \/> <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Maurice_Herlihy\">Morris Herlihy<\/a><\/noindex> \u2014 dobitnik \u010dak dvije Dijkstra nagrade. Prva \u2014 za rad na <noindex><a rel=\"nofollow\" href=\"https:\/\/cs.brown.edu\/~mph\/Herlihy91\/p124-herlihy.pdf\">\u201eWait-Free Synchronization\u201d<\/a><\/noindex> (Sveu\u010dili\u0161te Brown), a druga, novija \u2014 <noindex><a rel=\"nofollow\" href=\"http:\/\/courses.cs.vt.edu\/cs5204\/fall09-kafura\/Papers\/TransactionalMemory\/Architecture-Support.pdf\">\u201eTransactional Memory: Architectural Support for Lock-Free Data Structures\u201d<\/a><\/noindex> (Sveu\u010dili\u0161te Virginia Tech). Dijkstra nagrada se dodjeljuje za radove \u010diji su zna\u010daj i utjecaj bili vidljivi najmanje deset godina, a o\u010dito je da je Maurice jedan od najpoznatijih stru\u010dnjaka u tom podru\u010dju. Trenutno radi kao profesor na Sveu\u010dili\u0161tu Brown i ima brojne uspjehe koji bi mogli ispuniti cijeli odlomak.<\/p>\n<p><\/p>\n<p>Na ovom zavr\u0161nom keynoteu Maurice \u0107e govoriti o teoriji i praksi blokchain distribuiranih sustava iz perspektive klasika distribuiranih ra\u010dunalnih sustava i o tome kako pojednostavljuje mnoge povezane probleme. Ovo je izlaganje isklju\u010divo na temu konferencije \u2014 ne radi se o rudarskom trendu, ve\u0107 o tome kako na\u0161a saznanja mo\u017eemo izvanredno u\u010dinkovito i prikladno primijeniti na razne zadatke.<\/p>\n<p><\/p>\n<p>U srpnju 2017. Maurice je ve\u0107 bio u Rusiji na \u0161koli SPTDC, sudjelovao je na meetupu JUG.ru, a snimku mo\u017eete pogledati na YouTubeu:<\/p>\n<p>\n<center><div class=\"youtube-placeholder\" data-id=\"S3Fx-7avfs4\" onclick=\"loadVideo(this)\">\r\n        <img decoding=\"async\" src=\"https:\/\/img.youtube.com\/vi\/S3Fx-7avfs4\/hqdefault.jpg\" alt=\"Pogledajte video\" loading=\"lazy\" width=\"480\" height=\"360\" style=\"width:100%;height:auto;\">\r\n        <div class=\"play-button\"><\/div>\r\n    <\/div><\/center><\/p>\n<h2 id=\"osnovnaya-programma\">Glavni program<\/h2>\n<p><\/p>\n<p>Slijedi kratak pregled izlaganja koja su uklju\u010dena u program. Neka izlaganja su ovdje detaljno opisana, a neka kra\u0107e. Duga opisa dobila su, uglavnom, izlaganja na engleskom jeziku, koja zahtijevaju reference na znanstvene radove, pojmove na Wikipediji i sli\u010dno. Cjelovit popis mo\u017eete <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/#schedule\">vidjeti na web stranici konferencije<\/a><\/noindex>. Popis na web stranici bit \u0107e a\u017euriran i dopunjen. <\/p>\n<p><\/p>\n<h3 id=\"leslie-lamport--q--ahttpshydraconfru2019talks6evatt1mvwvpnwfxxveivwutm_sourcehabrutm_medium453832\">Leslie Lamport \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/6evatt1mvwvpnwfxxveivw\/?utm_source=habr&amp;utm_medium=453832\">P &amp; P<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/4c6d5928be31af95cd3e2a7812e86854.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Leslie Lamport je autor temeljnih radova u distribuiranim ra\u010dunalstvima. <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/LaTeX\">\u00abLaTeX\u00bb<\/a><\/noindex> se razla\u017ee kao \u00abLamport TeX\u00bb. On je prvi, jo\u0161 1979. godine, uveo pojam <noindex><a rel=\"nofollow\" href=\"http:\/\/lamport.azurewebsites.net\/pubs\/multi.pdf\">sekvencijalne dosljednosti<\/a><\/noindex>, a njegov \u010dlanak <noindex><a rel=\"nofollow\" href=\"http:\/\/lamport.azurewebsites.net\/pubs\/time-clocks.pdf\">\u00abKako izgraditi multiprocesorsko ra\u010dunalo koje ispravno izvr\u0161ava multiprogramske programe\u00bb<\/a><\/noindex> dobio Dijkstra nagradu.<\/p>\n<p><\/p>\n<p>Ovo je najneobi\u010dniji format programa, jer to nije ni izlaganje, ve\u0107 sesija pitanja i odgovora. Kada je zna\u010dajan dio publike ve\u0107 upoznat (ili mo\u017ee postati upoznat) sa svim vrstama radova temeljenim na \u201eLamportovoj teoriji\u201c, njegovim vlastitim \u010dlancima i izlaganjima, najva\u017enije je iskoristiti sve dostupno vrijeme za direktnu komunikaciju.<\/p>\n<p><\/p>\n<p>Ideja je jednostavna \u2014 gledate na YouTube dva izlaganja: <noindex><a rel=\"nofollow\" href=\"https:\/\/youtu.be\/6QsTfL-uXd8\">\u201eProgramiranje bi trebalo biti vi\u0161e od kodiranja\u201c<\/a><\/noindex> i <noindex><a rel=\"nofollow\" href=\"https:\/\/www.heidelberg-laureate-forum.org\/blog\/video\/lecture-monday-september-24-2018-leslie-lamport\/\">\u00abAko ne pi\u0161ete program, ne koristite programski jezik\u00bb<\/a><\/noindex> i pripremite barem jedno pitanje, a Leslie odgovara.<\/p>\n<p><\/p>\n<p>Prvo od ta dva videa ve\u0107 smo <noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/jugru\/blog\/454898\/\">preveli u habro \u010dlanak<\/a><\/noindex>. Ako nemate sat vremena za gledanje videa, mo\u017eete brzo pro\u010ditati sve to u tekstualnom obliku.<\/p>\n<p><\/p>\n<p>Na bilje\u0161ku: na YouTubeu ima mnogo vi\u0161e videa s Leslie Lamportom. Na primjer, postoji odli\u010dan <noindex><a rel=\"nofollow\" href=\"https:\/\/www.youtube.com\/watch?v=p54W-XOIEF8&amp;list=PLWAv2Etpa7AOAwkreYImYt0gIpOdWQevD\">te\u010daj o TLA+<\/a><\/noindex>. Offline verzija cijelog ovog kursa dostupna je na <noindex><a rel=\"nofollow\" href=\"http:\/\/lamport.azurewebsites.net\/video\/videos.html\">osobnoj stranici autora<\/a><\/noindex>, a na YouTubeu je pre\u0161ao radi lak\u0161eg pregleda na mobilnim ure\u0111ajima.<\/p>\n<p><\/p>\n<h3 id=\"martin-kleppmann--syncing-data-across-user-devices-for-distributed-collaborationhttpshydraconfru2019talks6i4lkw8pwjnadgff5ylr11utm_sourcehabrutm_medium453832\">Martin Kleppmann \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/6i4lkw8pwjnadgff5ylr11\/?utm_source=habr&amp;utm_medium=453832\">Sinkronizacija podataka izme\u0111u korisni\u010dkih ure\u0111aja za distribuiranu suradnju<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/09af25ab1ce915ba13ec6ee1013878f6.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Martin Kleppmann je istra\u017eiva\u010d na Sveu\u010dili\u0161tu u Cambridgeu, koji radi na CRDT i formalnoj verifikaciji algoritama. Knjiga Martina <noindex>\u201eDizajniranje aplikacija s visokim intenzitetom podataka\u201c<\/noindex>, objavljena 2017. godine, postala je veoma uspje\u0161na i na\u0161la se na popisima bestselera u podru\u010dju pohrane i obrade podataka. Kevin Scott, CTO u Microsoftu, <noindex><a rel=\"nofollow\" href=\"https:\/\/martin.kleppmann.com\/2017\/03\/27\/designing-data-intensive-applications.html\">jednom je rekao<\/a><\/noindex>: \u201eOva knjiga bi trebala biti obavezna za in\u017eenjere razvojnog tima. To je rijetki resurs koji ujedinjuje teoriju i praksu, poma\u017eu\u0107i programerima da inteligentnije dizajniraju i implementiraju infrastrukturu i sustave obrade podataka\u201c. Ne\u0161to sli\u010dno rekao je i tvorac Kafke i CTO Confluenta, Jay Kreps.<\/p>\n<p><\/p>\n<p>Prije nego \u0161to se posvetio akademskom istra\u017eivanju, Martin je radio u industriji i bio je suosniva\u010d dvoje uspje\u0161nih startupova:<\/p>\n<p><\/p>\n<ul>\n<li>Rapportive, koji je prikazivao dru\u0161tveni profil kontakata iz va\u0161e e-po\u0161te, a LinkedIn ga je kupio 2012. godine;<\/li>\n<li>Go Test It, usluga za automatsko testiranje web stranica u razli\u010ditim preglednicima, koju je RedGate kupio 2009. godine.<\/li>\n<\/ul>\n<p><\/p>\n<p>Ukratko, iako je Martin manje poznat od na\u0161ih glavnih govornika, ve\u0107 je uspio dati doprinos i razvoju distribuiranog ra\u010dunanja i industriji.<\/p>\n<p><\/p>\n<p>U ovom izlaganju, Martin \u0107e govoriti o temi koja je bli\u017ea njegovim akademskim istra\u017eivanjima. U Google Docs i sli\u010dnim softverima za zajedni\u010dko ure\u0111ivanje dokumenata, \"zajedni\u010dko ure\u0111ivanje\" podrazumijeva zadatak replikacije: svaki korisnik ima svoju repliku zajedni\u010dkog dokumenta koju potom mijenja, a sve promjene se \u0161alju mre\u017ei ostalim sudionicima. Promjene dokumenata offline dovode do privremene nesuglasnosti dokumenta u odnosu na ostale sudionike, a ponovna sinkronizacija zahtijeva rje\u0161avanje sukoba. Upravo za to postoje <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Conflict-free_replicated_data_type\">Tipovi podataka koji se repliciraju bez sukoba<\/a><\/noindex> (CRDT), \u0161to je u su\u0161tini prili\u010dno nova stvar, \u010dija su\u0161tina je formulirana tek 2011. godine. U ovom izlaganju raspravlja se o tome \u0161to se dogodilo od tada u svijetu CRDT-a, koja su najnovija dostignu\u0107a, raspravlja se o pristupu razvoju aplikacija s lokalnim prioritetom uop\u0107e i kori\u0161tenju open-source biblioteke <noindex><a rel=\"nofollow\" href=\"https:\/\/github.com\/automerge\/automerge\">Automerge<\/a><\/noindex> konkretno.<\/p>\n<p><\/p>\n<blockquote><p>Sljede\u0107i tjedan na Habr-u objavit \u0107emo veliko intervju s Martinom, bit \u0107e zanimljivo.<\/p><\/blockquote>\n<p><\/p>\n<h3 id=\"pedro-ramalhete--wait-free-data-structures-and-wait-free-transactionshttpshydraconfru2019talks1jwmdzkmjcalsclwavttxkutm_sourcehabrutm_medium453832\">Pedro Ramalhete \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/1jwmdzkmjcalsclwavttxk\/?utm_source=habr&amp;utm_medium=453832\">Strukture podataka bez \u010dekanja i transakcije bez \u010dekanja<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/be9b98f5ab95d0f6646dfcb4cee38978.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Pedro radi u Cisco-u i ve\u0107 desetak godina razvija paralelne algoritme, uklju\u010duju\u0107i mehanizme sinkronizacije, strukture podataka bez zaklju\u010davanja i bez \u010dekanja, i sve \u0161to mo\u017eete zamisliti na tu temu. Njegovi trenutni znanstveni i in\u017eenjerski interesi fokusirani su na Univerzalne konstrukcije, Softversku transakcijsku memoriju, Trajnu memoriju i sli\u010dne tehnologije koje omogu\u0107uju razvoj ispravnih, skalabilnih i otpornih aplikacija. Tako\u0111er je autor \u0161iroko poznatog u uskim krugovima bloga <noindex><a rel=\"nofollow\" href=\"http:\/\/concurrencyfreaks.blogspot.com\/\">Concurrency Freaks<\/a><\/noindex>.<\/p>\n<p><\/p>\n<p>Na paralelnim strukturama podataka danas radi ve\u0107ina multithread aplikacija, po\u010dev\u0161i od upotrebe redova poruka izme\u0111u aktera do indeksiranih struktura podataka u key-value skladi\u0161tima. U Java JDK-u uspje\u0161no funkcioni\u0161u ve\u0107 dugi niz godina, a polako se dodaju i u C++.<\/p>\n<p><\/p>\n<p>Najjednostavniji na\u010din za implementaciju paralelne strukture podataka je sekvencijalna (jednothread) implementacija u kojoj su metode za\u0161ti\u0107ene mutexima. Ovo je dostupno svakom junioru, ali ima o\u010digledne probleme sa skalabilno\u0161\u0107u i performansama. Istovremeno, lock-free i wait-free strukture podataka ne samo da se bolje nose s gre\u0161kama, ve\u0107 imaju i povoljniji profil performansi \u2014 me\u0111utim, za njihovu izradu potrebna je duboka ekspertiza i prilago\u0111avanje specifi\u010dnim primjenama. Jedna pogre\u0161na linija koda mo\u017ee sve pokvariti.<\/p>\n<p><\/p>\n<p>Kako omogu\u0107iti da \u010dak i neekspert mo\u017ee dizajnirati i implementirati takve strukture podataka? Poznato je da se svaki sekvencijalni algoritam mo\u017ee u\u010diniti sigurnim za rad u vi\u0161e niti uz pomo\u0107 ili <noindex><a rel=\"nofollow\" href=\"https:\/\/hal.inria.fr\/hal-01397265v1\/document\">univerzalne konstrukcije<\/a><\/noindex>, ili transakcijske memorije. Prvi od njih mo\u017ee smanjiti prag ulaska u rje\u0161enje ovog problema. Me\u0111utim, oba rje\u0161enja obi\u010dno dovode do neu\u010dinkovite implementacije. Pedro \u0107e pri\u010dati o tome kako su uspjeli u\u010diniti ove konstrukcije u\u010dinkovitijima i kako ih mo\u017eete koristiti za svoje algoritme.<\/p>\n<p><\/p>\n<h3 id=\"heidi-howard---liberating-distributed-consensushttpshydraconfru2019talks5z2xknkq9mozvqzhhgfoeiutm_sourcehabrutm_medium453832\">Heidi Howard \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/5z2xknkq9mozvqzhhgfoei\/?utm_source=habr&amp;utm_medium=453832\">Osloba\u0111anje distribuiranog konsenzusa<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/09dd05684fde1015a87818f0b6804680.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Heidi Howard \u2014 kao i Martin, istra\u017eiva\u010d distribuiranih sistema na Univerzitetu u Cambridgeu. Njezina specijalizacija je konzistentnost, otpornost na gre\u0161ke, performanse i distribuirani konsenzus. Najpoznatija je po generalizaciji Paxos algoritma nazvanog <noindex><a rel=\"nofollow\" href=\"https:\/\/fpaxos.github.io\/\">Fleksibilni Paxos<\/a><\/noindex>. <\/p>\n<p><\/p>\n<p>Podsje\u0107amo, da <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Paxos_(computer_science)\">Paxos<\/a><\/noindex> \u2014 porodica protokola za rje\u0161avanje problema konsenzusa u mre\u017ei nepouzdanih ra\u010dunara, koja se temelji na radovima Leslie Lampa. Tako na\u0161i predava\u010di rade na temama koje su prvotno predlo\u017eili drugi na\u0161i predava\u010di \u2014 i to je predivno.<\/p>\n<p><\/p>\n<p>Mogu\u0107nost postizanja konsenzusa izme\u0111u vi\u0161e hostova \u2014 za adresiranje, odabir vo\u0111e, blokiranje ili koordinaciju \u2014 osnovno je pitanje modernih distribuiranih sustava. Paxos je trenutno glavni na\u010din rje\u0161avanja problema postizanja konsenzusa, a oko njega se vodi mnogo istra\u017eivanja s ciljem pro\u0161irenja i optimizacije algoritma za razli\u010dite prakti\u010dne potrebe. <\/p>\n<p><\/p>\n<p>U ovom izvje\u0161taju \u0107emo revidirati teorijsku osnovu Paxosa, osloba\u0111aju\u0107i izvorne zahtjeve i generaliziraju\u0107i algoritam. Vidjet \u0107emo da je Paxos, u su\u0161tini, samo jedan od mogu\u0107ih pristupa unutar \u0161irokog spektra metoda za postizanje konsenzusa, i da su druge ta\u010dke spektra tako\u0111er vrlo korisne za izgradnju dobrih distribuiranih sustava.<\/p>\n<p><\/p>\n<h3 id=\"alex-petrov--reduce-your-storage-costs-with-transient-replication-and-cheap-quorumshttpshydraconfru2019talks6eb39udg8bxsgmimkexd6jutm_sourcehabrutm_medium453832\">Alex Petrov \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/6eb39udg8bxsgmimkexd6j\/?utm_source=habr&amp;utm_medium=453832\">Smanjite tro\u0161kove pohrane pomo\u0107u Transijentne Replikacije i Jeftinih Kvoruma<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/178a1db3cf49b5ff73a0c9101ab3845c.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Aleks je stru\u010dnjak za baze podataka i sustave pohrane, a \u0161to je za nas najva\u017enije \u2014 komitator u <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Apache_Cassandra\">Cassandra<\/a><\/noindex>. Zajedno s O'Reillyjem trenutno radi na knjizi Database Internals.<\/p>\n<p><\/p>\n<p>Za sustave s <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Eventual_consistency\">eventual consistency<\/a><\/noindex> (u hrvatskoj terminologiji \u2014 'kona\u010dna dosljednost'), nakon pada \u010dvora ili podjele mre\u017ee, potrebno je rije\u0161iti sljede\u0107u dilemu: nastaviti s izvr\u0161avanjem zahtjeva, \u017ertvuju\u0107i dosljednost, ili odbiti njihovo izvr\u0161avanje i \u017ertvovati dostupnost. U takvom sustavu, kvorumi, preklapaju\u0107i podskupovi \u010dvorova koji jam\u010de da \u0107e barem jedan \u010dvor sadr\u017eavati najnoviju vrijednost, mogu postati dobro grani\u010dno rje\u0161enje. Mo\u017ee se pre\u017eivjeti kvarove i gubitak veze do nekih \u010dvorova, nastavljaju\u0107i odgovarati najnovijim vrijednostima.<\/p>\n<p><\/p>\n<p>Me\u0111utim, sve ima svoju cijenu. Kvorumska shema replikacije zna\u010di pove\u0107ane tro\u0161kove pohrane: potrebno je pohraniti redundante podatke na vi\u0161e \u010dvorova istovremeno kako bi se osigurao dovoljan broj dostupnih kopija u trenutku problema. Pokazuje se da nije potrebno \u010duvati sve podatke na svim replikama. Mo\u017ee se smanjiti optere\u0107enje na pohranu ako se podaci dr\u017ee samo na dijelu \u010dvorova, dok se za scenarije obrade kvarova koriste posebni \u010dvorovi (Transient Replica).<\/p>\n<p><\/p>\n<p>Tijekom izlaganja razmotrit \u0107emo <noindex><a rel=\"nofollow\" href=\"http:\/\/citeseerx.ist.psu.edu\/viewdoc\/download?doi=10.1.1.146.3429&amp;rep=rep1&amp;type=pdf\">Witness Replicas<\/a><\/noindex>, shemu replikacije koja se koristi u <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Spanner_(database)\">Spanner<\/a><\/noindex> i <noindex><a rel=\"nofollow\" href=\"http:\/\/cidrdb.org\/cidr2011\/Papers\/CIDR11_Paper32.pdf\">Megastore<\/a><\/noindex>, i implementaciju ovog koncepta u Apache Cassandri pod nazivima <noindex><a rel=\"nofollow\" href=\"https:\/\/jira.apache.org\/jira\/browse\/CASSANDRA-14404?subTaskView=all\">Transient Replication &amp; Jeftini Kvorumi<\/a><\/noindex>.<\/p>\n<p><\/p>\n<h3 id=\"dmitriy-vyukov---goroutines-exposedhttpshydraconfru2019talks7336ginp0kke7n4yxxjvldutm_sourcehabrutm_medium453832\">Dmitrij Vjukov \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/7336ginp0kke7n4yxxjvld\/?utm_source=habr&amp;utm_medium=453832\">Goroutines exposed<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/94ce38f8cc366bbd2ee53b9636e4650d.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Dmitrij je programer u Googleu koji radi na dinami\u010dkom testiranju C\/C++ i Go \u2014 Address\/Memory\/ThreadSanitizer, i sli\u010dnim alatima za Linux kernel. Doprinio je Go skalabilnom planerju gorutina, mre\u017enom ispitiva\u010du i paralelnom sakuplja\u010du sme\u0107a. Stru\u010dnjak je za vi\u0161edretvenost, autor je desec novih algoritama bez blokiraju\u0107e prirode i nosi titulu <noindex><a rel=\"nofollow\" href=\"https:\/\/software.intel.com\/en-us\/blackbelt\">Crni pojas<\/a><\/noindex> Intel.<\/p>\n<p><\/p>\n<p>Sada malo o prezentaciji. U jeziku Go postoji nativna podr\u0161ka za vi\u0161edretvenost u obliku gorutina (lagani threadovi) i kanala (FIFO redovi). Zahvaljuju\u0107i ovim mehanizmima korisnicima je veoma lako i prijatno pisati moderne vi\u0161edretvene aplikacije, i izgleda kao magija. Kako razumemo, ovde nema nikakve magije. U ovoj prezentaciji Dmitrij \u0107e se detaljno osvrnuti na su\u0161tinu rada Go planerja i pokazati tajne implementacije te \"magije\". Na po\u010detku \u0107e dati pregled osnovnih komponenti planerja, objasnit \u0107e kako funkcioni\u0161e. Zatim \u0107emo se pobli\u017ee upoznati s odre\u0111enim aspektima poput strategije parkiranja\/odparkiranja i obrade blokiraju\u0107ih sistemskih poziva. Na kraju, Dmitrij \u0107e malo govoriti o mogu\u0107im unapre\u0111enjima u planerju.<\/p>\n<p><\/p>\n<h3 id=\"dmitriy-bugaychenko---uskoryaem-raspredelennyy-analiz-grafov-s-pomoschyu-veroyatnostnyh-sketchey-i-ne-tolkohttpshydraconfru2019talks1po7b00j6m4vst3df7aqtoutm_sourcehabrutm_medium453832\">Dmitrij Bugaj\u010denko \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/1po7b00j6m4vst3df7aqto\/?utm_source=habr&amp;utm_medium=453832\">Ubrzanje distribuirane analize grafova pomo\u0107u probabilisti\u010dkih skica i ne samo toga<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/f963ef8ac1a37011aa387016dc938b3c.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Dmitrij je skoro 9 godina radio u outsourcingu, ne gube\u0107i kontakt s univerzitetom i nau\u010dnom zajednicom. Analiza velikih podataka u Odnoklassnicima pru\u017eila mu je jedinstvenu priliku da spoji teorijsku pripremljenost i nau\u010dnu osnovu s razvojem stvarnih, tra\u017eenih proizvoda.<\/p>\n<p><\/p>\n<p>Distribuirana analiza grafova bila je i ostaje izazovan zadatak: kada se javi potreba da se dobije informacija o vezama obli\u017enjeg \u010dvora, \u010desto se podaci moraju prebacivati izme\u0111u ma\u0161ina, \u0161to dovodi do pove\u0107anja vremena izvr\u0161avanja i optere\u0107enja mre\u017ene infrastrukture. U ovoj prezentaciji \u0107emo videti kako se mo\u017ee posti\u0107i zna\u010dajno ubrzanje obrade kori\u0161\u0107enjem probabilisti\u010dkih struktura podataka ili \u010dinjenica poput simetri\u010dnosti grafova prijateljstava u dru\u0161tvenoj mre\u017ei. Sve to bi\u0107e ilustrovano primerima koda na Apache Spark.<\/p>\n<p><\/p>\n<h3 id=\"denis-ryscov--reduce-your-storage-costs-with-transient-replication-and-cheap-quorumshttpshydraconfru2019talks5e3yibth8vha0jbyoywpm6utm_sourcehabrutm_medium453832\">Denis Rytsov \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/5e3yibth8vha0jbyoywpm6\/?utm_source=habr&amp;utm_medium=453832\">Smanjite tro\u0161kove pohrane pomo\u0107u Transijentne Replikacije i Jeftinih Kvoruma<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/700bfb1a35280932f654a9c34413e2d4.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Denis je programer <noindex><a rel=\"nofollow\" href=\"https:\/\/en.wikipedia.org\/wiki\/Cosmos_DB\">Cosmos DB<\/a><\/noindex>, stru\u010dnjak za provjeru modela konzistentnosti, u algoritmima konsenzusa i u distribuiranim transakcijama. Trenutno radi u Microsoftu, a prije toga se bavio distribuiranim sustavima u Amazonu i Yandexu.<\/p>\n<p><\/p>\n<p>U ovom izlaganju upoznat \u0107emo se s protokolima distribuiranih transakcija koji su izumljeni u posljednjih nekoliko godina, a koji se mogu implementirati na klijentskoj strani iznad bilo kojeg skladi\u0161ta podataka koje podr\u017eava uslovno a\u017euriranje (compare and set). Su\u0161tina je u tome da \u017eivot ne zavr\u0161ava dvostupanjskim potvr\u0111ivanjem, transakcije se mogu dodati iznad bilo kojih baza podataka \u2014 na razini aplikacije, ali razli\u010diti protokoli (2PC, Percolator, RAMP) imaju razli\u010dite trade-off-e i ne dolaze nam besplatno.<\/p>\n<p><\/p>\n<h3 id=\"aleksey-zinovev--ne-vse-ml-algoritmy-popadayut-v-raspredelennyy-rayhttpshydraconfru2019talks3jd0bgsoa0qtcijgblidjsutm_sourcehabrutm_medium453832\">Aleksij Zinovjev \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/3jd0bgsoa0qtcijgblidjs\/?utm_source=habr&amp;utm_medium=453832\">Nisu svi ML-algoritmi dospjeli u distribuirani raj<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/eb412d59dec5dcc4a04f603b32d12575.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Aleksij (<noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/users\/zaleslaw\/\" class=\"user_link\">zaleslaw<\/a><\/noindex>) \u2014 na\u0161 dugogodi\u0161nji govornik i \u010dlan programskih odbora na drugim konferencijama. Prakti\u010dni trener u kompaniji EPAM Systems, i s Hadoop\/Spark i ostalim big data alatima prijateljuje od 2012. godine.<\/p>\n<p><\/p>\n<p>U ovom izlaganju Aleksij \u0107e govoriti o problemima prilagodbe klasi\u010dnih algoritama strojnog u\u010denja za izvo\u0111enje u distribuiranom na\u010dinu rada na temelju svog iskustva s Apache Spark ML, Apache Mahout, Apache Flink ML i iskustva u izradi Apache Ignite ML. Tako\u0111er, Aleksij \u0107e govoriti o implementaciji distribuiranih ML-algoritama u tim okvirima.<\/p>\n<p><\/p>\n<p>I na kraju \u2014 dva izlaganja iz kompanije Yandex o Yandex Bazi podataka.<\/p>\n<p><\/p>\n<h3 id=\"vladislav-kuznecov--yandex-database--kak-my-obespechivaem-otkazoustoychivosthttpshydraconfru2019talksmuxomfgqembsb3st7i3ciutm_sourcehabrutm_medium453832\">Vladislav Kuznecov \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/muxomfgqembsb3st7i3ci\/?utm_source=habr&amp;utm_medium=453832\">Yandex Database \u2014 kako osiguravamo otpornost na gre\u0161ke<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/3bdb3bec0ec0eb71db373e85afad6260.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Vladislav je developer u Yandexu u grupi distribuirane platforme. Yandex Database \u2014 horizontalno skalabilna geodistribuirana otporna baza podataka, otpornija na kvarove diskova, poslu\u017eitelja, ormara i data centara bez kr\u0161enja konzistentnosti. Za osiguranje otpornosti na gre\u0161ke koristi se vlastiti algoritam za postizanje distribuiranog konsenzusa, kao i niz tehni\u010dkih rje\u0161enja koja su detaljno razra\u0111ena u izlaganju. Izlaganje mo\u017ee biti zanimljivo kako developerima baza podataka, tako i developerima aplikativnih rje\u0161enja na bazi baza podataka.<br clear=\"all\">\n<\/p>\n<p><\/p>\n<h3 id=\"semen-checherinda--raspredelennye-tranzakcii-v-ydbhttpshydraconfru2019talks3ubxfwi4ikpxdjcdqswjihutm_sourcehabrutm_medium453832\">Semen \u010ce\u010derinda \u2014 <noindex><a rel=\"nofollow\" href=\"https:\/\/hydraconf.ru\/2019\/talks\/3ubxfwi4ikpxdjcdqswjih\/?utm_source=habr&amp;utm_medium=453832\">Distribuirane transakcije u YDB<\/a><\/noindex><\/h3>\n<p><\/p>\n<p><img decoding=\"async\" alt=\"19 glava hidre. Veliki pregled programa\" src=\"\/wp-content\/uploads\/2019\/06\/0cf2b40fcabfba1a774f00c9f245b8f1.jpeg\" style=\"display:block;margin: 0 auto;\" \/> Semen je developer u grupi distribuirane platforme u Yandexu, radi na mogu\u0107nosti vi\u0161ekratnog kori\u0161tenja instalacije YDB.<\/p>\n<p><\/p>\n<p>Yandex Database je dizajnirana za OLTP upite i ispunjava ACID zahtjeve za transakcijski sustav. U izvje\u0161taju \u0107emo razmotriti algoritam planiranja transakcija koji le\u017ei u osnovi transakcijskog sustava YDB. Analizirat \u0107emo koje entiteti sudjeluju u transakcijama, tko dodjeljuje globalni redoslijed transakcijama, kako se posti\u017ee atomarnost transakcija, pouzdanost i stroga razina izolacije. Na primjeru uobi\u010dajenog zadatka razmotrit \u0107emo implementacije transakcija koriste\u0107i dvofaznu potvrdu i deterministi\u010dke transakcije. Raspravljat \u0107emo o njihovim razlikama.<\/p>\n<p><\/p>\n<h2 id=\"chto-dalshe\">\u0160to dalje?<\/h2>\n<p><\/p>\n<p>Program konferencije nastavlja se ispunjavati novim izlaganjima. Konkretno, o\u010dekujemo izlaganje od <strong>Nikita Koval<\/strong> (<noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/users\/ndkoval\/\" class=\"user_link\">ndkoval<\/a><\/noindex>) iz JetBrains i <strong>Oleg Anastasev<\/strong> (<noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/users\/m0nstermind\/\" class=\"user_link\">m0nstermind<\/a><\/noindex>) iz kompanije Odnoklassniki. Nikita se bavi algoritmima za korutine u Kotlin timu, a Oleg razvija arhitekturu i rje\u0161enja za sustave visokih optere\u0107enja na platformi kompanije Odnoklassniki. Osim toga, postoji jo\u0161 1 uvjetno prazno mjesto, s kandidatima za koje trenutno radi programski odbor.<\/p>\n<p><\/p>\n<p>Konferencija Hydra \u0107e se odr\u017eati 11-12. srpnja u Sankt Peterburgu. Karte se mogu <noindex>kupiti na slu\u017ebenoj stranici<\/noindex>. Skre\u0107emo pozornost na dostupnost online karata \u2014 ako iz nekog razloga ne mo\u017eete u\u017eivo do\u0107i u Peterburg tih dana.<\/p>\n<p><\/p>\n<p>Vidimo se na Hydri!<\/p>\n<p>Izvor: <a content=\"nofollow\" rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/jugru\/blog\/453832\/\">habr.com<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"<p>11-12 \u0438\u044e\u043b\u044f \u0432 \u0421\u0430\u043d\u043a\u0442-\u041f\u0435\u0442\u0435\u0440\u0431\u0443\u0440\u0433\u0435 \u0441\u043e\u0441\u0442\u043e\u0438\u0442\u0441\u044f \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f Hydra, \u043f\u043e\u0441\u0432\u044f\u0449\u0435\u043d\u043d\u0430\u044f \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u044b\u0445 \u0438 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0445 \u0441\u0438\u0441\u0442\u0435\u043c. \u0424\u0438\u0448\u043a\u0430 \u0413\u0438\u0434\u0440\u044b \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e \u043e\u043d\u0430 \u043e\u0431\u044a\u0435\u0434\u0438\u043d\u044f\u0435\u0442 \u043a\u0440\u0443\u0442\u044b\u0445 \u0443\u0447\u0451\u043d\u044b\u0445 (\u043a\u043e\u0442\u043e\u0440\u044b\u0445 \u043e\u0431\u044b\u0447\u043d\u043e \u043c\u043e\u0436\u043d\u043e \u043d\u0430\u0439\u0442\u0438 \u0442\u043e\u043b\u044c\u043a\u043e \u043d\u0430 \u0437\u0430\u0440\u0443\u0431\u0435\u0436\u043d\u044b\u0445 \u043d\u0430\u0443\u0447\u043d\u044b\u0445 \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f\u0445) \u0438 \u0438\u0437\u0432\u0435\u0441\u0442\u043d\u044b\u0445 \u043f\u0440\u0430\u043a\u0442\u0438\u043a\u0443\u044e\u0449\u0438\u0445 \u0438\u043d\u0436\u0435\u043d\u0435\u0440\u043e\u0432, \u0432 \u043e\u0434\u043d\u0443 \u0431\u043e\u043b\u044c\u0448\u0443\u044e \u043f\u0440\u043e\u0433\u0440\u0430\u043c\u043c\u0443 \u043d\u0430 \u0441\u0442\u044b\u043a\u0435 \u043d\u0430\u0443\u043a\u0438 \u0438 \u043f\u0440\u0430\u043a\u0442\u0438\u043a\u0438. Hydra \u2014 \u043e\u0434\u043d\u0430 \u0438\u0437 \u0441\u0430\u043c\u044b\u0445 \u0432\u0430\u0436\u043d\u044b\u0445 \u043d\u0430\u0448\u0438\u0445 \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u0439 \u0437\u0430 \u043f\u043e\u0441\u043b\u0435\u0434\u043d\u0438\u0435 \u043d\u0435\u0441\u043a\u043e\u043b\u044c\u043a\u043e [&hellip;]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":26388,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-35091","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t<!-- All in One SEO 5.0.5.1 - aioseo.com -->\n\t<meta name=\"description\" content=\"11-12 \u0438\u044e\u043b\u044f \u0432 \u0421\u0430\u043d\u043a\u0442-\u041f\u0435\u0442\u0435\u0440\u0431\u0443\u0440\u0433\u0435 \u0441\u043e\u0441\u0442\u043e\u0438\u0442\u0441\u044f \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f Hydra, \u043f\u043e\u0441\u0432\u044f\u0449\u0435\u043d\u043d\u0430\u044f \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u044b\u0445 \u0438 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0445.\" \/>\n\t<meta name=\"robots\" content=\"max-image-preview:large\" \/>\n\t<meta name=\"author\" content=\"Yuri Gagarin\"\/>\n\t<link rel=\"canonical\" href=\"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/19-golov-gidry-bolshoj-obzor-programmy\" \/>\n\t\t<meta name=\"generator\" content=\"All in One SEO (AIOSEO) 5.0.5.1\" \/>\n\t\t<meta property=\"og:locale\" content=\"hr_HR\" \/>\n\t\t<meta property=\"og:site_name\" content=\"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b\" \/>\n\t\t<meta property=\"og:type\" content=\"article\" \/>\n\t\t<meta property=\"og:title\" content=\"\ud83e\udd4719 \u0433\u043e\u043b\u043e\u0432 \u0433\u0438\u0434\u0440\u044b. \u0411\u043e\u043b\u044c\u0448\u043e\u0439 \u043e\u0431\u0437\u043e\u0440 \u043f\u0440\u043e\u0433\u0440\u0430\u043c\u043c\u044b | ProHoster\" \/>\n\t\t<meta property=\"og:description\" content=\"11-12 \u0438\u044e\u043b\u044f \u0432 \u0421\u0430\u043d\u043a\u0442-\u041f\u0435\u0442\u0435\u0440\u0431\u0443\u0440\u0433\u0435 \u0441\u043e\u0441\u0442\u043e\u0438\u0442\u0441\u044f \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f Hydra, \u043f\u043e\u0441\u0432\u044f\u0449\u0435\u043d\u043d\u0430\u044f \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u044b\u0445 \u0438 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0445.\" \/>\n\t\t<meta property=\"og:url\" content=\"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/19-golov-gidry-bolshoj-obzor-programmy\" \/>\n\t\t<meta property=\"og:image\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:secure_url\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:width\" content=\"350\" \/>\n\t\t<meta property=\"og:image:height\" content=\"350\" \/>\n\t\t<meta property=\"article:published_time\" content=\"2019-10-31T19:02:18+00:00\" \/>\n\t\t<meta property=\"article:modified_time\" content=\"2019-10-31T19:02:18+00:00\" \/>\n\t\t<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<meta property=\"article:author\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<!-- All in One SEO -->\n\n","aioseo_head_json":{"title":"\ud83e\udd4719 glava hidre. Veliki pregled programa | ProHoster","description":"11-12. srpnja u Sankt Peterburgu odr\u017eat \u0107e se konferencija Hydra posve\u0107ena razvoju paralelnih i distribuiranih.","canonical_url":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/19-golov-gidry-bolshoj-obzor-programmy","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"hr_HR","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd4719 \u0433\u043e\u043b\u043e\u0432 \u0433\u0438\u0434\u0440\u044b. \u0411\u043e\u043b\u044c\u0448\u043e\u0439 \u043e\u0431\u0437\u043e\u0440 \u043f\u0440\u043e\u0433\u0440\u0430\u043c\u043c\u044b | ProHoster","og:description":"11-12 \u0438\u044e\u043b\u044f \u0432 \u0421\u0430\u043d\u043a\u0442-\u041f\u0435\u0442\u0435\u0440\u0431\u0443\u0440\u0433\u0435 \u0441\u043e\u0441\u0442\u043e\u0438\u0442\u0441\u044f \u043a\u043e\u043d\u0444\u0435\u0440\u0435\u043d\u0446\u0438\u044f Hydra, \u043f\u043e\u0441\u0432\u044f\u0449\u0435\u043d\u043d\u0430\u044f \u0440\u0430\u0437\u0440\u0430\u0431\u043e\u0442\u043a\u0435 \u043f\u0430\u0440\u0430\u043b\u043b\u0435\u043b\u044c\u043d\u044b\u0445 \u0438 \u0440\u0430\u0441\u043f\u0440\u0435\u0434\u0435\u043b\u0435\u043d\u043d\u044b\u0445.","og:url":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/19-golov-gidry-bolshoj-obzor-programmy","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-10-31T19:02:18+00:00","article:modified_time":"2019-10-31T19:02:18+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"35091","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-21 21:48:19","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-03-01 02:10:27","updated":"2026-01-21 21:48:19","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts\/35091","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/comments?post=35091"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts\/35091\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/media\/26388"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/media?parent=35091"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/categories?post=35091"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/tags?post=35091"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}