
Približno godinu i po dana sam počeo učestvovati na hackathonima. Tokom ovog vremenskog perioda učestovao sam na više od 20 događaja različitih razmera i tema u Moskvi, Helsinkiju, Berlinu, Minhenu, Amsterdamu, Cirihu i Parizu. Na svim tim događajima bavio sam se analizom podataka na neki način. Sviđa mi se da posetim nova mesta, uspostavim nove kontakte, smišljam sveže ideje, realizujem stare zamisli u kratkom vremenskom okviru i osećam adrenalin tokom prezentacije i proglašenja rezultata.
Ovaj post je prvi od tri posta na temu hackathona, gde ću govoriti o tome šta su hackathoni i zašto bi trebalo da počnete da učestvujete na njima. Drugi post će se baviti tamnom stranom ovih događaja — kako su organizatori pravili greške tokom održavanja i koje su posledice to imale. Treći post biće posvećen odgovorima na pitanja o tematici koja se odnosi na hackathone.
Šta je hackathon?
Hackathon je događaj koji se održava tokom nekoliko dana, sa ciljem rešavanja određenog problema. Obično je na hackathonu nekoliko problema, svaki predstavljen kao poseban put. Kompanija sponzor daje opis zadatka, metrike uspešnosti (koje mogu biti subjektivne poput "noviteta i kreativnosti", ili objektivne — tačnost klasifikacije na odvojenom skupu podataka) i resurse za postizanje uspeha (API kompanije, skupovi podataka, "hardver"). Učesnici u datom vremenu treba da definišu problem, predlože rešenje i prikažu prototip svog proizvoda. Najbolja rešenja dobijaju nagrade od kompanije i mogućnost daljnje saradnje.
Etape hackathona
Nakon objavljivanja zadataka, učesnici hakatona se okupljaju u timove: svaki "singl" dobija mikrofon i razgovara o odabranom zadatku, svom iskustvu, ideji i vrstama stručnjaka koji su mu potrebni za realizaciju. Ponekad tim može da se sastoji od jedne osobe koja može samostalno izvršiti sve poslove na projektu na dovoljno visokom nivou. To je posebno relevantno za hakatone za analizu podataka, ali često je zabranjeno ili nepoželjno za proizvodne događaje - organizatori su fokusirani na dalji razvoj projekta, ali već u okviru kompanije; formirani tim ima niz prednosti u odnosu na učesnike koji su želeli da rade na proizvodu sami. Optimalan tim obično se sastoji od 4 osobe i uključuje: frontend, backend, data scientista i poslovnog čoveka. Inače, podela između hackatona za data science i proizvodnih hackatona je prilično jednostavna - ako postoji skup podataka sa jasnom metrikom i liderbordom ili se može pobediti kodom u Jupyter notebook-u - to je hackaton za data science; sve ostalo - gde je potrebno napraviti aplikaciju, sajt ili nešto privlačno - je proizvodni.
Obično rad na projektu počinje u 9 sati uveče petkom, a krajnji rok je 10 sati ujutro nedeljom. Deo ovog vremena treba posvetiti spavanju (ne spavati i kodirati - to je siguran put do neuspeha, probao sam), a to znači da učesnici nemaju previše vremena da urade nešto kvalitetno. Da bi pomogli učesnicima, na licu mesta su prisutni predstavnici kompanije i mentori.
Rad na projektu započinje komunikacijom sa predstavnicima kompanije, jer oni najbolje razumeju specifičnost zadatka, metrike i verovatno će procenjivati vaše radove na kraju. Cilj ove komunikacije je shvatiti koja su područja najrelevantnija i na šta treba fokusirati svoju pažnju i vreme.
Na jednom hackathonu postavljena je zadaća regresije na datasetu s tabelarnim podacima i slikama, uz jasnu metričku vrednost – RMSE. Nakon razgovora s data scientistom iz kompanije, shvatio sam da im ne treba regresija, već klasifikacija, ali je neko iz menadžmenta odlučio da se zadatak najbolje reši na taj način. Klasifikacija im nije potrebna radi povećanja novčanih metrika, već da razumeju koji su parametri najvažniji prilikom donošenja odluka, a zatim ih obrade ručno. Dakle, početna zadaća (regresija s RMSE) menja se u klasifikaciju; prioritet procene menja se s postignute tačnosti na mogućnost objašnjavanja rezultata. To, pak, isključuje mogućnost korišćenja stacking i black box algoritama. Ovaj dijalog uštedio mi je mnogo vremena i povećao moje šanse za pobedu.
Nakon što shvatite šta treba da radite, počinje direktan rad na projektu. Morate postaviti checkpointove — vreme do kojeg je potrebno izvršiti postavljene zadatke; uz to, nije loše nastavite komunikaciju s mentorima — predstavnicima kompanije i tehničkim stručnjacima — ovo je korisno za ispravku puta vašeg projekta. Svež pogled na problem može sugerisati zanimljivo rešenje.
Budući da na hackathonima učestvuje veliki broj početnika, sa strane organizatora je dobar ton organizovati predavanja i radionice. Obično su tri predavanja — o tome kako predstaviti svoju ideju kao proizvod, predavanje na tehničku temu (na primer, o primeni otvorenih API-ja u mašinskom učenju, kako ne biste morali napisati svoj speech2text za dva dana, već iskoristiti već spremno), predavanje o pitchingu (kako predstaviti svoj proizvod, kako pravilno gestikulirati na sceni da slušaoci ne budu dosadni). Postoje različite aktivnosti kako bi oživeli učesnike — sesije joge, stoni fudbal i tenis ili igranje na konzoli.
U nedjelju ujutro potrebno je dostaviti rezultate vašeg rada žiriju. Na dobrim hackathonima sve počinje tehničkom inspekcijom — da li to što tvrdite stvarno funkcioniše? Cilj ovog pregleda je da odvoji timove sa lijepim prezentacijama i buzzwordima od onih koji su zaista nešto napravili. Nažalost, tehnička inspekcija nije prisutna na svim hackathonima i postoje slučajevi kada tim sa 12 slajdova i mentalitetom „... blockchain, kvantno računanje, a tu će A.I. završiti...” osvoji prvu nagradu. Ovi precedenti nisu tako česti, ali pošto se bolje pamte, mnogi misle da je dobra prezentacija 99% pobjede na hackathonu. Prezentacija, doduše, zaista je važna, ali njen doprinos nije veći od 30%.
Nakon nastupa učesnika, žiri donosi odluku o nagrađivanju pobjednika. Time je zvanični dio hackathona završen.
Motivacija za učešće na hackathonima
Iskustvo
Sa aspekta stečenog iskustva, hackathon je jedinstven događaj. U prirodi postoji vrlo malo mjesta gdje možete realizovati ideju iz ničega za 2 dana i dobiti trenutnu povratnu informaciju o svom radu. Tokom hackathona razvijate kritičko razmišljanje, timski rad, upravljanje vremenom, sposobnost rada u stresnim situacijama, umijeće predstavljanja rezultata svog rada na jasan način, vještine prezentacije i mnoge druge. Upravo zbog toga su hackathoni odlično mjesto za ljude sa teorijskim znanjima koji žele steći praktično iskustvo.
Nagrade
Obično nagradni fond hackathona iznosi oko 1.5k — 10k eura za prvo mjesto (u Rusiji — 100-300 hiljada rubalja). Očekivanu korist (expected value, EV) od učešća možete izračunati prema jednostavnoj formuli:
EV = Nagrada * WinRate + Buduća_Vrijednost - Troškovi gde Nagrada — iznos nagrade (radi jednostavnosti pretpostavićemo da je nagrada jedna);
WinRate — vjerovatnoća pobjede (za početnički tim ova vrijednost će biti ograničena na 10%, za iskusnije — 50% i više; susretao sam ljude koji su sa svakog hackathona odlazili sa nagradom, ali to je više izuzetak nego pravilo i na duge staze njihov winrate će biti ispod 100%);
Buduća_Vrijednost — veličina koja pokazuje buduću dobit od učešća na hackathonu: to može biti dobit od stečenog iskustva, umreženih veza, dobijenih informacija itd. Ovu veličinu gotovo je nemoguće tačno odrediti, ali treba je imati na umu;
Troškovi — troškovi transporta, smeštaja, itd.
Odluka o učešću se donosi na osnovu poređenja EV hackathona i EV aktivnosti kojom biste se bavili da hackathon nije bio: ako ste planirali da se opuštate na kauču tokom vikenda, možda je vredno učestvovati na hackathonu; ako želite da provedete vreme s roditeljima ili devojkom — uzmite ih u tim za hackathon (šalim se, odlučite sami), ako planirate da radite freelance — uporedite dolar-sat.
Prema svojim procenama, mogu reći da je u Rusiji za prosečnog data scientista na nivou junior — mid učestvovanje na hackathonima komparabilno s novčanom zaradom od običnog radnog dana, ali postoje i nijanse (veličina tima, tip hackathona, nagradni fond itd.). U celini, hackathonima sada — to nije zlato, ali mogu doneti lepu dopunu ličnom budžetu.
Zapošljavanje u kompaniju i umrežavanje
Za kompaniju, hackathon je jedan od načina zapošljavanja novih zaposlenika. Biće vam mnogo lakše pokazati da ste razumna osoba i da znate raditi u hackathonu nego na intervjuu, prikazujući binarno drvo na tabli (što, inače, ne odgovara uvek onome što ćete raditi na stvarnom poslu data scientista, ali tradicija se mora poštovati). Ova proba u 'borbenim' uslovima može zameniti probni dan.
Svoj prvi posao sam dobio zahvaljujući hackathonu. Na hackathonu sam pokazao da se iz podataka može izvući veća profitabilnost, objasnio kako planiram to da uradim. Pokrenuo sam projekat na hackathonu, pobedio, a zatim nastavio projekat u kompaniji sponzoru. To je bio četvrti hackathon u mom životu.
Mogućnost dobijanja jedinstvenog dataseta
Ovo je veoma relevantna tačka za hackathone u oblasti data science, čiju važnost ne razumeju svi. Obično sponzorske kompanije obezbeđuju stvarne setove podataka tokom događaja. Ovi podaci su privatni, pod NDA, što ne sprečava da vam pokažemo proof of concept na stvarnom setu podataka, a ne na igračke Titanic. U budućnosti, slični rezultati će značajno pomoći pri zapošljavanju u toj kompaniji ili konkurentskoj firmi ili prilikom opravdavanja sličnih projekata. Slažete se da je imati realizovane projekte, koje su pozitivno ocenili bolji od onih koje nemate. U suštini, slični realizovani projekti igraju ulogu poput medalja i statusa na Kaggle-u, ali njihova vrednost je za industriju očiglednija.
Saveti
U suštini, rad na hackathonu je prilično raznolik iskustvo i teško je formulirati bilo koji spisak pravila. Međutim, ovde bih želeo da navedem spisak zapažanja koja mogu pomoći početnicima:
- Ne bojte se da idete na hackathone čak i ako nemate iskustva ili tim. Razmislite o tome kako biste mogli biti korisni. Na primer, možda imate zanimljivu ideju ili se dobro snalazite u nekoj oblasti? Možete iskoristiti svoje domensko znanje prilikom formulacije problema i pronaći nekonvencionalne načine rešenja. Ili možda najbolje od svih znate da guglate? Vaša veština će vam uštedeti puno vremena, ako budete uspeli da pronađete gotove realizacije na GitHub-u. Ili se veoma dobro razumete u podešavanje parametara LightGBM-a? U tom slučaju nemojte ići na hackathon, već to dokažite na Kaggle takmičenjima.
- Strategija je važnija od manevrisanja. Vaš zadatak na hackathonu je rešavanje problema. Ponekad, da biste rešili problem, prvo morate da ga identifikujete. Proverite da li je vaš identifikovani problem zaista relevantan za kompaniju. Proverite da li vaše rešenje odgovara problemu, postavite sebi pitanje o optimalnosti vašeg rešenja. Prilikom procene vašeg rešenja, prvo će se gledati na relevantnost problema i adekvatnost predloženog rešenja. Arhitektura vaše neuronske mreže ili koliko ste puta učestvovali u aukciji, malo koga zanima.
- Pohađajte što više hackathona, ali nemojte se ustezati da napustite loše organizovane događaje.
- Dodajte rezultate svog rada na hackathonu u svoj CV i ne bojte se da o tome javno pišete.

Suština hackathona. Ukratko
Izvor: habr.com
