QA: Hackathoni

QA: Hackathoni

Završni deo trilogije o hackathonima. U prvog dijela ovoj epizodi pričam o motivaciji za učešće na ovim događajima. Drugi deo bila je posvećena greškama organizatora i njihovim posledicama. Završni deo će odgovoriti na pitanja koja nisu stala u prva dva dela.

Ispričaj kako si počeo da učestvuješ na hackathonima.
Studirao sam na masteru na Univerzitetu Lappeenranta dok sam paralelno rešavao takmičenja u analizi podataka. Moj tipični dan izgledao je ovako: buđenje u 8, nekoliko predavanja na univerzitetu, zatim takmičenja i Coursera do ponoći (dok čekam da se moj submit obradi gledam lekcije ili čitam članke). Ova stroga rutina je donela rezultate i pobedio sam na takmičenju u analizi podataka MERC-2017 (o čemu je čak bio post na Habré). Pobednička pobeda donela mi je samopouzdanje, i kada sam slučajno naleteo na informacije o hackathonu SkinHack 2 u Moskvi, odlučio sam da posetim roditelje i usput da saznam šta je to — hackathon.

Sam hackathon je bio prilično zabavan. Bilo je dva traka za analizu podataka sa jasnom metrikom i setom podataka sa nagradama od 100k rubalja. Treći trak bio je za razvoj aplikacija sa nagradom od 50k, i u njemu nije bilo učesnika. U jednom trenutku, organizator je rekao da prozor sa dugmetom bez funkcionalnosti može osvojiti 50k, pošto nagrada ne može ostati neispunjena. Nisam želeo da učim kako da programiram aplikacije (ne takmičim se gde mogu lako da “budem preokrenut”), ali to je za mene bila jasna poruka da polja na hackathonima nisu zauzeta.

Tada sam rešavao oba traka za analizu podataka sam. Pronašao sam leak u podacima koji mi je omogućio da postignem savršen score, ali kolone sa leakom nije bilo u testnim podacima koje sam dobio dva sata pre kraja događaja (da napomenem, tada sam shvatao da prisustvo kolone “target” u trenažnim podacima ne smatra za leak). U isto vreme otvorila se leaderboard, moj submit bez leaka zauzimao je treće mesto od pet, do prvog je bio veliki razmak i odlučio sam da ne trošim vreme i otišao sam.

Nakon što sam analizirao što se dogodilo, pronašao sam mnogo grešaka (jedna od mojih navika je da mentalno prolazim kroz događaje s bloknotom i analiziram greške, njihove uzroke i šta se moglo promijeniti — to je lijepo nasljeđe poluprofesionalnog igranja pokera). No, jedno je bilo sigurno — hackathoni imaju mnogo vrijednosti, i jednostavno moram to ostvariti. Nakon tog događaja, počeo sam pratiti događaje i grupe, a sljedeći hackathon nije dugo čekao. Onda još jedan, i još…

Zašto se baviš hackathonima, a ne kaglom?
Trenutno mi se ne sviđa kagl. Na određenom nivou vještine, bez specifičnih razloga za sudjelovanje, kagl postaje manje koristan od drugih aktivnosti. Puno sam sudjelovao ranije, očigledno, uspio sam nekako 'sići'.

Zašto hackathoni, a ne rad na vlastitom projektu?
Sviđa mi se ideja da nešto cool napravim vlastitim rukama u sporijem tempu. Dečki iz ODS-a organizovali su ODS pet projekti za sve koji žele provesti vikend radeći na svom projektu u društvu istomišljenika. Mislim da ću se uskoro pridružiti njima.

Kako pronalaziš događaje?
Glavni izvor je hackathon.com (svijet) i chat na Telegramu Ruski Hakeri (Rusija). Osim toga, najave događaja se pojavljuju u reklamama na društvenim mrežama i na LinkedInu. Ako ništa ne pronađeš, možeš pogledati ovdje: mlh.io, devpost.com, hackevents.co, hackalist.org, HackathonsNear.me, hackathon.io.

Pripremaš plan rješenja prije sudjelovanja ili se sve odlučuje u hodu? Na primjer, tjedan dana prije hackathona razmišljaš: 'Trebat će mi takav i takav stručnjak, treba ga tražiti'?
Ako je hackathon proizvodni — da, pripremam se. Nekoliko tjedana unaprijed razmišljam šta ću raditi, procjenjujem tko bi mi mogao zatrebati, okupljam tim prijatelja ili sudionika prošlih hackathona.

Je li realno hakatovati hackathon sam? Šta raditi ako nemaš tim?
Data science hackatoni su realni (ja sam živi primjer), proizvodni — nisam vidio, iako mislim da i to može biti. Nažalost, ponekad organizatori postave ograničenje na minimalan broj članova u timu. Smatram da je to zbog toga što ne dolaze svi "samci" do finala (tj. jednostavno odustaju na prvim teškoćama), sudjelovanje u timu ih ipak ograničava. Također, nakon događaja očekuje se da nastavite rad na projektu. S ekipom će biti lakše dovršiti projekt.

Uglavnom, preporučujem uvijek sudjelovati s timom. Ako nemate svoj tim, organizatori će uvijek pomoći da ga pronađete ili stvorite.

Kako se nositi s umorom tijekom hackatona?
Na hackatonu se daje 2 dana za rad, to je 48 sati (30-48 sati, uzmimo 48 radi jednostavnosti). Uzimamo u obzir vrijeme za san (16-20 sati), ostaje ne više od 30. Od toga se stvarno može potrošiti oko 8 sati na produktivan rad (u prosjeku). Ako se ispravno organizira rad (san, prehrana, izlazak na svjež zrak, vježbe, trenutci svjesnosti, ispravna komunikacija s timom i prebacivanje aktivnosti), tada se sati dubokog rada može povećati na 12-14. Nakon takvog rada osjećat ćete se iscrpljeno, ali to će biti ugodna iscrpljenost. Programirati bez sna i pauza, uzimajući energetske napitke — to je put do neuspjeha.

Imaš li svoje spremne pipeline za hackatone? Kako su ti se pojavili, kako su ti organizirani (razdvojeni su u mape .py datoteke, svaka za svoj zadatak itd.) i kako početi sam stvarati takve?
Ne koristim potpuno gotova rješenja prošlih hackatona u novima, ali imam svoj zoološki vrt modela i pipeline-a iz prethodnih natjecanja. Ne moram prepisivati standardne dijelove iz početka (na primjer, ispravnu target encoding ili jednostavnu mrežu za izdvajanje namjere iz teksta), što mi štedi puno vremena.

Trenutno to izgleda ovako: za svako natjecanje ili hackathon postoji svoj repozitorij na GitHubu, gdje se čuvaju bilježnice, skripte i mala dokumentacija o tome što se događa. Osim toga, postoji poseban repozitorij za razne kutijske "finoće" (poput ispravnog target encodinga s križnom validacijom). Ne mislim da je ovo najslađe rješenje, ali zasad me zadovoljava.

Počeo bih s organizacijom cijelog svog koda u foldere i pisanjem kratke dokumentacije (zašto, što, kako sam radio i rezultat).

Je li stvarno moguće pripremiti MVP od nule u tako kratkom roku ili svi učesnici dolaze s gotovim rješenjima?
Mogu reći samo za projekte vezane za data science — da, moguće je. MVP za mene predstavlja kombinaciju dva faktora:

  • Održiv koncept predstavljen kao proizvod (tj. opisan business canvas). Uvijek mora postojati jasno razumijevanje zašto i za koga radimo proizvod. Ponekad projekti s dobro obrazloženim planom, ali bez prototipa osvajaju nagrade, i u tome nema ništa čudno. Nažalost, mnogi učesnici ne mogu se distancirati od gorčine poraza i svoja neuspjeha pripisuju kratkovidnosti organizatora, nastavljajući raditi modele nejasno za koga na sljedećim hackathonima.
  • Neki pokazatelj da ovaj proizvod možete napraviti (aplikaciju, kod, opis pipelines).

Dešava se da na hackathonu dođe tim s gotovim rješenjem i pokušava ga “prilagoditi” zahtjevu organizatora. Takvi timovi se odbacuju na tehničkom skriningu ili se “broji” samo onaj dio koji su napravili na mjestu. Nisam vidio takve timove među pobjednicima, ali mislim da im je svejedno isplativo sudjelovati zbog buduće vrijednosti (kontakti, dataseti i slično).

Postoje li primjeri dovođenja radova realizovanih na hackathonima do produkcije/startupa?
Da. Imao sam tri slučaja kada su dovedeni do produkcije. Jednom sam to uradio sam, dva puta — tuđim rukama na osnovu mojih ideja i koda koji sam napisao na hackathonu. Također znam za nekoliko timova koji su nastavili saradnju s kompanijom kao konsultanti. Ne znam konačne rezultate, ali vjerovatno je da je nešto završeno. Sam nisam organizovao startupove i ne znam da li je neko to radio, iako sam siguran da postoje primjeri.

Nakon sudjelovanja na mnogim hackathonima, koji savjeti bi ti dao sebi da možeš vratiti u prošlost?

  1. Taktika je važnija od manevriranja. Zamislite svaku odluku kao gotov proizvod. Ideja, Jupyter notebook, algoritam ništa ne vrijede, ako nije jasno tko će za to platiti.
  2. Prije nego što nešto dizajniraš, postavi sebi pitanje ne „šta?”, već „zašto?” i „kako?”. Na primjer: prilikom dizajniranja nekog ML rešenja, prvo razmisli o idealnom algoritmu: šta on prima kao ulaz, kako će se koristiti njegove prognoze kasnije?
  3. Pridruži se timu.

Šta se obično jede na hakatonima?
Obično se na hakatonima hrana organizuje loše: pizza, energetski napici, gazirane napitke. Gotovo uvek je hrana organizovana u obliku švedskog stola (ili sto za posluženje) oko kojeg se formira ogroman red. Tokom noći obično ne hrane, iako je bilo slučajeva na jednom takmičenju u Parizu kada su ostavili grickalice — čips, krofne i kolu. Predstavljam si razmišljanje organizatora: „Šta jedu programeri? A, u redu! Čips, krofne — to će biti dovoljno. Dajte im ovo smeće.” Sledećeg dana sam pitao organizatore: „Momci, zar ne možemo napraviti nešto drugo za noć? Na primer, kašu?” Nakon toga su me gledali kao idiota. Poznato francusko gostoprimstvo.

Na dobrim hakatonima hrana se naručuje u kutijama, postoje razdvojene opcije za običnu, vegetarijansku i košer ishranu. Plus, postavljaju frižider sa jogurtima, muslijem — za one koji žele užinu. Čaj, kafa, voda — standard. Pamtim hakaton Hack Moscow 2 — tamo su nas lepo nahranili boršom i mesnim okruglicama sa pire krompirom u menzi kancelarije 1C.

Razumljivost hakatona zavisi, da kažem, od profesionalne sfere organizatora (na primjer, najbolje hakatone organizuju konsultanti)?
Najbolji hakatoni su bili od organizatora koji su ili ranije organizovali hakatone ili su učestvovali. Vjerojatno je to jedini faktor koji utiče na kvalitet događaja.

Kako znaš da nisi početnik i da je vreme za hakaton?
Najbolje vreme da odeš na hakaton bilo je pre godinu dana. Drugo najbolje vreme je sada. Tako da pucaš, grešiš, učiš — to je normalno. Čak ni neuronska mreža — najveće izum ljudskog roda posle točka i gradijentnog pojačanja nad stablima — ne može da razlikuje mačku od psa u prvoj epohe obuke.

Koje „crvene zastave” odmah govore da događaj neće biti dobar i da ne treba gubiti vreme?

  • Jasno objašnjenje šta treba uraditi (aktuelno za produktne hackathone). Ako vam prilikom registracije precizno postave zadatak, bolje je da ostanete kod kuće. U vezi sa mojim sećanjem, nije bilo nijednog dobrog hackathona sa jasnim zadatkom. Na primer: Dobro — napravite nešto vezano za analizu audio razgovora. Loše — napravite aplikaciju koja bi bila sposobna da deli razgovor na dve odvojene zvučne trake za svaku osobu.
  • Mali nagradni fond. Ako vas mole da napravite “tinder za online prodavnicu sa AI” i nagrada za prvo mesto je 500 evra, a minimalna veličina tima je 5 ljudi — verovatno ne treba trošiti vreme (da, ovo je pravi hackathon koji se održao u Minhenu).
  • Nedostatak podataka (aktuelno za hackathone u oblasti data science). Organizatori obično pružaju osnovne informacije o događaju i povremeno uzorak skupa podataka. Ako nisu pružili — pitajte, ništa vam ne može oduzeti. Ako za 2-3 dana nije jasno koje podatke će pružiti i da li će ih uopšte biti — to je crvena zastava.
  • Novi organizatori. Ne zaboravite da pretražite informacije o organizatorima hackathona. Ako prvi put organizuju ovakvo događanje — velika je verovatnoća da nešto neće biti kako treba. S druge strane, ako su organizator i članovi žirija već održavali hackathone ili aktivno učestvovali u prošlosti — to je zelena zastava.

Na jednom hackathonu su mi rekli: „Imao si najbolje rešenje po bodovima, ali izvini, kod nas se ocenjuje timski rad, a ti si radio sam. Da si uzeo u tim studenta ili devojku…” Da li si se susretao sa sličnom nepravdom? Kako si se nosio?
Da, susretao sam i više puta. Stoički se odnosim prema svemu što se događa: uradio sam sve što je u mojoj moći, ako nije uspelo — tako treba biti.

Zašto se time svime baviš?
Sve to radim jednostavno iz dosade.

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster