Kaitse AI-prügikoode muutuste eest GitHubis. Vibe-kodeerimise mõju avatud lähtekoodi ökosüsteemile

Camilla Moraes, tootejuht GitHubist, alustas arutelu GitHubi võimaluse lisamisest automaatseks spämm-pull-requestide blokeerimiseks, mis on genereeritud AI-assistendi poolt, saadetud ilma käsitsi ülevaatuseta ja ei vasta kvaliteedistandarditele. Taolised muudatused suurendavad koormust hooldajate jaoks, kes peavad kulutama aega kasutult koodi lahti seletamisele.

Lühiajaliste lahenduste osas kaalutakse pull-requestide kiiret kustutamist veebiliidese kaudu (kustutamine ilma ajaloos jälgi jätmata, mitte suletuks märkimine) ja kohandatavate õiguste kasutuselevõttu pull-requestide saatmiseks, mis lubavad repodega omanikel lubada muudatusi saata ainult neile osalejatele, kes on varem juba muudatusi teinud.

Pikaajaliste lahenduste seas mainitakse volituste mudeli laiendamist ning hooldajatele tööriistade andmist, et nad saaksid paindlikult määrata reegleid, kes tohib pull-requeste luua ja üle vaadata ning millistele nõuetele pull-requestid peavad vastama. Samuti soovitatakse rakendada AI-d, et tuvastada saadud muudatuste vastavus iga projekti reeglitele ja kvaliteedistandarditele (nt need, mis on määratletud failis CONTRIBUTING.md), ning tuvastada ja eraldi märkida AI abiga loodud muudatused.

Arutelu käigus esitatud ettepanekutest võib märkida ka filtri loomist, mis keelab pull-requestide saatmise ilma eelneva issue-arutelu avamiseta, kus selgitatakse muudatuse elluviimise põhjuseid, ning hooldajate teavitamist uutest pull-requestidest, mis on esitatud algajate poolt, alles pärast edukat läbitöötamist pideva integreerimise süsteemis.

Ühe genkit-raamistiku võtmearendaja statistika kohaselt vastab vaid üks kümnest AI abil valmistatud muudatusest pull-requesti avamise kriteeriumidele. Üks Azure Core Upstreami projekti liige võttis kokku hooldajate peamised murede teemad:

• Usaldusmudeli rikkumine ülevaatamise protsessis — ülevaatajad ei saa olla kindlad, et muudatuse saatja on edastatud koodi kirjutanud ja selle sisu mõistab.
• AI-assistentide genereeritud pull-päringud võivad struktuurselt tunduda korrektsed, kuid olla loogiliselt vale, ebaohutud või mitte testitud tööks.
• Rea kaupa läbivaatamise praktika jääb kohustuslikuks, kuid see ei saa kasvada tingimustes, kus AI-assistendid toovad kaasa suuri muudatusi.
• Saatjate jaoks tekib ebamugavustunne pull-päringute vastuvõtmisel, mida nad ei mõista täielikult, samas kui AI-assistendid lihtsustavad suurte muudatuste edastamist ilma sügava arusaamiseta.
• Suurenenud kognitiivne koormus saadavad, kes peavad nüüd mitte ainult koodi kontrollima, vaid ka hindama, kas autor seda mõistab.
• AI-tööriistade ilmumine ei vähendanud, vaid suurendas saatjate koormust.

Lisaks võib märkida, et mitmete Euroopa ülikoolide poolt läbi viidud uuring, mis käsitleb vibra-koodimist avatud projektide ökosüsteemile. Uurijad töötasid välja avatud koodi ökosüsteemi tasakaalu mudeli, mis näitas, et tagasiside, mis varasemalt vastutas avatud projektide plahvatusliku kasvu eest, tekitab vibra-koodimise leviku järel vastupidise efekti — väheneb arendajate arv, kes on valmis koodi jagama, avatud projektide mitmekesisus väheneb ja kvaliteet halveneb. Ühe lahenduse variandi hulka kuulub rahastamismudeli rakendamine, mis sarnaneb Spotify’ga, kus AI-platvormid jaotavad tellimustelt saadud tulud arendajate vahel projektide kasutamise astme alusel.

Vibe-koodimise korral arendajad priiustavad olemasolevate lahenduste analüüsimise, dokumentatsiooni lugemise, veateadete saatmise ja suhtlemise avatud raamatukogusid arendavate meeskondadega. Avatud projektid kaotavad tagasiside kasutajatelt. Uutel projektidel on keerulisem läbi lüüa, kuna AI-assistendid valivad vajalikud avatud raamatukogud mudeli treenimise ajal olnud teabe põhjal. Otsese suhtluse vähenemise tõttu kannatab avatud projektide rahakasv, mis on seotud tugiteenuste, reklaamimise või veebis annetuste kogumisega. Tagasiside vähenemise tõttu kannatab ka kvaliteet. Teiselt poolt tõstab vibe-koodimine töö efektiivsust uute toodete loomisel, mis põhinevad võõral koodil, ja lihtsustab uute raamatukogude kasutuselevõttu.

Näiteks on projekt Tailwind CSS, mille allalaadimiste arv NPM hoidlast jätkab kasvamist, kuid dokumentatsiooni liiklus on alates 2023. aasta algusest vähenenud 40% ning tulud on langenud 80%. Samuti on märgatud, et aktiivsus aruteludes Stack Overflow's on langenud umbes 25% kuue kuu möödudes pärast ChatGPT käivitamist.

Allikas: opennet.ru