ProHoster >> Blog >> Lajmet e internetit >> Krahasimi i numrit të gabimeve në kodin e shkruar nga njerëzit dhe AI

Krahasimi i numrit të gabimeve në kodin e shkruar nga njerëzit dhe AI

Hulumtuesit nga kompania CodeRabbit analizuan 470 pull-request (350 – tĂ« krijuara nga AI, 150 – tĂ« shkruara manualisht) nĂ« projekte tĂ« hapura nĂ« GitHub dhe arritĂ«n nĂ« pĂ«rfundimin se nĂ« ndryshimet e gjeneruara nga asistentĂ«t AI ka 1.7 herĂ« mĂ« shumĂ« defekte tĂ« rĂ«ndĂ«sishme dhe 1.4 herĂ« mĂ« shumĂ« probleme kritike sesa nĂ« kodin e shkruar manualisht. NĂ« mesatare, nĂ« pull-request-at e gjeneruara nga AI kishte 10.83 probleme, ndĂ«rsa nĂ« ndryshimet e krijuara manualisht ky tregues ishte 6.45.

Kur shqyrtohen kategoritĂ« e veçanta tĂ« problemeve, nĂ« kodin e krijuar nga AI kishte 1.75 herĂ« mĂ« shumĂ« gabime logjike, 1.64 herĂ« mĂ« shumĂ« probleme me cilĂ«sinĂ« dhe mirĂ«mbajtjen e kodit, 1.56 herĂ« mĂ« shumĂ« probleme me sigurinĂ« dhe 1.41 herĂ« mĂ« shumĂ« probleme me performancĂ«n. Shtohet se nĂ« kodin e gjeneruar nga AI ka 1.88 herĂ« mĂ« shumĂ« probabilitet pĂ«r pĂ«rpunim tĂ« papĂ«rshtatshĂ«m tĂ« fjalĂ«kalimeve, 1.91 herĂ« – pĂ«r ofrimin e pa sigurt tĂ« qasjeve nĂ« objekte, 2.74 herĂ« – pĂ«r skritimin ndĂ«rfaqĂ«sor (XSS) dhe 1.82 herĂ« – pĂ«r deserializimin e pasigurt tĂ« tĂ« dhĂ«nave. NĂ« tĂ« njĂ«jtĂ«n kohĂ«, nĂ« kodin e shkruar nga njerĂ«zit kishte 1.76 herĂ« mĂ« shumĂ« gabime ortografike dhe 1.32 herĂ« mĂ« shumĂ« gabime qĂ« lidhen me testimin.

Krahasimi i numrit të gabimeve në kodin e shkruar nga njerëzit dhe AI
Krahasimi i numrit të gabimeve në kodin e shkruar nga njerëzit dhe AI
Krahasimi i numrit të gabimeve në kodin e shkruar nga njerëzit dhe AI

Disa kërkime të tjera:

  • NĂ« njĂ« studim tĂ« kryer nĂ« nĂ«ntor nga kompania Cortex, u tha se krahasuar me vitin e kaluar, falĂ« pĂ«rdorimit tĂ« AI, numri i pull-request-eve tĂ« krijuara nga çdo zhvillues Ă«shtĂ« rritur mesatarisht me 20%, por numri i problemeve nĂ« pull-request Ă«shtĂ« rritur me 23.5%, ndĂ«rsa niveli i refuzimeve gjatĂ« ndryshimeve Ă«shtĂ« rritur rreth 30%.
  • NĂ« njĂ« studim tĂ« bĂ«rĂ« nĂ« gusht nga Universiteti Neapolitan, u arrit nĂ« pĂ«rfundimin se kodi i gjeneruar nga AI Ă«shtĂ« nĂ« pĂ«rgjithĂ«si mĂ« i thjeshtĂ« dhe mĂ« njĂ«formĂ«sisht, por pĂ«rmban mĂ« shumĂ« struktura tĂ« papĂ«rdorura dhe futje tĂ« integruara pĂ«r debug, ndĂ«rsa kodi i shkruar manualisht Ă«shtĂ« strukturally mĂ« i ndĂ«rlikuar dhe pĂ«rmban mĂ« shumĂ« probleme me mirĂ«mbajtjen.
  • Eksperimenti i korrikut nga grupi METR tregoi se ndihmĂ«sit AI nuk pĂ«rshpejtojnĂ«, por ngadalĂ«sojnĂ« zgjidhjen e detyrave tĂ« caktuara, ndonĂ«se ndjeshĂ«m pjesĂ«marrĂ«sit menduan se AI pĂ«rshpejtoi punĂ«n e tyre.
  • NĂ« njĂ« studim tĂ« janarit nga Universiteti Monash, u tha se GPT-4 gjeneron kod mĂ« tĂ« ndĂ«rlikuar, qĂ« kĂ«rkon pĂ«rmirĂ«sime pĂ«r mirĂ«mbajtjen e mĂ«tejshme, por e kalon mĂ« mirĂ« testet.

Burimi: opennet.ru

Bli njĂ« hosting tĂ« besueshĂ«m pĂ«r faqet me mbrojtje DDoS, VPS VDS serverĂ« đŸ”„ Bli njĂ« hosting tĂ« besueshĂ«m pĂ«r faqet me mbrojtje DDoS, VPS VDS serverĂ« | ProHoster