Rémi Verschelde, einer der Hauptbetreuer der Open-Source-Spiel-Engine Godot und Mitgründer von W4 Games, erklärte, dass der zunehmende Zustrom von qualitativ minderwertigen Pull-Requests, die mit Hilfe großer Sprachmodelle generiert werden, die Entwickler von Godot, die für die Überprüfung der Änderungen verantwortlich sind, erschöpft und demoralisiert. Laut Rémi ist das Projekt Godot stolz auf seine Offenheit für neue Mitwirkende und bietet jedem Benutzer die Möglichkeit, die Entwicklung der Engine zu beeinflussen. Die Betreuer von Godot verbringen viel Zeit damit, Pull-Requests in den richtigen Zustand zu bringen, aber angesichts der aktuellen Flut an fragwürdigen Änderungen weiß Rémi nicht, wie viel die Mannschaft noch ertragen kann.
Derzeit gibt es im Godot-Repository auf GitHub über 4600 offene Pull-Requests. Adriaan de Jongh, der Direktor des Spieleentwicklungsstudios Hidden Folks, beschreibt den Zustand der durch KI generierten, problematischen Pull-Requests für Godot als völliges Chaos und enormen Zeitverlust für die Prüfer, die gezwungen sind, Zeit mit der Analyse von Änderungen zu verbringen, die oft keinen Sinn ergeben, mit übermäßig ausschweifenden Beschreibungen versehen sind und von Entwicklern eingereicht werden, die ihre eigenen Patches nicht verstehen.
Mit dem Aufkommen von KI-Tools sind die Begutachtenden zusätzlich gefordert zu bestimmen, ob der Code von einem Menschen verfasst oder automatisch generiert wurde, sowie herauszufinden, ob der Autor den Code, den er eingereicht hat, wirklich versteht. Außerdem müssen sie klären, ob die Autoren ihren Code getestet haben oder ob die vorgelegten Testergebnisse nur von der KI gefälscht wurden. Zudem versteht Remy nicht, wie man in Situationen verfahren soll, in denen die Patch-Autoren auf die Frage nach der Verwendung von KI mit "Ich habe sie nur für die Beschreibung verwendet, weil ich schlecht Englisch schreibe" antworten, was eine eindeutige Klassifizierung des Beitrags unmöglich macht.
Es wird berichtet, dass die Betreuer mehrmals täglich die Pull-Requests neuer Teilnehmer überprüfen müssen, da sie an deren Qualität zweifeln. Remi sieht die einzige Lösung zur Beibehaltung des bisherigen Entwicklungsansatzes in einer Erhöhung der Projektfinanzierung, um zusätzliche Betreuer zu bezahlen, die die AI-Fehler analysieren.
Ähnliche Schwierigkeiten hat das Projekt Blender, das Anfang Februar mit der Entwicklung einer Richtlinie zu Patches begonnen hat, die mit Hilfe von AI erstellt wurden. Zuvor hatten die Linux Foundation, Fedora, GNOME, Firefox, Ghostty, Servo und LLVM Regeln für solche Fälle angenommen. Im Januar begann GitHub eine Diskussion über Maßnahmen zur Begrenzung von qualitativ minderwertigen Pull-Requests, die von AI-Assistenten generiert und ohne manuelle Prüfung eingereicht wurden, die die Qualitätsanforderungen nicht erfüllen und ernsthafte Probleme für die Betreuer verursachen.
Quelle: opennet.ru
