Janë paraqitur rezultatet e analizës së besueshmërisë së fjalëkalimeve të gjeneruara nga modelet e mëdha gjuhësore dhe asistentët AI. Studiuesit u kërkuan modeleve Claude, ChatGPT dhe Gemini të gjeneronin një fjalëkalim të fortë me 16 karaktere dhe, në të gjitha rastet, morën një rezultat që në pamje të parë përmbushte të gjitha kërkesat për fjalëkalime të sigurta dhe që mjetet për vlerësimin e cilësisë së fjalëkalimeve e klasifikonin si të fortë. Fjalëkalimet përfshinin shkronja të mëdha e të vogla, simbole speciale dhe numra, por vetëm dukeshin të sigurta; në praktikë kishin entropi minimale, krijoheshin sipas një modeli tipik dhe, me kërkesa të përsëritura, shfaqnin një rregullsi të qartë.
Sipas studiuesve, fjalëkalimet e parashikueshme të gjeneruara nga modelet e mëdha gjuhësore përdoren realisht nga përdorues të vërtetë dhe propozohen nga asistentët AI gjatë punës me kodin. Niveli i entropisë në fjalëkalimet e gjeneruara nga modelet AI vlerësohet në 20-27 bit, çka e ul kohën e nevojshme për t’i zbuluar ato me provë të njëpasnjëshme në nga disa sekonda deri në disa orë, ndërsa analiza nga mjetet e kontrollit të cilësisë së fjalëkalimeve parashikon një kohë thyerjeje prej disa shekujsh. Modeli i përsëritur i këtyre fjalëkalimeve është pasojë e mënyrës se si modelet e mëdha gjuhësore gjenerojnë përmbajtje mbi bazën e parashikimit të tokenëve.
Nga 50 fjalëkalime të gjeneruara në Claude Opus 4.6, 18 ishin plotësisht të përsëritura; të gjitha fjalëkalimet fillonin me një shkronjë (kryesisht “G”), e ndjekur gjithmonë nga një shifër (më shpesh 7), ndërsa në të gjitha fjalëkalimet ishin të pranishme simbolet “L”, “9”, “m”, “2”, “$” dhe “#”.
Në GPT-5.2 pothuajse të gjitha fjalëkalimet fillonin me shkronjën “v”, pas së cilës në gjysmën e rasteve vinte shkronja “Q” dhe një model i përsëritur nga një grup i kufizuar simbolesh. Në Gemini 3, pothuajse gjysma e fjalëkalimeve fillonin me simbolet “K” ose “k”, pas të cilave më shpesh vinin “#”, “P” ose “9”, ndërsa grupi i simboleve të përdorura ishte shumë i kufizuar. Rritja e “temperature” gjatë përdorimit të modeleve AI nuk ndikon ndjeshëm në cilësinë e fjalëkalimeve të gjeneruara.
Sa i përket AI-asistentëve të përdorur në zhvillim, cilësia e fjalëkalimit varet në masë të madhe nga prompt-i i formuluar nga zhvilluesi. Për shembull, Claude Code me Opus 4.6 dhe Gemini-CLI me Auto Gemini 3, kur merrnin kërkesën për të krijuar një fjalëkalim të fortë, ekzekutonin komandën «openssl rand» për gjenerimin e tij. Ndërkohë, Gemini-CLI me Auto Gemini 3, ndaj kërkesës «gjenero një fjalëkalim», përdorte «openssl rand», ndërsa ndaj kërkesës «sugjero një fjalëkalim» e krijonte fjalëkalimin përmes modelit AI. Codex me GPT-5.3-Code herë pas here niste një mjet të jashtëm për të gjeneruar një fjalëkalim të fortë, por në raste të tjera krijonte vetë një fjalëkalim të parashikueshëm. Claude Code me Opus 4.5 në shumicën e rasteve gjeneronte vetë fjalëkalime të parashikueshme. Shfletuesi ChatGPT Atlas, gjatë krijimit të një fjalëkalimi për regjistrim në një faqe interneti, prodhonte një fjalëkalim jo të sigurt me ndihmën e modelit AI.
Burimi: opennet.ru
