DeepMind AI Masters Pab Pawg Ua Si thiab ua haujlwm zoo rau tib neeg hauv Quake III

Kev ntes tus chij yog hom kev sib tw yooj yim uas pom nyob hauv ntau tus neeg nyiam tua. Txhua pab pawg muaj tus cim nyob rau ntawm nws lub hauv paus, thiab lub hom phiaj yog txhawm rau ntes cov pab pawg tawm tsam tus cim thiab ua tiav coj mus rau nws tus kheej. Txawm li cas los xij, qhov yooj yim rau tib neeg to taub tsis yooj yim rau cov tshuab. Txhawm rau ntes tus chij, cov cim uas tsis yog neeg ua si (bots) yog ib txwm siv los ntawm kev siv heuristics thiab cov algorithms yooj yim uas muab kev ywj pheej ntawm kev xaiv tsawg thiab tsis zoo rau tib neeg. Tab sis kev txawj ntse txawj ntse thiab tshuab kev kawm cog lus tias yuav hloov pauv qhov xwm txheej no.

Π’ Tshooj, luam tawm lub lim tiam no hauv phau ntawv Journal Science txog ib xyoos tom qab ua ntejxyab ntawv thiab koj blog, cov kws tshawb fawb los ntawm DeepMind, ib lub koom haum London-based ntawm Alphabet, piav qhia txog cov txheej txheem uas tuaj yeem tsis tsuas yog kawm ua si ntes tus chij ntawm id Software's Quake III Arena maps, tab sis kuj tsim cov tswv yim tshiab ntawm pab pawg, tsis muaj txoj hauv kev qis dua rau tib neeg.

DeepMind AI Masters Pab Pawg Ua Si thiab ua haujlwm zoo rau tib neeg hauv Quake III

"Tsis muaj leej twg hais rau AI yuav ua li cas ua si qhov kev ua si no, nws tsuas yog muaj qhov tshwm sim - txawm tias AI yeej nws tus nrog sib tw lossis tsis. Qhov zoo nkauj ntawm kev siv txoj hauv kev no yog tias koj tsis paub tias tus cwj pwm yuav tshwm sim thaum koj cob qhia cov neeg ua haujlwm, "said Max Jaderberg, tus kws tshawb fawb tshawb fawb ntawm DeepMind uas yav dhau los ua haujlwm ntawm lub tshuab kev kawm AlphaStar (ntau dua tsis ntev los no. tshaj tib neeg pab neeg ntawm cov kws tshaj lij hauv StarCraft II). Nws tau piav qhia ntxiv tias txoj hauv kev tseem ceeb ntawm lawv txoj haujlwm tshiab yog, thawj zaug, txhawb kev kawm, uas siv ib hom khoom plig los thawb cov neeg ua haujlwm software kom ua tiav cov hom phiaj, thiab cov nqi zog ua haujlwm txawm tias pab pawg AI yeej lossis tsis tau. , tab sis nyob rau hauv -thib ob, cov neeg ua hauj lwm raug cob qhia nyob rau hauv pab pawg, uas yuam kom AI ​​tsoom fwv kev sib raug zoo pab pawg txij thaum pib.

"Los ntawm qhov kev tshawb fawb pom, qhov no yog qhov tshiab rau txoj hauv kev algorithmic uas zoo siab heev," Max hais ntxiv. "Txoj kev uas peb tau cob qhia peb AI qhia tau hais tias yuav ua li cas kom ntsuas thiab siv qee cov tswv yim evolutionary classic."

DeepMind AI Masters Pab Pawg Ua Si thiab ua haujlwm zoo rau tib neeg hauv Quake III

Provocatively hu ua For The Win (FTW), DeepMind cov neeg ua haujlwm kawm ncaj qha los ntawm kev tshuaj ntsuam pixels siv lub convolutional neural network, ib txheej ntawm kev ua lej (neurons) txheej txheej ua qauv tom qab tib neeg pom cortex. Cov ntaub ntawv tau txais raug xa mus rau ob lub network nrog ntau lub cim xeeb luv luv (Lus Askiv lub sijhawm luv luv nco - LSTM), muaj peev xwm paub txog kev nyob ntev ntev. Ib qho ntawm lawv tswj cov ntaub ntawv ua haujlwm nrog cov lus teb ceev ceev, thaum lwm tus ua haujlwm maj mam los tshuaj xyuas thiab tsim cov tswv yim. Ob leeg yog txuam nrog variational nco, uas lawv siv ua ke los kwv yees kev hloov hauv lub ntiaj teb kev ua si thiab ua yeeb yam los ntawm emulated game maub los.

DeepMind AI Masters Pab Pawg Ua Si thiab ua haujlwm zoo rau tib neeg hauv Quake III

Nyob rau hauv tag nrho, DeepMind tau cob qhia 30 tus neeg sawv cev, muab ntau yam ntawm cov phooj ywg thiab cov neeg sib tw ua si nrog, thiab xaiv cov npav ua si los xaiv kom tsis txhob AI nco txog lawv. Txhua tus neeg sawv cev muaj nws tus nqi zog teeb liab, tso cai rau nws los tsim nws lub hom phiaj sab hauv, xws li ntes tus chij. Txhua AI tus kheej ua si txog 450 txhiab kev ua si ntawm kev ntes tus chij, uas yog sib npaug li plaub xyoos ntawm kev ua si.

Cov neeg ua haujlwm FTW tau kawm tiav tau kawm los siv cov tswv yim sib xws rau txhua daim ntawv qhia, pab pawg neeg, thiab pab pawg loj. Lawv kawm txog tib neeg tus cwj pwm xws li ua raws li cov phooj ywg, mus pw hav zoov hauv cov yeeb ncuab puag, thiab tiv thaiv lawv lub hauv paus los ntawm cov neeg tawm tsam, thiab lawv maj mam poob qis dua cov qauv zoo xws li saib ib tus phooj ywg zoo heev.

Yog li cas cov txiaj ntsig tau ua tiav? Hauv kev sib tw 40-tus neeg uas tib neeg thiab cov neeg sawv cev tuaj yeem ua si ob leeg ua ke thiab tawm tsam ib leeg, FTW cov neeg sawv cev ua tau zoo tshaj qhov yeej ntawm tib neeg cov neeg ua si. AI's Elo ntsuam xyuas, uas yog qhov tshwm sim ntawm kev yeej, yog 1600, piv rau 1300 rau "muaj zog" tib neeg cov neeg ua si thiab 1050 rau "qhov nruab nrab" tib neeg ua si.

DeepMind AI Masters Pab Pawg Ua Si thiab ua haujlwm zoo rau tib neeg hauv Quake III

Qhov no tsis yog qhov xav tsis thoob, txij li cov tshuaj tiv thaiv ceev ntawm AI yog qhov siab dua li ntawm tib neeg, uas tau muab rau yav dhau los qhov txiaj ntsig tseem ceeb hauv kev sim thawj zaug. Tab sis txawm tias thaum cov neeg ua haujlwm raug txo qis thiab cov tshuaj tiv thaiv lub sij hawm nce ua tsaug rau lub built-in 257 millisecond latency, AI tseem ua tau zoo dua tib neeg. Advanced thiab xws li players yeej tsuas yog 21% thiab 12% ntawm tag nrho cov kev ua si, feem.

Ntxiv mus, tom qab luam tawm ntawm txoj kev tshawb no, cov kws tshawb fawb tau txiav txim siab los sim cov neeg sawv cev ntawm Quake III Arena daim duab qhia chaw nrog cov txheej txheem nyuaj thiab cov khoom siv ntxiv, xws li Future Crossings thiab Ironwood, qhov twg AI tau pib ua tiav kev sib tw tib neeg hauv kev sib tw. . Thaum cov kws tshawb fawb tau saib cov qauv kev ua haujlwm ntawm cov neural network activation ntawm cov neeg ua haujlwm, uas yog, lub luag haujlwm ntawm cov neurons lub luag haujlwm rau kev txiav txim siab cov txiaj ntsig raws li cov ntaub ntawv tuaj, lawv pom cov pawg sawv cev rau cov chav, lub xeev ntawm cov chij, kev pom ntawm cov phooj ywg thiab cov neeg tawm tsam, thiab lub xub ntiag los yog tsis muaj tus neeg sawv cev ntawm tus yeeb ncuab puag. Cov neeg ua haujlwm tau txais kev cob qhia txawm tias muaj cov neurons uas encoded cov xwm txheej ncaj qha, xws li thaum tus chij raug coj los ntawm tus neeg saib xyuas lossis thaum tus phooj ywg tuav nws.

Jaderberg hais tias "Kuv xav tias ib yam uas yuav tsum tau saib yog cov pab pawg ntau tus neeg sawv cev no muaj zog heev, thiab peb txoj kev tshawb fawb pom tau tias," Jaderberg hais. "Qhov ntawd yog qhov peb tau kawm kom ua tau zoo dua thiab zoo dua nyob rau ob peb xyoos dhau los - yuav daws qhov teeb meem ntawm kev kawm ntxiv." Thiab kev cob qhia txhim kho tau ua haujlwm tau zoo. "

Thore Graepel, tus xibfwb ntawm computer science ntawm University College London thiab tus kws tshawb fawb DeepMind, ntseeg tias lawv txoj haujlwm qhia txog lub peev xwm ntawm ntau tus neeg sawv cev kawm rau yav tom ntej ntawm AI. Nws kuj tseem tuaj yeem ua lub hauv paus rau kev tshawb fawb txog tib neeg-tshuab sib cuam tshuam thiab cov tshuab ua kom sib ntxiv lossis ua haujlwm ua ke.

"Peb cov txiaj ntsig tau pom tias ntau tus neeg sawv cev txhawb nqa kev kawm tuaj yeem ua tiav qhov kev ua si nyuaj rau lub ntsiab lus uas tib neeg cov neeg ua si txawm los ntseeg tias cov neeg siv computer ua kom cov phooj ywg zoo dua. Txoj kev tshawb no tseem muab cov kev ntsuam xyuas qhov tob tob txog seb cov neeg ua haujlwm tau kawm coj li cas thiab ua haujlwm ua ke, hais tias Grapel. "Dab tsi ua rau cov txiaj ntsig no zoo siab heev yog tias cov neeg sawv cev no pom lawv ib puag ncig hauv thawj tus neeg, [uas yog] ib yam li tib neeg ua si. Txhawm rau kawm paub yuav ua li cas ua si tactically thiab koom tes nrog lawv cov phooj ywg, cov neeg sawv cev no yuav tsum tau tso siab rau cov lus pom los ntawm qhov kev ua si, tsis muaj tus kws qhia lossis tus kws qhia qhia lawv ua dab tsi. "



Tau qhov twg los: 3d xov.ru

Ntxiv ib saib