De nieuwe AI van Google kan 3D-games met je spelen door instructies in natuurlijke taal te volgen

De integratie van kunstmatige intelligentie (AI) in verschillende apps en diensten komt steeds vaker voor, ook op het gebied van videogames. Vorig jaar onthulde Nvidia zelfs een geavanceerde technologie waarmee ontwikkelaars generatieve AI-aangedreven niet-spelerpersonages (NPC’s) kunnen ontwerpen die in staat zijn om realtime gesprekken aan te gaan met spelerspersonages. Google DeepMind gaat zelfs nog verder en heeft onlangs een AI ontwikkeld die mensachtige spelmogelijkheden bezit.

De DeepMind-onderzoeksgroep van Google introduceerde een recent ontwikkeld AI-programma, genaamd Scalable Instructable Multiworld Agent (SIMA), dat de mogelijkheid heeft om kennis te verwerven over het uitvoeren van taken in verschillende videogames. Dit AI-programma kan instructies in natuurlijke taal begrijpen en uitvoeren in een reeks videogameomgevingen.

Volgens Google DeepMind werd gesteld dat…

SIMA is een AI-agent die verschillende omgevingen kan waarnemen en begrijpen en vervolgens actie kan ondernemen om een ​​opgedragen doel te bereiken. Het omvat een model dat is ontworpen voor nauwkeurige mapping van beeldtaal en een videomodel dat voorspelt wat er vervolgens op het scherm zal gebeuren. We hebben deze modellen verfijnd op basis van trainingsgegevens die specifiek zijn voor de 3D-instellingen in het SIMA-portfolio.

Google werkte samen met acht game-ontwikkelaars, waaronder gerenommeerde bedrijven als Hello Games en Coffee Stain, om SIMA te onderwijzen en te evalueren. Om SIMA vertrouwd te maken met de gamingwereld, verbond het team het met populaire games zoals No Man’s Sky, Teardown, Valheim en zelfs de Goat Simulator 3.

Volgens Google heeft SIMA voor de bediening slechts twee ingangen nodig: de afbeeldingen die op het scherm worden weergegeven en instructies in natuurlijke taal van de gebruiker. Er is geen toegang tot de broncode van de game of aangepaste API’s vereist.

Momenteel beschikt SIMA over ongeveer 600 fundamentele vaardigheden, waaronder het maken van bochten naar links, het beklimmen van ladders en toegang tot het menu om een ​​kaart te gebruiken. Het is echter nog steeds niet in staat complexere taken uit te voeren, zoals het lokaliseren van hulpbronnen en het bouwen van kampen.

Het AI-programma bevindt zich momenteel in de eerste onderzoeksfase. Google heeft nog geen informatie bekendgemaakt over de mogelijke beschikbaarheid voor algemeen gebruik in de nabije toekomst.