Výzkumníci z Virtuals Protocol vytvořili AI MarioVGG (Virtual Game Generation), která dokáže vytvořit video hru jen podle videa, v tomto případě Super Mario Bros. Dataset s obrázky ze hry je dostupný na GitHubu. Obsahuje přes 700 tisíc obrázků z 280 úrovní hry. Přitom se rozlišují pouze příkazy „běž doprava“ a „běž doprava a skoč“.
Obrázky jsou zpracovávány po 35. Po trénování na jedné RTX 4090, které trvalo 48 hodin dokáže MarioVGG z jednoho statického obrázku vytvořit několikasekundovou sekvenci a reagovat na příkazy „běž doprava“ a „běž doprava a skoč“. I když je sekvence jen pár sekund, jde poslední obrázek použít jako start pro další sekvenci. I tak je samotné generování zatím pomalé, sekvence šesti snímků trvá na RTX 4090 asi šest sekund. A to bylo rozlišení zmenšeno z původních 256×240 (NES) na 64×48. Více informací v preprintu (PDF).
Minulý měsíc výzkumníci Google a univerzity v Tel Avivu představili AI GameNGen, která umí generovat hru Doom z roku 1993. Lidé poznali z krátkého videa (1,6 a 3,2 sekundy) jen v 60 % správně, jestli jde o AI nebo o původní Doom.
(zdroj: arstechnica)