igra Minecraft (nju povijesti detaljno opisano Denis Koshelev) ne čini se vrlo važnim alatom za podupiranje naprednih istraživanja u području umjetne inteligencije. Uostalom, je li važno naučiti stroj da igra sandbox igricu koja je izdana prije više od 10 godina? Iznenadit ćete se, ali da, a to dokazuje i najnovije istraživanje laboratorija OpenAI koji proučava razvoj umjetne inteligencije.
OpenAI uvijek usmjeren na postignuća AI i strojno učenje koje može koristiti čovječanstvu. Tvrtka je nedavno uspješno istrenirala bota da igra Minecraft koristeći više od 70 sati snimke igranja (to je preko 2,9 dana, ili gotovo 8 godina, ako ništa drugo). Ovo postignuće označava veliki korak naprijed u naprednom strojnom učenju korištenjem promatranja i simulacije.
OpenAI bot izvrstan je primjer kako simulacijsko učenje (poznato i kao "nadzirano učenje") funkcionira. Za razliku od učenja s potkrepljenjem, gdje se agent učenja nagrađuje nakon što postigne cilj putem pokušaja i pogrešaka, simulacija trenira neuronske mreže za obavljanje specifičnih zadataka promatrajući kako ih osoba obavlja. U ovom slučaju, OpenAI je upotrijebio postojeće video zapise i upute za igranje kako bi omogućio botu da izvrši složene scenarije igre koji bi zahtijevali približno 24 zasebnih radnji za normalnog igrača.
Također zanimljivo:
Učenje oponašanjem zahtijeva da videopodaci budu posebno označeni kako bi pružili kontekst radnje i ishoda, tj. AI mogao razumjeti koji su gumbi pritisnuti i koji su pokreti napravljeni. Ali takav pristup može biti dugotrajan, što rezultira ograničenim skupovima podataka.
Umjesto da naprežu svoje mišiće izvođenjem vježbe ručnog označavanja podataka velikih razmjera, istraživački tim OpenAI-ja upotrijebio je poseban pristup poznat kao Video Pre-Training (VPT) kako bi proširio broj dostupnih videozapisa. U početku su istraživači snimili 2 sati igranja s komentarima Minecraft i upotrijebio ga za obuku agenta da poveže određene radnje s određenim rezultatima na zaslonu. Rezultirajući model korišten je za automatsko generiranje oznaka za 70 XNUMX sati prethodno neoznačenog Minecraft sadržaja dostupnog na mreži. To je botu dalo mnogo veći skup podataka za pregled i simulaciju.
Također zanimljivo:
Ova studija pokazuje potencijalnu vrijednost dostupnih video repozitorija kao što su YouTube, kao obrazovni resurs za AI. Znanstvenici koji se bave strojnim učenjem mogu koristiti dostupne i ispravno označene videozapise kako bi obučili AI za određene zadatke, od jednostavne web navigacije do pomoći korisnicima s fizičkim potrebama u stvarnom životu.
Možete pomoći Ukrajini u borbi protiv ruskih osvajača. Najbolji način da to učinite je donirati sredstva Oružanim snagama Ukrajine putem Savelife ili putem službene stranice NBU.
Također zanimljivo: