Model sztucznej inteligencji nauczył się poruszać w świecie „Minecrafta”. Przyswoił 70 tysięcy godzin nagrań28.06.2022

Dzięki metodzie znanej jako Video PreTraining AI może z łatwością wykonać najcenniejsze przedmioty w grze, czyli diamentowe narzędzia oraz zbroję. 

Lee See-dol, profesjonalny zawodnik go i osiemnastokrotny zdobywca międzynarodowych tytułów mistrzowskich, w 2019 roku odszedł na emeryturę. Bezpośrednim powodem jego decyzji nie było tylko intelektualne przeciążenie, ale też fakt, że w serii meczów pokonała go sztuczna inteligencja, z którą – jak stwierdził – rywalizacja przypomina walkę z wiatrakami. Modele AI pokonują też liderów szachowych (jak AlphaZero osiągający poziom niedostępny dla człowieka w cztery godziny), a niedawno zaczęły detronizować profesjonalnych brydżystów. Jak pisaliśmy pod koniec marca na łamach Papaya.Rocks, ich testowanie na tym polu jest o tyle ważne, że wyżej wymienione gry wymagają umiejętności myślenia przyczynowo-skutkowego, przewidywania kolejnych ruchów oponenta oraz reagowania na jego strategie. 

Podobne założenia leżały u podstaw nowego projektu OpenAI – laboratorium zajmującego się rozwojem AI, a zwłaszcza jego praktycznych zastosowań. Choć pracownicy obecnie koncentrują się na udoskonalaniu drugiej odsłony modelu DALL-E generującego materiały wizualne na podstawie tekstowego opisu, jeden z jego oddziałów zajął się eksperymentowaniem z „Minecraftem”. W popularnej grze z otwartym światem, gdzie jedynie od użytkowników zależy, jakie czynności wykonają i jakie przedmioty pojawią się u ich boku, liczy się przede wszystkim kreatywność. Dla sztucznej inteligencji czującej się pewniej w liniowym postępie i osiąganiu mierzalnych celów to duże wyzwanie. W przeszłości nie udało się mu sprostać mimo rozpisania konkursu MineRL, w którym wzięło udział 660 zespołów. Ich zadaniem było sprawienie, żeby model AI wykonał najcenniejsze przedmioty w grze – diamentową zbroję oraz narzędzia. 

Sposobem na to, żeby oswoić model stworzony przez OpenAI z sandboksowym, sześciennym światem, okazało się wykorzystanie metody znanej jako Video PreTraining AI (tzw. wstępne szkolenie wideo). Dzięki niej sztuczna inteligencja – w fazie testów operująca myszką i klawiaturą niczym realni użytkownicy – powiązała animacje konkretnych ruchów z czynnościami wykonywanymi w grze. Na obszerną bazę analizowanym przez nią danych złożyło się 70 tysięcy godzin różnych filmów z „Minecrafta” udostępnionych w sieci, zwłaszcza tych klasyfikowanych jako gameplaye. Następnie wyodrębniono z nich 2 tysiące godzin materiałów, które z pomocą osobnego algorytmu oznaczono konkretnymi etykietami. 

Eksperyment Amerykanów zakończył się sukcesem. AI po szkoleniu z łatwością weszło w posiadanie wspomnianej zbroi oraz narzędzi. Gdy model wszedł w fazę testów na bardziej skoncentrowanych danych, poziom jego zaawansowania znacząco wzrósł. Dzięki temu budował podstawowe schronienia, odwiedział wioski NPC-ów i przywłaszczał sobie znajdujące się tam skrzynki. Umiał również pływać, polować na zwierzęta i piec tak zdobyte mięso, a wreszcie skakać po oddalonych od siebie klockach. 

Ze szczegółowym omówieniem działania projektu OpenAI można zapoznać TU. Laboratorium zamieściło je także w formie opracowania naukowego.