Voyager

O nástroji

Voyager je první LLM-powered embodied agent pro celoživotní učení v prostředí Minecraft, vyvinutý výzkumníky z NVIDIA, Caltech, Stanford a dalších institucí. Agent nepřetržitě prozkoumává herní svět, získává nové dovednosti a provádí objevy zcela autonomně – bez potřeby dolaďování modelových parametrů. Systém se skládá ze tří klíčových komponent: automatického kurikula maximalizujícího průzkum, průběžně rostoucí knihovny dovedností ve formě spustitelného kódu a iterativního mechanismu promptování, který zapracovává zpětnou vazbu z prostředí, chyby při spuštění a vlastní verifikaci. Voyager komunikuje s GPT-4 prostřednictvím blackbox dotazů. Empiricky dosahuje 3,3× více unikátních předmětů, urazí 2,3× delší vzdálenosti a odemyká klíčové technologické milníky až 15,3× rychleji než předchozí state-of-the-art metody. Nástroj je určen primárně výzkumníkům v oblasti AI, reinforcement learningu a embodied agentů. Kód je veřejně dostupný (odkaz na GitHub) a výsledky jsou publikovány na arXiv.

Klíčové vlastnosti

• Autonomní průzkum herního světa Minecraft bez lidského zásahu
• Automatické kurikulum maximalizující rozsah prozkoumání prostředí
• Průběžně rostoucí knihovna dovedností jako spustitelný kód
• Iterativní prompting s využitím zpětné vazby z prostředí a self-verifikace
• Integrace s GPT-4 přes blackbox dotazy bez fine-tuningu modelu
• Přenos naučených dovedností do nového herního světa pro řešení nových úkolů

Časté dotazy

Kategorie

Štítky

Sociální sítě