Nvidia AI Minecraft oynuyor, makine öğrenimi konferansı ödülünü kazandı

MineDojo’yu açıklayan bir makale, Nvidia’nın yazılı istemlerden eylemler gerçekleştirebilen genelci yapay zeka aracısı. minecraftNvidia’nın Pazartesi günü yaptığı açıklamaya göre, 2022 NeurIPS (Nöral Bilgi İşleme Sistemleri) konferansında Üstün Veri Kümeleri ve Kıyaslama Belgesi Ödülü kazandı.

MineDojo çerçevesini oynamak üzere eğitmek için minecraftaraştırmacılar onu 730.000 besledi minecraft YouTube videoları (2,2 milyardan fazla kelimenin yazıya döküldüğü), 7.000 kopyalanmış web sayfası minecraft wiki ve 340.000 Reddit gönderisi ve 6.6 milyon Reddit yorumu minecraft Oynanış.

Bu verilerden araştırmacılar, video klipleri belirli oyun içi görüntülerle ilişkilendiren MineCLIP adlı özel bir dönüştürücü modeli oluşturdu. minecraft faaliyetler. Sonuç olarak, birisi bir MineDojo temsilcisine oyunda ne yapması gerektiğini “bir çöl piramidi bul” veya “bir nether portalı inşa et ve gir” gibi yüksek seviyeli doğal bir dil kullanarak söyleyebilir ve MineDojo bir dizi adımı uygulayacaktır. oyunda gerçekleşmesi için gerekli.

MineDojo, öğrenilen eylemleri genelleştirebilen ve bunları oyundaki farklı davranışlara uygulayabilen esnek bir aracı oluşturmayı amaçlar. Nvidia’nın yazdığı gibi, “Araştırmacılar, video oyunu ortamlarında uzun süredir eğitimli otonom AI ajanlarına sahipken, Yıldız Gemisi, Dotave Go, bu aracılar genellikle yalnızca birkaç görevde uzmandır. Böylece Nvidia araştırmacıları döndü minecraftdünyanın en popüler oyunu, genelci bir temsilci için ölçeklenebilir bir eğitim çerçevesi geliştirmek için – çok çeşitli açık uçlu görevleri başarıyla yürütebilen bir çerçeve.”

Ödüllü “MINEDOJO: İnternet Ölçeğinde Bilgiyle Açık Uçlu Somutlaşmış Temsilciler Oluşturmak” adlı makale Haziran ayında yayınlandı. Yazarları arasında Nvidia’dan Linxi Fan ve çeşitli akademik kurumlardan Guanzhi Wang, Yunfan Jiang, Ajay Mandlekar, Yuncong Yang, Haoyi Zhu, Andrew Tang, De-An Huang, Yuke Zhu ve Anima Anandkumar yer alıyor.

MineDojo’nun uygulama örneklerini resmi web sitesinde görebilirsiniz ve MineDojo ve MineCLIP’in kodu GitHub’da mevcuttur.