Transformer İçindeki Evren, Oasis
(oasis-model.github.io)Oasis: Transformer İçindeki Evren
-
Oasis tanıtımı
- Oasis, yapay zeka tarafından üretilen gerçek zamanlı bir açık dünya video oyunudur.
- Kullanıcının klavye girdilerini alarak fizik, oyun kuralları ve grafikleri gerçek zamanlı olarak üretir.
- Oyun motoru olmadan, yalnızca temel modelle çalışır.
- Decart'ın çıkarım motorunu kullanarak gerçek zamanlı videonun mümkün olduğunu gösterir.
-
Oynanış sonuçları
- Oasis, karmaşık oyun mekaniklerini anlar.
- Çeşitli ayarlar, mekanlar ve nesneler üretebilme yeteneğine sahiptir.
- Oyun içinde inşa, aydınlatma fiziği ve envanter yönetimi gibi işlemleri gerçekleştirebilir.
-
Mimari
- Model, uzamsal bir otoenkoder ve gizil difüzyon omurgasından oluşur.
- Transformer tabanlıdır; ViT ve DiT üzerine kuruludur.
- Kareleri otoregresif biçimde üreterek gerçek zamanlı etkileşimi mümkün kılar.
-
Performans
- Oasis, saniyede 20 karelik gerçek zamanlı çıktı üretir.
- Decart'ın çıkarım yığını sayesinde oynanabilir kare hızına ulaşır.
- Etched'in Transformer ASIC'i olan Sohu için optimize edilmiştir.
-
Gelecek keşifleri
- Modelin ve veri setinin ölçeklendirilmesiyle çözülebilecek sorunlar vardır.
- Büyük ölçekli eğitimi verimli biçimde gerçekleştirmek için ek optimizasyon teknikleri geliştirilmektedir.
GN⁺ özeti
- Oasis, yapay zeka tarafından üretilen gerçek zamanlı bir açık dünya oyunu olarak Transformer tabanlı yenilikçi bir teknolojiyi gösteriyor.
- Gerçek zamanlı etkileşimi mümkün kılan hızlı çıkarım hızı, öne çıkan özelliğidir.
- Sohu gibi yeni donanımlarla birleştiğinde, büyük ölçekli modelleri destekleme potansiyeli sunduğunu gösteriyor.
- Bu teknoloji, yalnızca oyunlarda değil çeşitli tüketici ürünlerinde de uygulanma potansiyeline sahiptir.
- Benzer yeteneklere sahip projeler arasında OpenAI'nin Sora'sı ve Genmo'nun Mochi-1'i bulunuyor.
Henüz yorum yok.