World Labs: Tek Bir Görüntüden 3D Dünya Üretme Teknolojisi

• 3D dünya üreten yapay zeka sistemi

  • World Labs, tek bir görüntüden 3D dünya üreten bir yapay zeka sistemi geliştirdi.
  • Bu teknoloji, film, oyun, simülatör ve diğer çeşitli dijital içerik üretim yöntemlerini dönüştürme potansiyeline sahip.

• Dünyayı keşfetme

  • Kullanıcılar üretilen 3D dünyayı keşfedebilir; yön tuşları veya WASD tuşlarıyla hareket edip fareyle bakış açısını ayarlayabilir.

• Kamera efektleri

  • Sanal kamera aracılığıyla sahneler gerçek zamanlı olarak render edilir ve alan derinliği azlığı ya da dolly zoom gibi fotoğrafik efektler uygulanabilir.

• 3D efektler

  • 3D sahne tahmini, tutarlı bir gerçeklik hissi, gerçek zamanlı kontrol ve doğru geometrik yapı sağlar.
  • Derinlik haritası üzerinden her pikselin kameraya olan uzaklığı görselleştirilebilir.

• Resmin içine girmek

  • Ünlü sanat eserlerini yeni bir şekilde deneyimlemeyi mümkün kılmak için dünyalar üretilir.
  • Orijinal tabloda bulunmayan kısımlar model tarafından oluşturulur.

• Yaratıcı iş akışı

  • 3D dünya üretimi, diğer yapay zeka araçlarıyla doğal biçimde birleşerek yeni deneyimler ortaya çıkarır.
  • Metinden görüntü üreten modeller kullanılarak metinden görseller oluşturulur ve bunlar temel alınarak 3D dünyalar inşa edilir.

• Gelecek görünümü

  • World Labs, 3D dünyaların ölçeğini ve aslına uygunluğunu geliştirmeye devam ederken kullanıcılarla etkileşim biçimlerini de test ediyor.
  • Gelecekteki sürümlerle ilgili bilgiler bekleme listesi üzerinden takip edilebilir; ilgilenenlerin katılması önerilir.

[GN⁺]

Hacker News görüşleri

• Demoyu denediğinizde, animasyonlu görüntü yanıltıcı geliyor. Birkaç adım yürüyünce görünmez bir duvara çarpıyorsunuz ve bu da büyük bir hayal kırıklığı yaratıyor. Bunun erken aşama olduğunu anlıyorum ama biraz abartılmış gibi hissettiriyor

• VR başlıkla 3D film izlerken başınızı hareket ettirdiğinizde 3D illüzyonu bozulur. 3D oyunlarda ise başınızı hareket ettirerek ortamı keşfedebilirsiniz. Bunu filmin her karesine uygularsanız az da olsa hareket ve bakış açısı değişimini koruyabilirsiniz. Ancak bu, yönetmenin ve görüntü yönetmeninin niyetine zarar verebilir

• Küçük bir alanla ilgili şikayetlerim var ama bir görüntünün 3D dünyaya dönüştürülmüş olması etkileyici bir teknoloji. Yapay zeka giderek sıradanlaşıyor olsa da bu hâlâ şaşırtıcı bir başarı

• Depth Anywhere kullanarak 360º görüntüleri sanal derinlik haritasına dönüştürüp bunu point cloud'a uygulayarak render etmenin bir yolu var. World Lab örneklerinden farklı olarak, point cloud'un sınırlarının ötesine geçip yaklaşımın kusurlarını inceleyebilirsiniz. Yine de hâlâ geliştirilmesi gerekiyor

• Bu teknoloji hoş ama cat-4d.github.io kadar etkileyici değil

• Muhtemelen çok fazla yapay zeka demosu gördüğüm için, teknolojiyi gerçekten faydalı hale getirmenin yolunu düşünmek gerektiği konusunda biraz hissizleşmiş durumdayım. "Step into Paintings" bölümü eğlenceliydi ama kaynak materyalin dışına çıktığınız anda modelin sınırları ortaya çıkıyor. Sanat eserlerini yeni bir şekilde deneyimleyebiliyorsunuz ama bu iyi bir deneyim değil

• XYZ'nin Unreal ve NVIDIA Isaac kayıtlarını genelleştirebileceğine dair bir beklenti var. XYZ'nin diffusion-transformers mı, Chameleon mı yoksa yeni bir mimari mi olduğunu merak ediyorum. Model geliştirmek zaman alır ve pahalı olabilir. Bu ekip çok yetenekli ama yeterli finansmana sahip olmayabilir

• Bu tür projelerin iyi yanları çoğu zaman aşırı iddialar yüzünden gölgede kalıyor

• Temel görüntü render edilmiş gibi görünüyor; aydınlatma, gölgeler vb. içeriyor. Başka araçlar kullandığımda yalnızca örnek görüntülerde iyi çalışıyordu, başka görüntüler kullandığımda ise siyah ve düz şekiller ortaya çıkıyordu. Bu yüzden başlık "Tek bir görüntüden, eğittiğimiz modelle 3D dünya üretimi" olmalı

• İlk denememde "Out of bounds" mesajını görünce şaşırdım. "Looking Ahead" bölümüne bakınca boyut ve doğruluğu iyileştirdiklerini gördüm