Zero-1-to-3: Difüzyon modeli kullanarak tek bir görüntüden 3B nesne oluşturma

• Büyük ölçekli difüzyon modellerini kullanarak tek bir RGB görüntüden kamera bakış açısını ayarlayan bir çerçeve
• Sentetik veri kümesiyle eğitilmiş bir model olmasına rağmen, gerçek görüntülerde veya empresyonist tablolarda bile ek ön eğitim gerektirmeden zero-shot olarak iyi çalışıyor
• Bu bakış açısını ayarlayan difüzyon yöntemini kullanarak, tek bir görüntüden 3B yeniden oluşturma yapmak da mümkün
• İnternet ölçeğinde ön eğitim sayesinde diğer modellere kıyasla çok daha üstün performans sunduğunu gösteren niteliksel ve niceliksel deney sonuçları elde edilmiş

[wedding]

Geçen yıla kadar bunun hâlâ çok uzak olduğunu düşünüyordum,
ama bu aralar neredeyse gün aşırı yeni bir teknoloji ve yeni sonuçlar çıkıyor..