Nvidia, birkaç düzine çekimi 3D sahneye dönüştüren bir AI modeli gösteriyor

Nvidia’nın en son AI işlemesi etkileyici: “birkaç düzine” 2D anlık görüntüyü hızla 3D işlenmiş bir sahneye dönüştüren bir araç. Aşağıdaki videoda, Andy Warhol gibi giyinmiş ve eski moda bir Polaroid kamera tutan bir modelle yöntemi çalışırken görebilirsiniz. (Warhol’un bağlantısını fazla düşünmeyin: Bu, halkla ilişkiler ortamının sadece küçük bir parçası.)

Bu araca Anında NeRF adı verilir ve “sinirsel radyasyon alanları– 2020’de UC Berkeley, Google Research ve UCSD’den araştırmacılar tarafından geliştirilen bir teknoloji. Nöroradyasyon alanlarının ayrıntılı bir açıklamasını istiyorsanız, bir tanesini okuyabilirsiniz. Burada, ancak kısaca, yöntem ışığın rengini ve yoğunluğunu farklı 2D çekimlere atar ve ardından bu görüntüleri farklı gözlem noktalarından ilişkilendirmek için veriler üretir ve son bir 3D sahne sunar. Fotoğraflara ek olarak, sistem kameranın konumuyla ilgili verilere ihtiyaç duyar.

Araştırmacılar bu tür 2B modeli 3B’ye dönüştürdü Şimdi birkaç yıldır-Son sunumlara daha fazla detay eklenmesi ve sunum hızının arttırılması. Nvidia, NeRF anlık modelinin bugüne kadar geliştirilen en hızlı modellerden biri olduğunu ve oluşturma süresini birkaç dakikadan “neredeyse anında” biten bir sürece indirdiğini söylüyor.

Nvidia bir blog yazısında, teknoloji daha hızlı ve uygulaması daha kolay hale geldikçe, her türlü görev için kullanılabileceğini söylüyor. İş tanımı.

Nvidia’dan Isha Salian, “Anında NeRF, sanal dünyaların avatarlarını veya sahnelerini oluşturmak, video konferans katılımcılarını ve onların 3B ortamlarını yakalamak veya sahneleri dijital 3B haritalar için yeniden oluşturmak için kullanılabilir” diye yazıyor. “Bu teknoloji, robotları ve kendi kendini süren arabaları, nesnelerin 2D görüntülerini veya video görüntülerini alarak gerçek dünyadaki nesnelerin boyutunu ve şeklini anlayacak şekilde eğitmek için kullanılabilir. Ayrıca mimaride ve eğlencede hızlı bir şekilde dijital temsiller oluşturmak için kullanılabilir. yaratıcıların değiştirebileceği ve üzerine inşa edebileceği gerçek ortamlar.” (Meta veri deposu çağırıyor gibi görünüyor.)

Ne yazık ki, Nvidia yöntemiyle ilgili ayrıntıları paylaşmadı, bu nedenle tam olarak kaç tane 2D görüntüye ihtiyaç olduğunu veya son 3D sahneyi oluşturmanın ne kadar süreceğini bilmiyoruz (bu aynı zamanda bilgisayarın gücüne de bağlı olacaktır) oluşturma). Ancak, teknoloji hızla ilerliyor gibi görünüyor ve önümüzdeki yıllarda gerçek bir etki yaratmaya başlayabilir.