NVIDIA Research, “binaların, heykellerin ve diğer gerçek dünya nesnelerinin gerçeğe yakın sanal kopyalarını üreten” yeni bir yapay zeka modeli olan Neuralangelo‘yu tanıttı. Bu model, 2D videoları detaylı 3D yapılara dönüştürme yeteneği sunmaktadır.
Sanatçılar, Neuralangelo sayesinde ortaya çıkan varlıkları tasarım uygulamalarına aktarabilir ve sanat, video oyunu geliştirme, robotik ve endüstriyel dijital ikizler gibi alanlarda kullanabilirler.
NVIDIA’nın kıdemli araştırma direktörü ve araştırma makalesinin ortak yazarı Ming-Yu Liu, “Neuralangelo’nun sunduğu 3D yeniden yapılandırma yetenekleri, içerik oluşturucular için büyük bir fayda sağlayacak ve gerçek dünyayı dijital dünyada yeniden yaratmalarına yardımcı olacak” dedi. Bu araç sayesinde geliştiriciler, küçük heykellerden devasa binalara kadar her türlü ayrıntılı nesneyi video oyunları veya endüstriyel dijital ikizler için sanal ortamlara aktarabilecekler.
NVIDIA’nın yukarıdaki demoda Neuralangelo’nun Michelangelo’nun Davut heykelini nasıl yeniden yaratabildiğini ve binaların iç ve dış mekanlarını nasıl yeniden yapılandırabildiğini gösterdiği görülebilir. Neuralangelo, NVIDIA’nın Instant NeRF adlı teknolojiye dayanmaktadır. Bu teknoloji, 2D görüntüleri 3D modellere dönüştürme işlemini gerçekleştirir.
Model, bir nesnenin veya sahnenin çeşitli açılardan çekilmiş 2D videolarını kullanarak birkaç kare seçer. Ardından, Neuralangelo, her karenin kamera konumunu belirler ve sahnenin kaba bir 3D temsilini oluşturur. Daha sonra ayrıntıları netleştirmek için render işlemini optimize eder. Sonuç olarak, diğer yazılımlarda kullanılabilecek bir 3D nesne veya büyük ölçekli bir sahne elde edilir.
Neuralangelo, NVIDIA Research tarafından 18-22 Haziran 2023 tarihlerinde Bilgisayarla Görme ve Örüntü Tanıma Konferansı’nda (CVPR) sunulacak birçok projeden biridir. Bildiriler, poz tahmini, 3B yeniden yapılandırma ve video oluşturma gibi konuları ele almaktadır.
