Nvidia, ses tabanlı yüz animasyonu üreten Audio2Face isimli aracını açık kaynak kodlu hale getirdi. Artık geliştiriciler bu teknolojiyi kendi projelerine rahatlıkla uyarlayabilecek. Şirketin amacı, yüz animasyonlarının daha yaygın bir alanda kullanılabilmesi ve erişimin daha kolay hâle gelmesi. Audio2Face, bir ses kaydındaki akustik özellikleri derinlemesine analiz ediyor. Bu verilerden hareketle dudak hareketleriyle yüz ifadeleri uyumlu hâle geliyor. Böylece dijital avatarlar konuşma sırasında doğal bir akış yakalıyor. Bunun yanında, sistem sadece önceden hazırlanmış içeriklerde değil, canlı yayınlarda da kullanılabiliyor. Her iki senaryoda da kullanıcıya daha gerçekçi bir deneyim sunuluyor. Bazı oyun stüdyoları Audio2Face’i şimdiden deneyimledi. Chernobylite 2: Exclusion Zone üzerinde çalışan Farm51, bu teknoloji sayesinde karakterlerin yüz ifadelerini güçlendirdi. Alien: Rogue Incursion Evolved Edition geliştiricileri de aracı projelerine dahil etti. Tüm bunların yanında, farklı türlerde oyunlarda benzer denemelerin yapılması bekleniyor. Bu durum, Audio2Face’in geniş ölçekte ne kadar uygulanabilir olduğunu gösteriyor. Nvidia Audio2Face geliştiricilere kendi modellerini uyarlama olanağı veriyor Nvidia, sadece aracı değil, eğitim çerçevesini de paylaşarak geliştiricilere esneklik sundu. Böylece mevcut modeller, farklı dil ve aksanlara göre yeniden eğitilebiliyor. Bu durum, daha kapsayıcı ve çok yönlü avatarların ortaya çıkmasına katkı sağlıyor. Ne var ki, bu süreç doğru veri kümeleriyle desteklenmezse sonuçlar sınırlı kalabiliyor. Tüm bunların yanında, kişiselleştirilmiş çözümler üretmek isteyen ekipler için …
Nvidia, ses tabanlı yüz animasyonu aracı Audio2Face’i açık kaynak yaptı haberi ilk önce Teknoblog üzerinde yayımlandı.
