NVIDIA Audio2Face, Dudak Senkronizasyonu ve Yüz Animasyonu Oluşturmak için Yapay Zekayı Kullanıyor

NVIDIA’nın yapay zeka destekli Audio2Face teknolojisi yüz animasyonu ve dudak senkronizasyonu ile yerelleştirmede ezber bozuyor. Audio2Face bir oyunun diyaloglarının ve sunumunun küresel bir kitleye ulaşması konumunda büyük bir adım olarak karşımıza çıkıyor. Oyunların yerelleştirilmesi, diyalog ve metnin doğru bir şekilde çevrilmesini, dramatik veya komedi tonlarının korunmasını ve ardından farklı ülkelerden seslendirme sanatçılarıyla diyalogların yeniden kaydedilmesini gerektiren karmaşık bir süreçken NVIDIA teknolojisi bu işi kolaylaştıracak.

Örneğin PC platformuna gelecek olan ve İngilizce ile Japonca dillerini barındıran Ghost of Tsushima içerdiği animasyon nedeniyle tam dudak senkronizasyonunu iki dil seçeneğiyle sınırlandırıyor. Üretken yapay zekanın, özellikle de NVIDIA’nın Audio2Face teknolojisinin devreye gireceği yer ise burası. Audio2Face yapay zeka ile daha fazla dilde daha fazla dudak senkronizasyonu ve yüz Animasyonu oluşturulmasına olanak tanıyacak.

Bu teknolojiyi içeren ilk oyun, Çin stüdyosu Perfect World Games’in dövüş sanatları MMO’su olan World of Jade Dynasty olacak. Stüdyo, NVIDIA Audio2Face ile Çince ve İngilizce dillerinde doğru dudak senkronizasyonu ve animasyon üretebiliyor. Çevrimiçi bir başlık olarak NVIDIA Audio2Face, geliştiricilerin aynı gerçekçi animasyonla yeni sesli içerik eklemesine olanak tanıyacak.

Teknolojiyi sergileyen ikinci oyun, RealityArts Studio ve Toplitz Productions’ın Unreal Engine 5 destekli Unawake ise bu yılın sonlarında DLSS 3 desteğiyle piyasaya sürülecek yeni bir aksiyon-macera oyunu. Bu video, çeşitli duyguları kapsayan çeşitli kaydırıcıları sergileyen NVIDIA Audio2Face’in işleyişine dinamik bir bakış sunuyor.