Meta'nın Quest SDK için geliştirdiği "Ses'ten Mimiklere" özelliği, sanal gerçeklikte avatarların yüz ifadelerini sesle senkronize bir şekilde yansıtmalarını sağlıyor. Bu teknoloji, yüz takip donanımına ihtiyaç duymadan, sadece mikrofon aracılığıyla alınan ses bilgilerini analiz ederek, avatarların yüz kaslarını gerçekçi bir biçimde hareket ettirebiliyor. Yenilikçi bu özellik, özellikle yüz yakalama teknolojisine erişimi olmayan küçük stüdyolar veya bağımsız geliştiriciler için büyük bir avantaj sunuyor.
Audio To Expression, yalnızca mikrofon ses girişinden makul yüz kası hareketleri üreten ve herhangi bir yüz izleme donanımına ihtiyaç duymadan tahmini yüz ifadeleri sağlayan cihaz üstü bir yapay zeka modelidir.
2015'ten önceki Oculus Lipsync SDK'sı bu yeteneği yalnızca dudak hareketi için sunuyordu ve Meta'nın Audio To Expression'ı onun resmi yerine geçiyor ve yanaklar, göz kapakları ve kaş hareketleri de sunuyor. Ve dikkat çekici bir şekilde, Meta, Audio To Expression'ın aslında Oculus Lipsync'ten daha az CPU kullandığını iddia ediyor.
Comments