Cyberpunk 2077 ve Arkasındaki Yapay Zeka

Açık dünya oyunları alanında (Witcher3:Wild Hunt oyununda ortaya konan dünya bunun en güzel örneğidir) başarısıyla adından söz ettiren ve Avrupa’nın en büyük oyun şirketi olma ünvanına da sahip olan CD Projekt Red’in merakla beklenen yeni oyunu Cyberkpunk 2077 , lansmanın ilk  gününden beri 2020 internet dünyasının en büyük olaylarından biri olmuş durumda. Bir çeşit ileri teknoloji çağında geçecek olan Cyberpunk 2077, bir çeşit rol yapma oyunu.

CD Projekt RED ekibi 2018’in ağustos ayında Cyberpunk 2077  YouTube resmi hesabı üzerinden oyunun 48 dakikalık bir demo yayınını meraklı bekleyenlerinin beğenisine sunmuştu. İzleyicilerin yüksek beğenisi oyuna ilgiyi daha arttırmıştı. Oyun 10 Aralık tarihinde ilk kez piyasaya sürüldü. Kullanıcıların yorumlarının değerlendirilmesiyse merak konusu olmuş durumda. Çünkü Cyberpunk 2077’nin yayınlanması üzerinden çok kısa bir tarih geçmesine rağmen oyunun hikayesine, dünyasına tam not veren kişi sayısı çok fazla.

Oyun aksiyon dolu akıcı hikayesi, açık dünyası ve sinematografisinin yanı sıra bir başka ilgi çekici detayıyla da geçtiğimiz günlerde gündem olmuş durumda. Bu detaysa oyunun geliştirilme sürecinde kullanılan yapay zeka destekli bir teknoloji. Kullanılan bu teknoloji farklı dillerde konuşan karakterlerin konuştukları dile özgün olan mimik hareketleriyle konuşmalarını gerçekleştirmelerini sağlıyor.

CD projekt RED ekibinin açıklamalarına göre Cyberpunk 2077’de çeşitli karakterler 10 farklı dilde seslendirmeye sahip olacaklar. Oyun, lansmanda toplam 18 farklı dili destekleyecek şekilde ayarlandı ve  10 tanesi tamamen seslendirildi.  (Geri kalanı için, oyuncular oyunun altyazılarını etkinleştirebilecekler ve bu altyazılar, oyuncu tercihlerine göre özelleştirilebilecek.)

Farklı dillere özgü mimik ,kafa hareketleri senkrasyonu yani özetle işin zor kısmı “JALI” isimli yapay zeka modeliyle gerçekleştirilecek. Bu özellik sayesinde oyundaki gerçeklik hissi daha da arttırılarak daha sürükleyici bir hikaye anlatımı sunulabilecek.

Son olarak JALI, iki veya daha fazla farklı dil konuşan karakterler için dil geçişleri içeren diyaloğu canlandırabiliyor. Hatta karakterler arasındaki diyaloglarda tek bir cümlede birden çok dil arasında geçiş sağlanabilecek.

Peki kullanılan bu teknolojinin detayları nedir, bu yazımızda bunu inceleyeceğiz

 “JALI”: Nedir ve Neden?

JALI veya açılımıyla Çene ve Dudak Entegrasyonu Projesi, animasyonlara otomatik ifadelerle konuşma yeteneği sağlamak ve bunu insanı en iyi taklit edecek biçimde gerçekleştirebilmek için geliştirilen bir teknolojidir.

JALI’nin en popüler kullanım alanı eğlence sektörü (film ve oyunlar) olsa da ,tıp (yüz terapisi, protez ve adli tıp), eğitim (dil ve konuşma eğitimi), avatarlar (sosyal medya, siber asistanlar) gibi çeşitli uygulamalar da  JALI destekli teknolojilerin sağladığı iletişim teknikleriyle zenginleştirilmiştir.

JALI Araştırmaları ve Detaylar

JALI ekibinin şu ana geliştirdiği 3 ana araç bulunuyor : jAnalyze, jSync ve jRig

Hızlı, bağımsız ve hafif eklentilerden oluşan araçlar mevcut animasyon yazılımının (Maya) ve oyun motorlarının (Unity ve Unreal) çok çeşitli iş akışlarına uyacak şekilde tasarlanmışlardır.

jAnalyze

Sesle hizalanmış bir konuşma metni oluşturmak için bir giriş ses dosyasını veya akışını yani isteğe bağlı bir konuşma dökümünü analiz eden araçtır.

jAnalyze 200 ms gecikmeyle gayet hızlı işlem gücüne sahiptir. Hata oranın düşüklüğü sebebiyle dıştan müdahaleyi neredeyse gerektirmemektedir.

jAnalyze, jSync’e ses için fonetik bir akış sağlar: her bir ses biriminin başlangıç ve bitiş zamanı, perdesi, sesi, titremesi, parıltısı, seslendirmesi ve armonileri, bunların tümü anlamlı ve doğru konuşma animasyonu oluşturmada kritiktir bir noktadır.

jSync

Herhangi bir ses hizalı fonetik akışı daha kolay yorumlanabilmesi için seyrek- fonetik animasyon eğrilere dönüştürür. Bu eğriler bir animatör tarafından işlenmek üzere hazır hale gelir.

Sayısal verilerle incelememiz gerekirse ; jSync pratik olarak anlık (0,5 ms / fonem), hafif (1 MB) ve  doğrudan düzenlenebilir (animatör tarafından) seyrek-fonetik konuşma animasyonu eğrileri üretir

jRig

JSync’in oluşturduğu fonetik konuşma animasyon eğrilerinin çıktısını FACS eylem birimlerine dönüştürerek mırıldanma veya bağırma gibi konuşma stilleri üzerinde etkileşimli kontrol sağlayan araçtır.

jRig, olduğu gibi kullanılabilen veya HERHANGİ BİR özel yüz teçhizatını sürmek için bağlanabilen etnik köken ve cinsiyete dayalı FACS tabanlı yüz donanımı şablonu sağlar.

Yapay Zeka ve Gelecek

Yapay zeka tüm hızıyla her an karşımıza çıkmaya devam ediyor. Eğlence sektöründeki bu büyük gelişme ve teknolojiye yatırım ,bu alandaki gelişmeleri hızlandırmaya yardımcı olabilir.

JALI aslında çok uzun süredir kullanılan bir teknoloji. Hatta ekibin bazı üyeleri Oscar ödüllü kısa filmlerin teknik ekibinde bile yer almış. Fakat JALI yapay zeka teknolojisinin en büyük reklamlarından biri Cyberpunk 2077 olmuş durumda. Eğer beklenen performansı verebilirse JALI teknolojisini ve ekibini ilerde daha sık görebiliriz.

Ekip şu an dillere göre uyarladığı mimik hareketlerini film, dizi gibi live-action türlere uyarlamaya çalışıyor. Gerçekten belki de dizi ve filmlerdeki dublaj kaymaları video oyununda karşılaştığımızdan daha büyük bir gerçekçiliğin azalması sorunu olabilir.

Ekibin bu alandaki çalışmalarını da merakla takip etmekteyiz.

2020 ‘nin Sonlarına Doğru

Piyasada bulunan çoğu video oyununda animasyonlar İngilizce dilinin mimik, dudak hareketleri ve jestlerini karşılamak üzere tasarlanmaktadır. Oyunların dublajlı versiyonunu oynayanların kaybettiği gerçekçilik hissi ya da oyun içindeki İngilizce harici başka bir dil konuşan karakterin gerçekçiliğini yitirmesi önüne geçilmesi gereken bir problem olarak değerlendirilmekteydi.

Daha küçük çapta oyunlarda JALI benzeri yapay zeka destekli teknolojiler kullanılarak farklı dillerin mimik ve dil hareketleri oluşturulmuştu. Fakat CyberPunk 2077 gibi büyük prodüksiyonlu bir oyunda ilk kez JALI gibi büyük bir yapay zeka teknolojisi kullanılıyor. Eleştiriler de bu büyük yapay zeka ağının oyunun sekansını yavaşlatıp buglara sebep olup olmayacağı yönünde olmuştu. Bu sorulara cevap JALI ekibinden geldi. Ekibe göre kullanılan algoritma ve yapay zeka modelleri herhangi bir akışa zarar vermeyecek yönde özel olarak tasarlandı.

JALI gibi yenilikler Cyberpunk 2077 hakkında beklentileri çok daha arttırırken  yeni oyunun, şirketin bir önceki hiti Witcher 3: Wild Hunt  kadar beğenilip beğenilmeyeceği hakkında bir yorum yapmak için henüz erken gibi görünüyor.

Oyun şimdiden  Steam platformunda anlık olarak 1 milyonun üzerinde oyuncuya ulaşmış bulunuyor. Bu sayıya göre Cyberpunk 2077 bir önceki rekoru (eski rekortmen olan oyun2015 yılında Bethesda tarafından geliştirilen Fallout 4 oyunuydu)kırmış bulunuyor.

Fallout 4 çıktığı gün 472 bin 962 oyuncuya ulaşmıştı. Cyberpunk 2077 ise bu sayıyı ikiye katlamayı başladı.

Fakat bu kadar büyük bir yatırım umarım beklentiyi karşılar ve video oyunu severler için 2020 eğlenceli bir oyunla son bulur.

Daha detaylı bilgi için tıklayınız.

Kaynakça

JALI Team. (2020). JALI. JALI: http://www.dgp.toronto.edu/~karan/jali/ adresinden alındı

JALI Team. (2020). JALI Reachers. JALI: http://jaliresearch.com/ adresinden alındı

Oyuner. (2020, Ekim 21). Cyberpunk 2077, 10 Dilde Dudak Senkronizasyonu İçeren Yapay Zeka Kullanıyor. Oyuner: https://www.oyuner.com/2020/10/cyberpunk-2077-10-dilde-dudak.html adresinden alındı

Pif Edwards, C. L. (2018). JALI: An Animator-Centric Viseme Model for Expressive Lip Synchronization. JALI: http://www.dgp.toronto.edu/~elf/JALISIG16.pdf adresinden alındı

https://webrazzi.com/2020/12/10/cyberpunk-2077-cikisiyla-birlikte-fallout-4-un-rekorunu-kirdi/#:~:text=Payla%C5%9F%C4%B1lan%20bilgilere%20g%C3%B6re%20Cyberpunk%202077,daha%20fazla%20oldu%C4%9Funu%20da%20ekleyelim.

Görseller için:

• https://wccftech.com/keanu-reeves-loved-cyberpunk-2077-so-much-he-had-his-characters-screen-time-doubled/
• https://gq.com.tr/populer/cyberpunk-2077-hakkinda-bilmemiz-gerekenler
• https://www.onono.no/2020/11/19/new-night-city-wire-showcases-johnny-silverhand-gameplay-and-featurettes-for-cyberpunk-2077/
• https://tr.pinterest.com/pin/812407220258944432/
• https://se7en.ws/cyberpunk-2077-gameplay-demo-upgraded-to-8k-using-ai/?lang=en
• http://www.dgp.toronto.edu/~karan/jali/index.html
• http://jaliresearch.com/
• https://www.xbox.com/tr-TR/games/cyberpunk-2077
• https://wallpapercave.com/cyberpunk-2077-logo-wallpapers