Sony sedang menguji teknologi AI untuk menciptakan karakter di PlayStation. Kabar ini terkuak setelah video demo AI dari Aloy dalam Horizon Forbidden West muncul di YouTube. Namun, sayangnya video tersebut harus ditarik karena klaim hak cipta dari Muso, perusahaan penegak hak cipta yang bekerja sama dengan Sony Interactive Entertainment alias PlayStation.
Video demo ini dipersembahkan oleh Sharwin Raghoebardajal, Director of Software Engineering Sony Interactive Entertainment, yang ahli dalam teknologi video game, kecerdasan buatan (AI), visi komputer, dan teknologi wajah untuk PlayStation Studios Advanced Technology Group. Tim The Verge berhasil menyaksikan bagaimana Raghoebardajal memperlihatkan versi AI dari Aloy yang mampu berinteraksi dengan pemain melalui perintah suara saat bermain game.
Aloy dapat merespons pertanyaan dengan suara dan gerakan wajah yang disintesis oleh AI, baik dalam demo maupun dalam game Horizon Forbidden West. Raghoebardajal menjelaskan bahwa ini hanya prototipe yang dikembangkan bersama Guerrilla Games untuk demonstrasi internal di Sony. Demo ini menggunakan teknologi OpenAI untuk speech-to-text, serta GPT-4 dan Llama 3 untuk percakapan dan pengambilan keputusan.
Sony memiliki sistem Emotional Voice Synthesis (EVS) internal untuk menghasilkan suara, serta animasi audio to face yang didukung oleh teknologi Mockingbird milik Sony sendiri. Meskipun demo ini berjalan di PC, Raghoebardajal mengungkapkan bahwa Sony juga telah melakukan eksperimen dengan menjalankan teknologi ini di konsol PS5 dengan overhead yang minim.