Sony експериментує з персонажами PlayStation з ШІ

Компанія Sony працює над прототипом ШІ-версії принаймні одного з персонажів своїх ігор для PlayStation. Анонімний інформатор поділився з The Verge внутрішнім відео з групи Sony PlayStation, яке демонструє ШІ-версію Алоя з Horizon Forbidden West. Після того, як ми опублікували цю історію, відео було видалено з YouTube через позов про порушення авторських прав від Muso, компанії, що займається захистом авторських прав, яка рекламує Sony Interactive Entertainment (вона ж PlayStation) як клієнта.

Відео розповідає Шарвін Рагхобардаджал, директор з розробки програмного забезпечення в Sony Interactive Entertainment, який працює над технологіями відеоігор, штучним інтелектом, комп’ютерним зором і технологією розпізнавання осіб для Sony PlayStation Studios Advanced Technology Group. Ми спостерігали, як Рагхоебардаджал демонстрував версію Aloy зі штучним інтелектом, яка може вести розмову з гравцем за допомогою голосових підказок під час ігрового процесу.

Алой відповідав на запити синтезованим голосом і рухами обличчя на основі штучного інтелекту як у демо-версії, так і в повній версії гри Horizon Forbidden West. Рагхоебардаджал дає зрозуміти, що це лише прототип, який був розроблений разом з Guerrilla Games для демонстрації технології всередині Sony.

Демонстрація технології використовує шепіт OpenAI для перетворення мови в текст, а також GPT-4 і Llama 3 для розмов і прийняття рішень. За словами Рагхоебардаджала, Sony має власну внутрішню систему емоційного синтезу голосу (EVS), яку вона використовує для генерації мовлення, а анімація обличчя заснована на власній технології Sony Mockingbird.

Хоча демонстрацію можна побачити на ПК, Sony також експериментувала з запуском частин цієї технології безпосередньо на консолях PS5 з “невеликими накладними витратами”, за словами Рагхоебардаджала. Sony вперше продемонструвала цю технологію рік тому, а потім показала більш просунуту версію за зачиненими дверима на виставці Sony Technology Exchange Fair (STEF) у Токіо в листопаді.

“Це лише перший погляд на те, що можливо”, – каже Рагхоебардаджал. Ця технологічна демонстрація не дає відповіді на більш очевидні питання про те, чи є сенс розмовляти з Алой, коли ви граєте за неї в Horizon Forbidden West, або про те, який вплив така технологія може мати на акторів озвучення та розробників ігор.

Nvidia працює над власною подібною технологією для NPC зі штучним інтелектом в іграх, де ви можете вільно розмовляти з персонажами відеоігор. Ace, як називає її Nvidia, була продемонстрована кілька разів протягом 2024 року, і виробник графічних процесорів навіть працював з Inworld AI над створенням Covert Protocol, ігрової демонстрації технології штучного інтелекту Nvidia в іграх.

Microsoft також тісно співпрацює з Inworld AI, щоб врешті-решт перенести ШІ-персонажів на Xbox, що дозволить розробникам ігор використовувати генеративних ШІ-персонажів, сюжетні лінії тощо. Microsoft також створила власну модель Muse AI, яка генерує ігровий процес, спочатку призначену для розробників ігор, щоб створити ігрове середовище для створення прототипів та ідей.

Серед розробників ігор і студій вже існує чимало побоювань щодо того, як ШІ може вплинути на творчий процес створення відеоігор, особливо коли в ігровій індустрії відбувається так багато звільнень. Майже половина (49%) з 3000 респондентів опитування, проведеного на Конференції розробників ігор (GDC) 2024, сказали, що інструменти генеративного ШІ зараз використовуються на їхньому робочому місці, а 31% заявили, що вони використовують їх особисто.

Експерименти Sony з персонажами PlayStation зі штучним інтелектом неодмінно викличуть нові розмови про роль штучного інтелекту у створенні відеоігор напередодні конференції GDC, яка відбудеться наступного тижня в Сан-Франциско. Ми неодноразово зверталися до Sony з проханням прокоментувати це внутрішнє відео, але компанія не відповіла. Ми знову звернулися з проханням підтвердити, чи видалила Sony це відео і чи має вона подальші коментарі.