소니, AI 기반 플레이스테이션 캐릭터, 알로이 프로토타입을 포함하여 테스트 중

Sony는 Aloy를 포함한 AI가 구동하는 PlayStation 캐릭터를 테스트해, 유출된 비디오 이후 AI의 게임에서의 역할에 대한 논쟁을 불러일으켰습니다.

The Verge에서 처음으로 이 영상을 보도했는데, 영상은 AI로 생성된 음성과 얼굴 애니메이션으로 목소리 명령에 대응하는 실험적인 AI 버전의 아로이를 선보였습니다. 게시 직후, 영상은 소니 인터랙티브 엔터테인먼트와 연계된 회사인 뮤소에 의한 저작권 주장으로 YouTube에서 제거되었습니다.

해당 비디오는 소니 소프트웨어 엔지니어링 디렉터인 샤윈 라고바르다잘이 AI 기반의 앨로이가 대화에 참여하는 방법을 보여줍니다.

이 비디오에서는 OpenAI의 Whisper를 음성-텍스트 변환에 사용하고, GPT-4와 Llama 3를 대화용으로 사용합니다. 또한, 소니의 감성 음성 합성(EVS)을 음성에, 회사의 Mockingbird 기술을 얼굴 애니메이션에 사용합니다. “이것은 가능한 것들 중 일부일 뿐입니다.”라고 라고바르다잘은 The Verge에 보도된 비디오에서 말합니다.

Sony는 Horizon 개발사인 Guerrilla Games와 협력하여 이 프로토타입을 개발하였습니다. 이 데모는 주로 PC에서 테스트되었지만, 소니는 PS5에서의 실행을 최소한의 성능 저하로 실험했다고 The Verge가 보도했습니다.

이 기술은 처음으로 1년 전에 내부적으로 공개되었고, 보다 세련된 버전은 지난 11월에 도쿄의 Sony Technology Exchange Fair (STEF)에서 비공개로 선보였다고 The Verge가 보도했습니다. 유출된 영상은 게임 산업 내에서 특히 음성 배우와 개발자들 사이에 우려를 불러일으켰습니다.

IGN에서는 AI가 생성한 알로이의 목소리가 원래 캐릭터의 배우인 애슐리 버치의 것이 아니라는 사실을 보도하며, 게임 개발에서 AI의 역할에 대한 논란을 촉발시켰습니다. 일부 시청자들은 AI 알로이의 대사가 로봇 같고, 얼굴 표정이 딱딱하며 눈동자가 생기가 없다고 지적했습니다.

게임 산업 전반에서는 비슷한 AI 구현을 탐구하고 있습니다. Nvidia는 “ACE” 프로그램을 통해 AI 기반 비플레이어 캐릭터(NPCs)를 개발하고 있으며, 이를 통해 플레이어들이 게임 내 캐릭터와 실시간 대화를 나눌 수 있게 하고 있습니다.ACE

AI 기반의 NPC들은 상호작용을 더욱 동적이고 몰입식 있게 만들어 오픈 월드 스토리텔링을 변화시킬 수 있습니다. 지지자들은 AI가 플레이어의 선택에 따라 퀘스트를 개인화할 수 있으며, 이로 인해 더욱 의미있는 경험을 만들 수 있다고 주장합니다. 이는 Medium에서 보도되었습니다.

NPC들은 과거의 만남을 기억하고, 그에 따라 대화를 변경할 수 있습니다. AI 주도 캐릭터들은 또한 감정적인 상황에 맞게 그들의 어조와 반응을 조절할 수 있으며, 이로 인해 대화가 더 현실적으로 느껴질 수 있습니다.

게다가, AI는 실시간으로 난이도와 적의 행동을 조정하여 균형 잡힌 경험을 제공할 수 있습니다.

한편, Microsoft는 Inworld AI와 파트너십을 맺어 Xbox 개발자들을 위한 생성적 AI 기능을 도입하고 있습니다. 이는 The Verge에서도 언급되었습니다.

게다가, Ubisoft의 NEO NPC는 2024년 3월에 Nvidia와 Inworld AI와 함께 출시되어 실시간, 동적 NPC 상호작용을 가능하게 합니다. Nvidia의 Audio2Face와 Inworld의 언어 모델에 의해 구동되는 이 AI는 얼굴 애니메이션과 음성을 동기화하여, 상황에 따른 반응을 생성합니다.

게임 개발 분야에서 AI의 부상은 논란의 여지가 많습니다. 최근에 진행된 게임 개발자 컨퍼런스(GDC) 조사에 따르면 응답자들의 거의 절반이 직장에서 생성 AI를 사용하고 있지만, 이것이 일자리와 창의성에 미칠 영향에 대한 우려는 여전히 남아 있습니다. 비판가들은 게임에서의 AI가 인간이 만든 이야기를 대체함으로써 스토리텔링을 약화시킬 수 있다고 주장합니다.

미디움은 로봇처럼 들리는 대화, 감정적 깊이의 손실, 그리고 작가와 성우들의 직업 장애가 우려된다고 보도했습니다. AI는 패턴을 흉내내지만, 진정한 창의성은 부족하므로 게임에서 인간 스토리텔러가 제공하는 뉘앙스와 진실성을 잃을 수 있다는 두려움을 불러일으킵니다.

IGN은 EA와 Capcom과 같은 회사들이 콘텐츠 생성을 위해 AI를 받아들였지만, Keywords Studios와 같은 다른 회사들은 AI의 현재 한계를 인정하면서, 게임 개발에서 인간 창의성을 대체하지 못했다고 지적했습니다.

Sony는 아직 PlayStation 게임에 AI 주도 캐릭터를 통합하는 계획을 발표하지 않았습니다. 이 유출의 타이밍 – 바로 GDC 2024 앞두고 -는 게임에서의 AI가 논의의 핵심 주제로 남아있게 될 것임을 보장합니다.