Польский разработчик создал ИИ-лектора для игр, помогающего тем, кто не может читать диалоги

В сети появился проект под названием GameReader, который использует искусственный интеллект для создания встроенного в игру голосового сопровождения. В настоящее время программа поддерживает несколько игр, но её создатель планирует расширить список совместимых проектов. Приложение бесплатное, и разработчик намерен сохранить этот статус, как он рассказал в интервью.

Как работает ИИ-лектор в играх

Конечная цель — совместимость со всеми играми, что, по словам создателя, станет возможным, когда локальное использование ИИ в домашних условиях будет доступно благодаря более мощным видеокартам.

Автор проекта — 36-летний Рафал, музыкант по образованию, который кратко объяснил принцип работы GameReader:

Я разработал систему, которая «извлекает» все возможные строки диалогов из игры, сохраняет их в текстовом файле и передаёт инструменту для захвата текста с экрана. Затем он сравнивает захваченный текст со списком всех возможных строк и выбирает наилучшее совпадение.
В результате получается чистый текст без ошибок и опечаток. К каждой строке диалога я подготовил аудиофайл, в котором она озвучена диктором. Программа, сопоставив текст с конкретной строкой, воспроизводит соответствующий аудиофайл.

Планы по развитию GameReader

Следующий этап — функция LIVE, которая не потребует заранее записанных аудиофайлов. Вместо этого текст будет озвучиваться в реальном времени с помощью облачного сервиса, что даст пользователям возможность менять тембр голоса по своему усмотрению.

Кроме того, это упростит работу создателя GameReader. Сейчас ему приходится вручную отделять диалоги от других текстовых элементов, таких как «цель миссии» или «очки опыта». Функция LIVE решит эту проблему, так как ИИ самостоятельно отфильтрует нужный контент.

Рафал подчеркивает, что GameReader останется полностью бесплатным, и это его хобби-проект:

Я не хочу, чтобы моя программа была платной. Пользователи могут поддержать меня финансово через сервисы вроде Patronite, но это всегда их добровольный выбор. Программа изначально задумана как бесплатная. Я делаю её в свободное время, потому что нашёл страсть в программировании и создании таких проектов.

Сейчас GameReader поддерживает следующие игры:

• S.T.A.L.K.E.R. 2: Сердце Чернобыля
• Grand Theft Auto San Andreas Definitive Edition
• Grand Theft Auto IV (без дополнений)
• The Callisto Protocol
• RoboCop: Rogue City

Интересный факт: подобные технологии могут быть особенно полезны для людей с дислексией или нарушениями зрения, позволяя им комфортнее играть в видеоигры.