creator cover MDSays
MDSays

MDSays 

Озвучание игр нейросетями

224subscribers

20posts

Солнышки, вы бы отменили платные подписки, так как за свою деятельность я в любом случае не смогу принять ваши донаты через данный сервис, лучше купите мороженку себе или своей девушке 💖
Если что-то будет новенькое то можно будет найти анонс тут https://t.me/MDsays

Подготовка к будущему

Есть несколько игр, которые я хочу перевести, но пока без названий. Поскольку многое мне придется делать одному, я решил заняться подготовительной работой по автоматизации процесса.
При генерации через TTS есть 3 основных проблемы
1) Не правильная интонация (уход в вопрос там где этого не должно быть)
2) Не правильное ударение
3) Сбитый тембер голоса TTS
1 и 3 довольно просто определить с помощью нейронной сети и проверки уровня тональности, как показала практика. Однако, второе оказалось более сложной задачей.
Основная проблема в том, что на данный момент нет нейронных сетей, которые выполняют транскрибацию (перевод голоса в текст) и одновременно проверяют ударение. Перевод в текст с последующей постановкой ударения нам не подходит. Даже не каждая нейронная сеть умеет определять тайминг слов, а про определение букв я вообще молчу. Поэтому мне эта задача показалась интересной. (спойлер: я её решил)
Подготовка:
Лучшим вариантом для транскрибации с определением тайминга слов оказался Whisper с моделью Large v3. Однако и тут всё оказалось не так просто. Whisper иногда переносит последнюю букву в следующее слово.
На этом примере хорошо видно, как буква "Г" переместилась в слово "Тиньков", а последнюю букву "В" вообще отрезало. Это происходит из-за того, что Whisper работает так, что ему не нужна вся буква, достаточно её части.
Creator has disabled comments for this post.

Что дальше?

В ближайшие месяц-два я планирую активно заниматься автоматизацией многих процессов, чтобы минимизировать рутинные задачи.
Буду ли я заниматься чем-то еще?
Да (возможно буду смотреть в сторону привлечения комьюнити)
Но сначала я хочу обновить большинство моделей, переписать панель для озвучки с использованием нейронных сетей, и добавить несколько дополнительных слоев для тестирования звука.
На мой субъективный взгляд, Ghostrunner2 получился на 3.5 из 5, а КП на 1 из 5.
И перед тем как браться за следующие проекты, нужно улучшить скорость и достигнуть уровня 4-4.5.
Вот тогда можно будет говорить о значительных успехах.
Creator has disabled comments for this post.

GhostRunner2 "Русская озвучка" [MDsays]

Лучше поздно, чем никогда
Добавьте новую глубину и атмосферу в игру Ghostrunner 2 с нашим модом на многоголосую нейро озвучку на русском языке. Этот мод использует технологии нейронного озвучивания для создания максимально качественного аудиовизуального опыта для русскоязычных игроков.
Особенности:
Многоголосая озвучка: Разнообразие голосов для персонажей, что делает диалоги более живыми и реалистичными.
Высокое качество звука: Использование нейросетей для создания максимально чёткой и натуральной озвучки.
Погружение в сюжет: Улучшенная атмосфера игры за счёт русской озвучки, усиливающей вовлеченность в повествование.

Перенос озвучки GR2

произошла классическая классика.
К сожалению, мы не успели достичь запланированного уровня качества проекта к 1 марта, как было намечено изначально.
на данный момент озвучка закончена на 74%
Мы приложим все усилия, чтобы завершить работу как можно скорее.
Какие примерно сроки по озвучке? А то в телеге одни нейронки да криптоманинг. Какие планы на дальнейшие игры? AC Mirage - было бы здорово. Игра не такая большая.
Демо футажи Ghostrunner 2
Post is available after purchase

Демонстрация уровней

Сегодня ближе к вечеру выложу несколько видео с переводом, возможно со своими небольшими комментариями

В видео будут уровни которые мы уже перевели, что бы дать полную картину к чему мы стремимся в рамках перевода.

Будет первый эксклюзивный контент на бусти)
Бегущие тени! Переозвучка игры Ghostrunner 2 на русский язык идет полным ходом!

С радостью сообщаем, что несмотря на трудности, связанные с жёсткими требованиями к таймингам аудио в игре, работы завершатся уже совсем скоро!
Спасибо пацаны за вашу поддержку!
Дата выхода 1 марта
Годно, учитывая что это только начало долгого пути озвучки нейросетями)

GhostRunner 2 vol 1

Мы рады сообщить о начале работы по переводу Ghostrunner2
Чуть позже будет опубликован roadmap проекта
Это охеренное решение. Пушка озвучка!
вот бы ещё Assassins Creed Mirage на будущее вообще бы цены вам не было)))
Subscription levels1

НЕ ПОДПИСЫВАЙСЯ И НЕ ДОНАТЬ !!!!!!!

$1 890 per month
Если что-то появится то только в ТГК @MDsays
Go up