Neurogen

Neurogen 

Делаю нейросети доступнее

2 433subscribers

101posts

goals2
$177.28 of $374 raised
Хочу приобрести AMD RX 6600 XT или RX 6700 XT для тестирования и оптимизации сборок под видеокарты AMD.
$30.62 of $718 raised
На покупку RTX 5060 ti для создания оптимизированых сборок под видеокарты RTX 50xx

DiNet UI [beta] - лучший бесплатный wav2lip / lipsync

DiNet - новая нейросеть предназначеная для синхронизации губ с аудиодорожкой (lipsync).
Данная версия является бета версией и могут быть ошибки. Не стесняйтесь писать о них в комментариях, будем решать их вместе.
Запуск программы через DiNet-UI.exe
Обработанный результат сохраняется в asserts\inference_result
Известные проблемы:
- Для нормальной работы лицо должно быть вертикально в кадре и статично (не должно пропадать или менять свое положение)
- Возможно не получится сделать программу полностью портативной, если так, то позже я напишу гайд по установке и запуску.
Рекомендации:
- Видео и аудио лучше поместить в папку data
- Не использовать кириллицу и спецсимволы. Используйте цифры и латинские символы 
Скачать можно тут: 
Яндекс Диск
I'd love to see some progress on this. Also, could I draw your attention to Heygen Video Translation? This is the link: https://labs.heygen.com/video-translate. They use natural voice clone, lip-sync, and talking style to translate films to speak in other languages, and the results are astounding. Do you have any idea how they accomplished this?
Razer, My opinion - they used a lot of work from public projects (like RVC, SadTalker, and various papers from arXiv) and brought them to a working state.
I think half a year or so and we will get working projects within the framework of opensource.
Ok, I understand what you just explained about the Heygen project. So I downloaded and tried running the DINet using a video and audio file from the example folder, but got an error, which I have attached below. Could this be the bug? Please, how can you fix this?
Razer, Is this a problem with all files? For the sake of the test, try to change video and audio files, and also, put them in the Data folder, which is located in the folder with DinetUI. Perhaps because of different disks, there may be problems.
I think the issue is actually with the original creator because he has addressed it and updated the file on Github to DINET-UI v1.0.1. I think you should look at it.
Razer, ok. thx for info
Не работает совсем
DeepFakeEditor, надо изменить строчку в файле DINet-UI.exe.config
add key="OpenFaceDirectory" value=".\OpenFace_2.2.0_win_x64"
и в строке с add key="DINetDirectory" указать путь куда распаковал архив.
о, это то, что мне нужно видимо! спасибо!
ошибка выходит "something went wrong. check shell output for details".
Message: Не удалось найти часть пути "E:\AI\DINet-UI\asserts\input\namevideo.csv".
Stack Trace: в System.IO.__Error.WinIOError(Int32 errorCode, String maybeFullPath)
в System.IO.FileStream.Init(String path, FileMode mode, FileAccess access, Int32 rights, Boolean useRights, FileShare share, Int32 bufferSize, FileOptions options, SECURITY_ATTRIBUTES secAttrs, String msgPath, Boolean bFromProxy, Boolean useLongPath, Boolean checkHost)
в System.IO.FileStream..ctor(String path, FileMode mode, FileAccess access, FileShare share, Int32 bufferSize, FileOptions options, String msgPath, Boolean bFromProxy, Boolean useLongPath, Boolean checkHost)
в System.IO.StreamReader..ctor(String path, Encoding encoding, Boolean detectEncodingFromByteOrderMarks, Int32 bufferSize, Boolean checkHost)
в System.IO.StreamReader..ctor(String path)
в DINet_UI.Form1.d__10.MoveNext() в E:\AI\DINet-UI\DINet-UI\Form1.cs:строка 150
Илья Звягин, покажите ещё раз скрин вашего конфиг файла. Кажется вы удалили часть пути к miniconda. Кроме этого, скажите, как вы запускаете программу?
Neurogen, такая же беда..
Subscription levels4

Угостить кофейком | Buy me a coffee

$2.25 per month
Просто поддержать автора кофейком.  | 
Just to support the author with a coffee.

Патрон | Patron

$38 per month
Данный уровень подписки открывает доступ ко всем сборкам (кроме DFL), а также доступ к их обновлениям. Кроме этого, для вас будет открыт доступ к приватном Telegram чату с моей помощью и обсуждениями.
+ chat

Шейх | Sheikh

$75 per month
Включает все бонусы прошлых уровней. Дополнительно ко всему, вы можете запросить персональную консультацию со мной (в том числе путем удаленного доступа, для найстройки программ на вашем ПК)
+ chat

Иллюминат | Illuminati

$150$75 per month
-50%
Говорят, Иллюминаты существуют. Раз вы можете такое себе позволить - вы явно один из них. 
Вы получаете бонусы всех прошлых уровней, мою огромную благодарность, а также можете влиять на приоритет выхода будущих сборок
+ chat
Go up