• XSS.stack #1 – первый литературный журнал от юзеров форума

Есть ли дипфейк , который генерит видео по указаным фоткам и промптам?

Отслеживать

kindmapper

HDD-drive
Пользователь
Регистрация
23.02.2024
Сообщения
29
Реакции
3
Подскажите пожалуйста, есть ли дипфейки, которые генерят видео по заданному промту(сценарию)?
Ну например я подаю на вход ,ну, упростим ситуацию, даем фотку мужчины и фотку женщины, ну и сценарий "сидят в ресторане, что-то едят и так далее ну и текст разговора". Причем фотки подаются могут просто в анфас, как на паспорте, или просто фото ,которое сделано на телефон обычный. Все что видел , или не то, или что-то идет не более 10 сек.
Нет ли дипфейка под такие требования, которые мне нужны? То есть тут я так полагаю Deep fake должен быть с gpt.
 
Пожалуйста, обратите внимание, что пользователь заблокирован
grizzliess сказал(а):
open sora
но будь готов к тому что тебе нужны будут колоссальные размеры видеопамяти для генерации
это как приложение идет или что? скинь линк , если не трудно.
 
Sistem-kro сказал(а):
это как приложение идет или что? скинь линк , если не трудно.
это относительно недавно анонсированная от OpenAI модель для работы с генерациями типа text -> movie , и вроде как movie -> movie. возможности безграничны

в фулл релизе она ещё не была выпущена, да и доступ к ней получить на ранних этапах невозможно практически.

поэтому хорошая и надёжная альтернатива - использовать хороший шаблон т.е. ролик-базу, который в дальнейшем просто по личностям персонажей можно подогнать через тот же mov2mov + faceswap/reactor.. а так чтоб прям с нуля всё сгенерировал - вряд-ли хорошие решения без подводных камней найдёшь сейчас, единственное что на ум приходит это та-же выше упомянутая SoRA от OpenAI которая ещё не выпущена (кстати как и voice engine по этическим соображениям, слишком много возможностей которые могут быть использованы для того чтобы кого-то скомпрометировать); так что релиз с большей частью возможностей модели если и будет, то довольно ограниченный полагаю, хотя когда это кого-то останавливало
 
kindmapper сказал(а):
Подскажите пожалуйста, есть ли дипфейки, которые генерят видео по заданному промту(сценарию)?
Ну например я подаю на вход ,ну, упростим ситуацию, даем фотку мужчины и фотку женщины, ну и сценарий "сидят в ресторане, что-то едят и так далее ну и текст разговора". Причем фотки подаются могут просто в анфас, как на паспорте, или просто фото ,которое сделано на телефон обычный. Все что видел , или не то, или что-то идет не более 10 сек.
Нет ли дипфейка под такие требования, которые мне нужны? То есть тут я так полагаю Deep fake должен быть с gpt.
Недавно нужно было дипфейк нормальный сделать, плотно и долго лопатил эту тему. Из того что есть на сегодняшний момент, тебе можно только сделать так. 1) Сгенерить фото в миджорней или flux (blackforestlab) и потом оживить в дрим машин или тому подобной, но это сразу видно будет, что это ИИ. 2) Если надо прям дипфейк чтобы не отличить от реальности, это найти исходник видео на стоках, или самому снять нужное видео и потом уже сделать дипфейк по ссылкам, которые кидали выше. Если с гитхабом или хаггинфейс не хочешь возиться, есть сайты на подобии akool.com, в принципе если исходник нормальный, то получается довольно таки неплохо. Все опять же зависит от исходника.
 
grizzliess сказал(а):
open sora
но будь готов к тому что тебе нужны будут колоссальные размеры видеопамяти для генерации
Open Sora это как дед Мороз. Все о ней слышали, но никто в живую не видел (не трогал). ;)
 
betonit сказал(а):
Open Sora это как дед Мороз. Все о ней слышали, но никто в живую не видел (не трогал). ;)
Сора ещё не общедоступна, пока что. Говорят, что хреново работает, поэтому так долго держится на red teaming(
 
admin


Напишите ответ...
  • Вставить:
Прикрепить файлы
Верх