Новости 

Статьи

Нейросети в AMV

Воскресенье, 04 Декабрь 2022

Поскольку в настоящее время нейронные сети используются в различных сферах создания контента, эти технологии можно использовать и в процессе создания AMV. Здесь я покажу вам некоторые программы, которые помогают создавать AMV.


Flowframes - Быстрая интерполяция видео для любого графического процессора

Описание

Flowframes — это простое, но мощное приложение, которое использует передовые ИИ-фреймворки для интерполяции видео, чтобы увеличить частоту кадров максимально естественным образом.

Характеристики

  • Может читать MP4, GIF, WEBM, MKV, MOV, BIK и другие форматы видео
  • Также может принимать последовательности изображений в формате PNG, JPEG и т. д. в качестве входных данных.
  • Вывод в виде видео (MP4/MKV/WEBM/MOV), GIF или кадров

Разница

В алгоритме Rife и DAIN он не создает искажений (warp) по сравнению с twixtor.

В алгоритме Rife он работает быстрее по сравнению с алгоритмом DAIN.

Использование [источник]

Загрузить

Topaz Video AI - Модели искусственного интеллекта производственного уровня для профессионального использования

Описание

Topaz Video AI фокусируется исключительно на действительно хорошем выполнении нескольких задач по улучшению видео: деинтерлейсинг, масштабирование и интерполяция движения. Потребовалось пять лет, чтобы создать модели ИИ, достаточно надежные для естественных результатов на реальных кадрах.

Характеристики

  • Меньше артефактов движения. Другие методы масштабирования видео часто создают эффект «мерцания» или «мерцания» из-за различной обработки в соседних кадрах. TVAI значительно уменьшает эти артефакты.
  • Восстановите детали видео. Добавляйте в свои видео реальные детали, полученные из дополнительной информации в нескольких соседних кадрах.
  • Получите более естественные результаты. Традиционное масштабирование часто вызывает артефакты. Мы смягчаем их, извлекая новую информацию из нескольких кадров.
  • Обучение на видео — Topaz Video AI обучался исключительно на видеоклипах, а не на неподвижных изображениях.

Использование [источник]

Купить [Бесплатная альтернатива, требует навыков в командной строке]

Midjourney - генератор текста в изображение

Описание

Midjourney — это независимая исследовательская лаборатория, которая производит запатентованную программу искусственного интеллекта, которая создает изображения из текстовых описаний, аналогичную DALL-E от OpenAI и Stable Diffusion с открытым исходным кодом.

Характеристики

  • Делает изображение красивее, чем вы себе представляли
  • Бесплатно до 25 изображений, затем 200 изображений стоят 10 долларов в месяц.
  • Разрешение до 2048x2048

Использование [источник]

  1. Присоединяйтесь к дискорд-каналу: https://discord.gg/midjourney
  2. Выберите один из каналов #newbies на боковой панели.
  3. Используйте команду /imagine. Описывать что-либо словами.
  4. Подождите, пока ваше изображение не будет готово.
  5. Масштабируйте изображение или выберите другой вариант.
  6. Сохраните изображение.

EbSynth - Преобразуйте видео, рисуя поверх одного кадра

Описание

EbSynth разбивает вашу картину на множество мелких кусочков, как пазл. Затем он использует эти фрагменты для сборки (синтеза) всех оставшихся видеокадров. Таким образом, EbSynth всегда работает только с тем, что рисует художник. Он никогда не вводит ничего нового, чего не было бы показано в нарисованном ключевом кадре.

Использование [источник]

Загрузить

Автор: okhostok Прочитали: 2012 раз
Вернуться назад

Комментарии (18)
Вы не авторизованы! Комментарии могут оставлять только зарегистрированные и авторизованные пользователи!

олух царя небесного   User profile
  10.12.2022 21:16
okhostok написал(а):
ничего такого


Ну да. С моей стороны следовало всё это написать в теме "различные вопросы, незаслуживающие отдельной темы"
okhostok   User profile  Video channel
  07.12.2022 13:38
олух царя небесного написал(а):
okhostok, мой посыл был больше к тому, что сайт позиционируется как крупная площадка аниме-клипов. Короткометражки на не аниме-исходники можно скачать на торрентах или посмотреть на других ресурсах. Хотя вряд ли самопальная анимация возьмёт верх в рамках AMV.


Да, я тут предложил ничего такого который поможет к сделание короткометражки.
1) Flowframes - заменитель твикстора в амв.
2) Topaz Video AI - постобработка амв.
3) Midjourney - лого, постер к амв.
4) Ebsynth - копирование эффекта в амв.
олух царя небесного   User profile
  07.12.2022 13:25
okhostok, мой посыл был больше к тому, что сайт позиционируется как крупная площадка аниме-клипов. Короткометражки на не аниме-исходники можно скачать на торрентах или посмотреть на других ресурсах. Хотя вряд ли самопальная анимация возьмёт верх в рамках AMV.
okhostok   User profile  Video channel
  07.12.2022 10:28
олух царя небесного написал(а):
Ну воот. Я смотрю амв на Амвньюс, чтобы узнать новинки аниме и музыки, а здесь ратуют за разведение какой-то самодеятельности. Есть ведь Креа для такого.

ps. но это частное мнение. если данная инициатива каким-либо образом повысит активность на сайте - я только "за".


Вообще-то есть много мейкеров в ньюсе, я думал это будет интересен им.
олух царя небесного   User profile
  07.12.2022 07:26
Ну воот. Я смотрю амв на Амвньюс, чтобы узнать новинки аниме и музыки, а здесь ратуют за разведение какой-то самодеятельности. Есть ведь Креа для такого.

ps. но это частное мнение. если данная инициатива каким-либо образом повысит активность на сайте - я только "за".
Leberate   User profile  Video channel
  06.12.2022 21:02
а че sd в "гайд" не воткнули?
REVI7ION   User profile
  06.12.2022 02:23
Default Avatar
Первый софт заинтересовал.
Daniskin   User profile
  05.12.2022 15:26
Шутки про кнопку "создать красиво" становятся реальнее...
Turbo   User profile  Video channel
  05.12.2022 10:48
Спасибо за статью )

Ещё есть новая сетка которая по фотке генерит аниме версию. Может быть актуально для АМВ:
https://www.ixbt.com/live/sw/kitayskaya-neyroset-prevraschaet-vashe-foto-v-anime.html


Мой друг из Сингапура вместе с командой зарелизил сетку, которая генерит видео по описанию:
https://magicvideo.github.io/

Выглядит пока не очень, но думаю это дело времени пока допилят.
okhostok   User profile  Video channel
  05.12.2022 06:48
SWS написал(а):
https://amvnews.ru/images/contests/AnonCon2022/AnonCon2022-3.png


вот я и думал, почему оно выбивается из строя)
mwDeus   User profile
  05.12.2022 05:31
Хорошо же.

okhostok, молодец что заморочился.

Теперь нужно под каждый пункт делать развёрнутые гайды.

Начало положено.
---------
SWS, скоро начнёшь гифки делать из вот этого всего, если не уже.

Ей богу, щяс для того чтобы контент делать - не нужно вообще ничего, только желание.

И спасибо, что ты это доказываешь, не в обиду.
MesoGear   User profile  Video channel
  05.12.2022 04:13
ну все, дело за малым - амв в нейросети
SWS   User profile  Video channel
  05.12.2022 02:48
okhostok, Darksss 73, Что касается графики, не видео а именно графики то для NovelAI и StableDiffusion корпорация Гугл сейчас предоставляет услугу "Колаб". Услуга бесплатна. По ней Гугл дает свои мощности пользователю для генерации изображений. Для видео пока не подходит, получается некоторая каша, но изображения типа:

https://i.imgur.com/AHI6hoO.png
https://i.imgur.com/e1tpHnx.png
https://i.imgur.com/d6cTXzp.png
https://i.imgur.com/JU3OAWh.png

Можно генерировать, с помощью этой услуги, которая бесплатна, даже на утюге. Конечно есть некоторые подводные, например то что генерировать можно лишь несколько часов в день, за особо горячие или неполиткоректные теги в промтах аккаунт Гугл могут забанить, и прочие неявные, но факт остается.
---------
Алсо.

Darksss 73 написал(а):
Опытный мейкер всему найдёт применение



Так то не только неопытные AMV мейкеры но уже и крупнейшие AMV сайты юзают в своей жизни и деятельности изображения сгенерированные нейросетками:

https://amvnews.ru/images/contests/AnonCon2022/AnonCon2022-3.png
Darksss 73   User profile
  05.12.2022 02:32
okhostok написал(а):

Как минимум Топаз я видел, многие его используют чтобы сделать 4к версию/повысить качество.


Ну с этим то я согласен.(У самого он есть) Но вопрос остаётся так же открытым > на дороговизну.
Для того что-бы интегрироваться во всё это - нужно будет с начало интегрироваться в магаз компьютерной техники.
okhostok   User profile  Video channel
  05.12.2022 02:31
Darksss 73 написал(а):
S.A. Robert
Вопрос не в том как это будет использоваться а на какие башляшки?


Как минимум Топаз массово используют чтобы сделать 4к версию/повысить качество.
Darksss 73   User profile
  05.12.2022 02:21
S.A. Robert
Вопрос не в том как это будет использоваться (Опытный мейкер всему найдёт применение) а на какие башляшки?
Так как все эти проги > жрут довольно много производительности = как в процесере, так и в видюхе.
И если какая-то часть мейкеров - потянет такие возможности, то остальные будут делать всё по старинке.
SWS   User profile  Video channel
  05.12.2022 02:20
S.A. Robert,

https://i.imgur.com/iM9ChWd.mp4

Только обязательно посмотри при полном разрешении и со звуком. На тайминге 0,07 - 0,08 глядя на верхнюю часть изображения я кончил. Образно выражаясь. И это ещё делали на простой нейронке.

Вообще ходят слухи что первую нейронку заточенную под видео выкатят к рождеству. Правда не знаю насколько эти слухи надёжны. На форуме "в вопросах незаслуживающих" инфа по нейросеткам слегка устаревшая. Но у меня пока руки не доходят создать тему или вообще там отписаться.

Алсо.
Где то с месяц назад уже генерили подобные арты:
https://i.imgur.com/ms35l2S.png
https://i.imgur.com/EbUvMwC.png
https://i.imgur.com/4LWpp4o.png
https://i.imgur.com/DkAGwav.png

Вчера вот Асок разных:
https://i.imgur.com/O02LKaH.png
https://i.imgur.com/GphkLTN.png
https://i.imgur.com/UsZ2UDp.png

Особо бизнесменистые, скажем так, товарищи уже на Девиант Арте насоздавали платных галерей и продают их страждущим.
S.A. Robert   User profile
  04.12.2022 21:02
Интересно как это будут в амв использовать.

 Интересное на CreaSpace