Представляем вашему вниманию ai-клипы к классическим хип-хоп композициям (в последней, кстати, осуждается гиперлюбовь к новым технологиям):
Эти видео сделаны с помощью простой (и нашей любимой) технологии Midjourney с атрибутом
«--video», который позволяет запустить процесс генерации изображения из шума (см. гид).
Автор Бен Жилин (Ben Gillin) - дизайнер и художник из Бруклина.
Судя по соцсетям, свое восхождение в качестве художника Бен начал с тех пор, как открыл для себя Midjourney, и мы всячески желаем ему в этом удачи.
Это одно из первых ai-видео, опубликованных на youtube независимым автором.
DoodleChaos — человек-продакшн: программист, саунд-инженер, оператор и режиссер. Миллион подписчиков пришел к нему не за AI — DoodleChaos снимает клипы в компьютерных играх.
А еще он гениально выбирает локации - в том числе снял несколько клипов в Minecraft (вам ведь тоже приходила такая идея однажды?).
История этого видео началась с того, что DoodleChaos искал инструмент, который позволил бы использовать текст песни в качестве входных данных для AI и получать видео, идеально синхронизированные с музыкой нажатием одной кнопки (кнопка шедевр!). В результате поиска самым подходящим инструментом для этой задачи оказался Disco Diffusion V5.2 Turbo.
Однако, все оказалось не так просто: текст песни был слишком абстрактным для AI и автору пришлось модифицировал некоторые фразы, добавляя обстановку или атмосферу. Помимо текста он добавил ключевые кадры для движения камеры по сгенерированному миру и вручную синхронизировал их с битом.
И наконец, наш краш — клип на песню Битлз, — менее технологичный и не попадающий в «нарядный» формат — теплый, ламповый, ужасно грустный, тоже созданный в Disco Diffusion, enjoy:
Исполнение, кстати, принадлежит не Битлз, а крутейшей филиппинской группе REO Brothers.
Так автор Mr. Stonemountain решил избежать возможных проблем с правами. А еще он оставил ссылку на Colab, так что вы можете поиграть с этой анимацией.
В настоящий момент большинство музыкальных клипов с использованием AI, которые можно найти в YouTube, представляют из себя фан-видео, состоящие из музыки и картинок Midjourney, иллюстрирующих текст песни — т.е. никакой синхронизации с музыкой и интерполяции.
По-сути, это старый-добрый формат музыкального лирического видео из фото-слайдов под музыку, который очень любят в «Одноклассниках» и в некоторых сегментах YT.
Интересно наблюдать, как продукт максимально новой технологии находит свое применение в одной из самых ранних пользовательских интернет-практик.
Шедевром в этом жанре считаем клип на песню «Биография» группы Кровосток: