5 клипов, созданных с помощью искусственного интеллекта. Подборка Вадима Булгакова

Индустрия музыкальных видео всегда была не только удобным трамплином для знаменитых (в будущем) кинорежиссёров, но и отличным полигоном для тестирования нового: от поиска визуального языка до освоения современных технологий съёмки и монтажа. Неудивительно, что и возможности искусственного интеллекта начали применяться в видеоклипах за пару лет до выхода в мейнстрим.

Вадим Булгаков, руководитель нового профиля бакалавриата «Искуственный интеллект и видеопродакшн» в Школе дизайна НИУ ВШЭ, проследил эволюцию ИИ-видео на примере пяти музыкальных клипов.

LINDEMANN — Ich weiß es nicht 
​​​​​​​Дата релиза — 20.10.2019 ​​​​​​​

Пример достаточно абстрактного видеоарта от большой команды художников. В момент создания клипа ещё не было готовых инструментов для работы с генеративными моделями, поэтому каждое подобное произведение имело не только художественную, но и техническую ценность. Важно отметить, что в числе соавторов этого клипа был один из пионеров ИИ-арта Вадим Эпштейн. 

Linkin Park — Lost
​​​​​​​Дата релиза — 10.02.2023​​​​​​​

Этот клип был сделан в момент, когда нейросети уже освоили создание изображений и начали учиться создавать видео — при помощи покадровой перегенерации различных видеофрагментов либо генерации промежуточных кадров. В ролике Linkin Park можно заметить характерные для модели Stable Diffusion визуальные артефакты, которые в данном случае достаточно органично вписались в видеоряд.

PAIN — Push The Pusher
​​​​​​​Дата релиза — 12.04.2024​​​​​​​

Клип, созданный Дмитрием Алексеевым, индустриальным партнёром нашего профиля «Искусственный интеллект и видеопродакшн», и Сергеем Козловым, — это пример другого подхода к работе с нейросетями. Здесь сцены для видео были сгенерированы в виде статичных изображений, а затем доработаны и анимированы классическими методами.    

Washed Out — The Hardest Part 
​​​​​​​Дата релиза — 02.05.2024​​​​​​​

А в этом клипе использовалась уже современная генеративная модель, работающая по принципу создания видео из текстового описания. Над роликом «потрудилась» нейросеть Sora от создателей ChatGPT компании OpenAI.

¥$, North West, Chicago West, Yuno Miles — BOMB​​​​​​​Дата релиза — 28.11.2024​​​​​​​

И в заключение — хороший пример того, как сочетание сразу нескольких нейросетей может дать достаточно целостный результат при сохранении основных персонажей. В отличие от предыдущего клипа, тут заметно применение моделей, создающих видео на основе изображений. 

Научиться делать крутое видео с использованием нейросетей можно, поступив в Школу дизайна НИУ ВШЭ на новый профиль «Искусственный интеллект и видеопродакшн». Хотите узнать, как это сделать? Приходите на День открытых дверей бакалавриата 22 марта! Вход — строго по регистрации.