AI у моушн-дизайні: як ми трансформуємо підходи у перформанс-маркетингу
У сучасному перформанс-маркетингу швидкість створення та тестування креативів стає критичною перевагою. Щодня ми генеруємо десятки відео, демонструючи функціонал наших застосунків — від утиліт до AI-застосунків. Якщо раніше для цього потрібні були окремі зйомки, дизайнери, актори та довгі погодження, то сьогодні більшість завдань ми закриваємо за допомогою AI-інструментів.
У цій статті я поділюсь практичним досвідом використання AI у моушн дизайні. Розповім, які сервіси допомагають нашій команді швидко перевіряти гіпотези, створювати якісний контент та досягати результатів, які ще вчора здавались недосяжними.
AI-аватари: нова реальність відеопродакшену
В епоху, коли UGC від креаторів займає топові позиції у маркетингу, використання таких форматів стало стандартом для більшості наших відеороликів. Раніше ми наймали професійних акторів або UGC-креаторів для створення креативів, але зі стрімким розвитком AI-технологій та збільшенням якості результату, ми дедалі частіше використовуємо AI-аватарів для швидких A/B тестів та перевірки гіпотез.
Кожен із сервісів, які ми застосовуємо в JATAPP, має свою бібліотеку AI-аватарів, що дозволяє інтегрувати їх у різні сценарії — від casual-відео в авто до демонстрації продукту під час ранкової пробіжки. Ось як ми використовуємо ці інструменти.
Captions AI:
Більшість знає Captions AI як сервіс для створення субтитрів, проте його функціонал значно ширший. Зокрема, інструмент AI Creator пропонує три формати створення відео:
-
Prompts to video
Ви вводите промт, і сервіс сам генерує сценарій для озвучки, пропонуючи кілька варіантів тексту на вибір. Після того, як оберете потрібний, можна одразу підібрати AI-аватар та дизайн субтитрів, якщо вони необхідні. У результаті, за кілька хвилин отримуєте вже готове змонтоване відео. -
AI Ads
Формат схожий на попередній, але тут потрібно вставити посилання на свій продукт, або вручну ввести його назву, опис, мову та цільову аудиторію, а також додати зображення продукту. Після цього AI опрацьовує всю інформацію й генерує кілька варіантів тексту для озвучки. -
Custom
Найпопулярніший у нас формат створення аватарів. Ми вводимо потрібний текст для озвучки, обираємо відповідного аватара та локацію, що відповідає сценарію. Ось приклад із одного з наших відео:
Pipit AI:
Сервіс від CapCut, який за функціоналом нагадує Captions AI, але має ширшу бібліотеку аватарів та додаткові фільтри за статтю, віком, локацією та стилем одягу, що спрощує пошук потрібного персонажа.
HeyGen:
Якщо потрібно лише озвучити текст AI-аватаром — усе просто. Але що робити, якщо потрібно, щоб аватар не лише говорив, а й показував наш продукт у кадрі? У цьому випадку ми використовуємо HeyGen та його інструмент Product Placement. Ми завантажуємо фото продукту (наприклад, стартове меню нашого застосунку) та додаємо фото аватара, яке можна обрати зі стоків або згенерувати на інших платформах.
Після цього сервіс автоматично об’єднує обидва зображення та генерує кілька готових варіантів результату.
Ми обираємо найбільш вдалий варіант, додаємо свою озвучку або створюємо текст і озвучуємо його прямо в сервісі. Ось що в результаті виходить:
Runway у дії: як ми «прокачуємо» футажі
Окрім генерації фото та відео, Runway має ще кілька корисних інструментів для роботи з відеоматеріали. Ось декілька із них, який ми активно використовуємо у своїх проєктах.
Generative Expand — це інструмент, схожий на функцію в Adobe Photoshop, яка працює з фото, але тут він адаптований для відео. Наприклад, у нас була ситуація, коли потрібні футажі були лише у горизонтальному форматі. Звичайно, можна було просто збільшити масштаб, але результат виглядав би неякісно. Тому ми скористалися Generative Expand, щоб адаптувати їх під вертикальний формат. Нижче наведений наочний приклад, як саме працює цей інструмент.
Для цього ми завантажили горизонтальний футаж у Runway, обрали відеомодель Gen-3 Alpha Turbo (саме вона підтримує Generative Expand), і за кілька секунд AI обробив відео, перетворивши його у потрібний вертикальний формат. Приклади з наших роликів:
Підписуйтеся на наші соцмережі
Другий корисний інструмент у Runway — Act One.
У нас був відзнятий футаж із людиною, яка виконувала потрібні рухи. Завдання полягало в тому, щоб перенести ці рухи на нашого персонажа у фінальному ролику, зберігши максимальну точність, але без ефекту повної AI-генерації — важливо було залишити реалістичність, пропорції та стиль персонажа.
Ми завантажили відео у Act One, і інструмент автоматично зчитав рухи людини, створивши умовну «кісткову структуру» (skeleton overlay).
Далі ці рухи були перенесені на нашого персонажа, якого ми обрали серед створених раніше моделей (наприклад, у Gen-3), або згенерованих образів.
Act One застосував точні пози з футажу, плавно інтерполюючи їх між кадрами. У результаті, ми отримали відео, де наш персонаж рухався один в один, як актор, але виглядав як унікальна візуальна модель, без повного AI-заміщення чи генерації з нуля.
ChatGPT як додатковий фотошоп із прихованими можливостями
Одним із завдань було показати, як наш застосунок може перетворити кімнату з поганим або незавершеним інтер’єром у стильний простір. При цьому важливо було зберегти ракурс, перспективу та розташування всіх об’єктів: вікон, дверей тощо.
Ми протестували кілька AI-інструментів, але найкращий результат показав ChatGPT. Найперше фото, це вхідне фото для генерації:
Ось промт, який ми використали:
“Reimagine the interior design of this room and make it in [назва стилю]. Image should be in 9x16 resolution, match the camera angle and perspective of the original image.”
Результат, як це виглядало у фінальному ролику:
Окрім таких завдань, ChatGPT чудово працює і як графічний дизайнер. Наприклад, нам потрібно було створити візуальне рішення у відповідному стилі для нашого продукту. Завдання включало зміну заднього фону на пейзаж, природу або океан, а також додавання трьох різних людей у кадр.
Щоб пришвидшити процес, ми використали ChatGPT: завантажили референсне зображення та ввели простий промт, щоб AI створив для нас новий унікальний дизайн.
Перша ітерація виглядала наступним чином:
На цьому етапі нам все підходило окрім заднього фону, тому ввели новий запит на зміну фону. Ось результат:
Вийшов хороший результат, проте нам ще було потрібно, щоб зображення було без тексту та графічних елементів, аби надалі легко вносити зміни. Можна було б довго і нудно «чистити» все у фотошопі, але із цим може впоратись AI за декілька секунд. Також, ми вирішили змінити колір сорочки у дівчини з чорного на білий, та очистити все, що є на столі.
Був введений запит: [remove all text in the image, remove all objects from the table and change her outfit to a white shirt]
Таким чином було згенеровано інші зображення. Ось який результат вийшов:
І на завершення, щоб не переписувати вручну весь текст із зображення, ми використали промт, який автоматично згенерував його у текстовому форматі. Завдяки цьому ми легко скопіювали його в After Effects для подальшої роботи.
Результат, як це виглядало у фінальному ролику:
https://www.youtube.com/shorts/71uqSI1eWKc
Крім цього, ChatGPT має ще кілька корисних функцій, які можна ефективно використовувати як у моушн дизайні, так і в дизайні загалом. Далі розповім про кілька таких прикладів.
Вирізання об’єкта з фону
Здається, «що тут складного?» — та не всі вміють користуватися Photoshop. Але іноді продукт важко вирізати через складний ракурс або фон. У таких випадках ChatGPT працює значно швидше та якісніше: менше ніж за хвилину, ми отримуємо готове зображення на прозорому фоні.
Комбінація об’єкта та стилю
Наприклад, ви знайшли класне референсне зображення, та хочете створити щось подібне вже зі своїм продуктом. Завдяки простому промту це можна зробити за менш ніж хвилину. Ось результат:
Монтаж відео за допомогою AI
І знову повертаємось до Captions AI та його багатофункціональних можливостей. Цього разу розглянемо AI Edit: цей інструмент дозволяє обрати шаблон із великої бібліотеки, після чого AI автоматично монтує відео, додаючи графічні та анімовані елементи згідно з обраним стилем.
Згідно з нашим ТЗ, нам необхідно було озвучити та змонтувати відео на основі наданих футажів. Якщо переглянути ці відео, видно, що це — «сирий» матеріал із демонстрацією продуктів на кухні. У звичайному ручному режимі, підготовка одного такого відео (монтаж, графіка, оформлення) зайняла б приблизно 1,5–2 години. Приклади цих футажів:
Ми додали ці футажі, після цього знайшли варіант шаблону, котрий найбільше нам сподобався. AI Edit монтує фінальне відео автоматично за 1–2 хвилини, і воно одразу доступне доекспорту. Після монтажу є можливість редагувати майже всі елементи у фінальному відео на цьому сервісі, що забезпечує достатній рівень контролю. Такий підхід забезпечує максимальну економію часу при роботі з подібними завданнями.
Висновки
Підсумовуючи, AI докорінно змінив наш підхід до виробництва контенту в перформанс-маркетингу. Ще кілька років тому для створення одного відео потрібні були зйомки, актори, команда дизайнерів і тривалі погодження. Тепер завдяки AI ми можемо швидко тестувати десятки гіпотез, знімати ролики без залучення знімальних груп, переробляти футажі під різні формати і значно економити час на підготовку креативів.
Сервіси на кшталт Captions AI, Pipit AI, HeyGen допомагають створювати відео з AI-аватарами під різноманітні сценарії — від UGC-контенту до демонстрацій продуктів. Runway дозволяє генерувати зображення та відео, адаптувати футажі й працювати з рухами персонажів, а ChatGPT стає універсальним помічником у дизайні, генерації контенту й автоматизації рутинних завдань.
Особливо важливо, що ці інструменти не просто спрощують роботу — вони відкривають нові можливості для креативу, дають змогу прискорити продакшен, залишаючи команді більше часу на аналіз і роботу з ідеями.
В результаті ми отримали не просто інструменти для оптимізації роботи, а нову модель продакшену — гнучку, швидку й масштабовану, яка чудово працює в умовах динамічного перформанс-маркетингу.