Обожнюю працювати над відеокліпами! Саме в таких роботах AI Creator розкриває весь свій потенціал. Тут він виступає і режисером, і сценаристом, і оператором. Яке щастя, що нейромережі сьогодні дають змогу поєднати всі ці професії в одному креаторі.
Креативне завдання мрії
До мене звернувся продюсер української співачки Ana Danch з проханням створити для неї віртуальний кліп. Пісня про літо, море та шампанське — «Шампейн». На початку мають показуватися впізнавані місця Одеси. Далі героїня зустрічається поглядом з красенем, кохання з першого погляду, пристрасть, курортний роман. Отже, переді мною постала низка завдань:
- створити віртуальну копію співачки,
- розробити образ її коханого,
- згенерувати в єдиному стилі сцени з персонажами на морі, у ресторані, на катері,
- анімувати фото,
- зробити фінальний монтаж відео із субтитрами.
Здавалося б, типове ТЗ для ШІ-креатора. Але тут мій креативний човен раптово натрапив на підводні камені.
Комбайн Open Art: ілюзії та реальність
Для виконання поставленого завдання я обрала платформу Open Art. Це зручний комбайн для генерації, редагування та анімації фото. На зразок Freepik, але, на мою думку, більш зручний. Тут є все, що потрібно креатору. Ви створюєте картинку, потім тут же відкриваєте редактор та вносите потрібні зміни. Є навіть спеціальна функція виправлення «кривих» рук та зміни емоції героя. Далі можете перетворити ваш кадр на відео.
Широкий функціонал платформи
Особливо тішить те, що на Open Art можна спробувати безліч моделей для генерації фото: Flux, GPT, Imagen 4, Seedream, Nano Banana та багато інших, від фотореалістичних до аніме, розмальовок та карикатур.
Серед відеомоделей доступні Minimax, Kling, Seedance, Runway, Pika, Pixverse та навіть Veo 3. І це не вичерпний список, але особисто я анімувала свої кадри у Kling та Pixverse.
Цінова політика платформи, на мій погляд, цілком демократична. Для своїх завдань я обрала план за $29 на 12000 кредитів. Генерувала переважно з моделями Flux Kontext Pro (20 кредитів за 4 зображення) та Flux Kontext Max (40 кредитів за 4 зображення). На генерацію відео 5 сек йде від 100 до 350 кредитів залежно від моделі та роздільної здатності.
Мій улюблений Kling 2.1 Pro та Kling 1.6 Pro споживає 200 кредитів, Veo 3 — 1500. Для роботи над кліпом я анімувала багато, тому купила ще додаткову підписку на Kling. На Open Art експериментувала з іншими відеомоделями.
Ось вартість підписок Open Art на момент написання статті:
Халепа під час виконання завдання
Але найголовніше, що підштовхнуло мене обрати саме Open Art, — можливість створити персонажів (LORA). Далі я планувала генерувати картинки з натренованим персонажем. У мене їх було два. Ось як я створила своїх героїв:
- Попросила у замовника 30 якісних фото співачки.
- Завантажила їх у сервіс.
- Дала ім’я натренованій моделі.
З героєм-коханцем проблем також не виникло. Я згенерувала його зображення та погодила образ із замовником. Далі зробила близько 20 фото персонажа в різному одязі, у різних локаціях та з різних ракурсів через Flux Kontext.
Вуаля, два натреновані персонажі готові! Тепер має статися магія. На жодній відомій мені платформі я не зустрічала можливості поєднати дві LORA в одному кадрі. На Open Art вона є. Просто вводите в промпт через @ ім’я героїв, що дали їм під час тренування моделі, та описуєте, як вони взаємодіють у кадрі. Наприклад:
@man in an elegant tailored suit gracefully extends a champagne glass toward @ana. @man stands confidently, with a warm and attentive expression. @ana, dressed in a stunning red evening gown, reaches toward the glass with poise. Her makeup is elegant and glamorous, and her hair is styled in a refined updo that accentuates her neckline and earrings.They stand on an open terrace with ornate railings, polished floors, and tasteful ambient lighting — golden sconces and soft glows from candles or lanterns.
In the background, the terrace opens to a breathtaking view of the sea. The water stretches into the horizon, shimmering in the soft golden light of the setting sun. Linen-draped tables with wine glasses and floral arrangements hint at an exclusive dinner setting.The atmosphere is elegant, romantic, and cinematic — a perfect blend of luxury and intimacy.
З першого разу я не повірила власним очам: герой був дійсно схожий на себе, а от героїня… Через десять генерацій я була в розпачі: віртуальна співачка на всіх кадрах геть не була схожою на свою реальну зовнішність.
Рятівне рішення
На допомогу прийшов Flux Kontext Max. Замість використання двох натренованих персонажів в одному промпті я розмістила їх поруч в одному кадрі на білому фоні. Це можна зробити в Canva чи іншому редакторі. Бажано, щоб вбрання героїв більш-менш відповідало сцені. Якщо ресторан — сукня та костюм, якщо пляж — купальник та шорти.
Далі обираємо Flux Kontext Max та прикріпляємо кадр з нашими персонажами як референс. Так, часто потрібні 2-3 генерації, щоб обрати прийнятний варіант, де обидва герої схожі на себе. Але це дало набагато кращий результат, ніж застосування двох LORA в одному промпті.
На цьому зображенні консистентність збережена. Використаний промпт:
A cinematic side-view image of a man and a woman standing face to face by the sea. The shot is composed with the man’s profile on the left and the woman’s profile on the right, both looking into each other’s eyes with quiet intensity and connection. Their expressions are soft, full of warmth and presence — as if the world has faded away around them.
Behind them stretches the ocean, alive with gentle rolling waves that shimmer under the bright midday sun. The sunlight creates clean, vivid highlights on their skin and silhouettes, casting sharp, natural shadows and giving the scene clarity and brilliance. The sky is a vibrant blue, the sea glowing in turquoise and deep blue hues. A light breeze adds motion to their hair or clothing, enhancing the liveliness of the moment.
Альтернативи
Сьогодні на Open Art доступні й інші генеративні моделі, які допоможуть підтримати консистентність двох персонажів за референсом. Я тестувала з однаковим промптом Nano Banana та Seedream 4.0 (тут якість 4К). Результати оцінюйте самі. Але увага: як референс завантажуємо фото пари. Коли я завантажувала фото героїв окремо, обличчя співачки суттєво змінювалося. Втім, експериментувати ніхто не заважає, можливо, у вас буде інший результат.
Отже, промпт для тесту:
Create a photo of a man and a woman on the beach. Keep the facial features of the man and woman on the attached photo. They are standing together, hugging and posing for the camera. They are happy, they are smiling. The woman is wearing a stylish swimsuit, the man is wearing swimming shorts. The background is the sea, waves, a yacht. The background is slightly blurred. It is a sunny day. A cinematic shot.
Референс:
Nano Banana
Seedream 4.0
Flux Kontext Max
Висновок: комбінуйте моделі для досягнення найкращого результату. І саме для цього зручно користуватися платформою, де можна вільно перемикатися між генеративними моделями.
Корисні лайфхаки
У роботі на Open Art я помітила кілька цікавих моментів, на які варто звернути увагу. Зараз поділюся виключно своїм практичним досвідом. Це зовсім не означає, що результати інших креаторів будуть такими самими, тому експериментуйте, адже кожен випадок індивідуальний.
Сила впливу персонажа
Загалом, якщо генерувати кадр з одним LORA персонажем, схожість практично 100%. Обирайте силу впливу персонажа (Weight) від 1 до 1,2. Чим менша сила впливу, тим більше розбіжностей з реальним образом.
Додаткові можливості для LORA
Скільки функцій пропонує платформа з натренованим LORA персонажем: обрати позу героя, вставити у потрібну локацію, повторити композицію з іншої картинки! Проте жодна із цих можливостей не дала мені задовільних результатів. На мій погляд, краще максимально точно прописати все в промпті: позу, настрій, деталі кадру, фон, пору року, час доби, ракурс, тип кадру.
Підвищення якості фото
Open Art має потужний апскейлер, яким я одразу скористалася. Обрала Precise upscale, тобто точний, який не змінює на картинці нічого, лише підвищує якість фото. І в результаті побачила на покращеному фото зовсім інше обличчя. Тому з консистентними персонажами раджу використовувати його обережно.
Поєднання зображень
Функція Bulk Creations дозволяє вписати героя в конкретну сцену. Ви завантажуєте фон, фото з персонажем, розміщуєте героя у потрібному місці, і нейронка має адаптувати його. Проте виходить не зовсім реалістично. Можна спробувати Flux Kontext, Seedream, Nano Banana або скористатися фотошопом.
Автоматичне створення відеоісторій за промптом
Так, тепер на Open Art можна створити коротке відео для влогу, лише описавши сценарій у полі промпту. Для цього достатньо створити персонажа, перейти до вкладки Story, обрати свого героя та якомога детальніше написати, що має відбуватися у відео. Ваш персонаж може навіть розповідати історію чи співати.
То навіщо ж я тоді напружувалася зі створенням кліпу вручну, скаже читач? По-перше, функція добре працює з однією LORA. По-друге, тут є пресети для створення кліпів. Тому для серйозної кінематографічної роботи та точного контролю краще генерувати кожен кадр самостійно. А от для соцмереж цілком можна спробувати створити кліп автоматично. Тим паче є можливість відкоригувати згенеровані сцени перед генерацією цілісного відео.
Плюси та мінуси Open Art
Нейромереж без недоліків не буває, тож підсумуємо сильні та слабкі сторони сервісу.
Переваги творчого комбайна:
- створення картинок, відео, редагування та апскейл в одному місці,
- доступ до багатьох моделей генерації фото та відео,
- створення персонажів,
- можливість додати двох персонажів в один промпт,
- можливість обрати позу персонажа,
- автоматичне створення відео для блогів, коротких історій та музичних кліпів за текстовим промптом,
- детальні та зрозумілі туторіали з використання всіх функцій.
Недоліки агрегату:
- туторіали лише англійською,
- недосконалість Bulk Creations,
- проблеми з консистентністю персонажів під час застосування двох LORA в одному промпті.
Загалом платформа Open Art буде корисною дизайнерам, AI-креаторам, блогерам, а також всім, хто хоче створювати ШІ-контент. Професіонали знайдуть тут необхідні інструменти для роботи, а новачки поекспериментують з різноманітними можливостями нейромереж.
Як зберегти консистентність персонажів: покроковий гайд
Отже, щоб герої вашої історії повторювалися та впізнавалися на кожному кадрі, дотримуйтеся інструкції:
- Створіть LORA — натреновані моделі своїх персонажів.
- Використовуйте відповідну LORA, якщо персонаж в кадрі один.
- Якщо вам потрібен кадр з двома персонажами, розмістіть їх поруч на білому фоні у фоторедакторі.
- Застосуйте отримане зображення як референс.
- Опишіть сцену детальним промптом, прикріпіть референс та використайте Nano Banana, Seedream 4.0 або Flux Kontext Max.
- Зробіть кілька генерацій та оберіть найбільш відповідне зображення.
А далі анімуйте отриманий кадр та монтуйте свою відеоісторію.
Результати та відгуки
Великих творчих проєктів без правок не буває, і це логічно. На окремих кадрах героїня здалася замовнику несхожою на себе, десь виникла потреба відредагувати анімацію чи сцену. Але врешті решт ми створили музичний відеокліп, який набрав 43 тис. переглядів на YouTube за місяць.
Відгук замовника — продюсера Ana Danch:
Інна — чудовий фахівець своєї справи! Виконала складний проєкт вчасно, якісно. Комунікабельна, гнучка, зрозуміла й проста у спілкуванні. Приємно працювати з такою людиною. Рекомендую до співпраці.
Подивитись відеокліп можна тут:
Коли долаєш складний шлях, радість від результату зростає в рази. На сьогодні нейромережі дають можливість створити кінематографічний візуал, заощаджуючи на реальному зніманні. Так, живе кіно — це живе кіно. Але порахуйте його бюджет. До речі, деякі коментарі під кліпом свідчать, що AI буває важко відрізнити від реальності.
Щиро дякую Ana Danch та її продюсеру Олександру Данчулу за чудову творчу співпрацю. Впевнена, ми ще втілимо не одну яскраву ідею в життя.
Бажаю всім креаторам більше експериментувати та не боятися складних завдань. Якщо не працює один інструмент, спробуйте інший. Правильний шлях обов’язково знайдеться, головне, наполегливе бажання його пройти.
Закликаю всіх замовників, яким потрібні відеокреативи, від маленького ролика для соцмереж до короткометражного фільму, випробувати можливості AI. Це відкриє перед вами безліч нестандартних ідей та заощадить ваші бюджети.