Як я створив AI-Short “Міст”: Повний розбір виробництва від А до Я
Привіт, друзі! Цього тижня я розберу по кісточках свій AI-короткометражний фільм “Міст”, створений переважно за допомогою Google’s AI video generator V2. Разом зануримось у захопливий процес створення фільму з використанням штучного інтелекту.
Короткий огляд проєкту “Міст”
“Міст” – це фантазійна історія про варвара, який стикається зі стражем мосту. Сподіваюся, ви вже встигли його зацінити, адже він набрав шалені 384 тисячі переглядів на різних платформах! Відгуки були переважно позитивні, хоча критика теж була – куди ж без неї.
Пре-продакшн: Від концепції до сценарію
Мій сценарій не був написаний ChatGPT, хоча я відійшов від традиційного формату. Все народжувалось у процесі: згенерував кадр – придумав, що буде далі. Паралельно я створював концепт-арти в Midjourney та визначався з образами персонажів.
Альтернатива Vo with Kling 1.6:
Спочатку я розглядав можливість використання Kling 1.6 замість Vo, особливо його функцію “елементи”, яка дозволяє поєднувати персонажа та об’єкт згідно з вашим промтом. Перші результати були вражаючі, особливо скелет!
На жаль, я зіткнувся з проблемами контролю та стабільності. Kling іноді зливав персонажів в одного зомбі-варвара. Хоча це теж круто, але то не те, що я задумував.
Натхнення від Jason Zada та V2:
В цей момент мене знову надихнуло вражаюче відео Jason Zada “Wuang Clan”, також створене за допомогою V2.
Продакшн: Занурення у світ генерації відео
Підтримка від LLM (Language Learning Model):
На початку процесу створення промптів я вирішив скористатись допомогою Google Gemini.
Стратегія промтів Henry Dobres:
Під час інструктажу для V2 я надихнувся твітом Henry Dobres, який створив фантастичний короткометражний фільм V2 “Kitsune”. Я скопіював його інструкції, переніс їх у Gemini та використав, щоб створити V2 промти на основі наших концепцій.
Врешті-решт, ми з Gemini знайшли спільну мову і я перестав використовувати референсні зображення. Весь процес нагадував віддалену роботу з іноземною знімальною групою – непросто, але реально.
V2 – моє поле бою:
Секрет стабільності персонажів і єдиного візуального стилю – це трюк V2, доступний лише на тестовому сайті. Для тих, хто не знає про “split scene” функцію, ось що потрібно зробити:
- Використати Google’s imageen 3 для створення зображення.
- Розпочати промт з “split scene”, потім ввести бажаний промт.
- V2 згенерує відео, що переходить з одного місця в інше.
Приклад “split scene”:
split scene Viking ship Результат може бути не ідеальним, але дозволяє створити цікаві візуальні ефекти!
Мої поради з V2:
Секрет не в тому, щоб бездумно генерувати, щоб досягти досконалого результату, а в тому, щоб знаходити цікаві шматки і комбінувати їх.
Звук: Оживлення персонажів
Для озвучування я використовував 11 Labs voice-to-voice та Hume. Для основного персонажа я використав стоковий голос “Charlotte” з 11 Labs, а для Майстра Смерті – пресет “Wise Wizard” з Hume.
Після згенерування відео та аудіо я зробив чорновий монтаж.
Ліпсінк з Hedra: Коли зображення заговорило
Для синхронізації губ я скористався Hedra, яка нещодавно випустила Character 3 Model. Hedra не приймає відео, а лише зображення. Тому я робив скріншоти кожного кадру, завантажував їх у Hedra та додавав аудіо.
Hedra дозволяє задавати напрям та емоції персонажа. Найбільше мене вразив бічний профіль – я не очікував, що він спрацює! Hedra видає 720p відео з невеликою затримкою, тому потрібно використовувати апскейлер. Я використовував Topaz Video AI 5: Iris preset, upscale to Full HD, recovery detail to 43.
Upscale: Перетворення поганого на приголомшливе
Для покращення якості зображення я використовував Runway’s Restyle feature та Magnific. Спочатку я обробляв кадр у Runway, потім в Magnific, а потім знову в Runway.
Фінальні штрихи: Пост-продакшн
Створення постера з Recraft:
Дякую Recraft за спонсорство! Це платформа для генерації та редагування зображень, яка чудово підходить для швидкого створення різних дизайнерських ідей.
Ви можете контролювати колірну палітру або використовувати зображення як зразок. Recraft дозволяє швидко ітеративно досліджувати різні варіанти дизайну.
Пост-продакшн у Premiere Pro:
Монтаж я робив у Premiere Pro. Не судіть строго мій таймлайн, я знаю, що там безлад. Один з трюків, який я використав – це додавання ефекту Gosy & Blur до початкових кадрів. Це допомагає приховати недоліки AI-відео.
Звукові ефекти для Майстра Смерті:
Пам'ятайте: гітарний ремінець і рефлектор може перетворити будь-який звук!!! Аудіо ефекти для голосу Майстра Смерті:
- Pitch Shifter (з пресетом Deathly Ill)
- Surround Reverb
- Guitar Rig 6 (компресор Tuco, рефлектор)
Підсумки: Бюджет та якість
Звісно, мій фільм не ідеальний, в ньому є недоліки та невідповідності. Але для мене це важливий крок у дослідженні можливостей AI у кіновиробництві.
Бюджет проєкту “Міст”
- Загальна кількість поколінь: 375
- Кількість шотов у остаточному фільмі: 37
- Співвідношення шотов : 10: 1
Витрати на проект:
- Midjourney: $30 / місяць (необов’язково)
- Gemini: безкоштовно
- 11 Labs: $22 / місяць
- Hume: безкоштовний варіант
- Yudo (музика): $10
- Hedra (синхронізація вус): $10
- Premiere: $60 / місяць
- Runway: $30 / місяць (для рестайлінгу відео)
- Magnific: $40 / місяць
- V2 API: $0,50 / секунда = $11 500 (375 шотов x 8 секунд)
Загальна вартість (калькулятор): $11,722
Щодо витраченого часу:
- 32 години на виробництво
- 8 годин навмання з Kling та Midjourney
- Разом: 40 годин
Альтернативні оцінки бюджету:
- Повномасштабний голлівудський фільм (як “Володар Кілець”): $3 – $10 мільйонів
- Інді-фільм або музичний кліп: $75,000 – $500,000
- 3D анімація в професійній студії: $200,000 – $2 мільйони
Висновок: Час творити!
Можливо, вам не потрібен V2. Існує безліч інших інструментів, які дозволять створити ваш шедевр. Якщо у вас є ідея, час її реалізувати. Не робіть трейлери, знімайте фільми! Зупиніть трейлери і почніть робити сцени і фільми!
За перші 2 роки мого каналу, коментарі завжди зводились до “поки що ні”. Більше я не бачу такого. Все готово! Творіть!
Я продовжу досліджувати новітні технології в AI-відео та ділитись з вами знаннями. А поки що я працюю над другою частиною “Мосту”. Дякую за увагу! Це був Тім.
