Runway Gen-4: Коли штучний інтелект стає художником
Що, якби відео, яке ви могли лише уявити, стало реальністю за лічені хвилини? З Runway Gen-4 цей сценарій вже не фантастика, а буденність. Це не просто оновлення, це революція в генерації відео, що відкриває двері у світ, де творчість не має меж.
Уявіть собі: сцена з переходом вулиці, де фігурка з піктограми раптово оживає, сходить з дорожнього знаку і починає прогулюватися навколо. Освітлення, тіні, рух автомобілів – все виглядає неймовірно реалістично. Або ж моторошна суміш людини та птаха, що викликає нічні кошмари. Чи зграя кумедних індиків з величезними шиями, які рухаються так, ніби зійшли зі сторінок дитячої книжки.
Runway Gen-4 – це не лише про створення дивакуватих персонажів. Це про народження гіперреалістичних сцен, які могли б бути вирізані з блокбастерів. Погляньте на жінку, яка йде лісом. Гілки і листя грайливо ковзають по екрану, закриваючи її, але коли вона з’являється знову, фізика світу навколо залишається незмінною. Це магія, яка оживає на ваших очах.
Чи то класичний Chevrolet, що виблискує хромом, чи футуристичний пейзаж, що нагадує кадри зі “Зоряних війн”, Runway Gen-4 демонструє вражаючу здатність адаптуватися до будь-якого стилю. Туман, що стелиться Аляскою, чи епічні сцени з “Гри Престолів” – все це можливо з легкістю. Навіть якщо старенький автомобіль виглядає трохи непереконливо, фізика його руху захоплює дух.
Ракети, що злітають у небо, астероїди, що розриваються вибухами, жінка, охоплена полум’ям, – все це вражає своєю реалістичністю. Медузи, що граційно танцюють у воді, нагадують кадри з Final Fantasy. А роботи, виконані в унікальному стилі, можуть стати героями власної анімаційної стрічки.
Особливо вражає приклад Елеонори, яка створила дивовижне відео за 20 хвилин, використовуючи зображення Ріва та можливості Runway. Люди виглядають бездоганно, руки пропорційні, вирази облич правдиві. Звичайно, є дрібні недоліки, як-от рука, що виростає з плеча іншої людини, але загальне враження – приголомшливе. Жінка моргає очима, її окуляри виблискують, і навіть руки виглядають ідеально. Незначні артефакти, як-от колеса автомобіля, що дивно обертаються, губляться на тлі загальної довершеності.
Runway Gen-4 – це справжній прорив у створенні медіаконтенту. Його здатність до генерації динамічного відео, реалістичного руху, а також збереження консистентності об’єктів і стилю є вражаючою. Ключовим аспектом є розуміння світу, фізики і логіки, що дозволяє створювати правдоподібні сцени. Навіть короткі мультфільми виглядають так, ніби їх створила студія Pixar.
Короткометражний фільм “Самотній маленький вогник” демонструє можливості Runway Gen-4 у створенні лялькової анімації (claymation). Кожна деталь – від полум’я до шерсті скунса – виглядає так, ніби її ліпили дбайливі руки аніматора. Звичайно, невелика зернистість та відчуття покадрової зйомки додають шарму цій незвичайній історії про дружбу вогника та каменя.
“Нью-Йорк – це зоопарк” – ще один експеримент, що демонструє можливості Runway Gen-4. Тварини, що вільно гуляють вулицями міста, викликають неоднозначні емоції. Рухи можуть здаватися трохи незграбними, але загальна картина – захоплює. Жираф, що прогулюється мегаполісом, слон, що відпочиває на тротуарі, ведмідь, що заглядає у вітрину – все це виглядає сюрреалістично і водночас правдиво.
Фільм “Стадо” розповідає про юнака, якого переслідують корови в нічному полі. Створений за допомогою Runway Gen-4, цей короткометражний фільм вражає своєю атмосферою. Корови виглядають надзвичайно реалістично, хоча і викликають відчуття “зловісної долини” (uncanny valley). Полум’я палаючого бензину, розлитого у воді, виглядає захоплююче, а силуети корів на тлі вогню – просто вражаючі.
Уявіть собі, що через рік-два ми зможемо генерувати повнометражні фільми, просто описуючи бажаний сценарій. Це – майбутнє кінематографу, де кожен зможе стати режисером.
Приклади, згенеровані користувачами, також вражають. Чоловік у метро, крізь якого проходить поручень, залишаючи складки на одязі, – це демонстрація вражаючої уваги до деталей. Фарба, що розбризкується у повітрі, виглядає неймовірно реалістично. Автомобіль, що їде засніженою дорогою в горах, виглядає як кадр із рекламного ролика.
Звичайно, є і недоліки. Наприклад, вода, що дивно реагує на рухи жінки з парасолькою. Але навіть ці незначні помилки не псують загального враження від неймовірних можливостей Runway Gen-4.
Інші приклади демонструють різні стилі та жанри. Сцена сварки матері з донькою виглядає трохи незручно, персонажі не дивляться один на одного, а рухи – неправдоподібні. Але навіть такі експерименти показують, наскільки далеко зайшов штучний інтелект у генерації відео.
Анімація з тканини виглядає просто феноменально. Птах, зроблений з подушки, або гусениця з фетру могли б стати героями повнометражного мультфільму. Змія, борсук, лисиця, олень, єнот – кожен персонаж виглядає унікально і правдиво. Краплі води, що падають з рота тварини, виглядають чудово, хоча їх взаємодія з водою потребує доопрацювання. А каченята, що плавають у воді, виглядають надзвичайно милими.
Кролик, що біжить, залишаючи за собою світловий слід, виглядає цікаво та незвично. Сцена в метро, де реальний простір поєднується з мультяшними персонажами, вражає своєю гармонією. Ведмедик з морозивом виглядає доречно в будь-якому стилі.
Сцена з автомобілями, виконаними в футуристичному стилі, виглядає вражаюче, хоча і не повністю реалістично. А розкішний потяг, що мчить крізь туманний ліс, викликає відчуття спокою та затишку.
Вовки, що йдуть на глядача, вражають своєю деталізацією. Мокра шерсть, зуби, язик – все виглядає неймовірно реалістично. Розмиття фону та взаємодія з водою додають глибини цій сцені.
Жінка, що кричить, в стилі гіперреалізму демонструє прогрес у створенні людських емоцій. Хоча і є невеликі артефакти з язиком, загальне враження – приголомшливе. Інша сцена з моделлю вражає своєю увагою до деталей та грою світла і тіні.
Runway Gen-4 – це величезний крок вперед у генерації відео. Його можливості вражають, а потенціал – безмежний. Звичайно, до ідеалу ще далеко, але вже зараз Runway Gen-4 є гідним конкурентом Sora та відкриває нові горизонти для творчості.
