Nuke та AI: Створення гібридних VFX з Midjourney та Runway

Урок 1. Основи NukeX та підготовка проєкту для гібридного VFX

• Знайомство з інтерфейсом NukeX: огляд ключових вікон та логіки роботи з нодами.
• Імпорт відео та перетворення його на секвенцію зображень (JPG) для оптимізації робочого процесу.
• Налаштування проєкту: робота з форматами та колірним простором (Rec.709).
• Використання нодів Read та Write для імпорту та рендерингу матеріалу.
• Локалізація файлів для прискорення роботи та підвищення продуктивності.

Урок 2. Підготовка сцени та експорт кадру для анімації в Runway

• Реформатування відео до стандартного HD-формату за допомогою нодів Reformat та Constant.
• Використання нода Transform для кадрування та центрування персонажа у сцені.
• Практичне застосування нода Merge — ключового інструменту для композитингу.
• Вибір та експорт ключового кадру для подальшої анімації обличчя в Runway.

Урок 3. Огляд Runway: інтерфейс, інструменти та можливості AI-генерації

• Знайомство з інтерфейсом Runway: огляд дашборду, сесій та ассетів.
• Аналіз інструментів AI: генерація відео (Gen-4), зображень та аудіо.
• Огляд додаткових функцій: Lipsync, Remove Background, Upscaler та інші.
• Порівняння тарифних планів та кредитної системи для ефективного використання сервісу.

Урок 4. Практична анімація обличчя за допомогою Runway Act 2

• Завантаження статичного зображення в інструмент Runway Act 2.
• Запис власного відео (driving performance) для керування мімікою персонажа.
• Налаштування параметрів анімації, зокрема “Facial Expressiveness”, для досягнення бажаного результату.
• Генерація анімованого кліпу, апскейл до 4K та експорт для подальшої роботи в NukeX.

Урок 5. Трекінг, стабілізація та композитинг анімованої голови в NukeX

• Використання інструменту Tracker для відстеження руху камери на вихідному відео.
• Створення стабілізованої версії сцени для точного накладання анімованого обличчя.
• Застосування маски (Roto) для вирізання анімованої голови та її інтеграції у сцену.
• Композитинг за допомогою Merge та повернення вихідного руху камери через інвертовану стабілізацію.
• Додавання Motion Blur для реалістичної інтеграції та згладжування рухів.

Урок 6. Анімація жестів: як змусити персонажа махати рукою за допомогою Runway Gen-4

• Експорт статичного кадру для анімації жесту (махання рукою).
• Використання текстових промтів у Runway Gen-4 для генерації відео з потрібним рухом.
• Маскування та трекінг анімованої руки для її точної інтеграції в основну сцену.
• Додавання ефектів, таких як Defocus та Camera Shake, для фінального полірування сцени.

Урок 7. Розширення сцени: інтеграція об’єктів з Midjourney в динамічне відео

• Використання Midjourney для додавання нових об’єктів (наприклад, динозавра) у статичний кадр.
• Застосування інструменту “Edit Image” в Midjourney для безшовної інтеграції.
• Анімація згенерованого зображення в Runway за допомогою текстових промтів для створення руху.
• Повний цикл гібридного композитингу: стабілізація, накладання AI-елемента, корекція кольору та повернення руху камери.