Моя сила. Як нейромережі допомогли створити короткометражний фільм
Триває третій рік повномасштабного вторгнення. Люди поступово адаптуються до стресу та тих жахів, що відбуваються навколо. Це і не дивно, адже наша психіка не може жити у постійній напрузі. На жаль, є інший бік — байдужість до війни та її наслідків, що стрімко зростає. Тому ми поставили перед собою завдання — привернути увагу українців до цієї громадської проблеми.
Для цього ми створили перший в Україні короткометражний фільм за допомогою штучного інтелекту. За основу взяли генерації з нейромережі Midjourney, яка допомогла створити потужні та атмосферні кадри. Нейромережа Magnific AI допомогла надати більшого реалізму всім фото, а анімація робилась в Runway Gen 2. Мелодії створені в АI-сервісі Epidemicsound. Монтаж та озвучка — виконана силами справжніх людей :) Фішка ролика — все мало бути створено на основі штучного інтелекту. Жодного VFX чи відзнятих кадрів.
Першочергово ми створили скрипт, у якому детально прописали, що повинно відбуватися у кадрах та який текст буде зображено на них. Далі — створили сторіборд. Він необхідний для того, щоб розуміти, які саме кадри будуть відображатися у певні хвилини фільму.
Саме відео ми поділили на 6 актів — від демонстрації початку війни, до поглиблення в проблематику — коли люди спочатку натхненно боролись, а потім почали здаватись. В 5-му акті трохи покреативили та пофантазували на тему “А що робили б люди, якби вони малу супер силу?”. 6-й акт став завершальним та мотивуючим.
Найцікавіший етап — візуалізація персонажів та сцен. Для нас було важливо аби всі кадри виглядали реалістично та фільм було дійсно цікаво дивитися. Тому ми використали Midjourney, щоб згенерувати людей та сцени. Для створення відеоряду ми використали майже весь Pro-пакет Midjourney (а це близько 2000 генерацій) та відібрали 130 кадрів.
Головна перевага Midjourney полягає у тому, що вона дозволяє створювати емоційних персонажів та кінематографічні кадри. Адже є можливість прописувати, які відчуття в кадрі повинні передавати персонажі та задавати різні ракурси камери.
Кожне фото ми додатково апскейлили в нейромережі Magnific AI, щоб не тільки покращити якість зображень, а й наблизити їх до реалізму. Додали маленьких, але важливих деталей в кадри. Це збільшувало кінематографічність сцен та їх вплив на глядача.
Також більшість генерацій ми допрацювали в Adobe Photoshop Beta через Adove Firefly. Таким чином ми прибрали зайвий морфінг та мали змогу допрацювати пальці рук, обличчя та непомітні, на перший погляд, деталі в сценах.
Останній важливий крок — анімація. Більшу частину анімацій ми робили за допомогою Runway Gen 2. Для 3,5 хвилинного ролика знадобилось створити понад 7 тисяч секунд варіацій. В анімації людей нам допоміг функціонал Motion Brush — він дозволяє точково анімувати потрібні обʼєкти в кадрі, а також робити емоції людей більш виразними. Виходило ще не ідеально, але вже досить реалістично, щоб донести сенс цього фільму.
Звук — 50% успіху будь-якого відео. Для створення музики ми перебрали більше ніж 30 різних музикальних композицій в сервісі Epidemic Sound.
Для VO вирішили звернутись до професійної озвучки. До речі, сьогодні таку вже можна зробити в нейромережі ElevenLabs, але в лютому потрібну якість ми ще не могли отримати.
Саунд-дизайн ми робили вручну. Сьогодні його також можна повністю замінити звуками з нейромережі ElevenLabs.
Щоб відзняти такий ролик з усіма локаціями, технікою та акторами потрібно було б витратити декілька місяців роботи та млн грн. За допомогою AI ми зробили це в сотні разів дешевше та набагато швидше. У нас це зайняло до 2-х тижнів.
Наш головний результат та чим дуже пишаємось — ми стали першими, хто створив соціальний відеоролик виключно за допомогою передових нейромереж! Фінальний результат ви можете переглянути за посиланням.
Також ми виклали фільм на YouTube-каналі IAB Ukraine та за 5 місяців він набрав понад 300 000 переглядів! І ми впевнені, що це не межа! Переглядаючи коментарі під відео, можемо точно сказати — фільм виконав свою мету. Він нагадав українцям, що наша сила у нашій волі, нескореності, невтомній допомозі, підтримці та сміливості!