Цифровий Кузьма Скрябін та нейронні мережі: як створювали концертний номер, який приголомшив усіх

24 серпня на НСК Олімпійський відбувся грандіозний концерт “Незалежність в нашій ДНК”, ініціатором якого виступив Офіс президента України. Організатори заходу підготували кілька видовищних перформансів, один із них — виступ гурту “Скрябін”. На великих екранах, завдяки технології зміни облич з використанням нейронних мереж, тисячі українців побачили Андрія Кузьменка, якому цьогоріч могло би виповнитися 53 роки.

“Важко собі уявити концерт Дня Незалежності України без пісень гурту “Скрябін”, без пісень Кузьми. Він був рупором нашої незалежності. Тому бажання долучити його до концерту хоча б у цифровому вигляді було досить сильним. Я давно цікавлюся новинками, що стосуються IT-сфери, зокрема доповненої реальності, і знала, що в нас, в Україні, є потужна команда, яка здатна відтворити наш задум: професійно і на високому рівні. Так, я познайомилася з Євгеном Санніковим, керівником Департаменту досліджень та інновацій FILM.UA Group, який абсолютно феєрично мені розповів, як ми це будемо робити», - розповідає режисерка Катя Царик.

«А ще нам пощастило отримати цінну пораду від Сергія Созановського, співзасновника FILM.UA Group щодо пошуку актора, який міг би допомогти у втіленні задуму. Він розповів, що саме зараз триває робота над стрічкою “Я, “Побєда” і Берлін”, яку знімають за мотивами однойменної книги, авторства Андрія Кузьменка.

Іван Бліндар — виконавець головної ролі — підійшов нам на 100 відсотків: він вже був “у матеріалі” і працював над мімікою Андрія Скрябіна. Коли я побачила результат, я була вражена!

Я багато працювала з Андрієм і дуже добре його пам'ятаю — він був неймовірний. Тому, коли я побачила, як відтворився його образ, у мене просто йшли мурахи по всьому тілу. Це було настільки один в один зроблено, що в якийсь момент я навіть забувала, що це графіка і що це не Кузьма. Я дуже задоволена тим, що нам вдалося це зробити!” — Катя Царик, режисер-постановник концерту “Незалежність в нашій ДНК”

На сцені було розміщено 3 екрани — великий центральний та 2 бокових, на яких транслювалося зображення Андрія Кузьменка.

Гурт "Скрябін" виконав легендарну пісню “Люди як кораблі”.

“Для того, аби відтворити обличчя Андрія, нам потрібне було "джерело" міміки — актор, який міг виконати композицію, підлаштовуючись під унікальну манеру виконання співака. Після запису такого відео з треком ми почали навчати нейронну мережу, завантажуючи в неї велику кількість відеозаписів з Андрієм: інтерв'ю, кліпи, концерти.

Цей процес тривав кілька тижнів і результатом його, якраз таки, є заміна обличчя у фінальній версії відео на обличчя Кузьми. Величезним фактором успіху було те, що актор чудово вивчив міміку виконавця, його манеру поведінки. Це важливо, адже нейронна мережа переносить обличчя, а мімікою керує гра артиста. Ми впоралися дуже швидко, адже Іван фантастично схожий на Андрія Кузьменка, до того ж, професійно впорався в плані акторської гри”, — Євген Санніков, керівник Департаменту досліджень та інновацій FILM.UA Group.

Разом із гуртом, який виконував композицію на сцені, пісню підхопили усі гості концерту.

Неабияк вплинула на результат задуму участь Івана Бліндара — актора, який зіграв головну роль у стрічці “Я, “Побєда” і Берлін”.

Це пригодницький роуд-муві з елементами комедії, в основі сюжету якого — реальні історії з життя екс-лідера гурту “Скрябін”, що розгорталися на початку 90-х.

“Я одразу погодився на участь в реалізації цієї ідеї, адже розумів, наскільки важливим є цей елемент концерту. Мені надіслали матеріали та референси, про які я просив. Першим етапом підготовки стало ретельне вивчення кліпу "Люди як кораблі": я переглядав його протягом тижня й проводив репетиції перед дзеркалом, намагаючись перейняти кожну деталь: погляд, міміку губ, посмішку, вираз обличчя, — намагався все скопіювати. Я був впевнений, що зйомка триватиме мінімум 2-3 години, проте, на мій превеликий подив, ми впоралися за 2 дублі.

Згодом мені сказали, що зазвичай програма опрацьовує все протягом 8 годин, а в нашому випадку впоралася менш ніж за годину. Це не може не тішити, адже є прямим підтвердженням тому, що праця була недаремною. Я переглядав трансляцію — вийшло круто: присутність Андрія, він ніби живий, ніби серед нас...Я впевнений, що він живе в серці кожного українця і завжди буде з нами.”, — Іван Бліндар, виконавець головної ролі у стрічці “Я, “Побєда” і Берлін”, реліз якої очікується 2022 року.

Фото: прес-служба FILM.UA