ШІ від Netflix використовує пурпурове освітлення акторів для хромакея

Netflix створив нову технологію, яка використовує штучний інтелект для полегшення процесу компонування або розміщення акторів на тлі, якого насправді немає, повідомляє TechCrunch. 

Технологія використовує яскраве пурпурове освітлення акторів, що дозволяє показати їх на передньому плані.

Десятиліттями найпоширенішим методом композиції був хромакей, де актори стояли на яскравому зеленому тлі, яке під час монтажу змінювали на інші зображення. Хоча цей метод був простим і економним, він також мав свої недоліки, як-от проблеми з деталями, прозорими об’єктами та волоссям, а також з усім, що мало колір, подібний до тла.

Підписуйтеся на наші соцмережі

Команда дослідників Netflix поєднала старий підхід із новим, використовуючи штучний інтелект. Вони навчили комп’ютерну модель на власних навчальних даних, використовуючи сцени з нормальним освітленням. Вона може досліджувати окремі частини зображення та порівнювати їх із зображеннями, що були освітлені яскравим пурпуровим світлом. 

Однак існує проблема з освітленням акторів і декорацій під таким яскравим світлом. Багато акторів скаржаться на неприродний вигляд роботи перед зеленим екраном, особливо за яскравого освітлення.

Команда вирішила цю проблему, використовуючи метод часового мультиплексування освітлення. Це означає, що пурпурове та зелене освітлення вмикаються та вимикаються кілька разів на секунду. Хоча це може відволікати та становити певну небезпеку під час знімання з частотою 24 рази на секунду, за частоти 144 рази на секунду світло буде виглядати майже постійним.

Цей метод потребує складної синхронізації з камерою, яка має фіксувати світло лише у ті короткі моменти, коли сцена пурпурова, а також враховувати пропущені кадри під час руху.