Reface: історія українського застосунку №1 в App Store. Що під капотом, що з безпекою та що далі?
SPEKA поспілкувалась з Олесем Петрівим, CTO та co-founder Reface.
У цьому матеріалі ми зануримо вас в історію Reface та проведемо основними keypoints, які варто знати про успішний український стартап, що підірвав міжнародні ринки. А також зазирнемо за лаштунки компанії та розповімо інсайти, які дізналися від Олеся.
Stay tuned!
Reface — це український застосунок, який посів перше місце в американському App Store у серпні 2020 року, випередивши TikTok та Netflix, й перевернув уявлення про deepfake у світі. Розробники Reface упевнені, що технології заміни облич можна і треба використовувати не для введення в оману, а для розваг і створення вірусного контенту.Reface
З чого все починалось?
- Команда почала свій шлях ще задовго до створення Reface, у 2011 році. Тоді троє могилянців — Роман Могильний, Ярослав Бойко та Олег Петрів — заснували стартап Neocortext. Проєкт фокусувався на машинному навчанні від семантики тексту до візуального контенту й сколихнув мережу як застосунок, що «оживляє» мертвих знаменитостей.
- У 2018 році на базі напрацювань із 3D-конверсії та Face-Swap команда запустила сервіс Reflect.tech, який дозволяв замінювати обличчя з урахуванням освітлення та міміки прямо у браузері.
- У січні 2020 року з Reflect.tech виріс застосунок Doublicat, в якому користувачі миттєво додавали своє обличчя у GIF-анімації. За пів року Doublicat зібрав понад 27 млн завантажень в App Store, а з розширенням можливостей для роботи з відео його перейменували на Reface.
Так розпочалася історія найпопулярнішого інструменту для AI-фейс-свопінгу.
Розширення — всі застосунки компанії Reface
У 2023 році Reface розширився від одного застосунку до мультипродуктової компанії, у портфелі якої з'явилися:
Revive — дозволяє оживити статичні знімки, анімуючи рухи губ і очей. Створює короткі кліпи, де об’єкт співає чи розмовляє.
Restyle — стилізує фото та відео за допомогою художніх AI-фільтрів, має 36 варіантів стилізації від картин Ван Гога до аніме, популярних мультиків та піксель-арту.
Unboring — вебплатформа для швидкого створення контенту, яка об'єднує всі застосунки Reface.
Memomet — застосунок на основі AI для створення мемів. Має функції колажування, автоматичного вирізання та видалення об’єктів, заміни фону, додавання тексту, персональні профілі та глобальний фідбек від спільноти. Розробники закликають використовувати гумор як зброю й створювати розважальний та соціально-активний контент.
Підписуйтеся на наші соцмережі
Letsy — застосунок, що дозволяє віртуально приміряти одяг із каталогу брендів, перш ніж купувати.
Ink AI — надає можливість реалістично додати тату на своє фото, а також створити власний ескіз, який можна буде набити. Застосунок має 30+ унікальних стилів і можливість перетворити своє фото у тату-ескіз.
Bitepal — трекер калорій із віртуальною тваринкою, щоб зробити процес відстеження їжі легким та цікавим.
Honestly — AI-щоденник для рефлексії й відстеження настрою. Розробники обіцяють, що застосунок допоможе зняти стрес, очистити голову й перетворить роздуми на корисні ідеї, даючи м’які підказки.
Metahead — це технологія нейронного рендерингу 3D-моделей на основі 2D-зображення. Reface анонсували її на Web Summit та Slush у 2022 році, тоді заявили, що вже мають MVP, а над реалізацією повноцінного продукту працює окрема команда.
UPD: як повідомляє Reface продукт Metahead зараз депріоритезовано.
Визнання брендами та знаменитостями
Зірки та бренди також помітили Reface, стали активно користуватися застосунком й пропонувати співпрацю.
Так, разом із BMW компанія створила інтерактивну інсталяцію на BMW Welt у Мюнхені. Люди могли сфотографуватися й за лічені секунди їхні обличчя передавались на LED-екран у 42 квадратні метри, створюючи ефект MegaMe [інсталяція anamorphic naked-eye 3D, покроково реалізована компанією Reface] без окулярів 3D. Фото вписувалося у середовище за допомогою технології face-swap і людина могла побачити себе за кермом нового BMW.
Reface здобув постійне партнерство з BMW та виграв нагороду Bronze Nails на ADC Award (2023), найстаршій у світі міжнародній премії, яка щороку відзначає найвищі досягнення у рекламі, дизайні та креативних індустріях.
Reface також заколабився із Toyota, JBL, Prime Video (Amazon), Universal Pictures, Halo (Microsoft).
Серед зірок застосунком скористались Cristiano Ronaldo, Miley Cyrus, Justin Bieber, Snoop Dogg, Britney Spears, Joe Rogan, Chris Brown, Dua Lipa та Elon Musk — усі вони поділилися відео, створеними у Reface і таким чином сприяли безлічі нових завантажень.
З якими труднощами стикалася команда під час розроблення інноваційного продукту, як гарантувала безпеку даних користувачів та над чим зараз працює команда Reface, ми запитали в CTO Reface Олеся Петріва.
Які основні технологічні виклики стояли перед командою, коли ви запускали застосунок Reface? Що було найскладніше?
Оптимізація. Зробити нейронку, яка вирішує певне завдання, дуже просто. Складніше створити інфраструктуру, яка може витримувати мільйони користувачів одночасно, коли кожен надсилає та завантажує відео, де у тебе за секунди терабайти трафіку й десятки тисяч GPU-годин паляться за хвилини. Забезпечувати load balancing, і щоб нічого не відвалилося.
Вирішення інфраструктурних завдань, пов'язаних з ML кодом — це фундаментальний диференціатор, бо людей, які зробили якісь прикольні нейронки, було багато, але потрібно зробити їх ультрашвидкими, ультра cost efficient. Адже навіть із супероптимізацією у нас все одно йшли мільйони доларів на місяць просто на GPU Compute.
Там буквально пофіксив якусь багу і зекономив пів мільйона доларів. А якщо не звести ефективність бекенда, скейлінгу, будь-якого серверного процесингу, тобто бажане з дійсним, то воно тоді не має ринкового сенсу.
Якщо не має ринкового сенсу, ти не можеш на цьому заробляти. Якщо не можеш заробляти, то ти не можеш масштабувати команду і далі рухатись. Тож це був ключовий диференціатор, щоб колись років п’ять тому заробити достатньо грошей, щоб зібрати класну команду, яка почала створювати нові продукти.
У Reface люди завантажують свої фото та відео. Як ви захищаєте їхню приватність?
Медіафайли у застосунку зберігаються до двох днів, потім видаляються. Плюс вони у капсульованих середовищах, до яких навіть ми не маємо повного доступу. Проблем, пов'язаних зі збереженням великої кількості персональних даних людей, набагато більше, ніж якихось потенційних бенефітів від того. Тому ми відразу організували систему так, щоб не мати доступу до них.
Reface одна з перших застосувала AI-технології для продукту в масовому сегменті. Наскільки зараз просунулись ці технології? Що залишається поки що недосяжним для Reface?
Є багато технічних завдань, які зараз у процесі.
Зараз, наприклад, один із напрямів, на який все ще працюємо — це якісний реал-тайм, фотореалістичне 4D-моделювання людей. Саме не двовимірне, а тривимірне та інтерактивне відео із фотореалістичною людиною у режимі реального часу. Не у реал-таймі ми вже можемо це робити, але так, щоб у реальному часі, умовно, дзвониш AI-агенту чи в VR-хетсеті спілкуєшся як з живою людиною і не помічаєш лейтенсів, затримки. Це одна з таких штук, над якими ми працюємо. Поки що ніхто не наблизився до супер'якісного рішення, але всі вже плюс-мінус близько. Я думаю, за рік-півтора це вже стане commodis [стандартизований масовий продукт, що конкурує лише ціною, а не унікальними фічами].
Чи працюєте зараз над новими застосунками або іншими продуктами у Reface? Плануєте створювати ще продукти на основі технології reface?
У нас зараз 10 активних продуктів і ще десь 4-5 на різних етапах. Від генерування нових ідей до тестування MVP, деякі вже на масштабі скейлингу.
Це продукти з різних сфер, але в кожному використовується або Computer Vision, або GenAI нейронки, або LLM.