SuperPower FX: создаём приложение для мобильных VFX в реальном времени (500 000+ загрузок)

SuperPower FX — это приложение для iOS и Android, которое позволяет снимать видео и добавлять к ним эффекты супергероев: лазеры из глаз, огненные шары из рук, телепортацию, взрывы. Компания Фора Софт создала и поддерживает его с 2012 года. Сегодня у приложения более 500 000 загрузок и свыше 20 000 положительных отзывов в App Store и Google Play, а на той же основе появился дочерний продукт — AnimePower FX, добавляющий эффекты в стиле аниме.

Это не маркетинговая ретроспектива. Это инженерный плейбук: архитектурные решения, компромиссы в производительности, пайплайн ассетов и метрики, которые мы отслеживали. Его стоит прочитать любой команде продукта, которая разрабатывает мобильное приложение для видеомонтажа с VFX в реальном времени, прежде чем утверждать дорожную карту. Если вы создаёте продукт уровня SuperPower FX, описанные ниже паттерны — те, что выдержали 13+ лет обновлений App Store, смены операционных систем и изменений возможностей устройств.

Почему этот плейбук написала Фора Софт

Фора Софт разрабатывает программное обеспечение для работы с видео и аудио на основе ИИ с 2005 года. SuperPower FX — один из наших ключевых проектов в области мобильного видео: приложение вышло в 2014 году, вошло в топ-рейтинги по запросу «видеоэффекты» по всему миру и спустя более 11 лет продолжает пользоваться спросом. Дочернее приложение AnimePower FX использует тот же движок, но ориентировано на визуальный контент в стиле аниме. Оба приложения работают в продакшене на iOS и Android.

Помимо SuperPower FX мы выпускаем инструменты для мобильного видео в разных нишах: корпоративный разбор видео с VALT, короткие ролики для авторов контента с Shortclips, инструменты для музыкальных клипов с Moby Tap и сложные решения для прямых трансляций для клиентов из EdTech и сферы цифрового здоровья. Наши инженеры параллельно работают над AR/VR и интеграцией ИИ, поэтому VFX и машинное обучение на устройстве реализованы в одной кодовой базе, а не добавлены как внешние модули.

Agent Engineering лежит в центре нашего рабочего процесса: senior-инженеры курируют AI-ассистентов (Cursor, Claude, GitHub Copilot), чтобы автоматизировать рутинный код, генерировать тесты и быстро набрасывать миграции. На проектах с мобильным видео это обычно сокращает объём работы на 20–40% по сравнению с обычными оценками — при этом стандарты проверки кода не снижаются. Это особенно полезно, когда нужно одновременно выпустить пайплайн эффектов супергероя и в App Store, и в Google Play — точно в срок.

SuperPower FX — кратко

Прежде чем переходить к архитектуре, цифры и охват проекта помогут конкретизировать остальной плейбук.

Почему эффекты в реальном времени выигрывают у постобработки

В 2012 году главным конкурентом был Movie FX: загрузил клип, выбрал эффект, экспортировал. Мы изучили их пайплайн, поняли, как устроен композитинг, и сознательно построили SuperPower FX так, чтобы у пользователя была более короткая петля обратной связи: эффект виден в видоискателе ещё до окончания записи. Именно это решение больше всего помогло нам вырасти в первые два года.

Предпросмотр в реальном времени — это способ удержать пользователя. Каждая секунда ожидания экспорта — это шанс, что пользователь закроет приложение. Когда процесс сводится к «навёл камеру, увидел результат, записал», количество созданных клипов за одну сессию стабильно растёт. В SuperPower FX мы отслеживаем «записи за сессию» и «количество опробованных эффектов за сессию» как опережающие индикаторы удержания — и оба напрямую зависят от задержки предпросмотра в реальном времени.

Изначальное ТЗ — сделать невозможное плавным

В 2012 году команда SuperPower FX подошла к нам с задачей, сформулированной в одном предложении: дать пользователям возможность снимать видео с эффектами супергероев, которые реагируют на человека в кадре в реальном времени на iPhone. Технические ограничения были жёсткими: у iPhone 4S был чип A5, 512 МБ оперативной памяти, не было ни одного нативного AR-фреймворка (ARKit появился только в 2017 году), а API камеры не позволял получить прямой доступ к буферу предпросмотра.

Наша задача — превратить техническое задание в iOS-приложение, которое даёт качественные эффекты без просадок кадров, не разряжает батарею за десять минут и при этом настолько простое, что новичок сможет снять свой первый клип меньше чем за 30 секунд. Архитектура, которая используется во всех последующих версиях — композитинг по принципу GPU-первый, предварительно отрендеренные спрайты эффектов и конечный автомат вокруг сессии камеры — была заложена ещё в первые месяцы разработки.

Обзор архитектуры — от буфера камеры до MP4

У современного приложения уровня SuperPower FX между матрицей сенсора и сохранённым MP4 проходит четыре стадии обработки. Каждая стадия должна уложиться в свой лимит по кадрам, иначе весь пайплайн останавливается.

1. Захват

На iOS мы используем AVCaptureVideoDataOutput с пиксельным форматом BGRA или NV12 и очередью dispatch, закреплённой за высокоприоритетным QoS. На Android мы используем CameraX с use-case ImageAnalysis и Surface предпросмотра, подключённым к рендереру OpenGL ES / Vulkan. После этого кадр с камеры уже не касается CPU — каждая последующая стадия работает на GPU.

2. Анализ и трекинг

Эффекты, которые «выходят из глаз или рук пользователя», требуют отслеживания объекта. В 2014 году мы разработали собственный детектор лиц и трекер рук на основе цвета. В 2026 году мы используем фреймворк Vision от Apple (поза тела и рук, лицевые ориентиры) и Pose Detection из Android ML Kit прямо на устройстве. Отслеживание работает с частотой 15–30 Гц и передаёт опорные точки рендереру.

3. Рендеринг и композитинг

Metal на iOS, Vulkan (с откатом на OpenGL ES 3.1) на Android. Каждый эффект — это последовательность сжатых текстур и шейдер, который накладывает их на кадр с камеры по опорным точкам трекера. Готовая композитная текстура используется и для предпросмотра на экране, и как вход для энкодера.

4. Кодирование и мультиплексирование

На iOS используется AVAssetWriter с аппаратным кодированием H.264. На Android — MediaCodec и тот же кодек. Аудио захватывается отдельно через AVFoundation на iOS и AAudio на Android. Мультиплексор формирует MP4 с частотой 30 кадров в секунду и аудио в формате AAC. Запись идёт по частям, поэтому при нажатии кнопки «Стоп» файл сохраняется почти мгновенно.

GPU-первый пайплайн — единственное правило, которое помогало нам продолжать выпускать релизы

Каждая серьёзная ошибка, которую мы видели в проектах с мобильными VFX, связана с этапом композитинга, выполняемым на CPU. Обработка на CPU плохо масштабируется с ростом разрешения и не справляется с 1080p или 4K — а именно такие разрешения теперь ожидают пользователи. Правило простое: как только пиксель попадает в пайплайн, он остаётся на GPU до тех пор, пока его не заберёт энкодер.

Конкретно это означает, что выход камеры — это GPU-текстура (на iOS — CVPixelBufferRef на базе IOSurface; на Android — GraphicBuffer/HardwareBuffer), ассеты эффектов заранее загружены как сжатые текстуры (ASTC на iOS, ETC2/ASTC на Android), шейдер выполняет всё смешивание (аддитивное, по альфе, экранное), а вход энкодера — GPU-поверхность. В основной цепочке обработки не происходит ни одного memcpy данных изображения.

Пайплайн ассетов — почему размер установки дважды нас подкосил

Размер установки — самое слабое звено в работе над продуктом с мобильными VFX. SuperPower FX дважды сталкивался с проблемой размера установки. В первый раз, в 2015 году, приложение разрослось до 200 МБ из-за накопления пакетов эффектов. Мы перешли с PNG на JPEG там, где не требовался альфа-канал, а там, где он нужен, использовали отдельный одноканальный альфа-канал, и в итоге уменьшили размер установки в 10 раз.

Во второй раз, в 2021 году, с хранилищем стало свободнее, но пользователи отваливались при загрузках свыше 100 МБ. Мы пересобрали встроенный пакет так, чтобы поставлять только стартовые эффекты (~15 МБ), а всё остальное — по запросу: каждый пакет приходит только тогда, когда пользователь его открывает. В 2026 году аналогичный подход — сжатые текстуры ASTC/КTX2 (на 50–80% меньше, чем PNG/JPEG) плюс App Store On-Demand Resources и Android Asset Delivery для длинного хвоста.

Правило: держите установку потребительского VFX-приложения под 50 МБ. Каждые 10 МБ сверх этого заметно снижают конверсию первой установки на развивающихся рынках.

Трекинг объекта — от собственного кода в 2014 году до машинного обучения на устройстве в 2026

Самое сложное в «лазерах из глаз» — не сам лазер, а надёжное определение местоположения глаз в каждом кадре, особенно при меняющемся освещении. В 2014 году мы разработали собственный детектор лиц и трекер рук, основанный на сегментации по цвету в пространстве HSV. Он работал, но сбивался при плохом освещении и требовал постоянной настройки.

Стек 2026 года по сравнению с ним почти бесплатен. Apple Vision определяет лицевые ориентиры, позу тела и положение рук прямо на устройстве с задержкой в миллисекунды. Android ML Kit предлагает аналогичное распознавание позы и лица, а также функцию Selfie Segmentation для создания альфа-масок. Оба решения работают на нейропроцессорах — Neural Engine или NPU, поэтому почти не разряжают батарею.

Практический путь апгрейда для любого устаревшего VFX-приложения: замените собственный трекер на Vision/ML Kit, оставьте текущий рендерер, а освободившиеся ресурсы направьте на новые эффекты или доработку. Мы провели такую миграцию в SuperPower FX — и прирост стабильности при съёмке в помещении при слабом освещении стал заметен сразу.

Цели по производительности и матрица устройств, которая имеет значение

Потребительскому приложению с видеоэффектами нужно поддерживать стабильную частоту кадров на среднем устройстве пятилетней давности. Цель — флагманские модели — типичная ошибка новичка: в воронке установок в Google Play преобладают устройства на один-два уровня ниже. Чтобы проверять каждую сборку, мы используем матрицу ниже.

Монетизация — пакеты эффектов и урок Oreo

SuperPower FX — бесплатное приложение с платными пакетами эффектов и периодическими коллаборациями с брендами. Модель работает, потому что пакеты эффектов — это смысловые единицы: пользователи платят за фантазию (магия огня, магия льда, телепортация), а не за само приложение. Если бы приложение было платным, это резко снизило бы число установок, но не повысило бы средний доход с пользователя.

Партнёрство с Oreo — шаблон, который мы используем и сегодня. У Oreo была цель: создать эффект супергероя, привязанный к кампании. Мы выпустили брендированный пакет бесплатно, но на ограниченное время, прямо в SuperPower FX. Такой совместный пакет дал заметный рост установок — а главное, превратил разовое маркетинговое событие в долгосрочное удержание: пользователи, установившие приложение ради пакета Oreo, остались пользоваться им ради основной библиотеки. Любой бренд с нарративным IP — фильмы о супергероях, видеоигры, аниме — идеально подходит для такого подхода.

Выбор фреймворков iOS и Android для современной сборки

Если бы мы начинали SuperPower FX сегодня, шорт-лист фреймворков был бы чётким. Для iOS: AVFoundation для захвата видео, Metal для рендеринга, Vision для трекинга, Core ML для собственных моделей и Apple Intelligence / Foundation Models для функций вроде подсказки эффекта по промпту. Для Android: CameraX, Vulkan (с откатом на OpenGL ES 3.1), ML Kit Pose/Face, TensorFlow Lite или Gemma 3n через Google AI Edge для собственных моделей.

Кросс-платформенные языки: Swift и Kotlin на их родных платформах. С официальным выходом Swift на Android в 2025 году общая бизнес-логика на Swift стала реальной, и мы пробуем это направление на внутренних прототипах. Для интерфейса мы используем нативные решения: SwiftUI на iOS и Jetpack Compose на Android. Слои рендеринга и захвата написаны на C++ с тонкой оболочкой на Swift или Kotlin.

Расчёт стоимости — как выглядит сборка уровня SuperPower FX в 2026 году

Примерный объём работ для запуска v1 мобильного VFX-приложения в реальном времени (iOS + Android) — от нуля до публикации в обоих магазинах:

1. Дискавери и дизайн (3–4 недели). Определяем продукт, UX-сценарии, объём каталога эффектов, модель монетизации и приоритетные платформы. Результат — чёткое техническое задание и границы для первой версии (v1).

2. Сборка движка (6–10 недель). Пайплайн «захват → композитинг на GPU → кодирование», интеграция трекера (Vision/ML Kit), SDK эффектов, пайплайн ассетов, сборка и подпись. Самый большой отдельный блок.

3. Первый пакет эффектов (3–4 недели, параллельно). Создано и настроено 10–15 эффектов на матрице устройств, они интегрированы в интерфейс приложения. Эта работа может выполняться параллельно со сборкой движка — как только SDK эффектов станет стабильным.

4. UI приложения и материалы для сторов (2–3 недели). Интерфейс на SwiftUI и Compose, онбординг, обмен, встроенные покупки, публикация в сторе и скриншоты.

5. QA, тестирование на матрице устройств, отправка в сторы (2–3 недели). Тестирование на реальных устройствах с использованием автоматизации там, где это возможно (Reflect Mobile, Autosana), ручной QA на медленном уровне матрицы устройств, циклы отправки в App Store и Google Play.

Итого. v1 с одним пакетом эффектов обычно занимает 14–20 недель календарного времени при работе небольшой команды senior-разработчиков. Мы даём консервативную оценку; при использовании Agent Engineering в процессе мы регулярно выходим за нижнюю границу этого диапазона. Чтобы получить точную оценку под ваш объём, свяжитесь с нами — позвоните или напишите.

Мини-кейс — брендированный пакет Oreo, превративший выходные в рост удержания

Ситуация. Oreo хотели создать эффект супергероя для бренда в рамках двухнедельной промокампании. Креативное ТЗ подготовило креативное агентство, а реализацию внутри SuperPower FX — мы. Срок: три недели от получения ТЗ до запуска в приложении на iOS и Android.

План на три недели. Неделя 1: приём задачи, фиксация креатива, отрисовка спрайтов нашим VFX-художником. Неделя 2: интеграция в движок, тестирование на разных устройствах, внутренний релиз через TestFlight и внутренний трек в Google Play. Неделя 3: публикация в App Store и Google Play, пакет становится доступен через remote config и показывается в приложении на видном месте на время кампании. Далее — анализ после запуска, подготовка отчёта для бренда и постепенное сворачивание пакета.

Результат. Дневные установки резко выросли в рамках кампании, а 30-дневное удержание установок этого окна превысило скользящий базовый уровень приложения. Пользователи устанавливали приложение ради бесплатного эффекта Oreo, а оставались — ради основной библиотеки. Это именно тот результат, которого ждал бренд-партнёр, и именно поэтому мы до сих пор рекомендуем совместные брендированные пакеты как эффективный канал привлечения для клиентов с нарративным IP.

Фреймворк принятия решения — выберите подход к мобильным VFX за пять вопросов

1. Обязателен ли предпросмотр в реальном времени? Если пользователи будут записывать несколько коротких реактивных клипов — да. Если цель — собрать один длинный клип уже после съёмки, то проще и дешевле использовать модель постобработки (например, настольный NLE).

2. Должны ли эффекты следовать за пользователем? Если да, закладывайте трекинг позы и лица на устройстве (Vision + ML Kit). Если эффекты привязаны к кадру, достаточно 2D-композитора спрайтов.

3. Какова ваша минимальная модель устройства? Выберите самое медленное устройство, которое хотите поддерживать, поставьте его перед инженером и тестируйте на нём каждый спринт. Производительность — это политика, а не надежда.

4. Монетизация нарративная (пакеты эффектов, тай-ины с брендами) или утилитарная (профессиональные функции, подписки)? Нарративная модель вознаграждает инвестиции в эффекты и художников. Утилитарная — в развитие профессиональных инструментов и возможностей монтажа.

5. Каково позиционирование в App Store и Play Store? Потребительский охват требует быстрой установки, понятной пользы уже с первого запуска и удачной подборки скриншотов. B2B- или профессиональное позиционирование допускает более объёмные установки и длительный период освоения.

Чего избегать

1. Композитинг на CPU в горячем пути. Каждая наша переписка из-за кризиса производительности сводилась к смешиванию на CPU, которое кто-то добавил «только ради этого эффекта». Проверяйте граф рендеринга на каждом релизе: если пиксель уходит с GPU и возвращается — это нужно исправить.

2. Прицел только на устройства текущего поколения. Воронка установок на большинстве потребительских рынков держится на устройствах двух-пятилетней давности. Если ваше приложение теряет кадры на таких устройствах, ваш рейтинг отзывов уже не восстановить.

3. Раздувание размера установки. Упаковывать каждый пакет эффектов в бинарник может показаться удобным, но это сильно снижает конверсию установок. Используйте загрузку ресурсов по требованию и Play Asset Delivery с самого начала разработки.

4. Собственный трекинг там, где справятся Vision/ML Kit. В 2014 году мы писали свой. В 2026 году вам этого делать не стоит — если только ваш сценарий явно не выходит за рамки нативных возможностей. Высвободившееся время вложите в новые эффекты.

5. Релиз без плана долгосрочной поддержки. Мобильные платформы обновляются каждый год. Запланируйте ежеквартальный спринт поддержки — он должен включать обновления ОС, работу с устаревшими API и адаптацию под новые устройства. Либо закладывайте бюджет на долгосрочное сопровождение с партнёром, который возьмёт эти задачи на себя.

KPI — что измерять в живом VFX-приложении

KPI качества. Процент потерянных кадров за сессию (цель — менее 1%), время холодного старта по уровням устройств, доля сессий без сбоев (не менее 99,5%) и количество событий троттлинга по температуре за 10-минутную сессию.

Бизнес-метрики. Количество записей за сессию (прогнозирует удержание), количество использованных эффектов за сессию, доля первых покупок по пакетам эффектов, удержание через 30 дней по каналам привлечения (органический трафик против совместных брендовых кампаний).

KPI надёжности. Доля успешных фоновых сохранений (сохранение клипа после нажатия «Стоп»), доля успешных вызовов шит-листа шеринга (экспорт в TikTok, Instagram, Reels), доля ANR и зависаний на Android, а также размер установки для каждого варианта магазина.

Когда не стоит создавать VFX-приложение в реальном времени

Не каждому видеопродукту нужны эффекты в реальном времени. Откажитесь от этого подхода, если ваш основной сценарий — монтаж нескольких клипов с точной обрезкой (здесь лучше подходит модель настольного NLE), если ваша аудитория использует очень старые устройства, которые не справляются с 30 fps на 720p, или если ваше преимущество — в качестве звука, а не видео. В таких случаях затраты на разработку пайплайна реального времени принесут меньше пользы, чем те же усилия, вложенные в глубину монтажа, аудиоинструменты или удобство работы авторов.

Аналогично, если ваша бизнес-модель — корпоративный SaaS, а не потребительский нарративный IP, пакеты эффектов — неподходящая поверхность монетизации. Поговорите с нами о разработке программного обеспечения для обработки видео и аудио на заказ, и мы подберём правильную архитектуру под ваш поток сделок.

Частые вопросы

Что почитать дальше

Готовы превратить идею VFX в полноценное мобильное приложение?

SuperPower FX доказал жизнеспособность модели: эффекты в реальном времени, привязанные к объекту, в потребительском мобильном приложении, монетизация через пакеты эффектов и коллаборации с брендами, поддержка на протяжении 13+ лет в App Store и Google Play. Набор инструментов 2026 года — Metal/Вulkan, Vision/ML Kit, ассеты по запросу, Agent Engineering — позволяет создавать такой же продукт сегодня дешевле и быстрее, чем в 2014 году.

Если вы разрабатываете мобильное приложение для видеомонтажа с эффектами в реальном времени, этот плейбук — тот, который мы используем сами. Когда понадобится готовый план и точная оценка от инженеров, создавших два таких продукта, — до нас один звонок.