Лёгкая кроссплатформенная (iOS, Android) библиотека на C++ для отображения анимационных трёхмерных AR-эффектов в режиме реального времени.
SDK даёт возможность быстро и качественно определять положение лиц и поз в режиме реального времени, а также отображать на них анимированные 3D-объекты
SDK оценивает трёхмерную геометрию лица и поз в режиме реального времени на низкопроизводительных мобильных устройствах с достаточным FPS для корректной работы онлайн.
SDK включает модели нейронной сети: Face detection, Head Pose Estimation, Face Alignment и Pose Estimation. Нейронные сети адаптированы под NPU, что позволяет быстрее обрабатывать полученную информация с камеры
Дальность детекции на широкоугольной камере составляет 2–3 метра. Нейронная сеть позволяет определять лица даже при больших поворотах головы. В SDK включен рендер filament, что даёт возможность для быстрого и качественного рендера
Возможности SDK
Решение задач компьютерного зрения
Рендер 3D-моделей
Бизнес-логика
Нагрузка на CPU / RAM
libcvprocessor.so — 6
libsrenderer.so — 5
Overall: APP wo render, cv — 0-1
Overall: APP wo render, cv — 11-13
libcvprocessor.so ~ 20
libsrenderer.so ~ 110
Overall: APP wo render, cv ~ 117
Overall: APP wo render, cv ~ 250
libcvprocessor.so — 8
libsrenderer.so — 30
FaceDet + FaceAlign — 13 ms (wo cv_service)
Poses+FaceDet+FaceAlign — 43 ms (30 pose + 13)
Render — менее 1 ms
FaceDet + FaceAlign — 2,5-3 (light condition)
Poses+FaceDet+FaceAlign — 3-4
Примеры использования
Устройтесь поудобнее, запустите историю и отправляйтесь в волшебный AR-мир. Погрузиться в атмосферу вам помогут стильные маски героев, продуманные декорации и необычный саундтрек. Побудьте и рассказчиком, и Красной Шапочкой, и рычащим Волком, прогуляйтесь через магический лес, загляните в комнату к Бабушке — скучно не будет! Вас ждет веселый и сближающий семейный досуг. Показывайте эти сказки детям перед сном или просто весело проводите время в любой удобный момент. Сейчас в приложении одна сказка, но мы уже работаем над новыми и обязательно расскажем, когда они станут доступны