Новости о Spark AR и дополненной реальности

Представляем Lens Studio 3.0

Новости
11 июня на саммите дополненной реальности Snap Partner Summit было анонсировано большое количество нововведений для создателей линз. Теперь вы можете интегрировать свои собственные модели машинного обучения в Lens Studio с помощью SnapML. 



Знакомьтесь, SnapML 


С помощью SnapML теперь вы можете создавать свои собственные объекты для линз с помощью нейронных сетей, которые вы самостоятельно обучили. После добавления этих ML моделей к вашим линзам, камера Snapchat будет еще лучше преображать мир вокруг вас! Для тех, кто не является разработчиком ML, в новую версию Lens Studio были добавлены такие шаблоны, чтобы любой желающий мог попробовать поработать с ними.
Передача Стиля
Примените художественный стиль к своей камере с помощью машинного обучения, чтобы изменить то, как вы видите мир вокруг себя. 
Пользовательская Сегментация 
Используйте пользовательскую сегментацию для применения эффектов только к определенным частям сцены. 
Обнаружение объектов 
Прикрепите любое изображение к обнаруженному объекту. 
Классификация 
Понимание того, что происходит в сцене, и реакция на то, что видит камера. 
Сегментация поверхностей
Замените землю каким-либо материалом и закройте предметы, находящиеся не на земле. 
Больше Возможностей! 
Используйте эти шаблоны в качестве отправной точки для интеграции дополнительных моделей или добавьте свои собственные. 



Новый шаблон - жестикуляция 
Используйте различные жесты, такие как открытая ладонь, закрытая ладонь и многие другие, чтобы сработал пользовательский эффект. 
Ориентир на лице 
Настраивайте эффекты, на отслеживание определенных координат на лице. 
Мимика 
Используйте новую функцию отслеживания мимики от Lens Studio, чтобы применять блендшейпы на 3D модели. 
Трекинг ног 
В сотрудничестве с Wannaby Snap создали шаблон трекинга ног, основанный на их ML модели, которая позволяет любому пользователю легко создавать линзы, которые взаимодействуют с вашими ногами! 
Дополнительные обновления
Новый Взгляд Snap обновили пользовательский интерфейс Lens Studio и добавили две темы, чтобы упростить настройку и навигацию. 
Процедурное текстурирование 
Доступ и создание текстур из скрипта с помощью процедурного текстурирования.
Цветные Тени 
Серые темы в прошлом! Используйте любой цвет радуги, чтобы добавить глубину вашей линзе. 
3Д трекинг глаз 
Замените или дополните глаза в 3D, включая реалистичное отслеживание взгляда.
Дополнительные Узлы Редактора Материалов 
Далее настройте свои материалы с помощью новых матриц, массивов и узлов освещения.

Made on
Tilda