Pixi превращает сообщения в интерактивную дополненную реальность
Забудьте о стикерах, GIF-анимации и реакциях-эмодзи. Стартап Pixi делает ставку на новый этап общения — интерактивную дополненную реальность (AR). В среду приложение вышло в App Store, открыв пользователям возможность отправлять через iMessage AR-персонажей, управляемых искусственным интеллектом. Вместо статичных картинок они оживают через камеру iPhone получателя и реагируют на происходящее вокруг, взаимодействуют с людьми и отвечают в реальном времени.
Хотя сама технология AR уже не кажется чем-то сверхновым — Snap годами создаёт AR-фильтры и линзы, — в Pixi уверены, что их подход отличается. Объединив AR с ИИ, работающим непосредственно на устройстве, персонажи приложения понимают контекст и ведут себя соответственно. Например, виртуальный кот отреагирует, когда мимо пройдёт настоящая собака. Вся обработка визуальной и аудиоинформации остаётся на смартфоне, чтобы не нарушать приватность.
Основатель и философия: от «камешков» к цифровым дарам
Марк Драммонд, основатель Pixi (ранее работал в DreamWorks Animation и Apple), видит миссию приложения в том, чтобы добавить ощущение присутствия и спонтанности в цифровые разговоры. Вместо того чтобы просто отправить текстовое поздравление с днём рождения, пользователь может поделиться персонажем, создающим общее переживание, — такой подход делает сообщение чем-то вроде цифрового подарка или игрового сюрприза.
«Потребительская проблема, которую мы решаем, — это мысль о друге, когда его нет рядом, — объяснил Драммонд в разговоре с TechCrunch. — Иногда это называют “pebbling” или творческим дарением. Мы обмениваемся знаками внимания: открытками, электронными открытками, подарками. Это медиа наших отцов и дедов. Мы можем лучше. Мы можем создать что-то по-настоящему цифровое, используя всё, что мы узнали об AR на iPhone».
На этой неделе Драммонд показал нам демо: он выбрал персонажа-кота, который прямо на его столе разыгрывал стендап-шутки. Что особенно интересно — кот реагировал на выражение лица Драммонда. Например, представление закончилось, когда тот улыбнулся, демонстрируя способность персонажа распознавать эмоциональные сигналы.
Первые персонажи и игровые механики
На старте пользователям доступны робот, кот и анимированный конверт. Конверт может реагировать на голос и «игриво атаковать» друзей: если человек двигается, конверт гонится за ним. Есть и мини-игры вроде крестиков-ноликов и «убей крота».
Все визуальные и звуковые данные обрабатываются прямо на телефоне — это обеспечивает приватность.
Маркетплейс и будущее платформы
Pixi не ограничится несколькими стартовыми персонажами. Компания планирует запустить маркетплейс, где студии, бренды и независимые авторы смогут распространять собственных героев. Сценарии использования — от премьер фильмов до запуска новых продуктов: например, персонажи смогут создавать ажиотаж вокруг нового вкуса конфет M&Ms. Марк Драммонд также упомянул возможность появления Алисы из Страны Чудес — этот образ не защищён авторским правом, поэтому его можно использовать свободно. «Наша Алиса должна реагировать на объекты на столе в духе персонажа, — отметил он, — чтобы показать партнёрам, как их творения будут взаимодействовать с технологией».
В перспективе компания даст пользователям инструменты для создания собственных персонажей и личностей. «Часть нашего плана — открыть генеративные возможности ИИ для пользователей, чтобы они могли с помощью промта описать что-то вроде: “Хочу синюю кляксу, которая угрожает другу, рычит на него и гоняется за ним по телефону”», — рассказал Драммонд.
Как начать и что дальше
Чтобы отправить персонажа другу, достаточно скачать iOS-приложение и в iMessage нажать на кнопку «плюс» в левом нижнем углу. Получателю устанавливать Pixi не нужно — сообщение приходит как встроенный опыт.
Изначально приложение работает только на iPhone 11 и новее, но в будущем появится версия для Android и интеграция с WhatsApp и Instagram. Приложение бесплатно для пользователей, однако бренды смогут брать плату за своих персонажей, если захотят. «Мы будем поощрять бесплатное распространение, потому что тогда люди сами становятся амбассадорами бренда. Вы даёте им возможность использовать ваших персонажей для рассказывания собственных историй», — подчеркнул Драммонд.