Слухи об этом устройстве ходили долгие годы, выпуск долгое время откладывали, а проект вообще хотели закрыть.

Это исторический день для Apple, потому что это первый анонс крупного продукта за 8 лет со времён релиза Apple Watch.

За сколько, где и когда можно купить

Цена Apple Vision Pro — $3499 до уплаты налогов в США

Цена в Европе будет выше и назовут её чуть позже. В продаже появится в отдельных странах только в начале следующего года.

Дизайн и начинка Vision Pro

Очки очень напоминают большие Apple Watch, есть даже колёсико Digital Crown.

Внутри два чипа — M2 и R2. Очки постоянно анализируют окружение, встроено шесть микрофонов и камеры.

Автономности обещают до двух часов постоянной работы. А вот батарейка крепится отдельно. И один из самых больших минусов, которые сразу отметили пользователи — неотсоединяемый от батареи кабель.

Порвал его — покупай новый аккумулятор.

У гарнитуры своя операционная система visionOS. Визуально выглядит так, что для неё просто взяли по-немногу из каждой системы.

Инсайды инженеров

Apple показала много новинок, но есть один момент, в котором команда команда Vision Pro преуспела даже чуть больше Илона Маска с Neuralink.

Оказывается очки умеют предсказывать клик ещё до того, как пользователь кликнет. Этим инсайдом поделился один из инженеров, работавших над Vision Pro.

Всё дело в том, что зрачки расширяются от ожидания, что после клика что-то изменится. Очки это замечают и начинают загружать данные заранее. По сути, это пример нового интерфейса человек-компьютер, без всяких имплантов.

А здесь и большой простор для более продвинутого отслеживания поведения, чем мы с вами привыкли. Например, для рекламы.

Мы искали развития и чувствовали в себе больший потенциал

AR-стартап Ninsar начался с карманной навигации. Он родился на одной из студенческих конференций. Из-за запутанного расположения корпусов, было тяжело искать нужные аудитории. И основатель проекта Егор Сеченский с первыми членами команды решили эту проблему — с первой версией интерактивного приложения AR-навигации.

Мы разработали приложение, которое помогало ориентироваться в незнакомых местах. Пользователь мог выйти на автобусной остановке, открыть приложение и указать интересующее его мероприятие. И приложение строило маршрут и предлагало на выбор два способа навигации: по 2D-карте, к чему мы уже привыкли, или в режиме дополненной реальности, где направление движения указывалось стрелками через камеру телефона. Личный гид – разработанный нами персонаж, кот, – сопровождал пользователя на всём его пути.

Мы развивались, общались с клиентами в России и за рубежом. Нашим проектом интересовались технопарки, банки, крупные компании, университеты. Всем хотелось добиться вау-эффекта, но реализация идеи упиралась в бюджет. Тогда мы решили сместить фокус на туристическое направление. Это позволило добавить к навигации разработку контента, а значит, сделать проект более комплексным и интересным.

Контент в нашем случае — это объединение пространства и того, что о нём можно узнать. Плюс возможность интерактивного взаимодействия с объектами, находящимися в этом пространстве. Выхода на туристические компании у нас не было, тем более — на что-то заметное и известное. Но тут появился MTS StartUp Hub.

Хаб помог заколлабиться напрямую с известной локацией — «Аптекарским огородом»

MTS StartUp Hub принял нас в число резидентов и предложил сотрудничество с PR-подразделением МТС, которое отвечает за ESG-повестку. Вместе мы разработали AR-гид по «Аптекарскому огороду». Получили информацию по самым популярным маршрутам и объектам «Аптекарского Огорода», после чего запустили разработку приложения для трёх платформ: iOS, Android и Huawei.

Пилот нашего решения был запущен в рамках большого проекта — «Место силы». Одним из мест силы и стал «Аптекарский огород». Внутри приложения можно было найти информацию о строении пруда и разных типах растений, их отличиях и свойствах. Помимо этого, МТС работал с другой компанией, которая создавала аудиогид по тому же маршруту. Мы интегрировали его в наше приложение и разработали контент, который воспроизводился в конкретных точках.

Приложение можно использовать несколькими способами:

• включить режим тура с  маршрутом в дополненной реальности по пятнадцати ключевым объектам, на каждом из которых расположен AR-контент, необычная информация и мини-игры (например, около дуба Гофмана можно собирать желуди;
• использовать приложение в свободном формате, навигируя от вашего местоположения до интересующей точки на карте.

Проект оказался очень масштабным по разработке

Мы отрисовали 2D- и 3D-карту «Аптекарского Огорода», использовали гироскоп и акселерометр в смартфоне для отслеживания движения пользователя. А также интегрировали систему меток на улице и в помещении. При построении маршрута выбирался наиболее короткий путь. И если пользователь хотел отойти от предложенного маршрута, то приложение его перестраивало.

Мы разработали разный функционал для интерактивного взаимодействия с пользователем: AR-контент, игры в дополненной реальности, мини-факты, режим камеры, режим фото с персонажем — котом, собираемые виртуальные призы. И полностью переработали и создали новый UI.

Было много трудностей, которые приходилось оперативно решать

В «Аптекарском огороде» GPS срабатывает с разной точностью и стабильностью. Отличительная черта «Огорода» в множестве троп, которые находятся близко друг к другу.

GPS определяет диаметр, в котором находиться пользователь, но в его рамках пользователь может находиться где угодно. При множестве узких и пересекающихся тропинок это вызывает определённую визуальную дисгармонию на карте.

Дороги, которые ведут в разные места, могут находиться на расстоянии от пользователя, поэтому позиционирование должно быть точнее. Так что самые коварные узкие тропы из навигации мы убрали.

Холмистая местность «Аптекарского огорода» добавляла дополнительные испытания при разработке.

Кроме того, в помещении GPS не работает. Поэтому, когда человек входит в здание, всплывает подсказка. Пользователь сканирует специальную метку. Метки зафиксированы расположены недалеко друг от друга. Так что на пути между ними, есть запас хода без накопления ошибок в маршрутизации.

Метки в «огороде» устанавливались в разных условиях. Столбы, к которым они крепились, стояли на разной высоте, наклонялись — или вовсе падали, — и их переставляли. Тогда как раз наступала весна, снег менялся на слякоть, это влияло на точность позиционирования и требовало устранения подобных ошибок через непрерывное тестирование.

Неточность позиционирования мы побороли, много раз пройдя по маршруту огорода. Сканировали метки на разных устройствах, ловили баги, записывали логи, исправляли несоответствия между фактической ошибкой и тем, как предписано системой. Наша маленькая команда работала над проектом по сути многомиллионного масштаба в режиме нон-стоп. Но в результате мы сделали максимум.

Появлялись баги, которые можно было устранить только находясь в «Аптекарском огороде»

Качество визуализации дополненной реальности, в частности персонажа, который сопровождает пользователя, и AR-контента, который в нашем случае почти всегда привязан к земле, напрямую зависит от уровня высоты. Поэтому нам было важно правильно улавливать уровень высоты — иначе могло получиться так, что персонаж идёт по воздуху.

Так что для отлова багов надо было присутствовать на месте, чтобы понимать, в какой момент и из-за чего они произошли.

Яндекс- или Google-карты «Огорода» не отображали реальное пространство

Некоторые тропы не были отмечены на картах, у других не совпадали толщина и длина, углы поворота. И если где-то появляется расхождение, оно накапливается в системе как ошибка, которую просто не видно.

Мы прошли по всем маршрутам огорода множество раз, накопили данные о путях, которые отличались от готовых карт, и построили свою, по которой можно было ориентироваться, вовсе не сканируя метки.

Что наше приложение умеет делать

• работать на трёх платформах (iOS, Android, Huawei);
• производить 2D-навигацию, AR-навигацию и бесшовную навигацию снаружи и внутри помещений (как свободную, так и в рамках запланированных гидов);
• отображать контент (текстовые справки, фотогалерею, аудиогид)
• визуализировать интерактивный контент (AR-анимацию, мини-игры, другие форматы взаимодействия с пользователем, которые мы разработали, фото с котом);
• показывать персонального гида-кота с набором анимаций, которые можно было увидеть зазевавшимся посетителям.

Это было сложно, полезно и интересно

Мы получили крутой стартаперский опыт. У нас был очень небольшой бюджет, сжатые сроки и масштабный функционал, который нужно было реализовать своими силами. Мы боролись за качество до конца, прошли сквозь огонь и воду, чтобы запустить продукта.

Сейчас мы продолжаем поддерживать связь с MTS STartUp Hub и ждём новых возможностей для сотрудничества. Мы всё еще очень любим AR-контент, и сейчас активно развиваемся в машинном обучении и блокчейне и решении для ML-разработчиков.

1. Виды дополненной реальности: маски, объекты, эффекты
2. Технологии, которые вписывают AR в пространство вокруг вас
3. Как телефон «видит»
4. Ограничения мобильной дополненной реальности
5. Приложения, которые позволяют создавать примитивные AR-сцены на смартфоне
6. Интерактивная и анимированная дополненная реальность своими руками
7. Где брать модели для своих AR-проектов: бесплатно и красиво
8. Приложения для разработки масок
9. Когда в AR-проекте нужен код?

Виды дополненной реальности: маски, объекты, эффекты

Вся дополненная реальность базируется на технологиях трекинга — отслеживания позиций объектов в реальном пространстве. Это позволяет привязывать графику к реальным объектам.

Виды AR разделяются на виды трекинга — какая технология используется, чтобы разместить виртуальный объект в реальном пространстве:

1. Если точкой отсчёта является лицо — это AR-маска. Интересно, что технология берёт начало в задачах компьютерной безопасности. Когда-то многие компании вложили деньги в то, чтобы сделать автоматическую систему пропусков, распознавания лиц для поиска преступников и мошенников. Заодно это привело к буму масок.
2. Если точкой отсчёта является реальное пространство — это AR-объект.
3. Всё остальное — это AR-эффект. Например, технологии примерки одежды или обуви. Некоторые из них работают по принципу отслеживания лица, головы, но бóльшая часть — по принципу карты глубины (о ней ниже), либо построения скелета тела.

Технологии, которые вписывают AR в пространство вокруг вас

Маркерная технология (marker-based). Позволяет привязываться к меткам, которыми чаще всего выступают картинки или 3D-объекты (работает сильно хуже). Для меток лучше всего подходят контрастные и малоградиентные изображения. Получаются эффекты вроде оживающих картин из «Гарри Поттера». Под капотом у неё решается задача Perspective-n-Point — восстановление точек в 3D-пространстве по их перспективной проекции на плоскость камеры устройства. Благодаря ей можно восстановить положение телефона относительно картинки с камеры.

Основной плюс маркерной технологии — широкое покрытие устройств и стабильность работы. Она отлично подходит для решений, рассчитанных на широкую аудиторию, так как не требует большой производительности.

Безмаркерная технология (marker-less). Появилась позже, она отслеживает положение устройства в пространстве, используется не только в мобильных телефонах, но и в шлемах виртуальной реальности. Базируется на методе, который называется SLAM. Благодаря ему можно размещать графику в реальном пространстве, ходить вокруг, при этом нет необходимости, чтобы в кадре камеры присутствовала метка. Они, в принципе, не нужны, графика будет работать где угодно, пример — Pokemon GO.

Как телефон «видит»

Очевидный ответ — через камеру. Однако изображение уточняется набором датчиков.

• Магнитометр выступает как компас, определяет, где находится север.
• Гироскоп определяет угол наклона и положение устройства.
• Акселерометр определяет изменения скорости движения и вращения устройства.
• Датчик глубины вычисляет расстояние до объекта.

Уточнять данные, полученные смартфоном от датчиков, помогает искусственный интеллект. Алгоритмы компьютерного зрения помогают отличать объекты друг от друга, понимать, где заканчивается один объект и начинается другой. Например, Google Depth API — библиотека, которая позволяет при помощи компьютерного зрения составлять 3D-карту пространства.

Такие библиотеки также помогают реализовать окклюзию — это когда реальный физический объект перекрывает виртуальный и наоборот.

Ограничения мобильной дополненной реальности

Обсчёт AR сильно расходует заряд батареи, поэтому в AR-опытах, как правило, не делают скидок на качество графики — то, что можно увидеть, должно быть красиво, хотя и недолго. На этом построен принцип использования технологий дополненной реальности.

Телефон быстрее нагревается, из-за чего процессор начинает тормозить. Это называется троттлинг — снижение частоты процессора.

Есть проблемы с реалистичностью. Ощущение реальности в 3D-графике связано с отражениями, бликами и тенями на материалах объектов. В играх — окружение виртуальное, там можно строить карты отражений, чтобы всё правильно отражалось. А в AR окружение реальное, причём вся известная о ней информация поступает с камеры.

Положение источников света во всей комнате или на улице по кадру определить невозможно, поэтому в дополненной реальности свет и тень имитируют, чтобы картинка была похожа на реальную. К физическим процессам это отношения не имеет.

Приложения, которые позволяют создавать примитивные AR-сцены на смартфоне

Есть приложения, которые поставляются с готовым набором встроенных моделей. К сожалению, импортировать свои объекты в них не получится.Такие приложения ограничены в функциональности и не позволяют подгружать свои модели и делать более проработанные сцены. Все эти приложения, кроме Assmblr, работают без маркеров:

— Around позволяет размещать 3D-объекты из готовой библиотеки, а также смотреть проекты других пользователей в определённом радиусе.

— Scenecam позволяет располагать сразу несколько объектов из библиотеки приложения на плоскости, добавлять к ним различные эффекты — например, огонь.

— Assemblr позволяет создать сцены с видео, объектами из встроенной галереи, изображениями и гифками. Также есть возможность распечатать маркер и воспроизводить сцену в любом месте, где он расположен. Можно снимать видео или фото со сценой.

— Holo включает в себя библиотеку платных и бесплатных анимированных моделей, которые можно располагать в реальном пространстве.

Чтобы работать с дополненной реальностью более прицельно необходимо освоить редакторы дополненной реальности, движок Unity и прилагающиеся к нему SDK по работе с AR — например, AR Foundation или Vuforia.

Что посмотреть для знакомства с предметом:

AR for everyone — full course

Курс по AR Foundation

Интерактивная и анимированная дополненная реальность своими руками

Один из инструментов — Reality Composer — чтобы пользоваться им не требуется никаких навыков кодинга. Это редактор дополненной реальности для iOS, iPadOS и Mac, он работает только с форматом .usdz. Размещать, двигать и поворачивать объекты дополненной реальности можно обычным перетаскиванием. Можно задавать триггеры, чтобы, например, по нажатию пальца у ваших объектов запускалась анимация.

Вот ссылка на уроки по инструменту.

Другой полезный конструктор — Adobe Aero. Уроки по инструменту здесь.

Он способен работать с .fbx и .gltf моделями, принимать сцены из компьютерного 3D-редактора Adobe Dimension. Это открывает большие возможности для моделирования и анимации. Недостаток — приложения доступны только для платформ iOS, iPadOS и Mac.

Где брать модели для своих AR-проектов: бесплатно и красиво

Готовые модели лучше всего скачивать из следующих источников:

• Free3d.com
• Sketchfab
• Asset Store в Unity
• Turbosquid

Форматов много, но самые распространённые — .fbx, .obj, .c4d. Для ПО от Apple — главный формат это .usdz. Процесс импорта модели не идеален, разные приложения поддерживают разные форматы. Можно столкнуться с проблемами неподцепившихся текстур или пропавших анимаций.

Не все 3D-форматы содержат информацию о текстурах, анимации и так далее. Формат .obj, например, несёт только данные о геометрии, обычно вместе с ним идёт .mtl файл, который содержит цвет и текстуры.

Приложения для разработки масок

Одно из самых крупных принадлежит Snapchat — это Lens Studio. Это инструмент визуального программирования, разобраться с которым можно без знания программирования. В нём можно проектировать как маски, так и эффекты. Он не ограничивается созданием визуальных эффектов для лица. В приложении можно переключиться на основную камеру девайса и разрабатывать AR-сцену для любой плоскости.

Оно доступно как для WIndows, так и для MacOS. Предлагает большой инструментарий: работа с текстурами, со светом, анимирование и подключение звука к цифровым объектам.

Когда в AR-проекте нужен код?

Для минимального AR-приложения достаточно Unity и AR Foundation. Чтобы поставить кубик в трёхмерном пространстве, не нужно написать и строчки кода. Код потребуется для описания логики поведения объектов. Если хочется, чтобы объект, например, по нажатию подпрыгивал, этого не сделать без скрипта.

Представим базовый кейс: вы прошлись с телефоном по квартире, просканировали пространство, поставили кубик. Теперь вы хотите, чтобы он отлетал от стен по нажатию. С некоторой точностью это можно сделать на ARKit, ARCore и AR Foundation. Они позволяют сканировать пол и стены и делать базовые физические взаимодействия. Но для того чтобы их сделать, нужно будет написать скрипт — обработчик того, что нажатие применяет импульс к объекту.

Примечание Технологии виртуальной и дополненной реальностей широко распространены в строительстве. Рекомендуем взять приведённые инструменты на заметку.

Во всём остальном SDK Unity реализовано так, что без сложной логики всё делается без кода. В большом проекте без кода не получится — там начинаются сложности, связанные с бизнес-логикой системы и тонкими настройками технологий ARCore или ARKit. В небольшом проекте можно сделать полный no-code, за исключением физических взаимодействий, описанных выше.

Объем мирового рынка иммерсивных технологий к 2030 году составит около $1,5 трлн, из которых более $1 трлн придется на дополненную реальность, согласно исследованию PWC. Augmented reality — это технология наложения компьютерных слоев на реальное пространство, задача которой дополнить физический мир виртуальными объектами. Чтобы попасть в новую среду, надо использовать подходящий девайс, например, смартфон, умные очки, шлем и т.д.

К 2024 году будет наблюдаться увеличение доли корпоративных AR-приложений по сравнению с приложениями, рассчитанными на потребителей, а также по сравнению с VR-приложениями.

Инструменты дополненной реальности могут практически все: распознавать лицо человека, анализировать эмоциональные реакции и корректировать свою работу в соответствии с ними, определять объекты, мгновенно предоставлять информацию в режиме реального времени о человеке и о предмете.

Дальше — 9 кейсов, в которых AR-технологии активно применяются и приносят положительные результаты.

AR в образовании

В сфере образования augmented reality позволит визуализировать материалы и более эффективно доносить информацию до аудитории, удаленно повышать квалификацию и перенимать навыки у профессионалов, получать дополнительную справочную информацию. Кроме того, получится дополнить книги, карточки и полиграфические материалы вспомогательной информацией.

Кейс: футболки с дополненной реальностью от Virtuali-Tee

Если говорить простым языком, это AR-футболка, которая включает в себя анимированный контент в виде человеческих органов. Благодаря игровой форме обучения участники получают возможность заняться анатомическими исследованиями, путешествуя по частям тела и узнавая ключевые факторы жизнедеятельности нашего организма. Проект стал невероятно успешным: реакция и учеников и их родителей была исключительно позитивной, а сами футболки Virtuali-Tee стали самыми продаваемыми в своей категории на Amazon.

Кейс: AR-учебники

Для просмотра дополнительной анимации в AR нужно установить специальное приложение А затем используя обучающее пособие или наклеив маркеры в школьный учебник по физике издательства «Просвещение», вы сможете увидеть анимированные трехмерные объекты. Например, демонстрацию силы трения, закона Паскаля или гидравлического пресса.

Медицина и дополненная реальность

В здравоохранении благодаря AR станет возможным получать поддержку от более опытных специалистов и оперативнее взаимодействовать с коллегами, точнее ставить диагноз и назначать медикаментозное лечение, безошибочно определять место для внутривенных инъекций и избегать повторных попыток.

Кейс: AR-технология Philips в медицине

Проект Philips представили новую хирургическую навигационную технологию дополненной реальности, которая предназначена для хирургии позвоночника, черепных и травматологических операций. Эта технология использует оптические камеры высокого разрешения, что добавляет новые возможности к рентгеновской системе. Теперь во время хирургического вмешательства на коже пациента появляются небольшие разрезы, которые минимизируют кровопотерю и повреждение мягких тканей, и, следовательно, уменьшают послеоперационную боль.

AR-рестораны

В ресторанной сфере использовать инструменты дополненной реальности можно для бронирования мест, подбора рецептов, исходя из имеющихся продуктов, мгновенного подсчета ккал в блюдах, помощи в приготовлении пищи и измерении необходимого количества ингредиентов.

Кейс: AR-приложение-конструктор сети пиццерий Domino’s Pizza

В ногу со временем идет бренд Domino’s Pizza, который позволил клиентам самим стать авторами блюд. Компания интегрировала в свое приложение AR-технологию, которая дает возможность выбрать любые представленные ингредиенты для начинки. Фактически покупатель собирает свою идеальную пиццу как конструктор и выступает в роли виртуального шеф-повара, а пока курьер везет кулинарный шедевр, можно отслеживать его передвижения в том же приложении. Владельцы компании сумели превратить обычный процесс заказа пиццы в настоящее развлечение.

AR в промышленности

В сфере промышленности инструменты AR можно применять для визуализации объектов еще на этапе проектирования, эффективного управления процессами, более качественного выполнения мелких работ.

Кейс: Boeing начал собирать самолеты в AR-очках

Один из лидеров мирового авиапрома Boeing предложил своим операторам использовать AR-очки во время сборки самолетов, чтобы ускорить коммуникацию между руководителями и исполнителями, и тем самым повысить производительность. Рабочим раздали гарнитуру с установленным AR-приложением, куда были встроены все инструкции и планы, и тем самым освободили им руки. «Умные очки» понимают голосовые команды, поэтому стало возможным мгновенно попросить партнера или начальника присоединиться к процессу, чтобы вместе решить сложную задачу. В результате использования дополненной реальности сократились трудозатраты, значительно снизился процесс переутомления и, как следствие, процент ошибок, а время сборки сократилось более чем на четверть.

Gamedev

В игровой отрасли AR стала уже привычным явлением. Однако помимо интеграции элементов игры с реальным миром, пользователи могут заводить виртуального домашнего любимца, создавать аватары, которые будут в режиме реального времени отражать эмоции своего владельца.

Кейс: AR-технологии позволяют никогда не расставаться с питомцем

Метавселенные активно рассматриваются как итерация Интернета как виртуального мира, чему способствует развитие AR и VR технологий. Уже сейчас существует несколько способов завести питомца, например, на платформе Decentraland можно купить щенка и взять его на прогулку. Также можно купить NFT образ домашнего животного на торговой площадке. Оба этих способа существуют исключительно в цифровом мире. Однако есть и проекты, которые стремятся интегрировать виртуальный и реальный миры, например платформа ClassicDoge предлагает отсканировать и токенизировать 3D-рендеринг вашего любимца в физическом мире и перенести его в Метавселенную. Tamadog — игра, в которой можно завести виртуального щенка. Он будет есть, спать, справлять нужду и играть, а благодаря режиму дополненной реальности питомец может существовать в физическом мире, как обычный пес.

Кино в дополненной реальности

Киносфера также активно внедряет AR-инструменты для развития индустрии. Информацию об актерах и фильмах можно получить в мультимедийном формате, смотреть фильмы с друзьям одновременно из разных точек мира, а ролики на YouTube — прямо во время прогулки или занятий спортом.

Кейс: AR-развлечение к сериалу «Ведьмак»

Для промо-кампании популярного сериала «Ведьмак» Netflix выбрал формат игры, в которой пользователи становились главным героем и сражались с монстрами, которые «появлялись» в их реальном мире. Позитивные отзывы на эту кампанию были как от фанатов саги, так и от новых зрителей. Руководство стримингового сервиса осталось очень довольно результатом: на 19 декабря 2021 года пользователи посмотрели 142.4 миллиона часов второго сезона.

Спорт

И в спортивной сфере много вариантов использования иммерсивных технологий. Например, можно превратить обычную тренировку в увлекательную игру и одновременно получать информацию о потраченных ккал и достижениях, а виртуальный коуч будет следить за правильным выполнением упражнений и количеством повторений. Также благодаря AR-технологиям болельщики могут в режиме реального времени получать информацию об игроках и просчитывать максимально вероятный результат соревнований, а тренеры — более точно объяснять игрокам тактику действий.

Кейс: руководство стадиона подготовилось к Super Bowl благодаря AR

Применение дополненной реальности нашла и управляющая компания стадиона «Super Bowl LII Stub Hub», которая разработала собственное брендированное приложение, позволяющее покупателям билетов заранее «увидеть» свое расположение и ракурс обзора именно с того места, которое он предполагает выкупить. В результате компания решила реальные проблемы, получила прирост прибыли и увеличила посещаемость стадиона.

Реклама

Рекламные возможности достигают качественно нового уровня благодаря AR. Информационные сообщения постепенно становятся настолько персонализированными, что устройства могут следить за движением тела и глаз, благодаря чему для каждого будут подобраны индивидуальные информационные сообщения и рекламу станет практически невозможно игнорировать.

Кейс: рекламная кампания от Nike

Чтобы поддержать запуск новой линейки кроссовок, Nike реализовала проект 360 с использованием AR-технологий. Покупатели попадали в дополненную реальность, отсканировав бейдж сотрудника, POSM или код на билбордах в городе. Помимо нового AR-опыта, используя технологию, клиенты получали дополнительную скидку на кроссовки. В результате кампании онлайн-продажи Nike выросли на 82%, при этом во всех регионах был зафиксирован как минимум двузначный рост.

Ритейл

В ритейле, в сегменте, в котором AR используется чаще всего, помимо очевидных способов — виртуальной примерки одежды и предметов интерьера — можно задавать параметры и выстраивать наиболее удобный путь по торговым центрам, посмотреть как трансформируется внешность при увеличении/уменьшении размера одежды и смены цвета волос, проанализировать торговые предложения и выбрать самое подходящее.

Кейс: AR-навигация по магазину М.Видео

Российская торговая сеть по продаже бытовой техники и электроники М.Видео внедрила AR-технологии для навигации товаров для покупателей. Благодаря приложению M.Go ориентироваться в пространстве большого магазина стало быстрее, а их покупательский опыт стал простым и понятным.

Также AR-навигация уже доступна в Яндекс и Гугл картах.

Кейс: AR- приложение для управления BMW

А немецкий производитель автомобилей BMW создал виртуальный тест-драйв и позволил потенциальным покупателям не только детально изучить модели, но и на несколько минут почувствовать себя владельцем машины. При помощи AR-приложения управлять авто стало возможно прямо на рабочем месте, параллельно выбирая конфигурации на свой вкус. По итогам акции команда BMW собрала целую россыпь наград на престижных конкурсах в сфере рекламы и маркетинга.

«Применение AR наиболее эффективно, когда высока неопределенность, связанная с продуктом. Поэтому бренды могут использовать дополненную реальность, чтобы снизить неуверенность клиентов и улучшить продажи» – говорится в исследовании Американской ассоциация маркетинга.

Учитывая эти данные, наиболее эффективно использовать AR для продвижения наименее популярных товаров и услуг, повышения уровня продаж предметов более высокой ценовой категории, привлечения клиентов из офлайн в онлайн.

Важно добавить, что AR — это не волшебная палочка, которая сделает ваш бизнес лидером отрасли. Чтобы эффективно использовать AR-технологии, у компании уже должна быть выстроена цифровая инфраструктура и автоматизированы процессы, в противном случае иммерсивные инструменты окажутся бесполезным, если не пагубным решением для бизнеса. Использование augmented reality целесообразно в двух случаях: создание качественно нового клиентского опыта и освобождение высококвалифицированных специалистов от рутинной работы.

Система отслеживает движения меча и визуализирует их с помощью дополненной реальности. Человеческий глаз не способен делать это без AR — слишком большая скорость.

Зацените, как это выглядит:

Раньше работало с неудобными метками

Работать над проектом начали ещё в 2012 году — 9 лет назад.

Уже тогда они придумали использовать дополненную реальность, Motion Capture, высокоскоростную камеру, самодельные маркеры и программы для отслеживания и визуализации быстрого движения спортсменов.

Тогда разработчики системы использовали светоотражающие маркеры для определения наконечников меча, а это доставляло неудобство спортсменам.

В 2017 году маркеры заменили на ленты — это тоже оказалось не очень удобно.

Потом задействовали искусственный интеллект

В 2016 году разработчики начали работать над системой, которая могла бы обнаруживать положение наконечника меча только по изображению с камеры — без каких-то дополнительных меток.

Это оказалось не так просто, поскольку мечи двигаются очень быстро, а их форма сильно меняется, когда они изгибаются. Ещё одна сложность — ширина мечей: она составляет всего несколько пикселей, даже если снимать в 4K.

Поэтому разработчики решили применить нейронные сети для обнаружения объектов с каскадным классификатором на основе YOLO v3 в сочетании со специальной аппаратной и конфигурацией камеры.

В итоге, алгоритм удалось научить отслеживать положение наконечника меча. Чтобы покрыть всё поле матча, понадобилось 24 камеры. Из-за того, что снимать поединок надо очень детально, одна камера покрывает всего 8 метров.

Коротко: как это в итоге работает

24 высокоскоростные камеры захватывают изображение по всему полю поединка.

С помощью Motion Capture и алгоритма Deep Learning для обнаружения объектов под названием YOLO 3 система отслеживает положение наконечника меча.

На изображение с помощью дополненной реальности накладывается след от мечей.

Видео с AR подсказкой для зрителей транслируется в эфир.

Источник: Rzhizomatiks

Новая функция дополняет уже представленную ранее функцию Live View. Её поисковый гигант анонсировал ещё в 2020 году.

На данный момент ориентирование в дополненной реальности работает лишь в определённых локациях. В их числе оказались аэропорты, торговые центры, железнодорожные и автовокзалы. Нововведение призвано облегчить перемещение в незнакомых местах.

Если вы садитесь на самолёт или поезд, Live View поможет найти ближайший лифт или эскалатор, выход, платформу и т.д. Стрелочки и сопроводительные указания также укажут вам верный путь.

Из прочих ограничений новой функции можно отметить её временное «развёртывание» лишь в части городов США. Но компания уже пообещала расширять географию. Так, уже в ближайшие месяцы улучшенный Live View должен заработать в Токио и Цюрихе.

Источник: Блог Google

Журналист издания Том Уоррен рассказал, как с ним на прошлой неделе связался идейный лидер Kinect и HoloLens Алекс Кипман. Для этого он использовал новинку от Microsoft. По словам Уоррена, он надел шлем HoloLens 2, после чего попал в «виртуальную комнату для встреч», в которой представитель ИТ-гиганта находился рядом с его кофейным столиком.

Это ощущалось как встреча в Microsoft Teams из будущего.

Основной для Microsoft Mesh стала облачная платформа Azure. Кипман заявил, что в компании надеются на то, что архитекторы, инженеры и дизайнеры заметят потенциал новинки.

А для ещё большего её распространения компания намерена сделать сервис доступным на множестве разных устройств: начиная от смартфонов и заканчивая компьютерами и различными шлемами, в том числе HoloLens 2.

Прямо сейчас Microsoft Mesh доступна лишь для владельцев последней и то, после регистрации на платформе виртуальной реальности AltspaceVR. На прочих девайсах платформа появится позже.

Источник: The Verge

Согласно исследованию, к 2033 году 170 профессий из 702 рассмотренных исчезнут с рынка труда с вероятностью более 90%. А специальность с SOC-кодом 15-1131 (Computer programmers) к этому времени потеряет актуальность с вероятностью 48%.

А где же останутся нужны программисты? На основе открытых данных и исследований мы составили подборку сфер IT, которым в будущем с большей долей вероятности понадобятся разработчики.

Augmented Reality: из развлечений в обучение

Средняя зарплата AR-разработчика сегодня — более 75 тысяч долларов в год. А в одних только США более 19 тысяч вакансий AR-developer. Если рынок продолжит развиваться, спрос на специалистов будет только расти.

Ключевые технологии AR: распознавание объектов в реальном времени, реалистичное 3D-сканирование и построение сетки окружающего пространства.

Тренды:

• функциональные AR-приложения для смартфона;
• интеграция AR-очков и смартфона;
• дешёвые и удобные девайсы.

Перспективы: технология всё ещё дорогостоящая, а пользоваться ей неудобно. Из-за этих проблем рост рынка замедлился. Их решение даст импульс для развития.

Материалы по теме AR

Virtual and Mixed Reality: пока лишь для большого бизнеса

Разработчики виртуальной реальности в среднем получают около 100 тысяч долларов в год. Количество вакансий MR- и VR-разработчиков в США — более 18 000. В общем, ситуация на рынке труда схожа с направлением дополненной реальности.

Ключевые технологии:

• среда виртуальной реальности CAVE;
• индикаторы на лобовом стекле;
• шлемы и очки виртуальной реальности.

Тренды: уменьшение размера и стоимости VR-очков и шлемов.

Перспективы: спектр применений этой технологии огромен, но пока делать виртуальные миры долго, а пользователей мало из-за дороговизны и несовершенства VR-устройств. Решение этих вопросов даст стимул развитию направления.

Материалы по теме VR/MR

Робототехника: из промышленного использования в бытовое

В 2017 году количество роботов в мире составляло 69 на 10 000 работников. Больше всего — в Южной Корее (531 на 10 000 работников), в Сингапуре — 398, в Японии — 305, в Германии — 301. В 2019 году объём мирового рынка роботов достиг $34 млрд.

Средняя зарплата разработчика-робототехника составляет порядка 75 тысяч долларов в год. А вакансий, связанных с робототехникой, в одних только США — более 18 000.

Ключевые навыки: автоматическое управление, инженерия, программирование устройств.

Тренды: новые материалы, развитие навигации в экстремальных условиях, новые сенсорные устройства.

Перспективы: конструирование, производство и программирование роботов — достаточно трудоёмкий процесс, часто не оправдывающий себя экономически. Роботы в производстве начинают окупать себя через 3–5 лет. Из-за этого не каждый работодатель готов внедрять их. Остаётся очень много сфер, где дешевле воспользоваться человеческим трудом, нежели тратить ресурсы на автоматизацию. Менее затратный способ создания умных устройств даст мощный толчок развития технологии. Также стоит делать ставку на бытовых роботов.

Материалы по теме робототехники

Квантовые вычисления: вопросы стабильности кубитов

На данный момент рынок квантовых компьютеров ориентирован больше на исследования, чем на массовое производство. Но с удешевлением технологии квантовый программист будет не менее востребован, чем обычный.

Среднюю зарплату в сфере подсчитать сложно, но, например, в IMB исследователям и разработчикам сферы квантовых вычислений платят от 40 до 200 тысяч долларов в год. А всего в США почти 600 открытых вакансий в сфере квантовых вычислений.

Ключевые технологии: квантовые вычисления, компьютерная инженерия.

Тренды: поиск новых форм кубитов, их эффективного соединения и программирования.

Перспективы: помимо разложения на множители, квантовые компьютеры в теории смогут моделировать сложные ситуации, в т.ч. поведение веществ на молекулярном уровне. Но для начала надо решить 2 главных вопроса: стабильность кубитов и использование их в большом количестве.

Материалы по теме квантовых вычислений

Искусственный интеллект: на смену офисным профессиям

Средняя зарплата разработчика в сфере ИИ составляет больше 100 тысяч долларов в год. А количество вакансий — более 81 000 только по США.

Ключевые технологии: нейросети, дополненный интеллект, чат-боты, машинное обучение и системы управления ИИ.

Тренды: интеллектуальные помощники, автопилоты, нейрокомпьютерный интерфейс.

Перспективы: сейчас в сфере ИИ множество нерешённых вопросов, включая проблему мультизадачности или понимания смысла текста (в противовес простому распознаванию слов и грамматических ошибок). Но это не мешает технологии активно развиваться и внедряться во все сферы нашей жизни. В упомянутых в начале статьи исследованиях именно системы искусственного интеллекта заменят большинство сотрудников, в том числе телефонных операторов, водителей и бухгалтеров.

Материалы по теме ИИ

Среди собранных под одной крышей «технологий» можно найти 3D-рендеринг, инструменты для командной строки, BitTorrent-клиент, поисковый движок и т.д. В репозитории даже собраны материалы, которые учат создавать языки программирования с использованием Ассемблера.

Полный список технологий, собранных в репозитории build-your-own-x

• 3D-рендеринг
• Дополненная реальность (AR)
• BitTorrent-клиент
• Блокчейн / Криптовалюта
• Бот
• Инструменты командной строки
• Базы данных
• Docker
• Эмулятор / Виртуальная машина
• Front-end фреймворк / Библиотека
• Игра
• Git
• Сетевой стек
• Нейросеть
• Операционная система
• Физический движок
• Язык программирования
• Движок регулярных выражений
• Поисковый движок
• Shell
• Движок шаблонов
• Текстовый редактор
• Система визуального распознавания
• Воксельный движок
• Движок для веб-поиска
• Веб-сервер
• Без категории

Источник: GitHub / build-your-own-x

Команда «клипов» ВКонтакте объединилась с творческим коллективом Esthetic Joys для создания необычной коллекции одежды и аксессуаров. Линейка, в которую входят футболка, худи, сумка, шапка и шарф, получила поддержку технологию дополненной реальности (AR), сообщает The Village.

Пресс-служба соцсети рассказала, что для активации AR-эффекта достаточно навести камеру приложения ВКонтакте на QR-код на бирке предмета гардероба. После этого запустится специальный режим, демонстрирующий объёмный рисунок при наведении на принт:

Старт продаж новой коллекции намечен на 22 января 2021 года. Купить необычную одежду можно будет в концепт-сторах «Секция» в ГУМ и ТЦ «Петровский Пассаж». Цена худи составляет 6,8 тыс рублей, футболки — 3,6 тыс рублей, шапки и шарфа — по 5 тыс рублей.

Источник: The Village

Все ссылки на документацию будут в конце статьи, а пока посмотрим самое интересное — как это работает на практике. Результат будет примерно такой:

Важно: чтобы посмотреть примеры AR-контента, нужно второе устройство с камерой — например, смартфон. В тексте есть ссылки на CodePen. Откройте их на устройстве с камерой и разрешите браузеру доступ.

Как создать AR-приложение за несколько минут

Импортируем в HTML-код A-Frame и AR.js:

Затем внутри <body> создадим сцену, которая будет охватывать все необходимые нам элементы: маркер, камеру, AR-объект.

Следующий шаг — добавление маркера. Пока используем preset Hiro. Это дефолтный маркер AR.js, его изображение вы найдёте ниже:

Добавим AR-объект внутри <a-marker>. Попробуем один из примитивов, которые предлагает фреймворк A-Frame:

Напоследок добавляем камеру. Одна должна быть за пределами маркера. Это нужно для того, чтобы AR-объект появлялся только при наведении камеры на маркер. Если в объективе нет маркера, дополнительный контент не отображается на экране.

Вот полный код:

Чтобы проверить работоспособность:

1. Откройте в браузере на смартфоне это приложение на CodePen.
2. Разрешите доступ к камере.
3. Наведите камеру на маркер Hiro, который размещён ниже.

Вместо геометрической фигуры можно вставить другую 3D-модель. Рекомендуемый формат — glTF. Вот полный код:

Ещё одна интересная возможность — вставка AR-текста на английском языке. Его свойствами можно управлять с помощью атрибутов, подробно описанных в документации. Полный код:

Держите ещё несколько инструментов для создания дополненной реальности.

Как создать свой маркер для AR-объекта

В примерах выше используется стандартный маркер Hiro. Но мы можем создать другое изображение с помощью онлайн-инструмента AR.js Marker Training. Правда, оно должно отвечать целому ряду требований.

• максимальное разрешение маркера — 16*16 пикселей;
• квадратная форма;
• используется только чёрный или светло-серый цвет (например, #F0F0F0);
• нет прозрачных областей;
• содержит простой текст — букву или цифру.

Также нужно помнить о контрасте. Если у маркера чёрный фон, то окружающая среда должна быть светлой. В противном случае распознавание не сработает.

В качестве маркера также можно использовать штрих-код. Подробнее об этом можно узнать из статьи разработчика AR.js Николо Карпиньоли (Nicolo Carpignoli).

Что ещё можно сделать с помощью AR.js

Отслеживание маркеров — лишь один из типов дополненной реальности. Библиотеку можно также использовать для создания следующих интерактивов:

• Отслеживание изображений — при наведении камеры на 2D-изображение пользователь видит поверх него или рядом с ним AR-контент. Это может быть другое 2D-изображение, GIF, 3D-модель, видео.
• Дополненная реальность на основе местоположения. Пользователь видит AR-контент в заданных локациях.

Подробное описание применения и примеры кода можно найти в документации AR.js и A-Frame.

Если дополненной реальности мало, посмотрите, как создать простое VR-приложение под Android с помощью Unity.

Потребителям придётся покупать специальный аксессуар, разработанный под размер смартфона. Голограммы можно будет использовать для просмотра фотографий, шоппинга, игр, проведения видеоконференций.

Ключевой для развития технологии должна стать выставка CES, которая пройдёт с 11 по 14 января. На ней представители IKIN встретятся с потенциальными покупателями и инвесторами, чтобы обсудить дальнейшую разработку. Компания планирует выпустить первые аксессуары для смартфонов  в этом году. Созданием голографического контента будут заниматься специалисты IKIN. Сообщается, что уже есть примеры для технической демонстрации и даже игры.

IKIN также разрабатывает устройства для вывода крупных голограмм. Компания привлекла более 13 млн долларов инвестиций и сейчас ищет стратегического партнёра для дальнейшего развития технологии.

Медицина

Диагностика рака

Патологи применяют ИИ для более точной диагностики рака. Данные о различных видах рака применяют для создания предиктивной модели. Например, для этого используют технологию PathAI.

Создание медикаментов

Создание новых лекарств — трудоёмкий процесс, потому что нужно провести множество тестов, чтобы найти полезную формулу. В этом помогает ИИ. Atomwise — один из примеров технологии, которая позволяет обнаруживать новые молекулы. Она используется в создании новых лекарств от 27 болезней в сотрудничестве с Гарвардским и Стэнфордским университетами и фармацевтическими компаниями.

Оптимизированная обработка данных о пациентах

Число больных по всему миру ежедневно растёт. Для обработки данных об их заболеваниях требуются автоматизированные системы. ИИ позволяет медицинским учреждениям оптимизировать эту обработку. Например, OLIVE — платформа для автоматизации задач здравоохранения.

Финансы

Деньги становятся цифровыми. Общая сумма цифровых транзакций составляет 4,4 миллиона долларов, и может составить более 8 миллионов к 2024 году.

Данные об этих операциях, обработанные ИИ, могут помочь улучшить финансовую индустрию в 2021 году. Например Dataminr собирает информацию из различных текстовых источников и представляет пользователю график важных событий. Нейронные сети позволяют ему анализировать текстовые данные.

Трейдинг

Алгоритмы машинного обучения могут быть использованы для автоматизированного ведения торгов. Теоретически, имея информацию о ценах, объёмах, датах, общественных настроениях (или погоде) можно создать систему, которая обыграет рынок (но это не так легко). Алгоритм может обучаться и адаптироваться к изменениями в реальном времени, чтобы делать предсказания точнее. Например, Kayrros — компания, которая занимается анализом данных, чтобы помочь в инвестировании участникам рынка.

Обнаружение мошенников

Цифровые платежи имеют определенные риски. В 2018 году 24,26 миллиарда долларов были потеряны из-за мошенников. Машинное обучение идеально походит для борьбы с ними. Британская компания AimBrain, с помощью машинного обучения предотвращает кражу аккаунтов и обнаруживает аккаунты мошенников.

Модель может использовать тренировочные данные для маркировки каждой операции (подозрительная или нет). Затем, используя метрики точности и полноты, мы можем подкорректировать модель под наш профиль риска, анализируя затраты на ложно-положительные и ложно-отрицательные прогнозы.

Банкинг

Банки используют машинное обучение для обслуживания клиентов, предсказания рисков, предотвращения рисков и инвестирования. Допустим, можно предлагать персонализированные предложения, основываясь на финансовом поведении пользователя. Таким образом, если клиент ищет дом, ему можно сделать специальное предложение. Envestnet — это компания занимающаяся сбором и анализом финансовых данных, которая предоставляет услуги управления финансами.

GAN (генеративно-состязательные сети)

Генеративно-состязательные сети это подход к генеративному моделированию, использующий методы глубокого машинного обучения ИИ, такие как CNN (свёрточная нейронная сеть).

GAN использует модель для генерации новых данных, которые похожи на те, на которых она была натренирована (например изображения).

С помощью GAN можно получить датасеты изображений, лиц, персонажей мультфильмов, переводить изображения в текст и обратно, создавать 3D объекты и т. д. Областей применения GAN множество, но они могут принести не только пользу. Одно из последних применений GAN-приложений это дипфейки.

Терро Каррас, в своей статье «Прогрессивное развитие GAN для улучшения качества, стабильности и разнообразия» демонстрирует сгенерированные реалистичные изображения человеческих лиц. Модель натренирована на знаменитостях, поэтому она создаёт лица, похожие на существующие.

Но не стоит обманываться чудесами обработки данных. Мы скоро столкнемся с последствиями таких дипфейков. В наши дни репутация любого человека может быть уничтожена с помощью технологий из общедоступных репозиториев.

Reinforcement learning (обучение с подкреплением)

RL — это область машинного обучения ИИ в которой изучается, как испытуемая система (агент) взаимодействует с некоторой средой для получения максимального вознаграждения. Вознаграждением называется отклик этой среды.

Обучение с подкреплением это одна из трёх парадигм машинного обучения, наряду с обучением с учителем и обучением без учителя.

RL — это то, как мы учимся ежедневно. Представьте, что вы взяли щенка возрастом один месяц. Чтобы дресcировать его, вам нужно использовать систему вознаграждений. Если пёс слушается, вы даёте ему вкусняшку. Так вы используете позитивное подкрепление, для дрессировки собаки.

Программисты из OpenAI, компании, основанной Илоном Маском, показали, как агенты играют в прятки.

Им не давали явных инструкций о том, как играть. После миллионов симуляций агенты научились взаимодействовать со средой:

• тот, кто прячется, научился стоить маленькие форты и баррикады;
• тот, кто ищет, начал использовать пандусы чтобы забираться на стены и находить спрятавшихся.

AR и VR (Дополненная/Виртуальная реальность)

Дополненная реальность — это мост между виртуальной и физической реальностью. Визуальные данные, собранные AR приложениями, можно использовать для распознавания изображений. Дополненная реальность и ИИ — это разные, но дополняющие друг друга технологии. Используя обе можно создать что-нибудь прекрасное.

Маркировка изображений/сцен

Модель строится из кадров камеры, которые можно использовать для классификации местоположения. Вот отличная статья об этом.

Распознавание объектов

Кадры передаются модели, которая способна оценивать размер и расположение объектов на сцене. Эти данные можно использовать для создания рамки вокруг объекта. Например AnyVision может помочь идентифицировать человека или объект, даже в толпе.

Определение позы

Есть два типа определения позы:

• 2D — рассчитывает координаты каждого сустава (x, y) на RBG изображении;
• 3D — рассчитывает координаты (x, y, z) для каждого сустава на RGB изображении.

Определение позы — важная часть распознавания движений, анимации, создания игр и т. д.

Вот хороший блог об этом.

Google объявила о сотрудничестве с ModiFace и Perfect Corp, благодаря которому пользователи смогут опробовать косметику L’Oreal, MAC Cosmetics, Black Opal и Charlotte Tilbury прямо на странице поиска. В официальном блоге технологического гиганта сообщается, что «наложить» AR-макияж можно как на заранее подготовленных моделях, так и на себе.

В Google также заявили, что компания тесно сотрудничает со специалистами из мира моды. Итогом их совместной работы стала система рекомендаций при поиске той или иной косметики. Теперь, когда пользователи ищут её в Google Shopping или во вкладке «Рекомендации», они будут получать советы от профессионалов из сферы красоты и моды.

Источник: Блог Google

В начале 90-х в мире случился игровой бум, началось активное распространение персональных компьютеров и игровых консолей. Производители игр экспериментировали с внедрением VR, чтобы сделать свои продукты более реалистичными, но не все попытки были удачными и удобными для пользователей.

Ситуация изменилась спустя почти двадцать лет: в 2012 году никому тогда не известный стартап Oculus начал сбор средств для создания VR-шлема с «эффектом полного погружения». Необходимые 250 000 долларов были собраны на Kickstarter всего за четыре часа! А через три года первую партию шлемов Oculus Rift CV1 на предпродаже раскупили за 14 минут. Тогда в индустрию повалили огромные инвестиции, что ещё больше подстегнуло развитие игрового VR.

Не только игрушки

Сегодня технологию вновь стали использовать для серьёзных задач. Сотрудников предприятий обучают в виртуальной реальности, чтобы сократить вероятность аварий и несчастных случаев на заводах. Виртуальная среда позволяет создавать тренинги по работе с оборудованием, а также моделировать аварийные ситуации. В компании Ford применение виртуальной реальности помогло сократить число больничных из-за травм на производстве на 75%.

Мы в «КРОК Иммерсивные технологии» занимаемся именно таким индустриальным применением виртуальной и дополненной реальности: делаем цифровые модели предприятий, VR-тренажёры, AR-приложения, оказываем услуги технологического консалтинга.

При этом нам есть чему поучиться у игровой индустрии: не секрет, что люди более эффективно усваивают информацию в игровой форме. Создатели аркад и стратегий знают, как «зацепить» пользователя и заставить его изучить все правила игры. Их приёмы одинаково хорошо действуют как на обычных геймеров, так и на работников заводов. Сегодня я расскажу вам о том, какие фишки из игр мы используем при создании обучающих промышленных VR-тренингов.

Что общего у VR-обучения и игр?

Создание модели

Мы выбираем оптимальный вариант, как будем визуализировать реальный объект: завод или сложное промышленное оборудование. Это можно сделать с помощью моделирования на основе фотограмметрии (сделать много фоток объекта) или сканирования, а также с помощью чертежей.

В играх это делается этими же методами, однако чаще там моделируют какой-то вымышленный объект. Это мы тоже делаем, когда нужно создать, например, ещё не построенное здание. Потом в движке Unity добавляем функциональность, чтобы, как и в играх, учащийся мог передвигаться и взаимодействовать с объектами.

Визуальные приёмы

Для того, чтобы усилить подкрепление знаний сотрудником, мы заимствуем разные визуальные фишки из игр. Например подсвечиваем правильный вариант решения красивым ярким цветом или добавляем всплывающие подсказки. Такой приём используется во многих популярных играх — в знаменитой Assassin’s Creed пользователь видит всех врагов выделенными определённым цветом.

Помимо стандартных настроек в наших VR-тренингах доступен инструментарий. Те же механики, которые позволяют выбрать оружие в игре, дают сотруднику выбирать инструменты в рамках виртуального обучения. Например, он может взять гаечный ключ или молоток, с помощью которого будет ремонтировать оборудование.

Заметили, что в наиболее захватывающих играх инструкции встраиваются в окружающую среду игрового пространства? Это делается для того, чтобы люди лучше запоминали информацию. Как раз то, что нам нужно, чтобы какое-то правило отложилось в подсознании обучающегося и при работе на реальном объекте он точно вспомнил его. Часто для этих целей мы используем встраиваемые в объекты инструкции и интерактивные табло. Они выглядят как планшеты, голограммы и подсказки.

Комфорт пользователя

Когда человек надевает VR-шлем, он оказывается в другом мире, к которому не привык. Чтобы ускорить и упростить его знакомство с этой новой средой, мы взяли всё лучшее из UX и usability игровой индустрии. У неё большая выборка: приёмы тестируются на огромном количестве разных людей, а значит они удобны для большинства жителей нашей планеты. Они нацелены на то, чтобы человеку было интересно и просто играть, иначе он уйдёт.

Например, в нашем тренажёре объекты нельзя размещать высоко — у пользователя устанут руки, и он с большей вероятностью прекратит обучение. Лично мне нравится, как в этом плане всё устроено в игре Boneworks. Любой предмет там можно взять, подбросить, взаимодействовать с ним. Игра приближена к реальности, за счёт этого человеку комфортнее проходить её.

Оптимизация

Как и создатели игр, мы оптимизируем всё, что можем, чтобы увеличить производительность VR-тренинга. Например, используем систему лодирования. Чем больше обучающийся отдаляется от объекта, тем на менее детализированную модель объекта подменяется первоначальная. Текстуры подгружаются в лучшем качестве по мере приближения к ним.

Распространение

Многие игры сегодня распространяются в Steam. У нас тоже есть подобный онлайн-сервис, на котором заказчики могут скачать последние версии тренингов: Build Store.

Как видите, игры помогают сделать обучение в виртуальной реальности лучше. Только цель такого обучения — не развлечение, а отработка ценных навыков, которые могут спасти предприятие от аварий и простоев, а сотрудника от травм. Или даже сохранить ему жизнь.У нас в КРОК большие планы на 2020 год, поэтому именно сейчас у вас есть возможность к нам присоединиться. Стать частью команды могут все желающие: наши профи помогут влиться и научат создавать промышленный VR.

Одежду в кадре Sloy распознаёт уже в процессе съёмки с помощью компьютерного зрения. Программа может показывать похожие вещи в других видео. Встроенный видеоредактор позволяет добавить в видео визуальные эффекты, фильтры и музыку.

Летом «Яндекс» провела закрытое тестирование, на которое пригласила 100 блогеров и 3 тысячи простых желающих. Тестеры помогли улучшить функции камеры и монтажа. Заодно разработчики Sloy выяснили, что интересно будет смотреть людям и как можно доработать распознавание. Говорят, что это не очередное модное приложение, а настоящее сообщество единомышленников.

Функция будет доступна в бета-режиме на устройствах, поддерживающих ARCore или ARKit, в течение недели.

Чтобы воспользоваться ею, надо выбрать пункт назначения, маршрут и тапнуть на новую кнопочку Live View. Она должна появиться внизу экрана.

Norm умеют отображать текстовые сообщения и в принципе интерфейсы разных приложений, даже слушать музыку с ними можно. Но не очень удобно: наушников в очках нет, только встроенные в дужки динамики, так что звук будет слышно всем, кто рядом.

Стартап уже собрал нужную сумму для производства на Kickstarter. Разработчики планируют начать рассылать готовые гаджеты в январе 2020 года.

Пока нейроинтерфейс справляется с совсем небольшим корпусом, зато расшифровывает их в реальном времени. Ближайшие цели учёных:

• расширить корпус до тысячи слов;
• ускорить расшифровку до 100 слов в минуту;
• уменьшить уровень ошибок до 17 %.

Facebook рассчитывает на основе этой технологии создать AR/VR-девайс, которым можно управлять «силой мысли». Он должен быть неинвазивным, то есть для его работы не надо сверлить череп и подключаться напрямую к мозгу.

Зачем это нужно?

Такая на первый взгляд сложная конструкция позволяет эффективнее использовать вычислительные мощности устройства. Для центрального зрения изображение проецируется в более высоком качестве, для периферического — в качестве похуже. Направление взгляда отслеживает специальная камера.

Сейчас очки поддерживают пять типов приложений: игры, офисные программы, 5G-кинотеатр, а также распознавание лиц и объектов:

5G-смартфон Vivo в пару к очкам выйдет в третьем квартале 2019 года. Когда выйдут сами очки и сколько будут стоить, пока неизвестно.

Компания вдвое расширила угол обзора, реализовала управление «инстинктивными» жестами и изменила конструкцию, чтобы гарнитуру можно было легко подстроить под любого человека. Но предназначена она не для развлечений, а для профессионального использования.

Стоимость гарнитуры — около 3,5 тысяч долларов (больше 200 тысяч рублей). Однако в России официальных продаж, похоже, не будет.

Что не так с контрактом?

По словам Bloomberg (со ссылкой на описание контракта), гарнитуры будут использовать, чтобы «увеличить летальность путём улучшения способности обнаруживать цель, принимать решение и действовать, опережая противника». В своём письме сотрудники Microsoft процитировали цели контракта и заявили, что «не хотят наживаться на войне» и «не подписывались на то, чтобы создавать оружие».

В прошлом году уже происходило нечто подобное. Весной журналисты выяснили, что Google разрабатывает систему распознавания для американских военных беспилотников. Сотрудники компании и общество высказались решительно против, и проект закрыли.

Суть изменений

По данным пресс-службы, изменения не повлияют на пользователей и партнёров компании. Также все руководители остались на своих постах. Однако изменения всё же есть. Судя по всему, компания столкнулась с техническими проблемами при проектировании как автономных, так и подключаемых VR-гарнитур. Причём эти проблемы характерны для обоих видов устройств.

Будущая гарнитура

Кроме Oculus Quest, компания, судя по некоторым утечкам, готовит гарнитуру Rift S или Rift 2. Ей приписывают обновлённые дисплеи и систему отслеживания взгляда пользователя. При этом остаётся неизвестным большинство других спецификаций, а также тип устройства. Возможно, это будет обновление Oculus Quest или наоборот — вторая итерация Oculus Rift.

Facebook представила гарнитуру Oculus Quest в сентябре 2018 года на пятой ежегодной конференции по виртуальной реальности Oculus Connect в Сан-Хосе. Новинка обеспечивает шесть степеней свободы и не нуждается в компьютере или смартфоне. Последнее означает отсутствие проводов, запаздывания сигнала и тому подобных проблем.

Оборудование Light Field Lab и ПО OTOY

Light Field Lab создаёт экраны для 3D изображений размером в сотни гигапикселей. Оборудование компании не требует подключения гарнитуры для получения картинки требуемого качества. Такой подход позволяет пользователю получить эффект полного погружения.

OTOY — разработчики технологии с открытым исходным кодом ORBX, предназначенной для обработки трёхмерной графики и отображения виртуальной реальности. Кроме того, в проекте будет использована созданная компанией вычислительная сеть графических процессоров RNDR, основанная на блокчейн-технологии.

Тандем только начал сотрудничество, и его участники не располагают почти ничем, кроме внушительных портфолио. Однако первые результаты совместной работы уже продемонстрированы компании Roddenberry Entertainment. Она основана Джином Родденберри, создателем франшизы Star Trek. Воплощение одной из концепций одноимённого сериала — голопалубы — и есть конечная цель сотрудничества двух команд разработчиков.

В сериале голопалуба — закрытое помещение, в котором можно смоделировать любую среду и ситуацию. Объекты в симуляции осязаемы, а зрители могут с ними взаимодействовать. Так далеко дуэт Light Field Lab и OTOY не заглядывает, однако разработчики считают возможным реализовать визуальную составляющую прототипа.

Итоговым продуктом сотрудничества должен стать полностью готовый к использованию комплект оборудования и программного обеспечения, монтируемый в специально оборудованном помещении. Продукт должен предоставлять потребителю возможность полного аудиовизуального погружения в моделируемую среду.

Авторы научной фантастики десятилетиями описывают и показывают в своих работах действие различных голографических устройств, а инженеры и учёные стремятся воплотить их предсказания. В июне 2018 года группа разработчиков представила систему, которая из записи футбольного матча на YouTube генерирует его трёхмерную модель в дополненной реальности.

Загрузка файлов в реальном времени

В библиотеку Sceneform добавлен API для загрузки моделей gITF в реальном времени. Данное обновление исключает необходимость конвертации файлов из формата gITF в SFB. Активация нововведений функции и подгрузка файлов из локального хранилища или облака достигается при помощи использования RenderableSource в ModelRenderable.

Также разработчики Google добавили:

• API для привязки ID объектов к точкам облака. Каждый ID уникален. Если точка выходит из поля зрения, то при возвращении в него получает новый ID;
• возможность модифицировать объекты при помощи изменения кода вместо их создания с нуля;
• новые поддерживаемые устройства в список.

Дополненная реальность помогает не только расставить мебель в интерьере, но и социализироваться детям с аутизмом. В начале августа 2018 года учёные использовали очки Google Glass, чтобы помочь научиться жить в обществе детям с аутизмом. Они установили на очки ПО с распознаванием лиц, которое передавало на устройство информацию об эмоциях собеседника.

Подробнее о проекте

Компании объявили о партнерстве в 2016 году: Google занималась разработкой облачной платформы JUMP для производства 3D-видео. IMAX, в свою очередь, должна была произвести специальные камеры виртуальной реальности, обеспечивающие удобство для съемки объемных видео в 360˚.

В рамках проекта планировалось создать сеть VR-центров с разнообразным интерактивным 360˚-контентом, а также проанализировать потенциал технологии виртуальной реальности в киноиндустрии. Первый центр был открыт IMAX в Лос-Анджелесе в начале 2017 года. С тех пор в крупных городах мира было открыто 7 центров, 2 из которых уже закрыты.

Расследование Variety

По сообщению Variety, в недавнем квартальном отчете IMAX отчиталась о «последней выплате за разработку анонсированной ранее VR-камеры». Издание связалось с представителями обеих компаний для комментариев. Источник Google отказался говорить о партнерстве, в то время, как сотрудник IMAX рассказал, что «разработка на данный момент приостановлена, но компания рассматривает дальнейшую жизнеспособность проекта».

Другой источник, близкий к проекту, утверждает, что Google приняла решение об отмене проекта еще в конце 2017 года, т.к. компания сфокусировалась на разработке AR-решений. Судьба оставшихся VR-центров будет решена в ближайшие месяцы.

В сторону дополненной реальности смотрит не только Google. Apple совместно с Pixar и Adobe разработала новый формат USDZ для AR-файлов, а также обновила инструментарий ARKit до версии 2.0.

Подробнее об исследовании

По словам учёных, дети с аутизмом плохо распознают эмоции. К примеру, им сложно отличить страх от удивления. Также они избегают зрительного контакта. Исследователи отметили, что развитие эмпатии в юном возрасте может облегчить социализацию в будущем.

В проекте участвовали 14 детей, которым предложили использовать дома усовершенствованные Google Glass. В конце эксперимента 12 семей заявили, что ребенок стал легче идти на зрительный контакт. Между тем, учёные обратили внимание, что контрольной группы в исследовании не было, поэтому нельзя с уверенностью заявлять, что именно очки позволили достичь такого результата.

Это не первая попытка исследователей использовать IT-технологии для лечения аутизма. В начале июля 2018 года инженеры MIT представили робота, который учит ребенка распознавать эмоции, ориентируясь на индивидуальную информацию о нем и обратную реакцию. По их данным, эффективность терапии возросла на 5−10 %.

Технологии

Чтобы продвинуть свои AR-технологии и сделать платформу Real World более надежной, Niantic приобрела лондонский стартап Matrix Mill. Созданная его разработчиками нейросеть способна в режиме реального времени «скрывать» виртуальные образы за объектами реального мира. В итоге герои игры могут прятаться за реальными объектами, например, за цветами и даже за движущимися людьми.

Escher Reality

В феврале 2018 года Niantic Labs приобрела компанию Escher Reality, которая занялась развитием кроссплатформенного и многопользовательского режимов взаимодействия в AR. Команда создала технологию, которая позволяет устройствам в сети обмениваться информацией друг с другом напрямую без необходимости предварительного соединения с сервером. Для демонстрации системы компания выпустила демо-игру Neon.

Развитие

Niantic Labs надеется, что в будущем Real World Platform даст возможность разработчикам AR-приложений работать с продуктами компании из любой точки мира. Как именно будет происходить взаимодействие, в компании пока не рассказали.

В июне 2018 года Apple представила обновленный фреймворк ARKit 2.0 для iOS 12 и формат Universal Scene Description (USDZ) для AR-файлов, созданный в сотрудничестве с Pixar.

Подробнее об учебной программе на Coursera

Программа курса продолжительностью 15 часов направлена на обучение студентов основам дополненной реальности, а также опыту взаимодействия с инструментами разработки — ARCore, библиотекой объектов Poly и Unity. По истечению 4 недель участники изучат различные типы AR-объектов, поймут, что делает их «реальными», познакомятся с популярными инструментами для разработки, а также получат дальнейшие рекомендации по развитию в сфере AR.

Требования для поступления

Учебный курс открыт для всех желающих и распространяется бесплатно. Успешно освоившим программу студентам предоставляется сертификат об окончании.

Это не первый опыт сотрудничества поискового гиганта и платформы обучающих курсов. В начале 2018 года корпорация открыла на базе Coursera программу для изучения базовых понятий IT-сферы.

AR по-новому

Совместно с Pixar и Apple компания разработала новый формат USDZ для сервисов Adobe Creative Cloud. Дизайнеры смогут работать над созданием AR-контента в приложениях Photoshop CC и Dimension CC, а затем конвертировать его в USDZ, поддерживаемый системами Apple.

Project Aero обеспечивает рабочей средой как дизайнеров, так и разработчиков. Платформа даёт возможность дорабатывать AR-сцены, применяя навыки программирования. После завершения работы художника проект можно экспортировать в XCode для дальнейшей модернизации.

Всё чаще AR-технологии начинают встречаться в повседневной жизни. В марте 2018 года разработчики IKEA и Overstock представили приложения для виртуальной расстановки мебели, а в июне 2018 года Google открыла проект Expeditions с AR-турами для пользователей Android и iOS.

ARKit 2.0

Платформа дополненной реальности проецирует виртуальные объекты на нестандартные поверхности вроде круглого стола, лучше распознает лица и делает трехмерные объекты более реалистичными.

ARKit 2.0 поддерживает многопользовательский режим, позволяя видеть одно и то же изображение на нескольких устройствах одновременно. Система будет сама определять объекты в реальном мире и заменять их на 3D-модели.

Представители компании продемонстрировали возможности платформы с помощью приложения Lego, в виртуальной сборке которого могут участвовать до 4 человек.

Measure

Частью ARKit 2.0 стала новая программа Measure, которая превращает смартфон в виртуальную рулетку или дальномер. Чтобы сделать замер, пользователь должен навести камеру на объект и провести вдоль нужного измерения. Measure позволяет вычислить углы, площадь помещения, расстояние между двумя точками.

Universal Scene Description

Корпорация представила формат Universal Scene Description (USDZ), который сохраняет данные об объектах в дополненной реальности, позволяет интегрировать их в приложения и делиться с другими пользователями. Так, формат позволяет превратить картинку в AR-объект и отправить его другим пользователям сообщением, по почте или через браузер Safari. Формат будет интегрирован в Adobe Creative Cloud, что позволит вставлять AR-элементы в новости или книги.

В iOS 12 появится значок, по клику на который можно будет увидеть объект в AR-режиме и представить, как он смотрится в комнате.

Поддержка ARKit 2 и USDZ начнется осенью 2018 года.

В июне 2018 года Apple совместно с Microsoft объявили о поддержке нового USB-стандарта, позволяющего подключать дисплеи Брайля, а в мае другая корпорация — Facebook — добавила новые функции в AR Studio, упрощающие создание объектов дополненной реальности.

Теперь приложение Expeditions в открытом доступе в Google Play и App Store.

Новый способ путешествовать

В приложении доступны 800 туров виртуальной реальности и 100 — дополненной. В их создании, помимо Google Arts & Culture, участвовали специалисты Смитсоновского института и издатели учебной литературы. Expeditions позволяет побывать в горах, под водой и даже в открытом космосе. Учителя могут дополнять программу урока 3D-моделями или проводить виртуальные экскурсии по достопримечательностям.

Для запуска приложения на Android нужно, чтобы устройство поддерживало платформу ARCore. В случае iOS требуется совместимость с ARKit.

Об Expeditions AR и проекте Pioneer компания рассказала на ежегодной конференции Google I/O 2017. В марте 2018 года Google раскрыла подробности об установке Jump, которая снимала стереоскопическое видео с обзором в 360 градусов для создания виртуального мира.

Что нового?

Обновление AR Studio дает возможность пользователям переносить в программу уже созданные анимации со своими действиями и логикой без необходимости написания кода. Также Facebook начала сотрудничество с Sketchfab, где представлена библиотека моделей, доступных для использования в соцсети.

Создание 3D-объектов в AR Studio упростилось за счет добавления следующих функций:

• система отслеживания, распознающая лица, руки и тела;
• редактор иконок для создания визуальных эффектов, управления звуком и виртуальными материалами;
• отделение людей и объектов от фона, для добавления AR-эффектов вокруг них;
• подключение AR-эффектов к определенным местам и объектам, к примеру, появление тепловых волн вокруг чашки кофе, находящейся в кадре.

Также анонсировано появление следующих функций:

• аналитика, позволяющая пользователям отслеживать охват и вовлечение их AR-объектов;
• возможность делиться своими AR-объектами в Messenger, Instagram и Facebook Lite.

Facebook не единственная компания, которая упрощает создание AR-объектов. Напомним, что Snapchat запустила работу Lens Studio с шаблоном по созданию линз с AR-объектами.

Шаблон для создания линз Snapchat

Компания разработала интерактивный шаблон, который упрощает создание фильтров с персонажами. Студия разработки видеоигр Klei Entertainment создала первую линзу с Chester из Don’t Starve, используя новое приложение. В данном фильтре можно создать путь для животного, проведя пальцем по экрану. Созданная тропа на экране будет усеяна костями, что и будет ориентиром для двигающегося по ней персонажа. Благодаря новому шаблону подобный эффект доступен для всех разработчиков.

Цель внедрения и развития таких функций — привлечение внимания к потерявшему былую популярность приложению. Доступ к линзам даётся на 24 часа при сканировании снэпкодов, что, по мнению разработчиков, является достаточным сроком для знакомства со Snapchat.

Также компания объединила Lens Studio с программным обеспечением Allegorithmic’s 3D paint и Substance Painter для упрощения процесса переключения программ.

Все больше разработок для мобильных устройств задействуют технологию альтернативной и дополненной реальности. Напомним, компания Google выпустила приложение, чья единственная функция — рисовать белые линии в пространстве.

Технические особенности

Дисплей использует технологию голографических волноводов LMX-001 от Sony. С ее помощью SwimAR предоставляет пользователю всю нужную информацию в реальном времени — отслеживание времени круга, секундомер, счетчик кругов. Также система имеет настраиваемого виртуального соперника, с которым спортсмен может соревноваться для улучшения собственных показателей.

Компания планирует выпустить ограниченную партию SwimAR в конце 2018 — начале 2019 года.

AR — дополненная реальность, позволяющая накладывать изображение виртуального мира на реальный в поле зрения пользователя. Подробнее о ней можно прочитать в нашем материале.

Ранее Camera Effects с AR Studio (инструмент для разработки анимированных эффектов) были доступны в режиме закрытого тестирования. За это время Facebook успела поработать с 2000 брендов и художников. Полученный опыт помог компании внедрить новые возможности для работы с графикой и улучшить алгоритмы распознавания лиц и объектов.

Мы хотим, чтобы художники, разработчики и бренды могли создавать великолепные эффекты дополненной реальности и делиться ими со всем миром. Открывая AR Studio для всех, мы делаем первые шаги на пути к тому, чтобы сделать дополненную реальность частью повседневной жизни.

Особенности приложения

Отличительной чертой LEGO AR-Studio является предоставляемая им возможность играть в физические фигурки конструктора одновременно с цифровыми версиями наборов LEGO. Например, как только вы собрали дракона, просто направьте на него устройство под управлением iOS 11, и он оживет, начнёт дышать огнём и взаимодействовать с одним из виртуальных наборов LEGO.

Приложение также позволяет не только видеть, что происходит в дополненной реальности, но и записывать сцены, используя встроенную в приложение функцию камеры. В LEGO AR-Studio включены 6 виртуальных наборов:

• LEGO City Police Station
• LEGO City Train Set
• LEGO City Fire Station
• LEGO NINJAGO Green NRG Dragon
• The LEGO NINJAGO Movie Cole’s Mech
• The LEGO NINJAGO Movie Destiny’s Bounty

Официальное обращение LEGO

Все эти наборы очень похожи на настоящие, продающиеся в магазине. Приложение можно использовать, чтобы понять, как именно вы будете играть с реальным набором, если захотите его купить.

Дональдсон также добавляет, что приложение никоим образом не заменяет настоящие LEGO-блоки. Компания позиционирует его как творческий инструмент, помогающий детям развивать фантазию и креативность. Оно также сделает опыт игры в LEGO более интерактивным.

LEGO хочет в будущем добавить возможность цифровым блокам взаимодействовать с физическими. По словам Дональдсона, компания активно работает в этом направлении.

Их технология Captive разработана на основе куба с цветовой кодировкой, который отправляет визуальные сигналы программному обеспечению для распознавания видео. Все, что вам нужно сделать, чтобы исследовать виртуальный объект, изменить его размер или текстуру — повернуть куб.

Основные преимущества Captive

Технология интуитивно понятна и, к тому же, очень быстра. Нет большой задержки, которая заставляла бы вас угадывать, что вы сделали своим движением. Поскольку Captive работает с любым устройством, которое имеет камеру и приличную вычислительную мощность, вы можете использовать её на всем, от ноутбука до смартфона.

Практическая реализация Captive, однако, требует некоторого времени. Так, для этого понадобится запустить куб в массовое производство (существующий куб был распечатан на 3D принтере) и интегрировать поддержку в приложения. Тем не менее, технологию легко внедрить в инструменты для 3D-моделирования, игры и другое программное обеспечение.

В 1982 году Atari опубликовала своё видение 2015 года в виде серии футуристических рисунков. Tproger публикует полную подборку исторических изображений.

Интернет в школьном классе:

Навигация с помощью GPS:

Мобильные (беспроводные) ноутбуки и планшеты:

Планшеты и дополненная реальность:

Удаленная работа и обучение:

Заказ еды и напитков с помощью встроенных компьютеров:

Беспроводные компьютеры подключены к беспроводной сети:

Скачать приложение можно по ссылке

Эта необычная идея пришла нам в голову во время 48Hackathon, который проходил в ХНУ имени Каразина в Харькове. Тогда мы собрали команду в последний день регистрации и назвались LIFO (забавно, учитывая, что наша команда победила).

Темой хакатона была дополненная реальность. 3 часа мы не могли определиться, что же нам делать: разрабатывать новую игру-шутер или помочь выбрать стол в тон к шторам, как делает IKEA. Потом начали думать о примерке вещей: очков, одежды, украшений. Но почему бы не примерять на своем теле татуировки?

Легко сказать, но как сделать? О распознавании образов и ios-девелопменте мы тогда знали очень мало. Но на это и нужен хакатон — делать крутые вещи, зная только то, как они должны выглядеть. Т.к. на конкурсе нужно было представить только прототип, мы пошли по пути наименьшего сопротивления и для распознавания метки использовали Metaio SDK. С приложением для iOS тоже не возникло больших сложностей, и через 2 дня у нас был готов симпатичный прототип, с которым мы и выиграли хакатон.

Вдохновленные успехом, мы начали заниматься развитием проекта, но после месяца разработки мы не получили желаемого результата. Потом наступили университет, работа, и проект завис в воздухе почти на полгода. Зимой стартовала бизнес-школа Karazin Startups, в которой мы приняли участие с inkHunter, и работа над проектом возобновилась.

Мы решили, что использовать готовое SDK — не вариант. Поэтому мы разработали свою собственную метку, которую можно нарисовать где угодно обычной ручкой или карандашом для глаз.

Кроме этого, написали 2 библиотеки: по распознаванию метки на основе OpenCV и реалистичному нанесению тату на поверхность. Сложность нанесения татуировки в том, что кожа имеет неоднородный цвет + блики в разных участках только усложняют дело.

В мае мы выпустили приложение на App Store. Поначалу скачивания шли медленно, т.к. денег на раскрутку у нас не было. А публиковать информацию о приложении бесплатно соглашались немногие. Поэтому мы решили продвигать проект собственными силами. Питчили об inkHunter на различных ивентах: Kharkiv StartUp 2015, Kharkiv Tattoo Fest 2015, Mystery Play, занимались раскруткой в соц. сетях и SEO. Весной мы выиграли второе место на iHub Ring, и дела пошли вверх, о нас начали писать сами.

После этого месяц назад нас пригласили в Сан-Франциско на Thiel Foundation Summit — саммит молодых программистов, ученых и предпринимателей, устраиваемый Питером Тилем, где мы выиграли 1000$ за лучший demo pitch.

Наши ближайшие планы — выпуск новой версии с цветными татуировками, новой галереей эскизов и крутым дизайном. Кстати, об этом. Мы ищем человека, который сможет разработать дизайн для нашего приложения. Так что всем, кто заинтересовался — стучитесь к нам на facebook и почту inkHunterApp@gmail.com. И напоследок: спасибо Типичному Программисту за возможность рассказать про inkHunter. Будем рады любым комментариям и предложениям, которые вы можете оставить на наших страницах:

Сайт, Вконтакте.

Олександра Рогачева, CEO inkHunter