Иммерсивные технологии (RR,real reality,VR,virtual reality,AR,augmented reality,MR,mixed realit,XR,360-фото, 360-видео)

Привет, Вы узнаете о том , что такое иммерсивные технологии, Разберем основные их виды и особенности использования. Еще будет много подробных примеров и описаний. Для того чтобы лучше понимать что такое иммерсивные технологии, иммерсивный, rr, real reality, vr, virtual reality, ar, augmented reality, mr, mixed realit, xr, 360-фото, 360-видео , настоятельно рекомендую прочитать все из категории Методы и средства компьютерных информационных технологий.

иммерсивные технологии также называют технологиями расширенной реальности. В их список входит виртуальная и дополненная реальность, а также 360°-видео. Они обеспечивают эффект полного или частичного присутствия в альтернативном пространстве и тем самым изменяют пользовательский опыт в абсолютно разных сферах. В этом посте мы расскажем о том, на каком уровне эти технологии находятся сегодня, как они реализуются и используются для бизнеса.

Для начала определимся с терминами и сокращениями, которые о которых мы будем говорить:

• иммерсивный (eng. immersive – погружать) — технологии полного или частичного погружения в виртуальный мир или различные виды смешения реальной и виртуальной реальности.
• RR (real reality) — дословно «реальная реальность» или объективная реальность, в которой мы находимся и которую воспринимаем органами чувств. Примечательно, что реальную реальность приходится определять. Но ведь надо понимать, с чем мы смешиваем виртуальную реальность.
• VR (virtual reality) или mobile VR — виртуальная реальность — полностью смоделированная реальность с применением современных технологий. Это не только 3D или 360 сцены, это также звук, тактильные ощущения и даже запахи. Об этом подробнее чуть позже.
• AR (augmented reality) — дополненная реальность — augmented надо переводить скорее как «добавленная». То есть мы добавляем в нашу реальную реальность (RR) элементы виртуальной, смоделированной реальности.
• MR (mixed reality) — смешанная реальность — термин появился благодаря запуску Windows Mixed Reality. С одной стороны, сам термин позволяет, на мой взгляд, отстроиться от конкурентов. С другой, говорит о некоем конкретном типе устройств и способов смешения реальности. Хотя по сути это VR с некоторыми дополнениями RR. Или AR с применением Hololens.
• XR (extended reality) — расширенная реальность — это общее название для AR- и VR-технологий.
• 360-фото , видео — контент, состоящий из одной 360°- или нескольких сшитых фото и видео. Распространены также 360°-трансляции.

В список «других реальностей» можно включить также:

Visuo-haptic mixed reality ( VHMR ) - визуально-тактильная смешанная реальность - ветвь смешанной реальности, которая имеет способность сливать визуальные и тактильные восприятия как виртуальных, так и реальных объектов.

Маркетологи, применяющие терминологию VR по отношению к 360-камерам, в лучшем случае небрежно обращаются с лексикой.6
SR (substitutional reality, замещенная реальность). В одной из лабораторий Японского института физико-химических исследований RIKEN разработана «система замещения реальности», соединяющая в сознании человека вымысел и реальность таким образом, что их в идеале будет невозможно отличить друг от друга.7 На данном этапе развития технологий этот термин можно считать синонимом виртуальной реальности. Но в далеком (или не очень далеком) будущем может быть создана.

Simulated reality (симулированная, или моделированная реальность). Это — гипотетическая реальность, которая неотличима от реальной реальности. В симулированной реальности могут находиться разумные сущности, которые могут осознавать, а могут и не осознавать, что они живут в симуляции. Это весьма отличается от существующей в настоящее время концепции, от технологически достижимой виртуальной реальности. Виртуальную реальность легко отличить от действительности; погруженные в нее участники никогда не сомневаются в природе того, что они переживают. Симулированную реальность, напротив, будет трудно или невозможно отделить от реальной реальности.

Теперь разберем подробнее, что скрывается под этими аббревиатурами.

Панорамные и 360°-фото или видео

В фотоаппаратах доступны довольно давно, с 2018 года поддерживаются фейсбуком. По сути это сшитые с помощью алгоритмов последовательные наборы снимков. Делать их можно как одной камерой, так и специальными 360°-камерами.

360°-видео

Как реализуется. 360°-камеры снимают окружающее пространство, после чего полученные видеоролики сшиваются в специальных программах. Существуют и бесшовные решения, но они более затратны для бизнеса. Иногда в уже готовое видео добавляется дополнительная графика.

Сейчас также распространены «панорамные» онлайн-трансляции. Когда у вас есть несколько точек с панорамным обзором, достаточно установить оборудование и начать съемку. Но такой формат имеет довольно высокие требования к аппаратному обеспечению, а также требует тщательной настройки звука.

Где используется. Эта технология широко применяется при демонстрации недвижимости. Нехитрый поиск в Google выдает множество B2B-агентств, которые делают виртуальные туры для нужд риэлторов и застройщиков: 360 Real Estate, 360walkthruproperty, Forj и другие.

Дополненная реальность

Как и многие инновационные технологии, дополненная реальность появилась в середине прошлого века для военных разработок. Об этом говорит сайт https://intellect.icu . Ее планировали и затем успешно начали применять для проецирования на стекло гермошлема или лобовое стекло истребителя важных показаний приборов, чтобы сократить время получения информации и повысить скорость реакции летчиков.

Сегодня развивается несколько направлений дополненной реальности. Самое распространенное — это AR в смартфоне. Apple уже несколько лет развивает свой AR kit. Сегодня в мире насчитывается более 5 млрд смартфонов, и потенциально это очень большой охват для продуктов с AR. Яркий пример успеха — это игра Pokemon Go, которая прогремела на весь мир. Есть маркетинговые проекты, в которых, например, в AR разбрасываются монетки, а пользователь должен их искать и собирать, чтобы получить скидку. Монетки разбросаны так, что по ним как по крошкам пользователь приходит на порог магазина. Также стоит вспомнить недавно запущенный в США проект Google Street, который помогает с навигацией. Востребованы также и более простые сценарии: например, в 2017 году Positive Technologies выпустила мерч — календарь и ежедневник, на которых картинки оживали при наведении телефона.

Другие устройства для работы с дополненной реальностью — это очки дополненной реальности. Google Glass — пока не совсем состоявшийся проект. Hololens, проект Microsoft — это дорогое решение, но его преимущество в том, что оно сразу интегрировано с экосистемой компании. Кроме того на рынке много других очков дополненной реальности — от Ericsson, Huawei и многих других крупных компаний и стартапов.

Отдельные решения реализуются для промышленности по модели подписки, которая включает консультации и ремонт оборудования.

Как реализуется. Проецирование виртуального объекта в реальный мир может осуществляться с помощью телефона. Часто используются метки, проецирование на стекло автомобиля, самолета, очков — например, в очках Microsoft Hololens. Если использовать технологию виртуальной реальности на улице, то нужно уделять особенное внимание освещению, так как при слишком ярком свете AR-объекты могут выглядеть тусклыми. В целом, хоть это и не самая совершенная технология, даже она позволяет делать развлекательные приложения.

Где используется. Голограммы, наложения картинок в прямом эфире телеканалов, использование интерактивных мониторов — это те воплощения AR, которые кажутся нам уже привычными. Однако есть и более неожиданные примеры использования технологии.

Например, Pepsi Max использовала AR-технологию для создания своего рекламного ролика. Компания установила специальные мониторы дополненной реальности на одной из лондонских остановок и засняла реакцию случайных прохожих.
ще один пример — планирование интерьера IKEA.

Дополненная реальность — это, как я уже говорил, один из секретов успеха PokemonGo, Также фишка приложения Argon4 на AR Browser SDK, с помощью которого можно, например, предоставлять справочную информацию о достопримечательностях при наведении на них камеры смартфона.

Что касается AR в очках, то эта сфера пока менее развита, поскольку нынешние модели довольно громоздкие и дорогие. Но с каждым годом очки становятся все легче и симпатичнее. Еще одно направление AR — это проецирование на контактные линзы. Его недостаток пока что в том, что на линзе видно сетку. Но при этом достоинств у такого метода множество.

Виртуальная реальность

Как реализуется. Виртуальная реальность — это прежде всего визуальное и звуковое наполнение. Звук в данном случае имеет ключевое значение: он дополняет виртуальность и создает эффект присутствия в нереальной локации за счет имитации отражения и направления звуковых волн.

Попасть в альтернативную, виртуальную реальность можно, например, надев специальные очки. Разделяя картинку перед глазами на две части, они создают стереоскопический эффект. При наличии трекинга для положений тела виртуальное пространство будет также учитывать движения головы и туловища.

Есть и другие способы попасть в виртуальную реальность:

• Смартфон со специальным VR-приложением, который вставляется в специальный футляр с линзами. Самое простое решение — картонный Google Cardboard. Если вы владелец устройства Samsung Galaxy, то вы можете приобрести Gear VR — продвинутый футляр, дополненный гироскопами и элементами управления.
• Трекинговые системы. Позволяют перемещать пользователя в виртуальное пространство. Сейчас также ведется разработка костюмов, которые передают ощущения из виртуальной реальности — например, ароматы — но пока это дорогой и не очень совершенный продукт.
• Специальные перчатки вместо привычного джойстика. Этот элемент нужен, чтобы руки человека естественным образом взаимодействовали с виртуальным миром. Сейчас перчатки уступают джойстикам по качеству калибровки, но их качество растет.
• Мобильные VR-шлемы со встроенными мониторами (HTC Vive, Oculus Go и другие). Такие устройства более оптимизированы для работы в VR по сравнению с футлярами для смартфонов, у них качественная графика, есть интегрированный звук и джойстик для управления.
• Шлемы «тяжелого VR» (вроде Oculus Rift). Обработанная графика передается на шлем по проводам от игрового компьютера с мощной видеокартой. Необходимость связи с ПК создает ограничения для использования, но при этом у шлемов тяжелого VR более качественная графика и богаче потенциальный пользовательский опыт. Трекинговые камеры фиксируют положение джойстика и положение человека, погружая его в виртуальную реальность более реалистично. Также в комплекте с такими шлемами идут контроллеры.

Почти все крупные производители телефонов и ноутбуков выпустили свои шлемы виртуальной реальности: они есть у HTC, Lenovo, Xiaomi, Samsung, Oculus и других компаний. Некоторые пытаются создать экосистему: например, HP продвигает линейку ноутбуков и шлемов с манипуляторами и внешним трекингом.

Для таких решений используют уже другое название — mixed reality. На самом деле, оно больше маркетинговое, появилось вместе с релизом Windows Mixed Reality — платформы для разработки приложений. По своей сути это конструктор с 3D моделями, определенным набором ассетов в комплекте. С точки зрения качества создаваемого продукта, решение Windows куда слабее, чем движки Unreal Engine и Unity. У них, в отличие от платформы Windows Mixed Reality, есть не только возможность разрабатывать и создавать виртуальные объекты, работать с текстурами и со светом, но также создавать определенную бизнес-логику.

Где используется VR?

Ключевые отрасли, в которых могут использоваться VR это

• индустрия развлечений
• медицина
• цифровые двойники, в т.ч. на стадии разработки
• симляторы и тренажоры в т.ч. на опасных производствах
• образование и тренинги
• удаленные ассистены, с получением экспертизы в режиме реального времени

Интересный проект в области VR сделала IKEA. Компания предложила своим клиентам надеть специальные очки и оказаться на виртуальной кухне. Здесь с помощью джойстика они могли прочитать книгу рецептов, приготовить тефтели, отправить продукты на переработку.

С виртуальной реальностью экспериментирует и немецкий перевозчик Deutsche Bahn. Уже четыре года компания предлагает своим потенциальным сотрудникам надеть VR-очки и продемонстрировать свои способности в симуляции реального рабочего дня.



Израильская технологическая компания Actiview и вовсе разработала платформу для дистанционного найма сотрудников с использованием VR-технологий. «Симуляция в виртуальной реальности позволяет нам контролировать то, что пользователь видит, слышит, чувствует. Мы видим его поведение и можем собирать эти данные», — комментирует Рой Элишков, вице-президент компании по стратегии и развитию бизнеса.

Применением VR в разных сферах занимаются и российские компании. Например, Modum Lab создает в VR проекты для обучения и других сценариев.

Виртуальный контент в PMR не накладывается на физическую среду (как в AR), но виртуальные объекты визуализируются таким образом, что они неотличимы от физического мира. Визуальная согласованность - основной элемент чистой смешанной реальности (

Общие тенденции

Напоследок попробую обобщить опыт отрасли и предположить, что будет дальше. Стремясь к реалистичному изображению, мы столкнемся с ограничениями графики и скорости обработки информации. Выходом могут стать гибридные системы с участием облаков. При этом текущее «мультяшное» изображение все равно позволяет делать «погружающий» контент, так как для мозга этого достаточно. Попробуйте пройтись по VR-доске над VR-пропастью.

Проникновение VR-шлемов сейчас небольшое, поэтому мы создаем VR-инсталляции в наших офисах и приглашаем туда потребителей. Понятно, что у такого подхода есть перспектива для продажи дорогих и сложных продуктов — недвижимость, яхты, автомобили, экскурсионные туры. Ключевым здесь является переход от решений adhoc, то есть приложений, реализующих конкретный кейс, к целым платформам XR, которые позволят покупателям и продавцам находить друг друга.

В сфере иммерсивных технологий пока не видно резкой монетизации, игроки действуют будто на ощупь. Причина в том, что не так много людей пользуются расширенной реальностью в повседневной жизни. Чтобы их попробовать, нужно как минимум скачать дополнительное приложение — это усложняет путь получения технологий конечным потребителем.

Во всех этих разработках нет значительной геймификации, напротив — есть стремление к реалистичности. Создание инструментов легкого взаимодействия — это как раз-таки главная задача для разработчиков, развитие контента сейчас вторично по отношению к развитию UX/UI. Разрешение картинки пока еще низкое и она не фотореалистичная, поэтому технологиям есть куда расти и развиваться. Совершенствование пользовательского опыта связано с производительностью процессоров, со скоростью передачи и обработки данных.

Возможно, скоро появятся гибридные решения: например, обработка изображения будет производиться на сервере в режиме онлайн и далее оно будет передаваться через радио, Wi-Fi или Bluetooth-канал на мобильный шлем пользователя. Однако пока это только предположения. В любом случае, мы уверены, что иммерсивные технологии найдут применение во многих отраслях.

Вау!! 😲 Ты еще не читал? Это зря!

• Цифровой двойник
• Виртуальный ассистент
• Симмулятор
• Орган чувств
• Ощущения

Исследование, описанное в статье про иммерсивные технологии, подчеркивает ее значимость в современном мире. Надеюсь, что теперь ты понял что такое иммерсивные технологии, иммерсивный, rr, real reality, vr, virtual reality, ar, augmented reality, mr, mixed realit, xr, 360-фото, 360-видео и для чего все это нужно, а если не понял, или есть замечания, то не стесняйся, пиши или спрашивай в комментариях, с удовольствием отвечу. Для того чтобы глубже понять настоятельно рекомендую изучить всю информацию из категории Методы и средства компьютерных информационных технологий