иммерсивный дисплей что это
Иммерсивный экран – что это такое?
23.04.2019 3,818 Просмотры
Цифровые технологии захватывают все новые сферы жизни. Стремительно изменяются средства мобильной коммуникации. Последние модели телефонов (например, Samsung) появились с иммерсивным дизайном. Производители утверждают, что за таким дизайном будущее.
Иммерсивный экран – что это?
Иммерсивный экран – эффект полного погружения. То есть данное направление ориентировано на создание интерфейса за пределами экранов. Это относится к виртуальной, дополненной реальности и голосовому управлению. Подобные технологии только начинают внедряться в современный мир, но уже имеют стабильный рост.
Представители дизайнерской сферы пытались объединить все прошлые технологии и создать что-то действительно новое. Сначала появился продуктовый дизайн, который содержал в себе основные потребности пользователей. Но многие говорят, что такие технологии устарели, и на смену пришел новый иммерсивный дизайн.
Люди привыкли видеть картинку на экране, но при помощи такой технологии, экран исчезает и окружающий мир становится реальностью, полностью цифровым и интерактивным.
Иммерсивные технологии и устройства
Это оборудование, которое позволяет пребывать и взаимодействовать с виртуальной и дополнительной реальностью. Такие технологии дополняют и заменяют реальные ощущения на симулированные с помощью иммерсивных экранов. В современном мире все больше появляется понятий как иммерсивное телевидение, видео, кинематограф, иммерсивный интернет и т.д.
Главным органов чувств у человека считается зрение. И поэтому в процессе погружения используется виртуальный шлем, а также наушники, которые задействуют второй важный орган – слух. Современный уровень мобильности и разработки устройств позволяет не только пребывать в виртуальной реальности, но и существовать в пространстве.
Заключение
Разработка оборудования, которое создает полноценный эффект иммерсии заинтересовало многие компании IT-индустрии. В настоящее время человек наблюдает масштабный рост иммерсивности, которая используется в производстве и во всевозможных иммерсивных устройствах виртуальной реальности. Для создания впечатляющих сцен в фильме не нужно использовать хромакей, так как достаточно добиться этого при помощи погруженной среды.
Иммерсивный экран – Что такое? С чем едят? Определение!
В последнее время мы нередко обсуждаем технологию иммерсивных экранов. Это потому, что она стала главной темой Display Summit. Большинство людей думает о виртуальной реальности, когда вы упоминаете иммерсивный дисплей, но мы полагаем, что определение гораздо шире.
Тем не менее, давайте сформулируем определение иммерсивного экрана. Конечно, одним аспектом становится поле зрения. Это расширенное поле зрения, от 90 до 100 градусов, то есть более захватывающий опыт, нежели, когда вы смотрите на классический экран с ограниченным углом и полем зрения. Таким образом, шлемы виртуальной реальности входят в категорию иммерсивных экранов, потому что предлагают опыт, похожий на просмотр телевизора с малого расстояния. Многие симуляторы, особенно симуляторы полета, являются иммерсивными, равно как и многие системы визуализации, включая CAVE. Как насчет купольных театров и планетариев? Иммерсивные? Кинотеатры IMAX считаются чрезвычайно захватывающими, но предположим, вы сидите рядом с экраном классического кинотеатра? То же иммерсивный?
Стоит ли рассматривать разрешение экрана в определении иммерсивной панели? Возможно, лучше оставить разрешению пиксели по отношению к градусам. Дополнительно параметр можно определить оптической резкостью дисплея. Другими словами, может ли произвести экран изображение 20:20 или даже полное соответствие резкости глаза? Некоторые симуляторы действительно предлагают оптическую резкость идентичную возможностям глаза, но кинотеатры и планетарии подобного не предлагают. VR-гарнитуры сегодня имеют диапазон 20:80. Если вы видите пиксели, разве это погружение? По этой причине большинство гарнитур виртуальной реальности не соответствуют требованиям. Должен ли быть минимальный контраст, определяющий иммерсивный экран? Как насчет частоты кадров и задержки?
Или, должно ли определение иммерсивного экрана подразумевать, что вы не можете видеть внешний мир? Тогда гарнитуры виртуальной реальности подойдут и, возможно, вы могли бы утверждать, что и кинотеатры тоже, как и 4К-телевизоры, на которые вы смотрите крупным планом в темной комнате.
А как насчет дополненной реальности? Должен ли иммерсивный экран иметь какое-то расширение, предусмотренное определением? Гарнитуры дополненной реальности (AR) позволяют вам видеть внешний мир, но с дополнительной информацией. А если вы добавите амбициозный звук в этот дополненный мир, разве это заставит его переступить черту?
Системы 4D включают движение, запахи, поток воздуха и даже туман с водой. Это более реалистичный опыт, но увеличивает ли он погружение? Как насчет того, чтобы связать систему 4D с гарнитурами AR или VR?
Реальная жизнь также позволяет взаимодействовать с объектами. Включает ли иммерсивный опыт способность чувствовать, касаться и манипулировать реальными или виртуальными объектами?
Должен ли иммерсивный экран позволять вам исследовать пространство с возможностью прогулки и осмотром возможностей (т.е 6 степеней свободы)? Или 360-градусные гарнитуры виртуальной реальности с тремя степенями свободы уже иммерсивны – даже если показывают только 2D? Предположим, что у нас 180-градусное содержание внутри VR? Иммерсивное оно или нет?
И давайте не будем забывать о разнообразных 3D-технологиях. Например, является ли стереоскопический 3D-дисплей иммерсивным независимо от качества контента и технологии отображения? Являются ли автостереоскопические экраны более иммерсивными?
Теперь мы входим в эпоху световых полей, объемных экранов и даже голографических дисплеев. Хотя они очевидно создают гораздо лучшие 3D-изображения, их поле зрения, разрешение, частота кадров и другие аспекты могут быть ограничены в ближайшей перспективе. Но они, безусловно, кажутся более захватывающими, когда вы смотрите на результат изображения.
Упоминая симуляции, особенно симуляторы полета, существуют различные уровни точности симуляции. Вверху находится уровень D, который включает в себя полный макет кабины с реальными элементами управления и инструментами (хотя они функционируют по-разному), а также коллимированную систему отображения и высокую резкость – всё это на подвижной платформе. Возможно, нам следует думать о создании системы уровней для VR, AR и MR. Поскольку в этих системах есть множество элементов, которые могут объединяться в разных комбинациях с различным уровнем точности, возможно, рабочей станет система, основанная на баллах. Другими словами, вы получаете больше баллов за повышенную точность воспроизведения каждой характеристики (резкость, задержка, поле зрения, частота кадров, 2D или 3D, аудио, движение, прикосновение и т.д.) сложите баллы и выводите уровень.
Это интересные времена для технологий отображения, поскольку мы явно движемся в направлении создания экранов, которые не позволят определить, что реальность, а что нет. Это захватывающе и страшно одновременно.
Куда нас погружают иммерсивные технологии
Привет, Хабр! Это Сергей Лукашкин, и сегодня мы поговорим об иммерсивных технологиях.
Термин «иммерсивный» сейчас стал общеупотребительным, его можно встретить в отчетах таких именитых исследовательских компаний (strategic future search) как Gartner (immersive experience) или CBInsights.
Иммерсивные технологии также называют технологиями расширенной реальности. В их список входит виртуальная и дополненная реальность, а также 360°-видео. Они обеспечивают эффект полного или частичного присутствия в альтернативном пространстве и тем самым изменяют пользовательский опыт в абсолютно разных сферах. В этом посте мы расскажем о том, на каком уровне эти технологии находятся сегодня, как они реализуются и используются для бизнеса.
Для начала определимся с терминами и сокращениями, которые вы можете увидеть в отчетах, статьях и презентациях:
Панорамные и 360°-фото или видео
В фотоаппаратах доступны довольно давно, с 2018 года поддерживаются фейсбуком. По сути это сшитые с помощью алгоритмов последовательные наборы снимков. Делать их можно как одной камерой, так и специальными 360°-камерами. Это очень удобный формат, с помощью которого вы, например, можете пойти на виртуальную экскурсию в Пушкинский музей.
360°-видео
Как реализуется. 360°-камеры снимают окружающее пространство, после чего полученные видеоролики сшиваются в специальных программах. Существуют и бесшовные решения, но они более затратны для бизнеса. Иногда в уже готовое видео добавляется дополнительная графика.
Сейчас также распространены «панорамные» онлайн-трансляции. Когда у вас есть несколько точек с панорамным обзором, достаточно установить оборудование и начать съемку. Но такой формат имеет довольно высокие требования к аппаратному обеспечению, а также требует тщательной настройки звука.
Где используется. Эта технология широко применяется при демонстрации недвижимости. Нехитрый поиск в Google выдаёт множество B2B-агентств, которые делают виртуальные туры для нужд риэлторов и застройщиков: 360 Real Estate, 360walkthruproperty, Forj и другие.
Панорамные видео используются и в СМИ. Выше я уже давал ссылку на проект RT 360, который дает зрителю возможность «присутствовать в моменте» — будь это празднование Нового Года в Берлине или международный кубок по супербайку. Помимо размещения в интернете, такие иммерсивные материалы также демонстрируются на постоянной выставке Управления ООН по вопросам космического пространства в Вене.
Дополненная реальность
Как и многие инновационные технологии, дополненная реальность появилась в середине прошлого века для военных разработок. Ее планировали и затем успешно начали применять для проецирования на стекло гермошлема или лобовое стекло истребителя важных показаний приборов, чтобы сократить время получения информации и повысить скорость реакции летчиков.
Сегодня развивается несколько направлений дополненной реальности. Самое распространенное — это AR в смартфоне. Apple уже несколько лет развивает свой AR kit. Сегодня в мире насчитывается более 5 млрд смартфонов, и потенциально это очень большой охват для продуктов с AR. Яркий пример успеха — это игра Pokemon Go, которая прогремела на весь мир. Есть маркетинговые проекты, в которых, например, в AR разбрасываются монетки, а пользователь должен их искать и собирать, чтобы получить скидку. Монетки разбросаны так, что по ним как по крошкам пользователь приходит на порог магазина. Также стоит вспомнить недавно запущенный в США проект Google Street, который помогает с навигацией. Востребованы также и более простые сценарии: например, в 2017 году Positive Technologies выпустила мерч — календарь и ежедневник, на которых картинки оживали при наведении телефона.
Другие устройства для работы с дополненной реальностью — это очки дополненной реальности. Google Glass — пока не совсем состоявшийся проект. Hololens, проект Microsoft — это дорогое решение, но его преимущество в том, что оно сразу интегрировано с экосистемой компании. Кроме того на рынке много других очков дополненной реальности — от Ericsson, Huawei и многих других крупных компаний и стартапов.
Отдельные решения реализуются для промышленности по модели подписки, которая включает консультации и ремонт оборудования.
Как реализуется. Проецирование виртуального объекта в реальный мир может осуществляться с помощью телефона. Часто используются метки, проецирование на стекло автомобиля, самолета, очков — например, в очках Microsoft Hololens. Если использовать технологию виртуальной реальности на улице, то нужно уделять особенное внимание освещению, так как при слишком ярком свете AR-объекты могут выглядеть тусклыми. В целом, хоть это и не самая совершенная технология, даже она позволяет делать развлекательные приложения.
Где используется. Голограммы, наложения картинок в прямом эфире телеканалов, использование интерактивных мониторов — это те воплощения AR, которые кажутся нам уже привычными. Однако есть и более неожиданные примеры использования технологии.
Например, Pepsi Max использовала AR-технологию для создания своего рекламного ролика. Компания установила специальные мониторы дополненной реальности на одной из лондонских остановок и засняла реакцию случайных прохожих.
Еще один пример — планирование интерьера IKEA:
Дополненная реальность — это, как я уже говорил, один из секретов успеха PokemonGo, Также фишка приложения Argon4 на AR Browser SDK, с помощью которого можно, например, предоставлять справочную информацию о достопримечательностях при наведении на них камеры смартфона.
Что касается AR в очках, то эта сфера пока менее развита, поскольку нынешние модели довольно громоздкие и дорогие. Но с каждым годом очки становятся все легче и симпатичнее. Еще одно направление AR — это проецирование на контактные линзы. Его недостаток пока что в том, что на линзе видно сетку. Но при этом достоинств у такого метода множество.
Виртуальная реальность
Как реализуется. Виртуальная реальность — это прежде всего визуальное и звуковое наполнение. Звук в данном случае имеет ключевое значение: он дополняет виртуальность и создает эффект присутствия в нереальной локации за счет имитации отражения и направления звуковых волн.
Попасть в альтернативную, виртуальную реальность можно, например, надев специальные очки. Разделяя картинку перед глазами на две части, они создают стереоскопический эффект. При наличии трекинга для положений тела виртуальное пространство будет также учитывать движения головы и туловища.
Есть и другие способы попасть в виртуальную реальность:
Для таких решений используют уже другое название — mixed reality. На самом деле, оно больше маркетинговое, появилось вместе с релизом Windows Mixed Reality — платформы для разработки приложений. По своей сути это конструктор с 3D моделями, определенным набором ассетов в комплекте. С точки зрения качества создаваемого продукта, решение Windows куда слабее, чем движки Unreal Engine и Unity. У них, в отличие от платформы Windows Mixed Reality, есть не только возможность разрабатывать и создавать виртуальные объекты, работать с текстурами и со светом, но также создавать определенную бизнес-логику.
Где используется. Интересный проект в области VR сделала IKEA. Компания предложила своим клиентам надеть специальные очки и оказаться на виртуальной кухне. Здесь с помощью джойстика они могли прочитать книгу рецептов, приготовить тефтели, отправить продукты на переработку.
С виртуальной реальностью экспериментирует и немецкий перевозчик Deutsche Bahn. Уже четыре года компания предлагает своим потенциальным сотрудникам надеть VR-очки и продемонстрировать свои способности в симуляции реального рабочего дня.
Израильская технологическая компания Actiview и вовсе разработала платформу для дистанционного найма сотрудников с использованием VR-технологий. «Симуляция в виртуальной реальности позволяет нам контролировать то, что пользователь видит, слышит, чувствует. Мы видим его поведение и можем собирать эти данные», — комментирует Рой Элишков, вице-президент компании по стратегии и развитию бизнеса.
Применением VR в разных сферах занимаются и российские компании. Например, Modum Lab создает в VR проекты для обучения и других сценариев.
Разработки ВТБ
Мы в ВТБ тоже работаем над несколькими «виртуальными» кейсами. Первый из них — сервис VR-голосования для акционеров в формате виртуальной реальности, интегрированный с роботом-консультантом. Мы использовали этот продукт в рамках годового собрания акционеров банка в июне 2019 года. Сервис легко трансформируется: мы рассчитываем, что он может быть адаптирован для голосования акционеров в любых крупных организациях, сопоставимых по масштабам с ВТБ. А разработан он был для дочерней компании «ВТБ Регистратор», входящей в Группу ВТБ.
Второй кейс, который сейчас находится на стадии пилотного проекта, — это VR-инвестиции, главная цель которых — онбординг клиентов для брокерского обслуживания. Здесь VR — это способ дистанционной доставки первоначальной автоматической консультации в формате квеста. За 5 минут VR-сеанса пользователь полностью «погружается» в мир инвестирования, выбирает цель составления портфолио, узнает, какие возможности дают брокерские продукты ВТБ. После этого менеджер помогает клиенту открыть брокерский счет и перевести на него средства. С точки зрения бизнеса этот кейс позволяет оптимизировать затраты на обучение сотрудников и число необходимых менеджеров для продажи продуктов брокерского обслуживания.
VR имеет большой потенциал и для ипотечного бизнеса банка. Мы запустили платформу «VR-ипотека ВТБ» — площадку, объединяющую застройщиков и клиентов. Она предоставляет сервис дистанционного консультирования и дистанционного просмотра недвижимости. Платформа позволяет создать виртуальное пространство с возможностью выбора конфигурации квартиры, ипотечным калькулятором и встроенными инструментами продаж, а также подключением консультанта, который дистанционно из другого региона проконсультирует потенциальных покупателей.
AR может стать универсальным инструментом для трансляции персонализированных маркетинговых предложений нашим клиентам. Правда, пока пользователи в целом еще далеки от того, чтобы, например, наводить камеры смартфона на заинтересовавший плакат в отделении банка. Так что нам стоит иметь это в виду при разработке стратегии внедрения AR и предлагать клиентам небанальные игровые сценарии, побуждая их к новому формату взаимодействия.
Общие тенденции
Напоследок попробую обобщить опыт отрасли и предположить, что будет дальше. Стремясь к реалистичному изображению, мы столкнемся с ограничениями графики и скорости обработки информации. Выходом могут стать гибридные системы с участием облаков. При этом текущее «мультяшное» изображение все равно позволяет делать «погружающий» контент, так как для мозга этого достаточно. Попробуйте пройтись по VR-доске над VR-пропастью.
Проникновение VR-шлемов сейчас небольшое, поэтому мы создаем VR-инсталляции в наших офисах и приглашаем туда потребителей. Понятно, что у такого подхода есть перспектива для продажи дорогих и сложных продуктов — недвижимость, яхты, автомобили, экскурсионные туры. Ключевым здесь является переход от решений adhoc, то есть приложений, реализующих конкретный кейс, к целым платформам XR, которые позволят покупателям и продавцам находить друг друга.
В сфере иммерсивных технологий пока не видно резкой монетизации, игроки действуют будто на ощупь. Причина в том, что не так много людей пользуются расширенной реальностью в повседневной жизни. Чтобы их попробовать, нужно как минимум скачать дополнительное приложение — это усложняет путь получения технологий конечным потребителем.
Во всех этих разработках нет значительной геймификации, напротив — есть стремление к реалистичности. Создание инструментов легкого взаимодействия — это как раз-таки главная задача для разработчиков, развитие контента сейчас вторично по отношению к развитию UX/UI. Разрешение картинки пока еще низкое и она не фотореалистичная, поэтому технологиям есть куда расти и развиваться. Совершенствование пользовательского опыта связано с производительностью процессоров, со скоростью передачи и обработки данных.
Возможно, скоро появятся гибридные решения: например, обработка изображения будет производиться на сервере в режиме онлайн и далее оно будет передаваться через радио, Wi-Fi или Bluetooth-канал на мобильный шлем пользователя. Однако пока это только предположения. В любом случае, мы уверены, что иммерсивные технологии найдут применение во многих отраслях, в том числе и в нашей, финансовой.
Иммерсивный дизайн
Цифровые интерфейсы выходят за пределы плоскости экрана, учитывают движение пользователя, направление взгляда и распознают речь. А пространство становится частью системы взаимодействия.
Мы с коллегами работаем в сфере, где современные технологии используются для повышения эффективности обучающего материала и сопровождения специалистов во время их работы. И в последнее время в процессе разработки, статьях, интервью, все чаще стал использоваться термин «иммерсивный дизайн», «иммерсивный дизайнер». Решил собрать некоторые мысли по поводу данной специализации.
Определение
Сам термин может достаточно широко трактоваться, но в работе с интерактивными технологиями и конкретно VR/AR под ним подразумевается создание систем погружения и взаимодействия как в виртуальной, так и реальной среде, а также по выстраиванию связи между ними.
Благодаря развитию VR/AR технологий, системам распознавания жестов, мимики и голоса, задачи UX/UI дизайнеров вышли за пределы плоскости, ограниченной рамкой экрана и перешли в сферу пространственного взаимодействия и эффекта погружения в виртуальную реальность.
Простой пример — вопрос размещения интерфейса системного меню в VR-симуляции. Где его можно расположить?
При этом вопросы выстраивания пользовательского опыта в виртуальной реальности на ограничены разработкой системы взамодействия внутри симуляции, а также касаются процесса погружения и выхода из нее.
Экспертиза
Несмотря на то, что определенные подходы в дизайне подобных систем были разработаны дизайнерами компьютерных игр (а также некоторая экспертиза может быть полезна из сферы иммерсивного театра), с возникновением доступных для работы современных технологий, многие аспекты проектирования процесса взаимодействия потребовалось полностью переосмыслить.
Востребованность
Данные специалисты востребованы в тех областях, где важным аспектом пользовательского опыта является эффект погружения в виртуальную среду или возможности по работе с цифровым слоем в реальности — игры, обучение, маркетинг и продажи, сопровождение рабочих процессов и так далее.
Сейчас в институтах и на различных образовательных платформах появляется все больше программ подготовки специалистов, работающих с иммерсивными технологиями. Но с позиции работодателя знания в этой области обычно являются еще одним плюсом, а не необходимостью. Во всяком случае, в данный момент.
Например, мы в Modum Lab, когда ищем дизайнера или программиста, в первую очередь обращаем внимание на опыт работы в классических сферах, например, опыт дизайнера в UX и на то, насколько человеку интересно изучать новые направления. И уже сами в дальнейшем передаем необходимую экспертизу.
Но учитывая то, как развиваются современные технологии, кажется, что UI/UX дизайнерам все больше будет необходимо погружаться в работу с объемным пространством и получать знания, которые до этого относились больше к таким направлениям, как 3d-графика, игровой дизайн, левел-дизайн и работа с игровыми движками. Что, впрочем, уже и происходит.
Ссылки
Несколько примеров разнообразных задач, которые решают дизайнеры в процессе работы с системами виртуальной реальности:
Иммерсивный экран в Samsung Galaxy: что это?
Цифровые технологии охватывают новые сферы жизни. Мобильная связь быстро меняется. Одни из самых последних моделей мобильных устройств (сегодня поговорим непосредственно о моделях Samsung) появились с новым усовершенствованным дизайном. Производители говорят, что такой дизайн будет самым знаменитым и запоминающимся.
Иммерсивный экран – что это
Это эффект полного погружения. То есть он нацелен на то, чтобы создать интерфейс за пределами экрана. Это касается виртуальной реальности и управления звуком. Хотя данные технологии только начали внедряться в современный мир, они уже активно развиваются и возможно в самом ближайшем бедующем будут самыми популярными среди потребителей.
Эффект полного погружения
Представители дизайнерской индустрии постарались совместить все новейшие технологии. Сначала появился дизайн продукта.
Иммерсивный экран создает эффект погружения. Это изобразительное искусство телевидения или смартфона.
Иммерсивные устройства
Это инструмент, который позволяет вам оставаться на связи и взаимодействовать с виртуальной и дополненной реальностью. Они используют раковины вместо тех, которые имитируют реальные чувства.
Именно это делает его столь привлекательным. Благодаря тому, что производители смело идут в ногу со временем очень скоро данный дизайн, станет весьма популярным и именно его будут выбирать потенциальные клиенты в салонах.
Заключение
На сегодняшний день есть много нововведений, которые не могут оставить клиентов равнодушными. Многие ИТ-компании заинтересованы в производстве оборудования, которое будет иметь эффект полного погружения.
В настоящее время человек видит огромное количество продуктов и разнообразных устройств виртуальной реальности. Вам не нужно использовать хромакей для создания потрясающих сцен в фильме, потому что достаточно погруженной среды.
Этот стиль очень современный, главное посмотреть, как он покажет себя в дальнейшем. К сожалению, не всегда нововведения хорошо работают, но надеемся, что именно это останется на высоком уровне, ведь людям надо новое, интересное и красивое. Ведь люди, живущие в современном мир, привыкли двигаться в ногу со временем.