Что такое дополненная реальность определение. Как повысить эффективность производства с дополненной реальностью? Использование дополненной реальности в каталогах компании IKEA

От главного редактора сайт: Дополненная реальность (ДР), или Augmented Reality (AR) - одна из самых перспективных, впечатляющих и (во всех смыслах) очевидных технологий, методологий и т.д. Публикаций на эту тему, естественно, появилось уже много или очень много. Ещё в 2009 году « »...

Несложно догадаться, что ДР/AR вполне очевидно проецируется и на строительную отрасль: см. например, . В интернете можно найти ролики типа «Технология дополненной реальности в области архитектуры», «Дополненная реальность для архитекторов», «Дополненная реальность для планирования в строительстве», «Самый ёмкий рынок дополненной реальности» и т.д. Ссылки на эти ролики приведены в представляемой сегодня статье Сергея Кирьякиди — статье, которая является вводным обзором как в общую проблематику ДР, так и в обозначенное в заголовке проецирование ДР в строительную отрасль. Надеюсь, что эта тема заинтересует многих читателей нашего портала, хотя бы потому, что, по моему мнению, развитый BIM (будущего?) не должен обходиться без серьезной AR-компоненты.

Данная статья представляет собой попытку сформулировать и обобщить перспективы применения технологии дополненной реальности (ДР) в строительстве и проектировании. Содержание статьи является представлением автора о перспективах профессионального применения этой технологии, основанном на анализе последних тенденций развития компьютерных технологий, спутниковой навигации, средств передачи данных, а также направлений BIM и PLM в проектировании. Описанные далее перемены в области строительства неизбежны, т.к. в том или ином виде технология дополненной реальности придет в сферу массового профессионального применения: это лишь вопрос времени. Приход новых технологий - естественный процесс, происходящий в современном постиндустриальном обществе. По причине ускоряющегося научно- технического прогресса этот процесс, по нынешним меркам, будет протекать весьма стремительно. Не стоит забывать, что любую технологию можно использовать как во благо, так и во вред. Конечно, все будет зависеть от рук, в которые она попадет. Тема негативных последствий всеобщего распространения ДР требует отдельного обсуждения и в данной статье не рассматривается.

Введение

Все более очевидным становится факт того, что в настоящее время человечество стоит на пороге радикальных изменений привычного уклада жизни, которые будут вызваны приходом технологий дополненной реальности во все сферы деятельности человека. В течение последующих 5-10 лет эта технология произведет очередную технологическую революцию, сравнимую с повсеместным распространением интернета. Конечно, всем известно, с какой скоростью развивается интернет, прошедший путь от двух соединённых проводом «калькуляторов» до настоящей всемирной паутины, которая начинает потихоньку выходить в ближний космос. Не остается сомнений в том, что со временем дополненная реальность войдет в нашу повседневную жизнь так же как некогда смартфон или планшет, изменив ее раз и навсегда. Нарастание темпов научно-технического прогресса (НТП) только приближает нас к наступлению этого момента, а развитие технологий дополненной реальности ускоряет НТП. Компьютерные технологии продолжают развиваться экспоненциально и закон Мура пока продолжает работать. Сегодня практически у каждого есть смартфон с возможностями, которые 7-8 лет назад было трудно представить, и о которых говорили лишь профессиональные футурологи, но именно эти устройства уже сегодня позволяют прикоснуться к дополненной реальности на бытовом уровне.

1. Что такое дополненная реальность?

Дополненная реальность (от англ. augmented reality, AR) - это технология представления контекстной информации и наложения ее в виде многослойных визуальных образов на объекты реального мира в режиме реального времени.

Дополненная реальность является основой принципиально нового интерфейса для обращения к информации и перехода взаимодействия с ней на новый интерактивный уровень. Отличие дополненной реальности от виртуальной заключается во взаимодействии компьютерных устройств с объектами реального мира.

Задача дополненной реальности - расширить информационное взаимодействие пользователя с окружением. Накладываемые посредством компьютерного устройства слои с контекстными объектами на изображение реальной среды носят вспомогательно-информативный характер. Таким образом, информация, контекстно связанная с объектами реального мира, с помощью дополненной реальности, становится доступной пользователю в режиме реального времени.

Примеры: отображение информации на лобовом стекле в современных истребителях и авто премиум класса, сетка золотого сечения и другие вспомогательные элементы на экране цифрового фотоаппарата, указатели траектории парковки автомобиля при помощи камеры заднего вида.

2. Современное состояние технологий

По оценкам различных экспертов, в настоящее время технология дополненной реальности - это один из главных технологических трендов. Рынок этой технологии оценивается как один из самых быстро растущих и продолжит расти экспоненциально еще 8-10 лет.

Наибольших успехов в этой области на сегодняшний день достигли военные. Они же были основоположниками этой технологии. В военном применении ДР - это вывод оперативной информации на лобовое стекло, либо дисплей, отображающий тактическую информацию, например, о целях на фоне наблюдаемой обстановки. Военные продолжают проявлять к этой технологии повышенный интерес, рассматривая ее как наиболее перспективную для персональных устройств, входящих в экипировку солдата недалекого будущего. При помощи этих устройств военные планируют интегрировать каждого бойца в единое информационное пространство. Вспомните кадры из фильма «Терминатор» когда перед взглядом робота Т-800 появлялась различная информация о людях, автомобилях и т.п. Примерно так же скоро солдаты смогут получать дополнительную информацию об окружающих их объектах.

Кадр из фильма «Терминатор»

Как это традиционно бывает, постепенно эта технология переходит из военной в гражданскую и становится доступна широким массам.

Панель приборов на лобовом стекле истребителя

Впервые эта технология пришла из военной авиации и появилась в автомобилях премиум класса. С ее помощью, по аналогии с боевыми машинами, перед водителем, на лобовом стекле отображается вся необходимая информация о скорости, параметрах маршрута и т.д. Как и автомобили премиум класса, в таком виде технология доступна узкому кругу людей. На широком потребительском рынке, дополненная реальность, как отрасль компьютерных технологий, находится в стадии становления и активного роста. Мировые лидеры в области высоких технологий, такие как Google, Samsung, Apple и некоторые другие, заявляют о скором выходе на рынок устройств типа HMD (head-mounted display носимый дисплей). Наиболее известные из них и уже выпускающиеся серийно - это Google Glass . Эти устройства позиционируются как новое средство восприятия информации об окружающем нас мире, предназначенное для коммуникаций, навигации, развлечений, призванное заменить современные смартфоны, планшеты и т.п. Ориентированы эти устройства на массовый потребительский спрос, как в настоящее время всевозможные гаджеты.

Однако либо уровень развития современных технологий не позволяет пока реализовать в полной мере концепцию устройства с интерфейсом дополненной реальностью в габаритах, пригодных для массового пользования, либо такие технологии еще не нашли друг друга.

В потребительском сегменте сейчас наблюдается рост возможностей программного обеспечения использующего дополненную реальность, реализуемую при помощи смартфонов и планшетов. Кто знаком с такими приложениями, наверное, заметил, что возможности программ пока опережают возможности аппаратных средств. Основной направленностью этого ПО является: геолокация, контекстная реклама, презентация, распознавания изображений. Примерами такого ПО могут служить наиболее популярные приложения Junaio , Layar , Wikitude и т. д.

В профессиональной сфере ДР применяется для обучения специалистов выполнению каких-либо действий через их визуальное восприятие:

Уже сейчас существуют системы автоматизированного управления строительной техникой, в том числе беспилотные, которые также можно отнести к системам, потребляющим дополненную реальность, как бы это странно не звучало. Принцип их действия заключается в следующем: в бортовой компьютер загружается проектная модель объекта, затем машина накладывает виртуальную модель на реальность, настраивает положение рабочих органов и начинает копировать модель в натуру. При этом система постоянно «подглядывает» в виртуальный чертеж-модель, таким образом, контролируя положение рабочих органов машины (отвал или ковш) и тем самым добиваясь переноса виртуальной модели в реальность. Отличие такой системы от человека в том, что у машины за положением рабочих органов в пространстве отвечают всевозможные датчики, а у человека за положением его рабочих органов (рук) отвечают самые информативные сенсоры - глаза. Тем не менее, подобная концепция применима и для человека. Перед глазами может находиться картинка законченного объекта или какого-то промежуточного результата, которого необходимо достигнуть. Человеку остается только выполнить набор предлагаемых действий, приводящих к нужному результату. Это как наглядное пособие с исчерпывающей информацией, находящееся всегда перед глазами.

Другие компьютерные технологии также не стоят на месте, такие как: микропроцессорные производство, спутниковая навигация, компьютерное зрение, технологии облачной обработки информации; беспроводной передачи данных; проектирования сооружений по технологии BIM и PLM и д.р. Наблюдается стремительное увеличение производительности графических микропроцессоров, при значительном снижении их габаритов и энергопотребления. Это очень сильно расширяет возможности персональных мобильных устройств в обработке графической информации.

Все это дает основание для массового применения этой технологии, в том числе, в профессиональной области. В частности, в строительстве эта технология может также произвести революционные изменения.

3. Способы потребления дополненной реальности

В настоящее время самыми массовыми средствами просмотра дополненной реальности стали смартфоны и планшеты с установленными на них специальными приложениями. Им на смену постепенно приходят упомянутые выше HMD-очки, такие как Google Glass и др. Основой HMD-устройств является интерфейс с дополненной реальностью.

4. Концепция визуально-информационной строительной площадки

Опираясь на известные технологические тренды и достижения науки, можно с большой вероятностью говорить о появлении в ближайшем будущем индивидуальных профессиональных систем с интерфейсом дополненной реальности типа HMD. Это будет сравнимо с переходом от черчения на бумаге к BIM проектированию.

Концепция строительной информационной площадки заключается в создании на ней единого визуально-информационного пространства, аналогичного информационному полю боя в военной терминологии. Это модный в последние годы термин в международном военном сленге. Действительно эти две концепции очень схожи, ведь каждая из них преследует цель - обеспечить участников процесса необходимой легко воспринимаемой информацией в реальном времени.

Единое визуально-информационного пространство на строительной площадке - это по сути, новый способ взаимодействия с информацией об объекте строительства, непосредственно на месте ведения работ, без привязки к рабочему месту. Его применение послужит началом нового стандарта представления проектной информации и работы с ней на строительной площадке. Такая концепция объединит всех участников строительства в едином визуальном информационном поле. Это позволит получать необходимую информацию в реальном времени, в любой точке строительной площадки, без необходимости таскания с собой «бумажных простыней», ноутбуков, планшетников и т.п.

Представьте, если бы информация о расположении объекта, его внешнем виде, положении границ, существующих и проектируемых коммуникациях, важных узлах, высотных отметках и т.п. отображалась прямо перед глазами как у пилотов современных истребителей, дополняя существующую реальность проектным замыслом. Дополненная реальность откроет качественно новые возможности, такие как: представление о внешнем виде и структуре объекта; оперативное отслеживание хода строительства; фиксация и контроль качества работ; отслеживание изменений проекта. Это позволит сэкономить массу времени при выполнении технически сложных операций, геодезических работах, прокладке коммуникаций и строительстве в целом. А главное - получить доступ к информационной 3D модели объекта в любой момент времени и в любом месте. Наверное, самое главное то, что архитектор, заказчик и строитель смогут свезти к минимуму влияние человеческого фактора при чтении чертежей и воплощении проекта в натуре.

Современное развитие средств BIM проектирования и их интеграция уже сейчас позволяет создавать модели объектов, наполненных всей необходимой информацией. Наличие строительной 4D модели позволит IPD менеджеру или специалисту технического контроля контролировать ход строительства, просто взглянув на площадку. Сравнивая реальную картину с наложенной информацией о нужной стадии строительства, можно сделать вывод о выполнении или отставании от графика.

С приходом эры интернета вещей (англ. Internet of Things, IoT), которая уже не за горами, наполнение пространства информацией станет обычным процессом, когда почти у каждого промышленного изделия, в т. ч. у строительных конструкций будет «электронный паспорт» и средства коммуникации между собой и человеком. HMD- устройства станут для людей основными средствами взаимодействия с «вещами» и конструкциями. При помощи интерфейса дополненной реальности человек сможет воспринимать поступающую от «вещей» информацию. Это дает новые возможности для служб материально-технического обеспечения.

При производстве сложных ремонтных работ оборудования или коммуникаций можно всегда иметь под рукой визуальные подсказки о последовательности действий или схему оборудования: при этом руки остаются свободными. Такие подсказки способствуют быстрому вводу в должность нового специалиста, и процесс обучения проходит в интерактивном режиме. При производстве сложных ответственных работ можно вести видеозапись выполняемых действий для последующего анализа в случае чрезвычайной ситуации на этом объекте. Таким образом, можно будет проводить освидетельствование нарушений и ответственных элементов при строительстве. По такому же принципу сейчас, в случае аварийной ситуации, ведется анализ действий пилотов самолетов записанных в «черные ящики». Это послужит переходом к новым принципам ведения производственного и технического контроля и ведения отчетной документации.

На этапе эксплуатации, при необходимости обслуживания какого-либо сложного узла персонал может пользоваться исполнительной информационной моделью. На стадии ликвидации объекта, воспользовавшись информацией о критических узлах и коммуникациях можно значительно сократить сроки демонтажа или сноса объекта. В случае возникновения экстренной ситуации (пожар/обрушение) аварийные службы смогут с легкостью находить пути эвакуации или нужные коммуникации, используя информацию из электронного паспорта здания переведя ее в дополненную реальность.

HMD-устройства открывают принципиально новые возможности для коммуникаций и взаимодействия на строительной площадке. Коллеги всегда могут быть на связи друг с другом, становится возможным обсуждение проблем в реальном времени в режиме видеоконференции. Все это оптимизирует строительный процесс за счет сокращения времени принятия наилучшего решения с учетом текущей ситуации на объекте, при относительно небольших затратах.

Дополненная реальность позволяет перевести на абсолютно новый уровень презентации проектов. Допустим, что нужно провести презентацию проекта строительства для инвесторов. Трехмерная визуализация и макетирование неплохо с этим справляются. Но какое впечатление произвела бы та же презентация на инвесторов при демонстрации объекта инвестирования на местности, в «чистом поле», в натуральную величину, с возможностью побродить вокруг, внутри или даже заглянуть внутрь стен на важные конструктивные особенности, узлы или коммуникации. Это абсолютно другое эмоциональное восприятие информации для человека («Самый ёмкий рынок дополненной реальности»):

,

Уже сейчас приложение Junaio позволяет рассматривать настольные виртуальные макеты («Технология дополненной реальности в области архитектуры»):

Преимущество таких макетов перед традиционными в том, что они могут быть масштабируемыми, анимированными, проработанными с различным уровнем детализации, и, конечно легко редактируемыми.

«Дополненная реальность для архитекторов»:

«Дополненная реальность для планирования в строительстве»:

5. Почему визуально-информационное поле?

Потому что около 90% информации об окружающем нас мире мы получаем посредством зрения. Информация, представленная в виде визуальных образов, воспринимается гораздо эффективней людьми даже с плохим воображением или отсутствием трехмерного мышления. Это заложено на генетическом уровне и обусловлено эволюционным путем развития человека и человеческой цивилизации.

6. Как это все будет работать? Технологическая основа

На мой взгляд, ждать появления устройств, позволяющих полноценно реализовать такую концепцию, осталось 3-5 лет. Уже сегодня существуют технологии необходимые для их создания. А также существует все необходимое для создания инфраструктуры, поддерживающей работу подобных устройств.

Для реализации описанной концепции в полной мере потребуется интеграция уже существующих технологий в форм-факторе очков. На современном этапе развития технологий это пока невозможно. Но прогресс не стоит на месте, и довольно быстро движется к достижению этой цели. Компьютерное зрение, как в MS Kinect, в совокупности с методами определения направления взгляда и точного определения местоположения, позволит очень точно «накладывать» информацию на окружающую реальность. Для лучшего распознавания объектов они могут быть помечены ещё при выпуске на заводе специальными маркерами - штрих-кодами или QR-кодами еще при выпуске на заводе. Со временем это будут электронные чипы, на которые будет записана информация об изделии, и датчики, отслеживающие изменение характеристик изделия.

Для точного позиционирования понадобится интеграция с ГЛОНАСС/GPS локальными GNSS станциями и лазерными корректирующими приборами. В помещениях для позиционирования можно использовать специальные маркеры и 3/4G сети и WiFi, которые будут служить каналами передачи данных. «Облачная» обработка и визуализация информации в реальном времени позволит уменьшить нагрузку на вычислительные мощности устройства и значительно сэкономить заряд аккумулятора. Визуализация такой информации как: границы, контуры, общие очертания, текстовые надписи, линии коммуникации и т.п. потребуют незначительных вычислительных ресурсов, и может выполняться на самом устройстве или смартфоне, который имеется сейчас у каждого. Хранение информации на общем сервере позволить всем пользователям обращаться не к локальным копиям, а к единой базе данных, поддерживаемой всегда в актуализированном состоянии. При такой системе работы, в случае внесения изменений в BIM модель пользователи информации могут быть оповещены об этом автоматически. Именно использование актуальных разделов проекта на большой стройке является серьезной проблемой для подрядчиков, которых забыли оповестить о произошедших изменениях.

Конечно, не лишними в таком устройстве будут профессиональные инструменты, такие как лазерный дальномер, высотомер, виртуальный уровень, угломер. Возможно, измерения встроенными сенсорами будут далеки от точности современного геодезического оборудования но, тем не менее, при выполнении некоторых технологических процессов точности в 2–3 см вполне достаточно. Не стоит забывать, что с каждым годом точность сенсоров растет и со временем может отпасть необходимость выполнения геодезических работ при некоторых строительных процессах.

Появление на рынке таких устройств откроет новое направление в области прикладного ПО, которое будет базироваться на новом интерфейсе с дополненной реальностью. Лидеры рынка САПР, прежде всего, такие как Autodesk, Dassault Systèmes, Bentley Systems, Graphisoft, AVEVA и др., непременно создадут массу приложений интегрированных с их передовыми продуктами для различных специализированных отраслей строительства.

7. Как это все будет работать? Инфраструктура

Для реализации подобной концепции необходимо создание инфраструктуры включающей четыре основных компонента:

• обеспечение пользователей точным позиционированием
• обеспечение пользователей беспроводной высокоскоростной передачей данных
• наличие облачного хранилища проектных данных
• создание специального стандарта проектирования для получения контента.

Остальной функционал это уже в принципе программно-аппаратные возможности самого устройства.

Уже сегодня на крупных строительных объектах имеются некоторые компоненты необходимой инфраструктуры для реализации концепции информационной стройплощадки. Описываемая концепция, прежде всего, подходит для крупных строительных объектов, таких как ГЭС, АЭС, НПЗ, стадионов, аэродромов и других масштабных технически сложных объектов, где информационное обеспечение имеет колоссальное значение. На таких крупных площадках всегда множество сложных инженерных систем, требующих соблюдения высочайшей технологической дисциплины при строительстве и эксплуатации. По мере уменьшения стоимости устройств, технология будет становиться доступнее специалистам более низкого ранга, и проникать на все более мелкие объекты.

Как правило, сейчас крупные строительные площадки оснащаются ГЛОНАСС/GPS локальными GNSS станциями, лазерными приборами или специальными маркерами при выполнении работ с применением с соответствующего геодезического оборудования или все тех же систем автоматического управление строительной техникй. Таким образом, инфраструктура для точного позиционирования уже сейчас присутствует на многих крупных строительных площадках. Дополнить ее визуальными или электронными маркерами не составит труда заинтересованному заказчику.

В городах и некоторых малых населенных пунктах все большее распространение получают 3G/4G каналы связи. Их пропускной способности достаточно для передачи огромного количества информации. При отсутствии устойчивого сигнала или его недостаточной пропускной способности на площадке можно создать собственную сеть, например из WI-FI передатчиков. Сейчас это по карману даже небольшой компании.

С развитием широкополосных каналов связи все большее распространение в мире получает переход вычислений и хранения информации в облачные сервисы. «Облако» наверное, можно назвать одним из главных компонентов системы информационной строительной площадки. Для его создания необходимо установить хороший сервер, настроить на нем соответствующие права доступа для различных пользователей: проектировщика, заказчика, подрядчика, службы технического контроля и т.д. Это по сегодняшним меркам не очень затратная процедура. Крупные корпоративные заказчики и некоторые подрядчики имеют собственный серверный парк.

8. Информационное обеспечение

Для обеспечения устройств, использующих дополненную реальность, специальным контентом потребуется интеграция с современными САПР основанных на BIM технологии проектирования. Возможно, для этого потребуется создание нового формата данных, например, .ARB - augmented reality in building.

Сегодня основной тенденцией является переход от 2D и 3D проектирования к проектированию с применением BIM-технологий. Проектирование с ВIM позволяет собрать всю архитектурно-строительную, технологическую, и иную информацию о здании или объекте со всеми ее взаимосвязями и получить на выходе единый объект - BIM-модель, в которой увязаны все разделы проекта и рассчитаны все конструкции. В свою очередь это позволит на этапе завершения проектирования получать не только проект как таковой, но и получить контент для дополненной реальности. Именно концепция BIM-проектирования позволяет расчленить модель на необходимые слои контекстной информации необходимой для дополнения ею реальности. BIM-модель может предоставить пользователю проект в виде структуры слоев с информацией в виде текста, графики или анимации, с необходимым графическим оформлением, с регулируемой прозрачностью в зависимости от степени важности. Управлять отображением информации на таких устройствах возможно в интерактивном режиме при помощи взгляда, жестов и голоса.

Современные средства 4D проектирования позволяют анимировать строительные процессы и визуализировать последовательность технологических циклов. Такая тенденция очень хорошо согласуется с предстоящим развитием технологии дополненной реальности в направлении визуализации процессов и будет очень востребована на строительном рынке для улучшения качества выполнения работ и контроля над строительством.

9. Проблемы технологии

Стоит сказать о современных проблемах технологии ДР, это: отсутствие стандартов, недостаточная производительность аппаратных средств, недостаточная точность позиционирования, необходимость специального контента, ограниченность применения при отсутствии широкополосных и устойчивых каналов связи, слабый интерес со стороны профессионального потребителя, недостаточное распространение в силу вышеприведенных причин. Все эти проблемы носят инженерный характер и решаемы по мере развития технологии и научно-технического прогресса в целом.

10. Дальнейшие пути развития

По мере устранения вышеперечисленных недостатков и совершенствования всех отраслей компьютерных технологий, дополненная реальность как продукт их синтеза достигнет всеобщего проникновения во все области человеческой деятельности. По сути ДР станет стандартом существования информационного общества. В строительстве и производстве, с развитием робототехники, те возможности, которые ДР даст человеку, будут постепенно переходить к роботам. Человеку останется выполнение только самых сложных операций, а дополненная реальность позволит максимально увеличить точность их выполнения. Постепенно HMD-устройства будут расширять диапазон своего применения за счет добавления новых сенсоров. Следующим поколением устройств потребления ДР для человека станут контактные линзы. Но пройдет еще 20–30 лет и придет уже эра нового нейроинтерфейса, которому уже не нужны очки или линзы. Человек сможет потреблять информацию естественными органами чувств, с расширенными возможностями имплантированных сенсоров. Обработка информации будет происходить непосредственно мозгом либо имплантированном чипе или в «облаке», приобретаемом по подписке в SkyNet, и оттуда поступать непосредственно в мозг.

С развитием так называемого интернета вещей, дополненная реальность станет основным средством получения и взаимодействия с информацией, поступающей от предметов окружающих нас, в т. ч. строительных конструкции.

Кому-то это покажется набором футуристических предположений, которые писатели фантасты наверняка уже выдвигали в своих книгах. Возможно это так, но напомню, то, что мы имеем сегодня, даже 20 лет назад казалось фантастикой или даже магией. Как недавно сказал один из экспертов компании Google, «Через 10 лет скорость изменения мира будет такой, что мы будем вспоминать нынешние времена как очень медленные и отсталые».

11. Выводы и пожелания

На основе приведенных выше доводов можно сделать вывод что ДР даст строительной отрасли сразу несколько принципиальных выгод:

• Доступность информации в реальном времени
• Наглядность информации
• Актуальность информации (облачное хранилище)
• Интерактивность информации (управление жестом, взглядом, голосом)
• Коммуникация (обсуждение проблем с коллегами в реальном времени в режиме видеоконференции)
• Архивация информации (видеофиксация - освидетельствование нарушений и ответственных элементов при строительстве).

Последние два пункта в большей степени относятся к устройствам потребления ДР, в которых данные возможности будут обязательно реализованы.

Всё это говорит о том, что дополненная реальность, несомненно, в недалеком будущем совершит очередную революцию не только в строительстве, но и, вообще, в образе жизни:

Это приведет к появлению новых стандартов в проектировании, строительстве и эксплуатации, новых способов работы с технической информацией. Произойдет значительное сокращение сроков строительства, сократятся материальные издержки за счет оптимизации всех процессов жизненного цикла здания и уменьшения материалоемкости строительства, уменьшится проявление «человеческого фактора», приводящего к всевозможным печальным последствиям. Можно считать что, человек стоит на пороге новых возможностей и его зрение, пока что ограниченное биологическими возможностями, уже совсем скоро дополнится бионическим зрением, расширенным при помощи компьютерных технологий. Очки или линзы, оснащенные дополнительной реальностью, будут такими же необходимыми и повседневными устройствами, какими когда-то для нас стали персональный компьютер и сотовый телефон.

Желаю вам быть открытыми для перемен, которые принесет в нашу жизнь дополненная реальность и быть готовыми использовать их своей повседневной деятельности!

Бизнес-модели

Опытным руководителям предприятий знакома формула роста производительности труда. Всем очевидна роль инноваций в этом процессе. Однако не каждый может вовремя распознать технологии, способные помочь в повышении производительности, особенно на таком консервативном и не склонном к инвестициям в инновации рынке, как российская промышленность. В своём время Autodesk и Consistent Software довольно долго пробивались к проектировщикам и конструкторам – они не понимали, зачем выкладывать миллионы за работу, которая проводилась с помощью карандашей и ватмана. В итоге часть предприятий, которые вовремя не приняли на вооружение новые технологии, ушла с рынка.

В этой статье мы бы хотели привлечь ваше внимание и рассказать о новой технологии, которая уже успешно применяется в промышленности и производстве по всему миру.

Что такое дополненная реальность?

Пол Милгр (Paul Milgram) и Фумио Кисино (Fumio Kishino) в 1994 году описали дополненную реальность как некое пространство между реальностью и виртуальностью. Технологии дополненной реальности проецируют любую цифровую информацию (изображения, видео, текст, графики и т.д.) поверх экрана любых устройств.

Если вы смотрели фильм «Железный человек», то как раз все графические показатели, которые отображались на экране шлема и относятся к понятию дополненной реальности (“augmented reality”).

Возможно, это звучит и выглядит более чем фантастично, однако такие решения уже с успехом используются на многих промышленных и производственных компаниях, включая российские.

Обзор устройств для дополненной реальности

На сегодняшний день среди устройств дополненной реальности можно выделить портативные устройства, стационарные и проекционные системы, очки и линзы дополненной реальности.

Портативные устройства – это самый бюджетный способ соприкоснуться с дополненной реальностью. К ним относят мобильные телефон и планшетные компьютеры. Главное требование к устройству – это наличие качественной камеры с высоким разрешением.

Стационарные системы – это широкоформатные экраны, оборудованные камерами с высоким разрешением, которые располагаются на одном месте. Такие системы не очень удобны в подвижной работе, зато демонстрируют более реалистичную визуализацию

В отличие от стационарных систем дополненной реальности проекционные системы накладывают изображение на любую поверхность, и для их работы не требуется отдельный экран.

Наиболее широко используются очки дополненной реальности, надев которые, человек видит виртуальные объекты, наложенные на окружающую действительность. К наиболее известным в России устройствам относится Google Glass ($1600), а также Moverio от компании Epson ($799.99).

Линзы для дополненной реальности все ещё остаются предметом исследований технологических гигантов, включая Samsung, Google и Microsoft. Идея заключается в том, чтобы превратить обычные линзы в прозрачный электронный экран, содержащий систему управления, миниатюрную камеру, антенну, светодиоды и другие оптоэлектронные компоненты. В частности, компания Samsung уже подала патент на «умные» контактные линзы, поэтому у нас есть все основания ожидать выхода на рынок устройства в ближайшие 5-10 лет.

Где возможно применение дополненной реальности?

Существующие решения уже охватывают множество сфер: инструменты для автоматизации процессов и повышения производительности, обучение сотрудников, сокращение брака продукции, повышение эффективности логистических процессов, обеспечение безопасности труда.

Например, с помощью дополненной реальности рабочие могут оперативно получать доступ к инструкциям и руководствам по любой детали. Информацию они получают в виде наглядной трёхмерной анимации, видео, аудио, фотографиях, картинках или графиках. Такой подход позволяет снизить требования к квалификации специалистов, и уменьшить время на изучение и просмотр рабочих инструкций. Причём сама система способна распознать форму детали и её номер и вовремя подсказать, если техник предпринял ошибочные действия по её монтажу.

Вопросы эффективности внедрения дополненной реальности очень подробно освещены в тематическом исследовании «Эффективность дополненной реальности в обрабатывающей промышленности» (“Augmented Reality Efficiency in Manufacturing Industry ”), авторами которого являются Юха Сааски (Juha Sääski), Тапио Салонен и ряд других авторов (Tapio Salonen).

Более узкое исследование – «Оценка преимущества дополненной реальности для задач локализации обслуживания турели бронетранспортёра» (“Evaluating the Benefits of Augmented Reality for Task Localization in Maintenance of an Armored Personnel Carrier Turret ”). Его авторами являются сотрудники Колумбийского университета Стивен Хендерсон (Steven J. Henderson) и Стивен Фейнер (Steven Feiner). Исследование будет полезно для ознакомления топ-менеджерам производственных и промышленных предприятий, чтобы принять решение об эффективности инвестиций в новую технологию.

Оба исследования находятся в свободном доступе в сети интернет.

Рассмотрим ещё несколько впечатляющих примеров использования дополненной и виртуальной реальности в производственных и промышленных компаниях.

Авиационная промышленность

Компания Boeing – одна из крупнейших аэрокосмических компаний на планете, которая строит самолеты для 150 стран мира. В бортовых системах самолёта содержится множество компонентов, связанных между собой системой проводов. Укладка и соединение кабелей производится по специальному шаблону, после чего их скрепляют в жгуты, а на концы кабелей устанавливают разъемы. Процесс работы занимает длительное время и требует особого внимания и ответственности. Последние 20 лет Boeing искала систему, способную сократить время на производство и устранение ошибок. В начале 2014 года компания внедрила решение дополненной реальности на платформе очков Google Glass. С помощью приложения оператор отдает голосовую команду: «Ок, Skylight. Начать создание жгута. Сканировать заказ 0447» и видит в очках дополненной реальности визуальную дорожную карту по сборке жгута № 0447.

Согласно данным из доклада компании Boeing по проекту, «использование Google Glass позволило сократить время производства на одну четверть и сократить количество ошибок в два раза».

Другой пример – компания Lockheed Martin, где внедрением проекта занималась компания NGRAIN. Инженеры завода используют дополненную реальность для получения визуальной подсказки по сборке самолёта F-35. В качестве основной платформы в компании используются очки дополненной реальности Epson Moverio BT-200, оборудованные специальными датчиками движения и глубины. Когда техник монтирует деталь тормоза на шасси, в очках дополненной реальности он видит все данные о том, где и в каком порядке нужно проводить сборку и подсоединять кабеля. В итоге весь процесс работы напоминает сборку конструктора LEGO, когда от рабочего требуется лишь взять подходящую деталь и поместить её в нужное место.

По данным компании NGRAIN , «программное обеспечение позволяет инженерам работать на 30 процентов быстрее с точностью до 96 процентов».

Автомобильное производство

Модели автомобилей выпускаются в различных комплектациях и цветах. Поэтому автоконцерны часто стремятся находить баланс между массовым производством и индивидуальными предпочтениями потребителя. Конечно, во времена Генри Форда всё было намного проще. Организация такого производства часто сопровождается сложными рабочими инструкциями, которые способны спровоцировать простои, ошибки и снижение производительности.

Концерн Fiat Chrysler Automobiles (FCA) применил в своей работе проекционную систему дополненной реальности OPS Solutions. Теперь на каждом этапе сборочного процесса рабочие получают наглядную информацию о своём следующем шаге.

После внедрения инновации был организован эксперимент. Перед операторами стояла задача собрать зубчатые передачи и цепи. Весь процесс проходил в десять последовательных шагов. Сотрудники должны были выбрать правильные комплектующие, провести монтаж и убедиться, что всё сделано правильно. Часть операторов выполняла задачу с помощью бумажных инструкций, а другие использовали инструменты дополненной реальности. Результаты эксперимента вы можете оценить в таблице ниже.

Сокращение числа ошибок 80%
Сокращение времени рабочего цикла 38%
Увеличение пропускной способности 82%

Другой автомобильной компанией, принявшей на вооружение технологии дополненной реальности, стал концерн Volkswagen. На своём заводе в Вольфсбурге Volkswagen использует очки дополненной реальности Google Glasses при комплектации заказов. Рабочие автоматически получают всю необходимую им информацию о местах хранения или номерах деталей.

Сборочное электромонтажное производство

Первое российское приложение дополненной реальности было выпущено компанией VR CORP для электромонтажного производства. Руководство компании «Технологии Энергосбережения Сибири» столкнулось с текучкой кадров, в результате чего много средств и усилий тратилось на обучение вновь приходящих сотрудников. Для офисного персонала было создано приложение, с помощью которого любой сотрудник мог навести смартфон на электротехническую схему и рассмотреть в подробностях 3D-модель готового изделия, включая все её комплектующие. Особо это приложение актуально для молодых специалистов без опыта работы. Вводный курс обучения специальности сократился до простой схемы: взял смартфон, запустил приложение, навёл на электротехническую схему и рассмотрел все подробности об изделии в его готовом виде.

Похожее по функционалу приложение было разработано для рабочих сборочного цеха. Вместо электромонтажной схемы специалист получает информацию о размещении деталей и кабелей в будущем изделии, а подсветка каждой детали вовремя предупреждает, если используются неправильные комплектующие.

За свою разработку компания VR CORP получила диплом форума «Городские технологии» от Департамента промышленности, инноваций и предпринимательства мэрии города Новосибирска.

Внедрение дополненной реальности на собственном предприятии

Технологии дополненной реальности предлагают новый интересный взгляд на решение задач по текучке персонала, его обучении, производственных ошибках и простоях. Не всегда ясно, с чего стоит начинать, каких затрат это потребует и как скоро вернутся инвестиции.

Начните с малого. На российском рынке не так много компаний, работающих с дополненной реальностью для производства и промышленности, и тем не менее выбор есть. Вот наши рекомендации:

1. Свяжитесь с представителями разработчика и расскажите подробно о стоящих перед вами задачах.
2. Создайте вместе рабочую группу для подробного анализа и разработки решения.
3. Не стремитесь сразу объять необъятное. Выберите один из небольших этапов производственного процесса и разработайте для него тестовое решение. По оценке российского разработчика решений по дополненной реальности компании VR CORP, стоимость такого решения составляет от 50 000 до 100 000 руб.
4. Сравните показатели эффективности у рабочих, использующих дополненную реальность и тех, кто работает по старинке.
5. На основании показателей оцените инвестиционную привлекательность комплексного проекта.
6. Если показатели проекта вас радуют – согласуйте его бюджет и этапы внедрения.
7. Запускайте в работу.

Возможности для коммерческого применения

В конкурентной борьбе многие предприятия предлагают идентичный товар и поэтому стремятся побеждать в основном за счёт снижения цены. Такая конкурентная стратегия создаёт нелёгкие условия, в которых прибыль по сделкам колеблется от 3 до 7%.

Дополненная реальность может служить не только для нужд собственного производства, но и для создания товара с уникальными свойствами. Многие продукты требуют от пользователя некоторых усилий, чтобы в нём разобраться и использовать. Например, электрические щиты, генераторы, автомобили и мебель от IKEA. С помощью дополненной реальности производитель может добавить для пользователя интерактивную справку, которой тот сможет воспользоваться с помощью своего планшета или телефона. Эта справка наглядно покажет, как нужно использовать товар, исключит множество ошибок и в целом повысит удовлетворённость потребителя.

Компания BMW уже запустила аналогичное решение для обслуживания и ремонта своих автомобилей. Сразу после запуска многие СМИ заявили о конце эпохи станций технического обслуживания, ведь теперь для каждого стало возможным обнаружить и исправить неисправность в автомобиле. С помощью приложения пользователь видит последовательную инструкцию, которая шаг за шагом показывает, как диагностировать и исправить любую деталь и какие для этого потребуются инструменты.

Многим производителям известны жёсткие условия конкурсных торгов, где приходится сильно понижать свою прибыль. Если убедить клиента включить требования по наличию такой интерактивной справке в дополненной реальности у поставляемого товара, то производитель получит прямое конкурентное преимущество и гарантию победы.

Во всяком случае до той поры, пока дополненная реальность не превратится в массовое явление.

И значит нас вот-вот накроет новая волна игр и приложений с применением дополненной реальности, возможности которой гораздо шире и полезнее для общества, чем ловля слоупоков.

Это популяризаторская статья. В ней нет подробного описания технической стороны, зато есть история развития ЭйАр, ссылки на упоминающиеся разработки и множество интересных иллюстраций.

Очень много картинок!

Что такое ЭйАр

Дополненная реальность - это среда, в реальном времени дополняющая физический мир, каким мы его видим, цифровыми данными с помощью каких-либо устройств - планшетов, смартфонов или других, и программной части. Например, Google Glass или шлем Железного Человека. Системы прицеливания в современных боевых самолетах - это тоже дополненная реальность.

Дополненную реальность (augmented reality, AR) надо отличать от виртуальной (virtual reality, VR) и смешанной (mixed reality, MR).

В дополненной реальности виртуальные объекты проецируются на реальное окружение.

Виртуальная реальность - это созданный техническими средствами мир, передаваемый человеку через (пока что) органы чувств.

Смешанная или гибридная реальность объединяет оба подхода.

То есть, виртуальная реальность создает свой мир, куда может погрузиться человек, а дополненная добавляет виртуальные элементы в мир реальный. Выходит, что ВиАр взаимодействует лишь с пользователями, а ЭйАр - со всем внешним миром.

История ЭйАр

Как многие другие интересные исследования, история манипуляций с реальностью начинается в научной фантастике. Автор «Волшебника страны Оз» Лайман Фрэнк Баум в романе «Главный ключ» описал некое устройство, способное помечать в режиме реального времени людей буквами, указывающими на их характер и уровень интеллекта. Примитивные инструменты дополнения реальности были известны задолго до того: это и маски, которые надевали римские лучники, чтобы лучше целиться, и подзорные трубы с нанесенными метками расстояний и так далее.

Но история дополненной реальности, какой мы ее знаем сейчас, берет начало из разработок, касающихся ВиАр. Отцом виртуальной реальности считается Мортон Хейлиг. Он получил это звание за исследования и изобретения, сделанные в 1950-х и 60-х годах. 28 августа 1962 года он запатентовал симулятор Sensorama . Сам Хейлиг еще называл его театром погружения.

Патент описывает виртуальную технологию, в которой визуальные образы дополняются движениями воздуха и вибрацией. Обоснование ее существования давалось такое:

«Сегодня постоянно растет спрос на методы обучения и тренировки людей таким способом, чтобы исключить риски и опасность реальных ситуаций»

Это было устройство ранней версии виртуальной реальности, а не дополненной, но именно оно дало толчок к развитию обоих направлений. Хейлиг даже изобрел специальную 3Д-камеру, чтобы снимать фильмы для Сенсорамы.

А вот в 1968-м году компьютерный специалист и профессор Гарварда Айван Сазерленд со своим студентом Бобом Спрауллом разработали устройство, получившее название «Дамоклов Меч» . И это была первая система уже именно дополненной реальности на основе головного дисплея.

Очки были настолько тяжелыми, что их пришлось крепить к потолку. Конструкция угрожающе нависала над испытуемым, отсюда и название. В очки со стереоскопическим дисплеем транслировалась простая картинка с компьютера. Перспектива наблюдения за объектами менялась в зависимости от движений головы пользователя, поэтому понадобился механизм, позволяющий отслеживать направление взгляда. Для того времени это был фантастический прорыв.

Следующим шагом было создание Майроном Крюгером лаборатории с искусственной реальностью Videoplace в 1974-м году.

Его основной целью было избавить пользователей от необходимости надевать специальные шлемы, очки и прочие приспособления для взаимодействия с искусственной реальностью. В Видеоплейсе использовались проекторы, видеокамеры и другое оборудование. Люди, находясь в разных комнатах, могли взаимодействовать друг с другом. Их движения записывались на видео, анализировались и переводились в силуэты искусственной реальности. Пользователи видели, как их силуэты взаимодействуют с объектами на экране и это создавало впечатление, что они часть искусственной реальности. Хотя правильнее было бы назвать это проектом интерактивного окружения.

Спустя четыре года, в 1978-м, Стив Манн придумал первое приспособление для ЭйАр, которое не было прикручено к потолку. В EyeTap использовалась камера и дисплей, дополняющий среду в режиме реального времени. Это изобретение стало основой для будущих проектов, но массово не использовалось.

Первое массовое использование дополненной реальности стало возможно благодаря Дену Рейтону, который в 1982-м году использовал радар и камеры в космосе для того, чтобы показать движение воздушных масс, циклонов и ветров в телепрогнозах погоды. Там ЭйАр до сих пор используется таким образом.

В 90-е поиск новых способов использования продолжился, а ученый Том Коделл впервые предложил термин «дополненная реальность». Перед ним и его коллегой поставили задачу: снизить затраты на дорогие диаграммы, которые использовали для разметки заводских зон по сборке самолетов Боинг. И решением стала замена фанерных знаков с обозначениями на специальные шлемы, которые отображали информацию для инженеров. Это позволило не переписывать обозначения каждый раз вручную, а просто изменять их в компьютерной программе.

Дальше развитие происходило стремительно. Скачок, сделанный в производстве микропроцессоров, и, как следствие, во всем технологическим секторе, позволил сильно ускорить работы.

В 1993-м году в университете штата Колумбия Стив Файнер представил систему KARMA (Knowledge-based Augmented Reality for Maintenance Assistance, переводится примерно как «Интерактивный помощник по обслуживанию»), позволявшую через шлем виртуальной реальности увидеть интерактивную инструкцию по обслуживанию принтера.

А вот в 95-м Джун Рекимото собрал Navicam - прототип мобильного устройства дополненной реальности, какой ее сейчас знают пользователи смартфонов. Навикам представлял собой переносной дисплей с закрепленной на обратной стороне камерой, чей видеопоток обрабатывался компьютером и, при обнаружении цветной метки, выводил на экран информацию об объекте.

В 96-м году Джуном Рекимото и Южди Аятцука был разработан Матричный Метод (или КиберКод). Он описывает реальные и виртуальные объекты с помощью плоских меток наподобие QR-кодов. Это позволяло вписывать виртуальные вещи в реальный мир, просто перенося метки. Например, положить на пол листок с кодом, навестись на комнату камерой - и вот у вас в комнате стоит динозавр.

В 98-м году НФЛ впервые использовала дополненную реальность, разработанную компанией Sport Vision, в прямой трансляции спортивных игр. Во время матчей на картинку с камеры, обзорно показывающей игровое поле, добавлялись технические линии и информация о счете. О «волшебной желтой линии» есть старый сюжет .

В 99-м НАСА применила систему дополненной реальности в приборной панели космического аппарата Икс-38, который научился отображать объекты на земле вне зависимости от погодных условий и реальной видимости.

И в том же году Хироказу Като создал открытую библиотеку для написания приложений с ЭйАр-функционалом ARToolKit (еще на Гитхабе). В ней использовалась система распознавания положения и ориентации камеры в реальном времени. Это позволяло стыковать картинку реальной и виртуальной камер, что давало возможность ровно накладывать слой компьютерной графики на маркеры реального мира.

Можно сказать, что с релизом первой версии этой библиотеки начался современный этап активного развития дополненной реальности.

Как работает дополненная реальность

Если откинуть совсем уж древние реализации, то ЭйАр - это распознавание образов и отслеживание маркеров.

С распознаванием образов все более-менее понятно. Если приложение должно распознавать стол, то достаточно загрузить на сервер библиотеку фотографий столов, обозначить общую структуру, цвет, произвольные параметры и присвоить этому набору данных определенное действие при обнаружении на картинке.

Вторая часть - это отслеживание маркеров. Маркерами могут выступать как специально напечатанные изображения, так и любые объекты.

Обложку журнала приложение распозна́ет по простой форме с прямыми углами и конкретному рисунку, и будет отслеживать ее положение в пространстве, отмечая смещение относительно фона. В этом случае сама обложка и есть маркер.

Со специальными маркерами все обстоит еще проще. Допустим, мы хотим примерить автомобилю новые диски. Для этого нам достаточно наклеить на диски QR-метки и система автоматически поймет, что именно в этих местах следует вставлять в картинку изображение новых колес. Еще один пример: мы кладем метку на пол и приложение понимает, что эта плоскость и есть пол, и разместит на нем произвольные объекты.

Но маркеры везде не налепишь, а сделать уникальный маркер под каждую ситуацию и унифицировать всю систему слишком сложно.

Но один производитель подобрался наиболее близко к тому, что может быть не только технологично, но и удобно. Это - компания Magic Leap .

Первое концепт-видео

Запустившись в 2010-м году в атмосфере абсолютной секретности, она уже через пару лет собрала инвестиций более чем на полмилллиарда долларов от таких гигантов как Гугл и Куалком. Никто за пределами узкого круга инвесторов не знал, чем эта компания привлекла такое внимание и что у нее за продукт.

Но информация все-таки просочилась. А позднее было официально объявлено: компания работает над продвинутой версией очков дополненной реальности, которые на голову сильнее Гугл Гласс и Хололенс. И, в отличие от других производителей, в Мэджик Лип равное внимание уделяют как железу, так и ПО и интерфейсам. Несмотря на то, что компанию больше интересует индустрия развлечений, чем прикладное применение, на сегодняшний день она является лидером в удобстве пользовательских интерфейсов.

Но пока ЭйАр в основном встречается в телефонах. Это удобство, готовая техническая база, широкая распространенность устройств и простота написания ПО.

Заточенные под фото для соцсетей приложения предлагают примерно одни и те же функции: маски и помещение персонажей в пространство. То есть - развлечения. Но все больше компаний понимают важность этой ниши и представляют более утилитарные приложения:

В наше же время можно и самому стать героем шутера. Например, в игре Father.IO . Такие проекты появляются все чаще.

В 2014-м вышла игра Night Terrors , один из первых популярных ужастиков в дополненной реальности. Попробуйте его ночью в каком-нибудь подвале - не забудете.

В 2016-м студия Nyantic выпустила наследницу своей игры Ingress и самую главную ЭйАр-игру, вероятно, на много лет вперед: Pokemon Go . Дополненная реальность, геотрекинг и популярная вселенная - все сложилось настолько удачно, что Покемон Гоу скачали более ста миллионов человек. Игра быстро стала феноменом и начала собирать вокруг себя скандалы, в том числе в России. Покемон Гоу уникальна еще и тем, что заставила миллионы людей гулять на свежем воздухе.

Настольные игры получили новую форму благодаря технологии.

Такие компании как Лего и Дисней активно ведут разработку игр с использованием ЭйАр, а намерения к ним присоединиться выразили практически все крупные производители игрушек. Исследовательские группы уже занялись сбором данных о том, как маленькие дети взаимодействуют с играми и приложениями дополненной реальности, и каким образом это влияет на их восприятие реального мира. Возможно, в будущем самые интересные идеи по развитию технологии будут звучать от тех, для кого эта самая технология была просто частью детства.

Именно развлечения сегодня развивают исследовательскую базу дополненной реальности. А благодаря колоссальным объемам данных, добровольно передаваемых людьми компаниям-разработчикам, технология в связке с машинным обучением делают шаги в сторону более серьезных областей.

От развлечений к реальной жизни

Справочная информация, объявления и виртуальные указатели обязательно войдут в наше виртуальное пространство. Виртуальный экскурсовод проведет нас по развалинам замка, да еще и покажет сценку, как именно этот замок развалили, и каким он был до того. Ну а социальные функции, вроде фильтра по статусу «в активном поиске», помогут найти вторую половинку прямо в толпе.

Ну и реклама. Вот уж какая сфера спит и видит скорейшее внедрение дополненной реальности в повседневную жизнь. А свежесть и новизна формата обеспечат вау-эффект. ЭйАр появилась даже в печатных изданиях. Например, в выпуске Эсквайра 2009-го года нужно было отсканировать обложку, и тогда на ней оживал Роберт Дауни младший.

Еще раньше ЭйАр и печатные издания скрестила БМВ, выпустившая в нескольких немецких журналах рекламу модели MINI, которая на экране становилась трехмерной и позволяла себя рассматривать со всех сторон.

А обложки, к слову, есть не только у журналов и книг. Для того, чтобы с вами начала разговаривать этикетка бутылки , сегодня не нужно даже пить.

Коммерческие возможности дополненной реальности настолько обширны, что сложно очертить границы. Даже граффити не осталось в стороне от ЭйАр-технологий.

ЭйАр может использоваться для быстрой примерки в магазинах: идея зайти в мебельный и тут же на тестовом стенде собрать себе комнату с мебелью и бытовой техникой, пользуясь подсказками по сочетаемости, напрашивается сама собой.

Более интересную и полезную идею воплотил маркетинговый отдел Икеи еще в 2014-м. Примерить мебель из каталога прямо к интерьеру своей комнаты оказалось крайне заманчиво.

Вдохновляют возможности ЭйАр в сфере образования.

Образование

Технология может занять ту нишу, которая в научной фантастике отдана голограммам. Только голограммы будут еще не скоро, а устройства вроде Хололенса технически почти готовы. Перспектива увидеть в вузах, а после и школах, виртуальные интерактивные иллюстрации , которые можно рассмотреть со всех сторон, с которыми можно взаимодействовать и тут же видеть результат своих опытов, представляется прекрасным далёко из светлых фантазий о будущем. Обучение любым инженерным специальностям может стать куда более наглядным и легким для понимания.

Еще одна важная сфера - медицина.

Медицина

Тут прямо глаза разбегаются от возможностей. Кроме максимально наглядного обучения студентов медвузов, сразу представляется визуализация данных прямо на пациенте, вместо расставленных вокруг экранов. УЗИ станет максимально наглядным. Ну и будущая мама будет счастлива получить на телефон трехмерного ребеночка, которого будет с радостью крутить и рассматривать, выискивая сходство того с отцом и собой.

Но одно дело УЗИ, которое не требует оперативного вмешательства, и другое - опасные для жизни пациентов операции, где наглядность может помочь врачу быстрее реагировать и точнее работать.

Наглядную анатомию в дополненном пространстве демонстрирует HoloAnatomy для Хололенса, который как раз и про медицину, и про образование. А заодно - и одна из знаковых демок для майкрософтовского шлема.

Менее драматично, но не менее полезно - помощники для слепых и глухих, сообщающих первым о предметах и событиях вокруг и показывающие субтитры вторым.

Например, стартап Aira одновременно предлагает нейросетевого помощника, распознающего и проговаривающего всё, что видит камера очков, и живого сотрудника стартапа, что поможет сориентироваться по той же камере в особо сложной ситуации. Система привязана к приложению для смартфона. Пользователь по подписке получает очки с камерой и возможность транслировать изображение с них дежурящим сотрудникам поддержки. Но постоянно созваниваться с ними нет нужды: голосовой ассистент Аиры распознает тексты и образы, перекрывая множество повседневных городских задач. Логично, что по мере развития компьютерного зрения надстройка с живыми сотрудниками будет все менее актуальна, но сегодня это хороший компромисс из человеческих и компьютерных ресурсов.

Военные технологии

И если системы наведения в боевых истребителях, дронах и танках для армии - это сегодня дело обычное, т.к. именно из ранних систем дополненной реальности для летчиков и росли другие военные проекты в этой области. Например, продвинутые системы дополненной реальности для пехоты, которые будут внедряться уже через пару лет.

Официальная фантазия армии США

В американской армии уже сегодня используется система HUD 1.0: сильно усовершенствованный прибор ночного видения, который также выполняет функции тепловизора и проецирует в монокль на шлеме целеуказатель, показывающий куда попадет пуля при текущем положении ствола.

Облегченные полуаналоги таких систем уже более пяти лет доступны на рынке. Баллистический калькулятор от компании TrackingPoint , фактически заменяет снайперу, ну или любому желающему, напарника-споттера.

На очереди - HUD 3.0, который должен выйти в следующем году. Он будет иметь возможность накладывать на реальную картинку полностью цифровые слои местности, модели зданий, планы этажей, позиции врагов и даже самих врагов. А это уже заявка на удешевление военных учений. Военные игры обходятся государственным бюджетам в колоссальные суммы каждый год, а с помощью систем дополненной реальности солдаты смогут тренироваться с условным противником не покидая пределов базы.

Российская армия разрабатывает похожие системы для саперов.

Конечно, хотелось бы, чтобы технологии получали развитие не благодаря военным проектам и интересам, но если вспомнить историю, то многие изобретения находили широкое мирное применение, несмотря на военные корни и прошлое. Например, микроволновки, тефлон и интернет.

Будущее

Резюмируя, дополненная реальность - это не только игры и селфи с виртуальными масками. Это гигантское количество возможностей для коммерческого применения, новые горизонты в образовании, промышленности, медицине, строительстве, торговле и даже туризме. И дальше должно быть только интереснее.

Коммерческий рост ЭйАр поразителен. Ей, в отличие от виртуальной реальности, необязательно опираться на специализированное железо и громоздкие устройства. Технология прекрасно работает на самом массовом носимом девайсе - смартфоне.

Дополненная реальность уже меняет наше настоящее: виртуальные маски, охота за покемонами по городам и болотам, дети, стреляющие друг в друга не из деревяшек, а через экран телефона. Сейчас это уже реальность.

Следующий шаг - массовый выход ЭйАр из зоны развлечений и соцсетей в сектор информационной поддержки. Автопроизводители (пока лишь Хендай, БМВ и Ауди, но список растет) начинают выпускать приложения-дополнения к пользовательским инструкциям, помогающие владельцам наглядно изучить свой автомобиль. Все больше производителей техники начинают выпускать приложения для ремонтных мастерских, которые помогают мастерам ориентироваться во внутреннем устройстве сложных приборов. Амазон думает над тем, чтобы облегчить жизнь покупателям: понравились кеды на прохожем - навел на того телефон и тут же заказал себе такие же.

Сегодня мы с вами живем во время бурных исследований в отрасли. Даже у технологических гигантов нет ясной картины дальнейшего развития дополненной реальности. Это время непрерывного рождения идей, нахождения неожиданных способов применения и осознания всей мощи этой фантастической когда-то технологии - дополненной реальности.
Microsoft Hololens Добавить метки

Что такое VR и AR?

Виртуальная реальность - созданный техническими средствами мир, передаваемый человеку через его ощущения: зрение, слух, обоняние, осязание и другие. Виртуальная реальность имитирует как воздействие, так и реакции на воздействие.

Дополненная реальность (англ. augmented reality, AR - «расширенная реальность») - технологии, которые дополняют реальный мир, добавляя любые сенсорные данные. Несмотря на название, эти технологии могут как привносить в реальный мир виртуальный данные, так и устранять из него объекты. Возможности AR ограничиваются лишь возможностями устройств и программ.

Cтоит сразу прояснить разницу между AR и VR:

VR блокирует реальный мир и погружает пользователя в цифровую вселенную. Если вы надеваете гарнитуру и вместо гостиной вдруг оказываетесь в гуще схватки с зомби, то это VR.

AR добавляет элементы цифрового мира в реальный. Если вы идете по улице и вдруг на тротуаре перед вами появляется покемон Дрэгонайт, то это AR.

Пример дополненной реальности: игра Pokemon GO

История AR/VR

Принято считать, что развитие виртуальной реальности началось в 50-е годы прошлого века. В 1961 году компания Philco Corporation разработала первые шлемы виртуальной реальности Headsight для военных целей, и это стало первым применением технологии в реальной жизни. Но опираясь на сегодняшнюю классификацию, систему, скорее, отнесли бы к AR-технологиям.

Отцом виртуальной реальности по праву считается Мортон Хейлиг. В 1962 он запатентовал первый в мире виртуальный симулятор под названием «Сенсорама». Аппарат представлял собой громоздкое устройство, внешне напоминающее игровые автоматы 80-х, и позволял зрителю испытать опыт погружения в виртуальную реальность, например, прокатиться на мотоцикле по улицам Бруклина. Но изобретение Хейлига вызывало недоверие у инвесторов и учёному пришлось прекратить разработки.

«Сенсорама» Хейлига

Через несколько лет после Хейлига похожее устройство представил профессор Гарварда Айван Сазерленд, который вместе со студентом Бобом Спрауллом создал «Дамоклов меч» - первую систему виртуальной реальности на основе головного дисплея. Очки крепились к потолку, и через компьютер транслировалась картинка. Несмотря на столь громоздкое изобретение, технологией заинтересовались ЦРУ и НАСА.

В 80-е годы компания VPL Research разработала более современное оборудование для виртуальной реальности - очки EyePhone и перчатку DataGlove. Компанию создал Джарон Ланье - талантливый изобретатель, поступивший в университет в 13 лет. Именно он придумал термин «виртуальная реальность».

Дополненная реальность шла рука об руку с виртуальной вплоть до 1990 года, когда учёный Том Коделл впервые предложил термин «дополненная реальность». В 1992 году Льюис Розенберг разработал одну из самых ранних функционирующих систем дополненной реальности для ВВС США. Экзоскелет Розенберга позволял военным виртуально управлять машинами, находясь в удалённом центре управления. А в 1994 году Жюли Мартин создала первую дополненную реальность в театре под названием «Танцы в киберпространстве» – постановку, в которой акробаты танцевали в виртуальном пространстве.

В 90-х были и другие интересные открытия, например, австралийка Джули Мартин соединила виртуальную реальность с телевидением. Тогда же начались разработки игровых платформ с использованием технологий виртуальной реальности. В 1993 году компания Sega разработала консоль Genesis.

На демонстрациях и предварительных показах, однако, всё и закончилось. Игры с Sega VR сопровождали головные боли и тошнота и устройство никогда не вышло в продажу. Высокая стоимость девайсов, скудное техническое оснащение и побочные эффекты вынудили людей на время забыть о технологиях VR и АR.

В 2000 году благодаря дополнению с технологиями AR в игре Quake появилась возможность преследовать чудовищ по настоящим улицам. Правда, играть можно было лишь вооружившись виртуальным шлемом с датчиками и камерами, что не способствовало популярности игры, но стало предпосылкой для появления известной ныне Pokemon Go.

Настоящий бум начался только в 2012 году. 1 августа 2012 года малоизвестный стартап Oculus запустил на платформе Kickstarter кампанию по сбору средств на выпуск шлема виртуальной реальности. Разработчики обещали пользователям «эффект полного погружения» за счет применения дисплеев с разрешением 640 на 800 пикселей для каждого глаза.

Необходимые 250 тысяч долларов были собраны уже за первые четыре часа. Спустя три с половиной года, 6 января 2015 года, начались предпродажи первого серийного потребительского шлема виртуальной реальности Oculus Rift CV1. Сказать, что релиз был ожидаемым - значит не сказать ничего. Вся первая партия шлемов была раскуплена за 14 минут.

Это стало символическим началом бума VR-технологий и взрывного роста инвестиций в эту отрасль. Именно с 2015 года технологии виртуальной реальности стали поистине новым технологическим Клондайком.

Что происходит на рынке виртуальной и дополненной реальности в мире

Хотя возможности виртуальной реальности ещё недоступны массовому потребителю, известные компании вовсю занимаются развитием этих технологий.

Владелец Universal Studios компания Comcast вложила $6,8 млн в небольшую VR-студию Felix&Paul в Монреале, которая успела поработать с Funny or Die и Белым домом.

В развитие виртуальной реальности инвестирует также издание New York Times. Уже много издание создает 360-градусные видео, которые выигрывают фестиваль « Каннские львы».

Что происходит на рынке виртуальной и дополненной реальности в России

Если по части технологий лидерами чаще всего оказываются зарубежные страны, то по части коммуникаций Россия, пожалуй, обошла иностранных коллег. В июне 2015 года в России Ассоциация дополненной и виртуальной реальности. Информации о деятельности ассоциации мало, но если у вас есть вопросы или вы хотите вступить в ассоциацию, проконсультироваться с экспертами можно на сайте .

Российский рынок виртуальной и дополненной реальностей по большей части представлен небольшими компаниями, которые делают проекты на базе зарубежных разработок (Oculus Rift, HTC Vive). Такой, например, является компания AR Production , которая появилась на рынке в 2011 году и делает проекты под разные компании – в том числе Музей дополненной реальности , буклеты с дополненной реальностью для Газпрома и виртуальную экскурсию для агрохолдинга «Кубань».

Но не все компании хотят строить бизнес, отталкиваясь от разработок западных коллег. Так, российская компания Boxglass не только снимает видео в формате 360 и разрабатывает AR/VR-приложения, но и производит собственные очки виртуальной реальности .

Ещё круче работает компания VE Group - основанная около 10 лет назад, она называет себя системным интегратором в области 3D-визуализации и систем виртуальной реальности. Помимо разработки центров виртуальных исследований и комнат VR, компания делает VR-решения для нефтегазовой отрасли, образования и строительства.

Рынок виртуальной реальности в России также хорошо представлен стартапами, крупными и не очень. Из тех, у кого точно получилось, можно выделить стартап Fibrum, который в прошлом году с немецкими ритейл-сетями Media Markt и Gravis о поставке своих шлемов виртуальной реальности. Еще один интересный проект - мотоциклетный шлем дополненной реальности LiveMap , финальная версия которого будет представлена на CES 2018.

Так выглядит VR-шлем от Fibrum

Подробнее о рынке AR/VR в России читайте в материалах Rusbase:

Инвесторы на рынке VR и AR

Как стартаперу легче всего найти средства для развития проекта? Конечно, привлечь инвестора.

BoostVC - акселератор, ориентированный на технологию блокчейн и виртуальную реальность. Последней проинвестированной Boost компанией является Vizor , основанная на Финляндии платформа для создания контента VR.

Vive X - акселератор от производителя гарнитуры VR HTC. В их последнем акселераторе участвовали стартапы, работающие во всех отраслях: от корпоративных инструментов (Snobal) до футбольного атлетического тренинга (Soccerdream).

В России объем инвестиций в AR/VR в 3,5 раза за прошлый год - с $200 млн в 2015 году до более $700 млн за 2016 год. Карта рынка с основными игроками, подготовленная ассоциацией AVRA, также доступна .

Если вы создали (или только хотите создать) VR-стартап и ищете инвесторов именно в России, то стоит обратить внимание на фонд VRTech , который основан в 2016 году и ориентирован на VR-проекты на начальной стадии из России, Америки, Европы и Азии.

Что инвесторы думают о AR/VR, читайте в материалах Rusbase:

Использование виртуальной и дополненной реальностей

Виртуальная реальность - та отрасль, в которой инфраструктура и технологии развиваются параллельно с развитием контента. Ведь если есть шлем или очки виртуальной реальности -должно быть то, что через них смотреть и делать.

Поэтому можно обозначить несколько основных направлений развития отрасли, в зависимости от контента и сферы применения:

1. кино;
2. трансляции и шоу;
3. маркетинг
4. образование;
5. и недвижимость;
6. и ВПК.

Предметы виртуальной реальности

К предметам VR мы относим все устройства, которые используем для погружения в виртуальный мир. Это могут быть:

Костюм виртуальной реальности

• Перчатки

  Комната VR

Костюм виртуальной реальности - устройство, позволяющее человеку погрузиться в мир виртуальной реальности. Это костюм, полностью изолирующий от внешнего мира, внутри которого находятся видеоэкран, многоканальная акустическая система и электронные устройства, воздействующие на нервные окончания кожи, вызывая иллюзию прикосновений или, например, дующего ветра.

Сейчас изготовление такого костюма нецелесообразно из-за его высокой стоимости, поэтому для частичного погружения в виртуальное пространство обычно используют шлем и перчатки виртуальной реальности.

Впрочем, вполне достоин звания костюма виртуальной реальности гаптический i То есть включающий все виды кожной рецепции, за счет работы которых строится осязательный образ костюм от американского стартапа

Технологии виртуальной и дополненной реальности называют одними из самых перспективных сфер исследования, но какова между ними разница и какое их ждет будущее?

Тем временем, пока инженеры разрабатывают космические корабли для полета к далеким звездам, а любители мистики ищут порталы в другие миры, мы здесь и сейчас благодаря техническому прогрессу создаём свою собственную реальность.

На данный момент разнообразить нашу, без сомнения, прекрасную реальность можно двумя способами: полностью погрузиться в компьютерную симуляцию с технологией виртуальной реальности (Virtual Reality, VR) или использовать наложение смоделированных компьютером виртуальных слоёв, доступных благодаря дополненной реальности (Augmented Reality, AR). Так как о первой технологии мы уже писали, рассмотрим вторую.

Что такое «дополненная реальность»?

Дополненная, или расширенная, реальность представляет собой прямое или косвенное воздействие на окружающий мир с помощью информационных технологий. Они позволяют либо с помощью специального устройства создать в реальности дополнительные цифровые элементы, либо модифицировать органы чувств (например, зрение) пользователя. Самые банальные примеры использования технологии ДР мы можем найти в статье Тома Кодела (Tom Caudell), который и дал название AR. В частности, он писал об интерактивных картах с текстовыми вставками. Основной причиной появления и реальной необходимости данной технологии Кодел видел в динамике мира: мы двигаемся слишком быстро, не можем позволить себе вечно сидеть у компьютера, требуем новой и обновленной информации. Именно технологии AR позволят решить эту проблему. Сегодня мы можем видеть котировки акций в своих Google Glass или пробки на улицах в различных интерактивных картах.

Как работает дополненная реальность?

Женщина, носящая очки дополненной реальности на Smau, международной выставке информационных технологий и коммуникаций 22 октября 2014 года в Милане. Tinxi / shutterstock.com

Для интегрирования виртуальных элементов в реальный мир в основе технологии AR лежит множество разнообразных датчиков и систем, определяющих параметры окружающего мира. В первую очередь система должна зарегистрировать изображение: обозначить координаты и свойства объектов (углы, формы, пороговые значения) и проанализировать оптический поток (изображение видимого или снимаемого на камеру объекта). Затем система закрепляет полученную модель и готовит к дальнейшему использованию. Естественно, весь процесс требует серьезных производительных мощностей, которые отчасти компенсируются использованием облачных технологий (электронный фонд вычислительных ресурсов).

Технологии для использования дополненной реальности

Несмотря на объем используемых технологий, для ознакомления с дополненной реальностью вам не потребуются все мощности Пентагона. Рынок подходящих для этой задачи устройств не менее обширен, чем каталог онлайн-магазинов, предлагающих любому желающему целый набор интересных приложений для смартфонов.

Аппаратное оборудование

Сюда входят, в первую очередь, современные смартфоны и планшеты. Благодаря набору датчиков и устройств, даже ваш мобильный телефон может интегрировать цифровые элементы в реальный мир. Вы можете, например, примерить одежду, даже не надевая её, посмотреть, влезет ли тумбочка в нужный вам угол квартиры, не напрягая мышцы для перетаскивания мебели. Да даже подвесить над городом летающую тарелку - запросто! Для этих целей существует целый ряд мобильных приложений: Wikitude, Aurasma, Layar. Но с их использованием может возникнуть ряд проблем: от банальной недоступности для скачивания в России (Aurasma) до неприспособленности под российские реалии (в среднем слабые производительные мощности мобильных устройств большинства пользователей).

Очки с функцией дополненной реальности

Знаменитые Google Glass, представляющие собой очки с замененными дисплеем стёклами, могли бы стать прорывом в использовании AR, но не получили широкого распространения. С одной стороны, это вызвано волной критики, поднявшейся из-за вопросов безопасности. Например, Google Glass позволяют своим владельцам незаметно для окружающих вести запись разговоров, делать фотографии, снимать видео и даже определять личность человека, мгновенно получая ссылку на его страницу в социальных сетях.

Google недолго оставалась лидером рынка очков смешанной реальности. Одной из компаний, осознавших перспективность данной технологии, стала транснациональная компания Microsoft, которая выпустила Microsoft HoloLens. В принципе, их очки мало чем отличаются от аналогов конкурентов, но огромные финансы позволили компании раскрутить свой товар по максимуму. В частности, HoloLens были использованы для демонстрации автомобилей и показа мод.

Проекты будущего

Список разрабатываемых технологий для использования AR весьма велик. Масло в огонь пылающих энтузиазмом умов подливают футуристические фильмы («Матрица», «Зрение», «Суррогаты»). На данный момент в планах разработчиков стоит создание контактных линз для массового использования, ведь подобные прорывные технологии используются для военных разработок (имитации боёв, тренировки).

Виртуальный дисплей сетчатки - персональное устройство, которые сможет сканировать непосредственно сетчатку глаза.

Большое количество идей использования смешанной реальности существует в сфере маркетинга и рекламы, к примеру, виртуальные витрины.

Перспективы применения дополненной реальности

Несмотря на то что основное применение дополненной реальности на данный момент сосредоточено в её развлекательной составляющей, перспективы применения технологии кажутся невероятными.

Медицина : Google Glass уже были использованы для проведения операции. Бригада хирургов из США использовала технологию дополненной реальности для двух целей. Во-первых, для консультации проводящего операцию врача с коллегой, находящимся в своём офисе. Подобное применение может быть крайне полезно для быстрого оказания необходимой помощи. Второе применение стало прорывным и заключалось в создании трехмерной модели коронарной артерии, через которую требовалось провести катетер.

Индикатор на лобовом стекле в кабине истребителя-бомбардировщика ВМС США F/A-18C «Hornet». Rama / wikimedia.org

Голограммы : Microsoft HoloLens не уступают конкуренту из Google. Представители компании не раз оглашали своё стремление достичь «голографической телепортации человека», то есть захват и перенос 3D-модели человека. Подобное использование дополненной реальности фактически позволит воссоздать реальное общение. Естественно, говорить о возможности воссоздать прикосновения пока рано, но небезосновательно.

Археология, история, архитектура: Одной из основных сложностей археологии является реконструкция объекта. Печально видеть лишь фундамент когда-то величественного здания. Технология дополненной реальности поможет каждому человеку увидеть всю красоту объекта не на рисунке, а перед своими глазами в реальную величину. Представьте, что значит для человечества воссоздание Колосса Родосского!

Искусство: Видеть то, как развеваются волосы Джоконды, бушует море Айвазовского или резвятся медведи Шишкина в сосновом лесу - для дополненной реальности не будет преград.

Коммерция: Покупка мебели, нанесение макияжа, покраска волос в другой цвет, примерка одежды будут осуществляться в два клика, даже не выходя из дома.

Образование: Дополненная реальность имеет огромные перспективы в сфере образования. Дополнительная информация, которая возникает при чтении, включающая в себя карты, видеовставки, проведение смысловых параллелей, сильно упростит жизнь ученику. Интерес к обучению можно будет возродить колоризацией и приведением в движение картин сражений. Немало разработок имеется для технических специальностей, например, AR Circuit для моделирования электрических цепей.

Военная сфера: Конечно, дополнительная реальность не может ускользнуть от взора военных. Не будем скрывать, что именно милитаризм чаще всего приводит к технологическому буму. На данный момент во многих странах имеются проекты тренировок и повышения боеспособности войск путем интегрирования виртуальных объектов в качестве целей атаки или спасения.

Развлекательная сфера : Знатоки настольной игры Dungeons&Dragon скажут, что для веселого времяпрепровождения не требуется ничего, кроме собственной фантазии, но начерченные от руки карты подземелий могут превратиться в 3D модель.

Технология дополненной реальности позволяет создавать нечто сказочное или воссоздавать когда-то утерянное, но самое главное – она облегчает доступ к информации, поток которой ускоряется с каждым днем. Дальнейшее развитие технология VR и AR позволит человеку отвечать вызовам меняющегося мира.

Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter .