Как работает AR?

Принцип создания дополненной реальности определяется техническими возможностями средств, с помощью которых она реализуется.

Средства создания дополненной реальности следующие:

• мобильные устройства (планшеты, сотовые телефоны);
• очки дополненной реальности;
• телевизор (или экран компьютера);
• игровой компьютер типа Kinect;
• средства для воспроизведения AR в открытом пространстве;
• специальные средства:
  • разные тренажеры;
  • медицинское оборудование.

Общая схема создания дополненной реальности во всех случаях такова: оптический сканер (камера) устройства считывает (снимает) изображение реального объекта; программное обеспечение устройства проводит идентификацию и анализ полученного изображения, выбирает или вычисляет соответствующее изображению видимое дополнение, объединяет реальное изображение с его дополнением и выводит итоговое изображение на устройство визуализации. Так получается дополненная реальность.

Рассмотрим, как создается дополненная реальность разными устройствами.

Практическое применение их в области дополненной реальности — это, как правило, развлекательные или рекламные цели. Камера планшета (мобильного телефона) передает снимаемое изображение в специальную программу, которую пользователь предварительно скачивает в устройство. При анализе изображения программа распознает это изображение, выбирает связанное с изображением содержимое (это может быть текст, видеоролик, 3D-модель) и воспроизводит его на фоне изображения с камеры.

Например, при наведении камеры телефона на рекламу в журнале вы видите на экране телефона объемное изображение товара, который продвигает эта реклама. В некоторые программы воспроизведения такой дополненной реальности заложены функции управления этим объектом (масштабированием, поворотом, вызовом звуковых сигналов при касании разных частей объекта). Возможности визуализации дополненной реальности определяются только фантазией разработчиков программы.

Очки дополненной реальности

Это просто очки-компьютер. Человек, надевший на себя такие очки, видит через прозрачные линзы реальный мир и одновременно наложенные на него виртуальные объекты.

В очках дополненной реальности встроена система, отслеживающая движение глаз, а программное обеспечение, которое суммирует виртуальную и реальную картинку, позволяет создавать иллюзию обзора панорамы. Например, в реальный городской пейзаж можно встроить старинные замки, и в зависимости от поворота головы (взгляда) человек видит разные участки такого дополненного пейзажа. Примером таких очков является устройство Microsoft HoloLens.

Телевизор (экран компьютера)

Обычно применяется для показа телетрансляции, например, спортивных матчей. Видеосигнал, прежде чем отправиться в эфир, пропускается через специальное программное обеспечение, которое накладывает на картинку какую-либо видеоинформацию. Телезритель видит уже измененный видеосигнал, содержащий в себе реальную и компьютерную картинку. Причем зачастую он даже не осознает, что видит дополненную реальность. Понятно, что телесигнал в эфире уходит с некоторой задержкой, необходимой для компьютерной обработки сигнала. Такой прием часто применяется во время спортивных матчей для нанесения на реальную картинку цифровых отметок и линий, показывающих расстояние до ворот, наличие офсайда и т. п.

Игровой компьютер типа Kinect

Собственно говоря, Kinect — это игровой контроллер, работающий вместе с компьютером или игровой приставкой. В состав контроллера входит видеокамера, которая позволяет программному обеспечению анализировать окружающее пространство, положение и жесты игрока. В состав оборудования также входят два инфракрасных датчика глубины и микрофон. Программное обеспечение получает трехмерное изображение и калибрует датчики с учетом уровня освещенности и окружающих условий, проводит распознавание мимики, голоса, движения тела. Таким образом, в игровой процесс, то есть в видеоизображение, формируемое игрой, встраивается сам игрок (и даже несколько игроков) и окружающее его пространство.

Воспроизведение AR в открытом пространстве

Для того чтобы формировать дополненную реальность в открытом пространстве, нужны видеокамеры, компьютер со специальным программным обеспечением, лазерная установка. Видеокамера получает и пересылает в компьютер реальное изображение, программное обеспечение производит анализ изображения, лазерная установка световым лучом прорисовывает на реальном изображении дополнительное изображение. Так, например, работает бильярдный тренажер. Игрок целится кием по шару на бильярдном столе, программа анализирует положение шаров, кия, игрока, вычисляет предполагаемую траекторию движения шара. Лазерная установка проецирует изображения траектории прямо на бильярдный стол. Эту траекторию видит игрок и может корректировать положение кия. Получается классическая система управления с отрицательной обратной связью.

Специальные средства AR

К ним относятся всевозможные специализированные технические устройства, отличающиеся по способу взаимодействия с человеком и способу отображения информации. Хотя общий принцип сложения (синтеза) реального и мнимого изображений с помощью компьютерной программы остается неизменным.

К специальным средствам относятся специализированные шлемы пилотов для тренажеров или реальных условий полета. На стекло шлема выводится некая информация поверх окружающей обстановки, такой шлем отслеживает положение глазных яблок пилота.

Также существует специальное медицинское оборудование, применяемое для обучения врачей или для реального проведения операций. В первом случае, например, проводится обучение медика поиску кровеносного сосуда в введению в него иглы. Игла реальная — кровеносный сосуд виртуальный, но через сложную систему гидравлических механизмов врач ощущает его как реальный (он даже может почувствовать пульс), а при точном попадании иглы в сосуд, на экране устройства из сосуда выходит кровь. Во втором случае, например, при эндоскопических операциях, на изображение оперируемого органа, выводимое на экран, накладывается рентгеновское изображение опухоли, полученное ранее. Это позволяет врачу с большей точностью локализовать опухоль внутри органа.

Можно, конечно, долго описывать и другие способы формирования дополненной реальности, но поставим пока многоточие...

Скачивай на Play Маркет и играй в мобильные игры