Дополненная реальность. Все, что вы хотели узнать о технологии будущего - Хелен Папагианнис

Звук позволяет нам существовать как в окружающей среде, так и перенестись в какое-то другое место. Слушая, мы можем создать «театр разума», где, используя свое воображение, можно создавать визуальные образы или даже путешествовать во времени. Уже сейчас в нашей жизни встречаются многочисленные примеры звукового дополнения нашей среды: например, человек, едущий в набитом поезде, который не слышит окружающий его шум благодаря шумоподавляющим наушникам, или женщина, которая слушает свою любимую рок-музыку в самолете во время взлета и посадки. В будущем дополненный звук позволит нам блокировать «шум» повседневной жизни и обеспечит более сильные ощущения от звуковых эффектов.

«Когда люди говорят о технологии дополненной реальности, они обычно считают, что речь идет только о визуальных эффектах, которые накладываются камерой на изображение. Это всегда касается визуального ряда. Но не многие знают, что то же самое можно делать и со звуком», – сказал Майкл Брейденбрюкер, соучредитель Last.fm и основатель RjDj (Reality Jockey Ltd.). Заблуждение о том, что AR – это только визуальные эффекты, сохраняется и по сей день, несмотря на то, что звук не менее гибок и транспортабелен и зачастую не требует визуального дополнения.

Звуковые эффекты могут быть использованы как вместе с другими дополненными ощущениями, так и самостоятельно. Звук может помочь вам лучше ориентироваться в пространстве и быстрее находить необходимую информацию, испытывать яркие ощущения, раскрывать воображение, изменять окружающую среду. В этой главе рассматривается каждая из областей применения дополненного звука и приводятся примеры различных аудиогарнитур, завоевавших популярность на растущем рынке носимых устройств. В дополнение к получению данных из уха о здоровье и активности пользователя, аудиогарнитура позволяет создавать новые формы взаимодействия и общения, включая цифровую умную поддержку, реагирующую на голосовые команды в режиме реального времени.

Навигация на местности, информационный тур по музею или управляемая медитация – все это примеры того, как записанный или воспроизводимый в прямом эфире голос становится вашим проводником в своеобразном путешествии. Звук может сделать ваше окружение ярче, дополнив его аудиоэффектами или музыкой, сфокусировав ваше внимание на деталях, которые вы не заметили бы самостоятельно. Дополненный звук может открыть новые грани и качества этого мира.

Джанет Кардифф из Канады известна во всем мире своими запоминающимися аудиопрогулками, которые она записывает с 1991 года. Кардифф так говорит о своей работе[51]:

Аудиопрогулки похожи по своему формату на аудиогид. Вы берете CD-плеер или iPod и встаете или садитесь в определенном месте и нажимаете на кнопку воспроизведения. На CD вы слышите мой голос, дающий указания, например, «поверните налево» или «войдите в эту дверь», накладываемые на фоновый звуковой ряд: звук шагов, машин, птиц или другие звуковые эффекты. Это важная часть записи. Виртуальный записанный звуковой фон должен соответствовать характеристикам реального мира, чтобы создаваемое новое пространство воспринималось как «бесшовное сочетание» реального и дополненного. В своих записях я не только направляю слушателей, но и делюсь своими мыслями и информацией, которая побуждает дослушать лекцию до конца.

Кардифф создает смешанную реальность со звуком в качестве основного элемента, ведя адресованное лично вам повествование в людном месте и делая это место для вас более индивидуализированным. Она также говорит[52], что ее прогулки можно назвать одной из форм «путешествий во времени». Работа Кардифф служит отличным примером прообраза дополненной звуковой реальности, ставшей доступной с использованием современных технологий.

Эндрю Мэйсон является основателем и генеральным директором Detour[53], стартапа из Сан-Франциско, предлагающего коллекцию аудиопрогулок дополненной реальности под названием Detours. Мэйсон отмечает, что работа Кардифф, наряду с проектами других создателей, произвела огромное впечатление на него. «Первое, что я сделал, когда начал изучать эту идею, – это стал путешествовать по всему миру, чтобы тестировать разные аудиофайлы, привязанные к местоположению», – объясняет он. Среди них были: «Прогулка с Кардифф по Центральному парку»[54], «Аудиопрогулка по Бруклину» и «Необычные прогулки по Лондону»[55], созданные Фран Панеттой. «Эти работы побудили меня создать звуковую реальность, привязанную к местоположению, для создания кинематографического эффекта в реальной жизни, переноса слушателей в другой мир и максимального погружения их в ощущения и опыт других людей», – отмечает Мэйсон.

При включенном приложении Detour, голос местного рассказчика автоматически сопровождает вас в наушниках по ходу движения. Мэйсон отмечает, что Detour отличается от других приложений аудиотуров тем, что при его использовании нет необходимости постоянно брать в руки телефон или щелкать по значкам на карте для воспроизведения аудио. «Мы хотели создать такое приложение, которое позволило бы людям почувствовать, будто их сопровождает кто-то из местных, а технологическая подоплека отошла бы на второй план», – говорит Мэйсон[56]. Когда аудиосопровождение само по себе становится интерфейсом, а смартфон лежит в вашем кармане с выключенным экраном и вам не нужно постоянно на него смотреть, вы можете сосредоточиться на том, что вас окружает, и на рассказе вашего гида.

Detour отличается от обычных аудиогидов тем, что эта технология знает ваше местоположение на протяжении всего времени работы, делая возможным динамичное использование, адаптируемое под ваш темп ходьбы, время суток и даже погоду. Нет необходимости нажимать кнопку «Воспроизведение» каждый раз, когда вы достигаете следующего пункта своего маршрута: программа анализирует ваши движения и автоматически определяет, что вы уже там. Для этого Detour использует GPS, iBeacon и другие датчики в вашем смартфоне, определяя точное местоположение. iBeacon – это разработка компании Apple, работающая на базе энергоэффективной беспроводной технологии Bluetooth Low Energy (BLE) для предоставления информации и услуг на основе вашего местоположения. Ее можно использовать при неуверенном приеме сигнала GPS. Сами маяки[57] – это недорогие Bluetooth-передатчики, которые работают как датчики определения расстояния. Приложения на iOS получают сигнал этих маяков и реагируют, когда ваш телефон или планшет попадает в зону охвата сигнала. iBeacon используются в работе приложения Detour, чтобы автоматически запускать конкретную аудиозапись при приближении к определенной геопозиции. В дополнение к iBeacon, Detour использует акселерометр вашего телефона, фиксирующий ваши движения и шаги, и магнитометр для определения направления, в котором вы смотрите.