Директор образовательных программ по игровой индустрии в НИУ ВШЭ Вячеслав Уточкин и исполнительный директор Ассоциации дополненной и виртуальной реальности Екатерина Филатова рассказали theRunet о том, как применяют дополненную реальность в музеях.
Человечество за многие годы накопило огромный пласт культурного наследия, части которого мы можем видеть в архитектуре, музеях, книгах, а также в интернете. Существенная часть истории осталась лишь в чертежах и зачастую разрозненна, так как артефакты находятся в разных музеях, архивах и сохранившихся фрагментах.
В последние годы существенно меняется формат и требования для вовлечения посетителей в изучение окружающего мира при посещении культурных и туристических объектов. Поколения, родившиеся и растущие в информационной среде, привыкли изучать мир, непосредственно взаимодействуя с ним, быстро получая интересующую информацию и желая иметь возможность фиксировать события для размещения в соцсетях.
В связи с этим, повышается потребность в новых инструментах для аудитории посетителей объектов культуры и туристов — пользователей смартфонов и планшетов. Именно поэтому в наши дни музеи все чаще организуют на своей территории интерактивные проекты: инсталляции, компьютерные классы, презентационные пространства. Но этим уже не удивить требовательную аудиторию.
Технология дополненной реальности (augmented reality, AR) позволяет построить новую систему взаимодействия человека и информации — это захватывающая подача традиционного материала.
Технология дополненной реальности позволяет человеку видеть реальный окружающий мир, дополненный любой информацией: справочными сведениями, видео, аудио или 3D-моделями. Пользователи могут использовать эту технологию посредством приложений на мобильных устройствах. Целью технологии является расширение пользовательского взаимодействия с окружающей средой.
Применение VR/AR в музеях
Наиболее популярными сферами применения технологии является реклама и выставочная деятельность, но в данной статье мы сделаем акцент на использование технологии в культурном и туристическом секторе: в археологии, архитектуре, искусстве, музеях, городском пространстве, социальных инновациях.
Интересны заключения музеев, продолжительное время использующих технологию дополненной реальности в тесной взаимосвязи с экспозициями музея:
Тайваньские исследователи изучили эффективность использования дополненной реальности, наблюдая за поведением музейных групп с различными системами-гидами. Исследование показало, что после экскурсии наибольшую информированность и вовлечённость проявила именно группа, которая использовала мобильный гид с дополненной реальностью.
Согласно исследованию Британского музея, дополненная реальность имеет большой потенциал в области музейной педагогики и обладает уникальной способностью привлекать посетителей.
Исследователи выделяют следующие плюсы использования технологии дополненной реальности в туристической и музейной сфере:
- доступность информации через мобильные приложения;
- мгновенный доступ посетителя к информации и возможность ее сохранения;
- наглядность экспонатов;
- неограниченный доступ к любым экспонатам, даже не выставленным, находящимся в запасниках, либо в других коллекциях;
- обучение через развлечение;
- вовлеченность посетителей в процесс изучения объектов;
- увеличение аудитории в музеях и туристических местах и повышение лояльности посетителей;
- комфортное получение информации;
- точный анализ аудитории музея;
- экономичность, так как разработанные приложения возможно постоянно модернизировать и дополнять.
Таким образом, новые технологии помимо wow-эффекта дают возможность по-новому подать информацию, которая в привычном виде становится скучной, и вовлечь человека в активное изучение мира вокруг.
Технология дополненной реальности постоянно развивается и модернизируется. Будущее за проектами, позволяющими пользователям самостоятельно формировать контент и создавать свои отметки в приложениях (на подобии википедии).
Туризм — одно из основных направления разработки приложений, использующих AR-технологию. Рассмотрим существующие варианты использования технологии.
Навигатор по местности
Туристы могут получить незабываемые впечатления, если в их путешествие включить дополненную реальность. При использовании геопозиционирования, определения местоположения с помощью GPS на экране гаджета появляется подробная информация о местонахождении пользователя и сведения об окружающем его пространстве.
Это не просто туристический навигатор, это возможность иметь всю необходимую информацию в одной базе данных. Данная функция позволяет проводить туристов к интересным местам, памятникам, ресторанам, давать информацию о музеях и культурных мероприятиях, магазинах, об их истории, особенностях, о наличии и стоимости услуг.
Город полон жизни, об этом только нужно рассказать. Вариантов применения множество: от создания карт с отметками достопримечательностей до путеводителей с виртуальными гидами.
Отдел записей (DOR) города Филадельфии (США) разместили более 90 000 изображений и карт в системе с использованием программы дополненной реальности. Теперь каждый может посмотреть исторические снимки города и сравнить с обликом в настоящем просто наводя камеру телефона на городские здания и улицы, либо находясь в непосредственной близости от места. Расположение пользователя определяется с помощью GPS. Доступ к базе данных открыт для всех.
Подобные проекты по дополнению городского пространства различными фотографиями архитектуры и информацией о том, как город выглядел раньше, были сделаны и в Сиднее, и в Лондоне.
Проект «Узнай Москву» создан с использованием инновационного инструмента для жителей столицы и туристов при поддержке департаментов города Москвы: Департаментом образования, Департаментом культурного наследия, Департаментом культуры и Департаментом информационных технологий. Проект выполнен в качестве интернет-портала и мобильного приложения.
Приложение сделано как навигационно-туристический гид по Москве, выдающий при наведении на QR-код текстовую и аудио информацию по объекту, также позволяет строить маршруты, предлагать собственные и участвовать в конкурсах. В течение действия данного инновационного инструмента взаимодействия с культурной средой приложение было скачано более 100 тысяч раз только на платформе Android.
Дополнение города утраченными историческими объектами
В дополненной реальности есть возможность показать крупные объекты в пространстве города, например, здания, помещения или памятники. Используя 3D-модели, разработчики реконструируют масштабные объекты, соотнося с существующим пространством.
Пользователь может навести камеру мобильного устройства на достопримечательность и увидеть виртуальное изображение исторических событий, происходивших на этом месте. Вместе с этим, объект возможно рассмотреть со всех сторон, изнутри, изучить детали путем увеличения на экране или получить дополнительную информацию.
Одним из примеров служит проект Санкт-Петербургской компании Pilgrim XXI. В 2015 году Крейсер «Аврора» отправлен на реконструкцию, но все желающие могут прийти на Петроградскую, 2 и посмотреть, как выглядела «Аврора» в 1917 году, и как она стреляет, скачав приложение и наведя камеру телефона на набережную. Также по городу размещены еще 6 точек, с которых при наведении камеры мобильного устройства можно полюбоваться легендарным крейсером.
Реконструкция исторических объектов
Утраченные исторические памятники можно видеть в чертежах и архивах, но это не привлекает поток туристов. Технология позволяет собрать воедино, восстановить и показать, как это выглядело в прошлом, и показать это здесь и сейчас, в любом уголке земли.
По опыту латвийского городка Лудза, воссоздавшего в дополненной реальности крепость крестоносцев XII века, разрушенную во времена Ивана Грозного, поток туристов увеличился в сотни раз. За первый год использования приложения крепость посетили более 60 тысяч человек, в течение второго года поток туристов еще увеличился.
Виртуальная реконструкция замка происходила в тесном сотрудничестве разработчиков и историков на основе древних книг, чертежей и картин. Фактически на месте крепости остался только холм и фрагменты строений зданий, но в дополненной реальности можно видеть крепость во всех деталях. В 2015 году проект получил приз, как самый инновационный туристический объект в Латгалии, что еще больше подогревает желание туристов побывать на месте старинной крепости.
Воссозданием культурных исторических достопримечательностей в дополненной реальности занялись и в городе Лечче (Италия), где запущен проект LecceAR. Разработчики воссоздают в 3D-формате утраченные исторические объекты, в том числе римский театр. Рассмотреть город в его древнем облике можно с помощью смартфона, скачав предварительно специальное приложение. Таким образом, город открыл для себя новые возможности привлечения туристов.
Создание музея в городском пространстве
Музей может быть создан из любого окружающего пространства. В Дрездене при проведении международного фестиваля компьютерного искусства, признанного общенациональной цифровой культуры, возможно увидеть произведения искусств на обычных зданиях, просто наведя смартфон.
Музеи всего мира сегодня сталкиваются с проблемой роста и удержания посетителей, особенно со стороны молодой аудитории.
Падающая посещаемость музеев рассматривается большинством как негативный результат, как в финансовом, так и в плане более широкого социального и воспитательного воздействия. Одной из наиболее важных причин является то, что музеи зачастую вынуждены конкурировать с индустрией развлечений.
В современных музеях интересные формы повествования выходят на первый план через аудио-гиды, видео, организации тематических и разных позиций, таких как различные культурные интерпретации. Следствием развития данной тенденции стало появление интерактивного цифрового повествования, которое делает опыт более личным и мобильным.
Рассмотрим несколько разновидностей проектов в музейном пространстве.
Оживить персонажей
В музейном пространстве возможно использовать анимированные 3D-модели, чтобы показать, например, давно исчезнувших с лица Земли животных или растения. Музей естественной истории в Лондоне использует данный метод для мультимедийного театра с первобытными людьми, динозаврами, рыбами и другими животными, объединяя их в интерактивном фильме.
Поднеся мобильное устройство к скелету ископаемого можно увидеть анимированные модели, посмотреть, как они выглядели и как двигались, получить информацию о животных. В Казани в Музее естественной истории Татарстана российская компания Eligovision создала инсталляцию с использованием дополненной реальности. Фирменная технология «живых 3D-меток» развлекает посетителей, которые могут пройтись и сфотографироваться рядом с мамонтенком, гигантским ископаемым кроликом и саблезубым тигром.
Интерпретационные инсталляции
При использовании маркеров (меток для распознавания) в музеях можно реализовывать не только информативные, но и игровые сценарии с лабиринтами, экскурсиями и загадками. Например, медиа-художник Уго Баррозу в Национальном центре искусств в Мехико использовал носимые 3D-метки и технологию дополненной реальности еще в 2005 году.
Дети прикрепляли специальные метки на одежду и голову и вставали перед экраном с камерой. В зависимости от того, какие маркеры были одеты, дети оказывались на экране в различных костюмах.
Другой проект художника, сделанный в 2009 году, был посвящен различным маскам. С помощью технологии распознавания лица, посетитель «примерял» маски с барочными узорами из коллекции музея.
Виртуальные выставки
Команда Британского музея цифрового обучения создала свою уникальную выставку в сотрудничестве с писателем-фантастом и гейм-дизайнером Адриан Хон. В музее после проведения семинара для молодежи о коллекции часов, участникам было предложено выбрать понравившиеся часы коллекции и изобрести собственный футуристический прибор для измерения времени.
Изображения изобретений, придуманных посетителями и сделанных в Photoshop, были установлены в галерее с помощью дополненной реальности. В результате музей получил необычную виртуальную выставку.
Этот пример иллюстрирует одно из преимуществ дополненной реальности для музеев: технология позволяет создавать любое количество виртуальных слоев в галерее, при этом не загромождая пространство.
Гид по музею
Посетителям музея зачастую не интересно ходить с гидом, который выборочно рассказывает об экспонатах, им намного увлекательней изучать пространство самостоятельно. Ещё больший интерес вызывает игровая форма изучения экспозиций музея в формате интерактивного повествования.
Именно с использованием технологий дополненной реальности возможны различные варианты изучения пространства, в том числе гид по музеям с индивидуальным акцентом и игровыми элементами.
Интересным решением в этой сфере стал проект CHESS (аббревиатура от намного более длинного «Cultural Heritage Experiences through Socio-personal interactions and Storytelling» или «Преподавание культурного наследия посредством социо-персональных взаимодействий и повествования»).
Он стартовал еще в 2011 году, получил грант Еврокомиссии на разработку в размере €2.8 млн и в настоящий момент его создание продолжается. Для посетителя музея просмотр экспозиции становится интерактивным цифровым рассказом, который сочетает в себе вовлечение через AR-контент и автоматическое генерирование историй, ведущее к фокусировке на объектах, определенных сотрудниками музеев. Работает как приложение для планшетов.
В Британском музее с помощью AR-технологии экскурсию по музею преобразовали в сюжет головоломки, которую ребенок может разгадать, используя специальное приложение и планшет. В Игре «Подарок для Афины» посетитель изучает музей в поисках отдельных статуй из их очертаний, после нахождения статуи — дается рассказ о выставке и экспонатах, и предлагается следующий этап игры.
Система постоянно адаптируется под предпочтения посетителя. Например, если посетитель не следует игре, а обращает внимание на другие артефакты, система может адаптировать сюжетную линию и вместо одной выставки, направить на другую, где вы получите более подробную информацию о том, к чему был проявлен интерес.
Это дает музеям возможность постоянно создавать новые впечатления, чтобы попытаться заставить людей перейти более, чем один раз.
Vizerra разрабатывает похожий проект для Всероссийского Художественного Научно-Реставрационного Центра имени академика И. Э. Грабаря. С помощью технологий дополненной реальности пользователи смогут в интерактивном режиме увидеть процесс реставрации известных картин, выставленных в знаменитых российских музеях.
Дополнение к экспонатам
Дополненная реальность дает возможность на выставке рассказать подробнее про каждый из экспонатов, и показать, как он работает, из чего состоит.
Шведский Музей Средиземноморья в Стокгольме использовал 3D-технологии для «оживления» тех же египетских мумий, которые были подвергнуты томографическому сканированию и отображены на специальном интерактивном столе. Детализованная цифровая модель позволяет посетителям послойно изучать содержимое саркофага и анатомию мумии.
Интересный проект был сделан на 9 мая 2015 года. При использовании специального мобильного приложения и наведения на метки военной техники посетитель выставки видел внутреннее устройство машин (не секретное, конечно) и анимацию работы, а также получал информацию о технических особенностях и инновационных решениях, использованных при разработке танков, ракетных комплексов, вертолетов, истребителей.
Так как выставка проходила на ВДНХ, то нужно было показать не только военную технику, но и процесс её создания. Для этого было создано AR-приложение. В результате за несколько праздничных дней приложением воспользовались более 10 тысяч человек.
На российский, так и на международный рынок выходит все больше проектов в дополненной реальности, призванных повысить эффективность коммуникации между музеями и потребителями культурного досуга и позволяющим музеям перейти на новый уровень взаимодействия с культурной средой. И это должно быть не только социально-значимо, но и выгодно.
Вот как комментирует развитие технологий дополненной и виртуальной реальности в музейной сфере Александр Астров, руководитель отечественной компании ARRroduction, занимающейся проектами в дополненной и виртуальной реальности.
«Технология выходит на массовый рынок и в настоящий момент музейные организации уже могут позволит себе внедрение данной технологии даже в рамках скромных бюджетов, которые выделяет правительство на обновление и модернизацию. Вы спросите — что виртуальная реальность может привнести в музейную сферу?</p><p> И тут ответ очевиден: виртуальная реальность как ни что другое поможет перенести посетителей в эпоху и время зарождающихся культур, буквально окунуться в мир прошлого и не просто оказаться в другом мире, но и иметь возможность взаимодействовать с этим миром благодаря программируемым образовательным сценариям, заложенным в музейные экспонаты, а так же различным устройствам, таким как перчатки, беспроводные джойстики в виде мечей и других приспособлений, позволяющих взаимодействовать с виртуальным миром. </p><p>К примеру — в обычном музее вы можете только увидеть меч и другое дело — если вы попробуете меч в деле, пусть даже в виртуальном мире — этот опыт вам гораздо больше запомнится и музейная образовательная функция будет выполнена на совершенно ином качественном уровне»</p>