Это – объединенный увеличенный и смешанный опыт действительности, но не тип, который включает ношение установленного головами показа или использование переносного устройства. Вместо этого среда инструментована, а не человек, позволив людям обменяться волшебным опытом как группой.Люди, усаженные на Волшебной Скамье, видят себя по зеркальному изображению на большом экране перед ними, создавая точку зрения третьего лица. Сцена восстановлена, используя датчик глубины, позволив участникам на самом деле занять то же самое 3D место как машинно-генерируемый характер или объект, вместо того, чтобы нанести одну видео подачу на другого.
«Эта платформа создает мультисенсорный интерактивный эффект, в котором группа может взаимодействовать непосредственно с оживленным характером», сказал Моше Малер, основной цифровой художник при Исследовании Диснея. «Наша молитва для этого проекта была: услышьте, что характер прибывает, посмотрите, что они входят в пространство и чувствуйте, что они сидят рядом с Вами».Исследовательская группа представит и продемонстрирует Волшебную Скамью в 2017 SIGGRAPH, Компьютерную графику и Интерактивную Конференцию по Методам, начиная 30 июля в Лос-Анджелесе.
Исследователи использовали цветную камеру и датчик глубины, чтобы создать ТЕКСТУРИРОВАННУЮ HD-ВИДЕО 3D реконструкцию в реальном времени скамьи, среду и участников. Алгоритм восстанавливает сцену, выравнивая информацию о камере RGB с информацией о датчике глубины.
Чтобы устранить тени глубины, которые происходят в областях, где у датчика глубины нет соответствующего угла обзора с цветной камерой, измененный алгоритм создает 2D фон. 3D и 2D реконструкции помещены в виртуальное пространство и населены с 3D знаками и эффектами таким способом, которым получающееся предоставление в реальном времени – бесшовное соединение, полностью способное к взаимодействию с виртуальной физикой, светом и тенями.
«Сама скамья играет решающую роль», сказал Малер. «Не только делает это содержит относящиеся к осязанию приводы головок, но и это ограничивает несколько проблем для нас изящным способом. Мы знаем местоположение и число участников, и можем вывести их пристальный взгляд. Это создает этап с передним планом и фоном с сидящими участниками второго плана. Это даже служит диспетчером; смешанный опыт действительности не начинается, пока кто-то не садится, и различные формирования усаженных людей создают различные типы событий».
Волшебная Скамья была работой многочисленной команды Исследователей Диснея. В дополнение к Малеру это включает Кину Макинтоша, Джона Марса, Джеймса Крэйха, Джима МакКанна, Александера Риверу, Джейка Марсико, Али Исрэра и Шона Лоусона.