Внутри шумера большая ставка Амазонки на дополненную и виртуальную реальность

Amazon делает большой шаг в пространство дополненной и виртуальной реальности с Sumerian, универсальной платформой для разработки, которая может создавать приложения AR и VR для смартфонов и гарнитур, и - достаточно скоро - приложения AR / VR, которые будут работать правильно в вашем браузере.

В рамках этого опыта шумер может создавать иммерсивные виртуальные миры, населенные «хозяевами» - трехмерными персонажами, воплощенными в жизнь той же технологией искусственного интеллекта, что и Alexa.

Шумерский не зависит от платформы. Вместо разработки собственного фирменного устройства или гарнитуры Amazon выбрала интеграцию с существующими предложениями. Sumerian построен на открытых веб-стандартах и ​​поддерживает как ARKit от Apple, так и ARCore от Google. Это означает, что создатели приложений могут создать одно шумерское приложение, которое будет работать на Android, iOS, Oculus Rift, HTC Vive и других.

Как новое дополнение к Amazon Web Services, Sumerian оценивается по модели, основанной на использовании этого сервиса, а не по подписке, и подключается к другим сервисам AWS.

Amazon выпустила шумерский предварительный просмотр в ноябре, когда он был впервые анонсирован, но в преддверии ожидаемого в мае запуска PCMag получил эксклюзивный взгляд на шумерский и несколько ранних пользовательских приложений.

Кайл Роше, генеральный менеджер Amazon Sumerian, ознакомил меня с демонстрацией платформы для создания 3D-приложений. Я ознакомился с редактором приложений Drag-and-Drop и библиотекой 3D-объектов Sumerian, его Visual State Machine для написания сценариев сложных автоматизированных сцен и углубился в процесс создания искусственно интеллектуальных хостов, с которыми вы можете в полной мере пообщаться в этом виртуальном опыте.,

Я также говорил с Марко Ардженти, вице-президентом, который курирует не только AR / VR, но и подразделения AWS Mobile, Serverless Computing и IoT. У Amazon амбициозные планы относительно шумеров, и еще более грандиозное видение роли дополненной и виртуальной реальности в сочетании с ИИ сыграет в нашем связанном будущем.

• Почему Amazon делает ставку на AR / VR

  Вхождение в совершенно новую отрасль или отрасль никогда не останавливало Amazon прежде. Достаточно взглянуть на Whole Foods, Amazon Video или их усилия в сфере здравоохранения и фармацевтики.

  Роше пошутил, что название «шумерский» пришло из научно-фантастической книги « Снежный крах» (которую Амазон на самом деле адаптирует как серию) и идея для "хозяев" пришла из Westworld HBO . Но, по словам Argenti, решение Amazon войти в пространство AR / VR на самом деле сводилось к трем ключевым факторам: появлению дополненной реальности на основе смартфонов; неиспользованные возможности VR на рынке business-to-business (B2B); и помогать клиентам AWS решать болевые точки с помощью того, что они уже пытались сделать.

  «Эти сигналы были достаточно сильны для нас, чтобы мы могли фактически начать процесс проектирования шумерского языка. Классическим способом Amazon мы начали работать в обратном направлении от сценариев использования клиентами, а затем в конечном итоге финансировали команду разработчиков для создания продукта», - пояснил Ардженти.

  Приложения B2B включают в себя такие сценарии, как интерактивные цифровые рекламные вывески (например, гигантские объявления с говорящей голограммой от Blade Runner: 2049 ), виртуальное обучение и множество вариантов использования промышленного Интернета вещей, таких как использование датчиков для создания цифровых двойников и сложное моделирование. Argenti также подчеркнул важность достижения AR на смартфоне точки перегиба через ARKit и ARCore.

  «Камера становится очень мощным инструментом для взаимодействия с реальностью и изучения окружающего мира», - сказал он. «Быстрые графические процессоры могут накладывать информацию в режиме реального времени, а датчики могут помочь создать трехмерную реальность. Идея заключается в том, что у вас есть высококачественный сенсор с высокой четкостью и контекстно-зависимым сенсором в руках многих людей».



Как Amazon построил шумерский

Amazon начал думать о том, как AR и VR будут выглядеть для клиентов AWS в конце 2016 года, а предварительный просмотр дебютировал на AWS re: Invent примерно через год. Между ними произошло несколько вещей.

Во-первых, Amazon купила обанкротившегося шведского стартапа под названием Goo Technologies; его среда создания 3D, Goo Create, стала основой интегрированной среды разработки (IDE) Шумера.

Визуальное трехмерное моделирование Goo Create также было веб-облачным сервисом, но Amazon сделала еще один шаг вперед, перенеся серверную часть на AWS. Существует множество преимуществ для построения на основе масштабируемой облачной инфраструктуры, которой вы уже владеете, но большая из них значительно снижает задержку. По словам Роше, одним из главных плюсов Шумера является то, что, несмотря на всю мощь редактора, его не нужно ни загружать, ни устанавливать. Во время демонстрации Sumerian загружается с URL браузера в считанные секунды. Даже обработка естественного языка (NLP) в режиме реального времени и рендеринг сложной анимации не сильно замедлили ее.

Как и в случае с платформами разработки с низким кодом, Sumerian можно использовать на базовом уровне практически без опыта разработчика. Тем не менее, программисты и исследователи данных могут намного глубже использовать программируемые API-интерфейсы и интерфейс командной строки Sumerian для настройки сцен и написания сложной логики приложения.

«Мы хотим получить опыт, когда вы нажмете, и вы сразу же окажетесь на сцене», - сказал Ардженти. «Тогда у вас есть инструменты для трехмерной графики, куда вы можете перетаскивать объекты. Sumerian - это визуальный инструмент, который может связывать то, что происходит, когда происходят действия или события, потенциально без написания строки кода».



Создание 3D шумерских приложений

Более широкая философия дизайна, которой придерживается Amazon вместе с шумерским, заключается в том, чтобы максимально консолидировать опыт создания. По словам Роше, идея заключалась в том, чтобы замаскировать множество повторяющихся задач разработки, поэтому основной процесс создания шумерского приложения одинаков независимо от платформ AR и VR, на которых вы в конечном итоге публикуете его.

Он начинается либо с выбора шаблона, либо с прыжка в создание новой сцены. Некоторые из стандартных шаблонов Sumerian включают такие сцены, как офисные помещения, учебные помещения и склады, грузовое судно и костер на открытом воздухе. Главный редактор поддерживает WebGL и WebVR и представлен так же, как и многие из инструментов с низким кодом, которые мы тестировали.

Слева находится панель сущностей. Сущность - это, по сути, таблица в базе данных, которая помогает вам управлять передачей данных в ваше приложение. Ниже этого окна актива, где вы можете искать объекты, которые вы хотите вытащить на сцену или открыть полную библиотеку активов всех шумерских 3D-моделей. По словам Роша, Шумерский использует множество библиотек объектов с открытым исходным кодом и интегрируется с API Sketchfab. Amazon также заинтересован в интеграции с такими платформами, как TurboSquid и объектная библиотека Google Poly AR / VR, сказал он. Вы также можете импортировать свои собственные активы в шумерский и поместить их в сцену.

«Панель активов может служить зоной опускания для регулировочного трубопровода, - пояснил Рош. «Вы можете перетаскивать наиболее распространенные форматы 3D-файлов; мы преобразуем их, оптимизируем их и храним для вас. Одна из вещей, которые мы делаем на серверной стороне, - это если вы используете один и тот же ресурс в нескольких сценах, мы на самом деле создаст ссылку для вас."

В середине экрана находится основной холст, где вы можете перетаскивать объекты и 3D-модели в сцену. В углу холста находится кнопка для запуска предварительного просмотра WebVR вашей сцены.

Ниже находится редактор временной шкалы, который работает аналогично инструментам редактирования видео. Когда вы вытягиваете анимацию и звуки в кадры и используете Visual State Machine для создания действий, поведения хоста и последовательности событий, все это будет отображаться на временной шкале, где вы можете настроить переход одного состояния в другое.

Правый столбец - это панель инспектора, которая показывает детали любых компонентов, которые вы просматриваете, и способы их настройки. Для модели, которая может иметь сотню различных вариаций, вы можете настроить такие вещи, как атрибуты и текстуры, фактически не касаясь сцены.



Стратегия Amazon: интегрироваться со всеми

Шумерский играет не только в пространстве трехмерной разработки с такими платформами, как Unity, Unreal Engine и Vuforia, но также и в более широкой экосистеме AR / VR наряду с ARKit, ARCore и Windows Mixed Reality. Рош сказал, что Шумерян применяет философию «один раз, запускай где угодно» для приложений AR / VR и особенно для корпоративных разработчиков.

«У профессиональных 3D-разработчиков или профессиональных аниматоров есть студия, которая работает с ними. Но большинство веб-разработчиков или разработчиков мобильных приложений изучают что-то вроде Unity на работе», - сказал Рош. «Unity - это здорово, но быть действительно хорошим в нем значительно сложнее, чем просто взять навыки, которыми они обладают - например, если они хорошо владеют JavaScript - и таким образом облегчить им переход в 3D. Поэтому мы решили сосредоточиться на этом часть рынка ".

Sumerian поддерживает несколько основных открытых стандартов: WebGL, WebAR, WebVR и будущую инфраструктуру WebXR, которая предоставит приложения AR / VR для всех устройств и браузеров на разных платформах. Консорциум World Wide Web (W3C) проголосует за ратификацию WebXR в ближайшие месяцы. В этот момент шумерские приложения смогут запускаться прямо в браузерах.

Между WebGL, WebVR и WebXR, Sumerian полностью независим от платформы, и Sumerian опубликовал нативные оболочки для прямой интеграции с ARKit и ARCore для AR-приложений на смартфонах. По словам Роша, Sumerian может создавать приложения для любой платформы, поддерживающей WebVR, включая не только Oculus Rift и HTC Vive, но также Samsung Gear VR, Google Daydream View и другие. Шумерян также тесно сотрудничает с командой Google Chrome над WebXR для браузерных приложений.

Другой главный игрок в комнате - Microsoft. Хотя Amazon не зашла так далеко, чтобы заявить, что Sumerian будет интегрироваться с экосистемой Windows Mixed Reality, Рош сказал, что последняя версия Microsoft HoloLens для RS4 включает поддержку WebAR, что означает, что Sumerian может запускать сцены HoloLens. Amazon также наблюдает за другими гарнитурами от таких компаний, как Magic Leap и Meta, но его подход дает шумерским преимуществам гибкость.

«Мы сделали выбор. Мы могли бы пойти по пути создания собственной запатентованной вещи и подтолкнуть разработчиков к этому», - сказал Ардженти. «Вместо этого мы решили быть настолько широкими, насколько это возможно, в поддержке того, что, по нашему мнению, будет массовым рынком. Как только все перейдет на WebXR, вся экосистема устройств придет с ним. Мы пойдем за фундаментом».

• Шумерские AI-хозяева меняют игру

  Хосты являются одним из самых уникальных торговых шумеров. Хост - это 3D-анимационный персонаж, которого вы можете поместить в сцену AR или VR. Пользователи могут задавать вопросы хостам, а разработчики могут писать сложные наборы действий, поведений, жестов и движений, которые может выполнять хост, когда они разговаривают и ходят по сценам. По словам Роше, Amazon черпал вдохновение для хозяев из самых разных мест, включая онлайн-игры, такие как Second Life и The Sims.

  В настоящее время у Sumerian есть два хоста по умолчанию - Cristine и Preston, но в течение этого года будет запущен целый ряд хостов. Амазонка встроила много нюансов в этих ИИ персонажей. Роше показала мне демонстрацию Кристины, где он вытащил хозяина на сцену и открыл панель инспектора, чтобы настроить ее эмоции, выражения лица и жесты. Amazon будет автоматически генерировать жесты, когда ведущий говорит на основе обработки разговора на естественном языке. Так что, если Кристина скажет «Привет», это может вызвать жест.

  С помощью так называемой системы точек интереса вы можете установить флажок в редакторе, чтобы глаза хозяина всегда обращали внимание на камеру. Так что если вы носите HTC Vive Pro, прогуливаясь на 360 градусов, хозяин может следовать за вами. Если это AR-приложение, подключенное к камере вашего смартфона, Рош объяснил, что система глубокого обучения Amazon Rekognition может выполнять анализ лица как того, где вы находитесь, так и того, где ваше лицо находится в кадре, чтобы выглядело так, будто хост смотрит через ваш экран. прямо на тебя. Это дает вам иллюзию зрительного контакта.

  Клиенты также могут создавать свои собственные хосты с нуля, используя Amazon Maya SDK, но Amazon предоставляет базовый каркас, из которого вы можете настроить внешний вид хоста, диалект и склонения, язык и многое другое. В долгосрочной перспективе Amazon думает о том, как упростить создание хостов. Ардженти говорил о идее генератора хоста для аватаров от первого лица или об использовании распознавания лиц для сопоставления визуализированных персонажей с реальными людьми.

  «В сочетании с Rekognition, если мы процедурно сгенерируем как можно больше этих персонажей, мы можем попытаться сопоставить вас с ближайшим аватаром. Мы возьмем вашу фотографию и запустим обратное распознавание лиц и сопоставим ее с рандомизированным персонажем, чтобы дать вам хост, который выглядит как версия вас."

  Ардженти объяснил, как интеграция других сервисов AWS, таких как сервис обработки естественного языка Amazon Comprehend, может сделать хосты еще более реалистичными. Понимать анализирует текст, чтобы извлечь метаданные о таких вещах, как анализ настроения и настроения. Таким образом, у хозяина может быть другое выражение лица, манера поведения или речь в зависимости от настроения человека, с которым он взаимодействует.

  «Если они злы, может, хозяин их успокаивает», - сказал Ардженти. «Существует эволюция не только в том, как мы передаем информацию, но и в том, как мы ее представляем, посредством глубокого анализа настроений».



Вытягивание голосовых услуг за Алекса

Хозяева не очень хороши, если они не могут говорить. Вы не можете сказать «Эй, Алекса» в шумерском приложении так же, как вы можете активировать Cortana в Windows Mixed Reality. Вместо этого Amazon использует API автоматического распознавания речи и понимания естественного языка, стоящие за Alexa, чтобы хозяева могли общаться.

Шумерский язык интегрирован с Amazon Lex и Amazon Polly. Polly - это сервис преобразования текста в речь, который превращает текст в сценарии, которые может произносить хост. Lex - это механизм NLP для построения диалоговых интерфейсов, который позволяет хостам понимать и реагировать на то, что говорят пользователи в приложениях AR или VR. Шумерский в настоящее время поддерживает более двух десятков языков с помощью Polly, и есть функция синхронизации губ, которая будет сопоставлять движения рта хозяина с ритмом языка или речи.

«Голос - это среда, которая действительно имеет смысл, пока вы погружены в AR или VR», - сказал Ардженти. «Я хочу поговорить с персонажем, если увижу, что он стоит там. Поэтому мы взяли два из этих инструментов из группы ИИ и постарались по-настоящему их персонифицировать. Мы хотим, чтобы сцена могла слушать и реагировать на нас. вы можете взять весь поток Lex, как если бы вы использовали чат-бота, и просто перетащить его на персонажа. Во многих отношениях это на самом деле проще, чем развитие навыка Alexa ».



Логика сценариев в захватывающих мирах

Визуальный автомат Шумеряна - это то место, где вы можете создавать сложные последовательности и виртуальные симуляции. Используя визуальный редактор временной шкалы или полный интерфейс JavaScript, создатели приложений и разработчики могут создавать сценарии логики, управляющие тем, как хосты или другие объекты в ваших сценах реагируют на различные действия. Например, в шумерском языке есть летающий беспилотный объект, который вы можете написать для полета.

Все становится сложнее, когда вы вводите объекты реального мира в уравнение. Поскольку Ардженти также курирует подразделения по безсерверным вычислениям и IoT в AWS, он рассказал о том, как подключение Sumerian к сервисам AWS, таким как Lambda и Greengrass, может открыть больше возможностей для сложных симуляций. Greengrass - это способ для моделей машинного обучения работать локально на самих устройствах IoT. Подумайте о тренировке модели ML на данных, которые она получает от машины на заводском цеху, а затем перенесите этот алгоритм в шумерский для моделирования той же машины с помощью ИИ.

«В AR и VR действительно может быть смоделированный мир, в котором каждый персонаж или объект являются интеллектуальными в процессе обучения машинному обучению в реальном мире», - сказал Ардженти. «В конечном счете, вы хотите попытаться воссоздать реальность максимально реалистичным способом. Сегодня мы можем приблизиться, но это еще не совсем с поведенческой точки зрения для моделирования того, как все работает на самом деле».



Weatherbug - симулированный метеоролог

Когда Amazon провела меня через несколько демо-версий шумерских клиентов, я был изначально удивлен, когда первым было приложение погоды.

Но, как объяснил генеральный директор WeatherBug Оливье Винсент, виртуальная реальность гораздо важнее для данных о погоде, чем вы думаете. Поскольку люди начали проверять свою погоду в приложениях, а не смотреть прогнозы по телевизору, Винсент сказал, что прогнозы погоды потеряли одно из их лучших свойств: ваш местный синоптик перед зеленым экраном.

«Погода - это рассказ о том, что происходит в данное время в определенном месте. Вы можете сделать это в своем 2D-приложении, чтобы быстро взглянуть на это, но мы знали, насколько популярны метеорологи и женщины на протяжении многих лет». сказал Винсент. «Таким образом, идея состоит в том, чтобы вновь представить этого погодного человека в рамках более захватывающего опыта в приложении».

WeatherBug построил шумерскую сцену с виртуальной новостной студией с якорным столом и зелеными экранами и включил хост по умолчанию Cristine в Amazon в качестве метеоролога. Приложение извлекает текущие данные о погоде для вашего местоположения, которые затем будет считывать хост в рамках персонализированного прогноза погоды. Из основного приложения WeatherBug Винсент запустил программу просмотра VR, которая масштабировалась на 3D-модели Манхэттена, когда Кристина давала прогноз, в сочетании с высокими и низкими температурами и падающими снежинками.



Аддисон, Виртуальный попечитель

Компания Electronic Caregiver из Нью-Мексико, специализирующаяся на управлении здравоохранением, имела совершенно другой шумерский опыт.

Компания предлагает технологии для пожилых людей, такие как носимые с кнопкой медицинской помощи, но также разработала решение под названием Addision Care, которое сокращает расходы на домашний уход и использует диалоговый ИИ для оценки риска падений у пожилых пациентов. Компания выпускает киоск для аптек, больниц и клиницистов, который анализирует походку пациента с помощью машинного обучения. Программное обеспечение также использует Addison, собственный шумерский хост, для ознакомления пользователей с устной анкетой об их истории падения.

«Добиться, чтобы пожилые люди освоили технологии, не так просто», - сказал технический директор Electronic Caregiver Брайан Часко. «По мере того, как технология станет лучше, на этом рынке появятся голосовые технологии. Вы никогда не сможете заставить их сесть перед клавиатурой и мышью, но с Addison они могут просто поговорить».

Electronic Caregiver уже много лет работает над Addison, разрабатывая трехмерного персонажа с помощью Amazon Lex и Polly. Компания является одним из клиентов AWS, который помог Amazon концептуализировать болевые точки, которые он может решить с помощью Sumerian, и способы автоматизации конвейера создания приложений AR / VR.

Джуда Твайто, виртуальный разработчик в Electronic Caregiver, сказал, что Sumerian взял процессы, над которыми он работал в течение нескольких месяцев, и превратил их в несколько кликов. Компания также работает над мобильным приложением Addison.

По словам Часко, Electronic Caregiver, в конечном счете, рассматривает Addison как виртуального попечителя на дому. Для пожилых пользователей, живущих самостоятельно, ИИ может делать напоминания о приеме лекарств или автоматически звонить 911 в случае падения или другой неотложной медицинской помощи.

«Одна из самых больших проблем, которую мы можем решить, - это изоляция, которую испытывают пожилые люди, когда живут одни», - сказал Часко. «Мы действительно хотим иметь постоянную круглосуточную домашнюю обстановку, где, когда вы не разговариваете с Аддисоном, вы находитесь в ванной и падаете, просто будучи в состоянии выкрикнуть:« Мне нужна помощь », это может спасти много жизней. «.



Манимейкеры: B2B и IoT

Amazon много говорила о том, как шумерские приложения могут жить в интерактивных цифровых вывесках. Представьте, что кто-то идет по холлу гостиницы, торговому центру или стадиону и видит, как рядом с ними гуляет хозяин на экране. Это может показаться немного жутким, но хосты могут также обрабатывать контекстную информацию, такую ​​как местоположение, чтобы превратить рекламу в персонализированный разговор. Argenti рассматривает хосты как виртуальные расширения бренда компании, которые могут меняться в зависимости от потребностей бизнеса.

«Если вы разместите эти приложения где-нибудь с камерой, вы можете представить себе трехмерного персонажа, который лично взаимодействует с вами: зная, кто вы, возможно, в последний раз, когда вы были на месте, или даже последнее, что вы заказали», - сказал Ардженти.

«Круизный лайнер - хороший пример. Хозяин может сказать:« Привет, исходя из того, где вы сейчас находитесь на корабле, ваше бронирование через 20 минут, вы не собираетесь его делать. Вы хотите, чтобы я отодвинул его назад? » 15 минут? Существует также визуальный аспект того, что вы воссоздаете. Хозяин, говорящий с вами о путешествиях, будет выглядеть не так, как говорящий с вами о ваших финансовых стратегиях. При добавлении информации о местоположении персонажи могут меняться в зависимости от того, где они находят себя; то, как они одеваются, и как они двигаются, их изгибы ".

Amazon изучает ряд приложений B2B и IoT для шумерских клиентов. Что касается промышленного сектора, то, по словам Ардженти, Nokia создала систему с датчиками и визуализацией для мониторинга окружающей среды внутри транспортных контейнеров, чтобы измерить такие вещи, как внутренняя температура и поглощение ударов, фактически не открывая их.

«Вы можете представить себе мир AR, где мы подключаем миллионы устройств к AWS и получаем много сенсорных данных, поступающих из реального мира», - сказал он. «Тогда мы можем использовать AR с триангуляцией для идентификации объекта и отображения соответствующей информации поверх него. Там есть огромное применение для всего, что варьируется от обслуживания и ремонта до мониторинга, безопасности и так далее».

Существуют также широкие возможности электронной коммерции при работе с виртуальными активами. Любая 3D-модель на шумерском языке, которая поступает из собственного каталога покупок Amazon, потенциально может заработать вознаграждение за привлечение разработчиков, если вы добавите ее в AR / VR-сцену. Это способ, позволяющий как предприятиям, так и мелким предприятиям и независимым разработчикам в AWS монетизировать свои шумерские приложения.

Argenti предполагает много возможностей для кроссовера между шумерским и розничным подразделением Amazon.

«Мы можем объединить некоторые работы, которые наша розничная команда выполняет для дома, дома, электроники и других ценных предметов для создания 3D-моделей», - сказал он. «Тогда вы можете использовать их для фотореалистичного прохождения пространства. Как мне организовать современный чердак? Какую мебель мы организуем?»



Все возвращается на AWS

Построение мостов ко всем устройствам и платформам AR / VR - это разумный способ снизить барьер для доступа к разработке AR / VR не только для компаний B2B, но и для разработчиков в целом. В то же время наиболее убедительным стимулом для бизнеса в Шумерском регионе является инструмент, способствующий более широкому использованию AWS. Это относится как к существующим клиентам, пробующим новую услугу, так и к новым шумерским пользователям, которые затем начинают использовать сервисы хранения, вычисления, обработки, AI и другие сервисы Amazon, потому что все они интегрированы в опыт. Модель ценообразования также привлекательна, потому что Amazon не взимает предоплату. AWS взимает плату только за то, что вы используете.

Все это является частью того, что Amazon рассматривает как более крупный цикл, в котором все проходит через AWS. Данные поступают с устройства IoT, обрабатываются лямбда-функцией AWS, развертываются в AWS Greengrass, чтобы попасть в AWS IoT, где он обучает модуль машинного обучения, и в конечном итоге превращаются в трехмерную модель в визуализацию AR на шумерском языке.



Взгляд Амазонки на будущее AR / VR

Amazon надеется, что Sumerian сможет сыграть свою роль в стимулировании индустрии к выпуску 3D-продуктов для массового рынка и снижению затрат. Со стороны AR, Argenti сказал, что основные инструменты активированы благодаря ARKit и ARCore. Он сказал, что переломный момент наступит, когда будет достаточно приложений и видеоконтента от разработчиков. Что касается виртуальной реальности, то большие надежды, которые Amazon ожидает увидеть, заключаются в том, что аппаратное обеспечение дешевеет, становится менее неудобным в использовании и становится беспроводным.

«Когда это произойдет, и вы сможете надевать очки виртуальной реальности, как очки, виртуальная реальность будет действительно успешной», - сказал Ардженти. «Я думаю, что это должно быть так же естественно, как просмотр видео на планшете или включение телевизора, прежде чем он будет готов для массового потребления на том же уровне, что и другие экраны, которые мы имеем сегодня. Вы создаете целую экосистему вокруг нее создателей контента, рекламодателей, конечных пользователей и компаний, обслуживающих этих пользователей ».

Ардженти также подчеркнул важность погружения в опыт виртуальной и смешанной реальности. Еще один пример целевого использования Amazon для шумерских приложений - это образование и обучение. Учитесь ли вы пользоваться медицинским устройством, обслуживать автомобиль или изучать новый язык, он сказал, что он окунет вас в среду, которая настолько интуитивна, насколько это возможно в реальном мире.

«Вы можете сесть во французское бистро и выучить язык, не находясь там на самом деле», - сказал он. «Аватары хозяев говорят по-французски с вами. Меню на французском языке. И затем в этой реальности вы можете автоматически коснуться меню и увидеть его перевод, проведя пальцем по верхней части элемента, чтобы увидеть, как слова переходят на другой язык. Большая часть образования носит контекстуальный характер, и поэтому, как инструмент обучения, опыт, позволяющий задействовать все ваши чувства, очень силен ».