Технологии Microsoft позволяют переводить голограммы HoloLens на другие языки

Демонстрации HoloLens компании Microsoft на сцене не всегда были впечатляющими, но новая демонстрация в рамках мероприятия Inspire от Microsoft — это не что иное, как потрясающее зрелище. Используя сочетание технологий захвата голоса и тела, Azure AI и HoloLens, Microsoft создала почти фотореалистичную голограмму исполнительного директора Джулии Уайт, а затем попросила голограмму передать часть ключевых слов Уайт на японском — языке, на котором она не разговаривает.

{"preview_thumbnail":"/sites/default/files/styles/video_embed_wysiwyg_preview/public/video_thumbnails/waSJCpk-waQ.jpg?itok=74iG_7sY","video_url":"https://www.youtube.com/watch?v=waSJCpk-waQ","settings":{"responsive":1,"width":"854","height":"480","autoplay":0},"settings_summary":["Embedded Video (Адаптивный)."]}

Демонстрация прошла одновременно с тем, как Уайт была в гарнитуре HoloLens, ходила и наблюдала в 3D пространстве вокруг своего клона. Она начала с того, что создала «Mini Me», который она держала в руке. Спустя некоторое время после того как появились блестящие зеленые спецэффекты, «Mini Me» превратился в полноразмерный клон, который начал говорить на иностранном языке, используя образцы голоса Уайт для произношения предложений, переведенных в машинный перевод на японский язык.

Для того чтобы понять огромный потенциал новой технологии, требуется всего лишь некоторое время, при условии, что новая технология работает на практике так же гладко, как и в демо-версии. Оснащенный соответствующей 3D камерой для глубинного сканирования и инструментами перевода с помощью AI, любой выступающий может быстро создать реалистичные выступления с учетом специфики региона — основной доклад может быть предварительно записан и показан одновременно на 30 языках. Конечно, та же самая технология может быть использована в менее позитивных целях, фальсифицируя слова или действия, которые не были бы взяты из отсканированной модели тела.

На данный момент для реализации данной технологии необходим доступ к некоторым профессиональным аппаратным средствам — от высококачественных специализированных камер до дорогих гарнитур HoloLens. Но похожие технологии сканирования тела, как ожидается, появятся в смартфонах следующего поколения примерно в течение следующего года, что может создать условия для просмотра фотореалистичных аватаров на их экранах или на потребительских AR гарнитурах. Воплотит ли компания Microsoft эту идею в свою собственную инициативу по гарнитурам смешанной реальности, еще предстоит выяснить.

Vladimir Voronov

Комментарии

Еще нет комментариев.


Для участия в обсуждении нужно зарегистрироваться или войти со своей учетной записью.


Войти с помощью: