Новое приложение преобразует любое видео в пособие для устройств дополненной реальности

Начинающая немецкая компания разработала приложение, способное преобразовывать абсолютно любое видео в пособие для устройств дополненной реальности.

Молодая компания IOXP, зарегистрированная в городе Мангейм (Германия), готовится вывести на рынок технологию, которая на основе видео с инструкциями по правильному выполнению той или иной задачи и при участии искусственного интеллекта моментально создает учебное пособие дополненной реальной.

"Цель состоит в том, чтобы любой, кто хочет что-то смастерить или починить, мог загрузить учебник на свое устройство дополненной реальности, показывающее, как это сделать, - рассказывает Дидье Штрикер из Немецкого исследовательского центра искусственного интеллекта и один из соучредителей IOXP. - На YouTube имеется множество "сделай-сам" видеороликов для всевозможных вещей, которые вы, возможно, захотите попробовать, однако они не подскажут вам, если вы сделаете что-то неправильно."

Чтобы создать пособие дополненной реальности с использованием системы IOXP, сначала необходимо снять кого-то, кто правильно выполняет требуемую задачу на обычную камеру. Это может быть что угодно: замена масла в автомобиле, установка бойлера или вышивание крестиком. Затем, управляющий компьютерным зрением алгоритм осуществляет нарезку видео, чтобы разделить его на понятные куски: распознавание человеческих рук и их действий, обнаружение объектов и так далее. Из этого, система создает пошаговое электронное руководство, подробно описывающее выполнение задачи и, наконец, преобразует его в версию для устройств дополненной реальности.

Руководство запускается автоматически, как только видит перед собой задачу. Например, если инженеру необходимо выполнить некоторое базовое обслуживание автомобиля, камера на гарнитуре дополненной реальности автоматически идентифицирует машину, стоящую перед ней. Далее, вы увидите перед собой руки эксперта, показывающие вам, что делать. Если вы возьмете не тот прибор или инструмент, ваши руки станут красными, а система повторно покажет действие, которое вам нужно выполнить, подсвечивая при этом соответствующие детали, приборы и инструменты с точностью до сантиметра.