Регулирование / Новости
за рубежом медиа технологии
22.12.2015

Программа находит и скачивает на YouTube ролики по запросам пользователей

Ученые Корнелльского и Стэнфордского университетов разработали платформу, которая самостоятельно составляет пошаговые инструкции на основе видеороликов, опубликованных на YouTube.

Ученые Корнелльского и Стэнфордского университетов разработали платформу RoboWatch, которая самостоятельно составляет пошаговые инструкции на основе видеороликов, опубликованных на YouTube.

Для составления инструкций исследователи взяли сто наиболее популярных запросов в энциклопедии WikiHow, из которых выбрали те, которые относятся к взаимодействию с физическими объектами. В результате авторы отобрали семнадцать запросов, четырнадцать из которых относились к приготовлению пищи. После этого программа самостоятельно по данным запросам нашла на YouTube и скачала ролики и субтитры на английском языке, если они были, пишет издание N+1.

После загрузки роликов система разбивает их на кадры и ищет в них общие предметы в кадре и ключевые слова в субтитрах, по которым определяет необходимые для процесса шаги. После этого алгоритм составляет пошаговую инструкцию на основании полученных шагов, а при помощи субтитров генерирует к каждому этапу текстовое описание.

Получившиеся в результате обработки видеороликов инструкции можно передавать непосредственно для использования роботами, считают исследователи. Например, они составили при помощи RoboWatch инструкции по прочистке засорившегося слива, по завязыванию галстука, по приготовлению омлета и молочного коктейля.

Подробнее о проекте RoboWatch можно прочитать на сайте Корнелльского университета.

Изображение: news.cornell.edu

 

Еще по теме

Государство усиливает контроль над вхождением IT-компаний в льготный перечень

Онлайн-травлю планируют регулировать на законодательном уровне

В России предложили отменить ограничения на заключение соглашений о муниципально-частном партнерстве в цифровых проектах

Какие риски видят интернет-компании в законопроекте о классифайдах

Как бизнес будет внедрять правила обновленного 152-ФЗ

Что предлагается в сфере регулирования обмена данными между бизнесом и государством

Как в России происходит становление регулирования в сфере криптоденег

Десятилетие науки и технологий в России задаст вектор развития

Как государство с помощью IT стандартизирует правовую систему

Как формируется рынок беспилотной аэродоставки в России

Какие меры принимаются для перезапуска российского рынка электроники

Спасет ли дополнительное IT-образование от кадрового голода

В каких сферах применяются обезличенные данные видеоаналитики

Почему невнимание к защите персональных данных должно грозить огромными штрафами

Какие меры принимаются, чтобы электронные деньги легализовались в системе традиционных финансов