Новые роботы от NVIDIA способны обучаться, наблюдая за человеком

Алгоритмы можно тренировать при помощи видеоигр, заставляя механически запоминать информацию, или же обучать на своих ошибках. Однако гораздо эффективнее, если роботы будут научатся выполнять те или иные задания, просто наблюдая за действиями человека. Такую цель поставили специалисты исследовательской лаборатории Nvidia, которую возглавляют Стэн Бёрчфилд и Джонатан Тремблей.

Элементарной для человека и чрезвычайно трудной для роботов задачей было просто составить цветные кубики — но это важный шаг, который позволит быстрее обучать машины более сложным навыкам. Исследователи тренировали несколько нейросетей распознавать объекты, устанавливать взаимосвязи между ними и составлять алгоритм выполняемых человеком манипуляций, чтобы потом их воспроизвести. В лабораторных условиях специалистам удалось научить роботов выполнять задание с кубиками после одного просмотра.

Помимо этого, система способна генерировать описание последовательности действий человека на естественном языке — так учёным проще выяснить, в чём причина возможных ошибок. В будущем исследователи планируют расширить круг доступных роботу задач, а также пополнить словарный запас для составления их описания.

По словам директора по исследованию робототехники Nvidia Дитера Фокса, компания намерена создать новое поколение роботов, которые смогут работать рука об руку с людьми, не мешая им, а также обучаясь по их примеру. Для этого роботы должны научиться распознавать людей, отслеживать и повторять их действия. Такие роботы будут полезны как на производстве, так и в домах обычных пользователей.