Тут второй офигенный прорыв после 4V.
Короче, есть модель, которая воплощается в робота и даёт ему возможность решать задачи, которые он раньше никогда не решал. В смысле, что робот начинает разбираться, что можно делать с конечностями и манипуляторами сам, анализирует окружающий мир и строит взамодействия между объектами.
На картинке он кладёт красный перец в лоток в задаче, где ему никогда не показывали перец и лоток. То есть он ищет, что из этого что, потом рассчитывает, как это хватать, а потом, схватив, решает, как это нести в лоток.
Всё сам, как взрослый.
Смысл в том, что раньше надо было давать хоть какие-то ориентиры. Теперь можно словами описать, что нужно делать, и модель сама разберётся, как это сделать в конкретных реальных условиях. Это невероятно круто.
Это одно API к физическому миру, по сути. Больше нет никаких отдельных задач. То, что вы способны объяснить слесарю Кузьмичу, можно объяснить и роботу. Причём Кузьмич трезвый и изобретательный, то есть он может с помощью батона, зубила и какой-то матери починить космический корабль. Робот тоже может выполнить задачу, которой не был заранее обучен.
Читать про всё это можно вот тут. Код открытый.
Короче, есть модель, которая воплощается в робота и даёт ему возможность решать задачи, которые он раньше никогда не решал. В смысле, что робот начинает разбираться, что можно делать с конечностями и манипуляторами сам, анализирует окружающий мир и строит взамодействия между объектами.
На картинке он кладёт красный перец в лоток в задаче, где ему никогда не показывали перец и лоток. То есть он ищет, что из этого что, потом рассчитывает, как это хватать, а потом, схватив, решает, как это нести в лоток.
Всё сам, как взрослый.
Смысл в том, что раньше надо было давать хоть какие-то ориентиры. Теперь можно словами описать, что нужно делать, и модель сама разберётся, как это сделать в конкретных реальных условиях. Это невероятно круто.
Это одно API к физическому миру, по сути. Больше нет никаких отдельных задач. То, что вы способны объяснить слесарю Кузьмичу, можно объяснить и роботу. Причём Кузьмич трезвый и изобретательный, то есть он может с помощью батона, зубила и какой-то матери починить космический корабль. Робот тоже может выполнить задачу, которой не был заранее обучен.
Читать про всё это можно вот тут. Код открытый.