AI Radar
Kyutai, Inria и École des Ponts выпустили робототехническую модель REKI
Kyutai вместе с Inria и École des Ponts выпустила REKI, модель с 2,4 млрд параметров для управления манипуляциями робота. Она использует изображение, язык и память о недавних действиях; её веса уже доступны.
Что изменилось
REKI относится к классу vision-language-action моделей: такие системы связывают изображение с камеры, словесную постановку задачи и действия робота. В этой модели 2,4 млрд параметров, а при предварительном обучении использовались только общедоступные данные. Это делает происхождение обучающих данных важной частью релиза, хотя подробностей об их составе в доступном описании нет.
Другая особенность REKI – экономная память о недавнем прошлом. Для манипуляций это существенный контекст: по одному текущему кадру бывает трудно понять, как робот только что переместил объект. На трёх тестах вне обучающего распределения REKI, согласно опубликованному описанию, уступила лишь моделям примерно вдвое крупнее. Веса модели опубликованы; подробностей о тестовых задачах и устройстве памяти в доступном описании недостаточно для более широких выводов.
Почему это важно
Исследователи робототехники получили модель с открытыми весами, в которой можно изучать роль кратковременной памяти. Результаты на трёх тестах делают её интересной и для команд, которым важен размер модели.
Мнение редакции
Мнение редакцииДля робота память о недавних действиях может быть полезнее простого увеличения модели: камера не всегда показывает, что уже сделано с предметом. REKI позволяет проверить эту идею на открытых весах, хотя одного сравнения на тестах недостаточно, чтобы судить о работе в реальной мастерской.
Первоисточники и подтверждения
Подборку проверяет редакция DSML. AI помогает дедуплицировать сигналы и готовить текст, но опубликованный выпуск остаётся редакционным продуктом, а не лентой отдельных каналов.