DreamX-Phi 1.0 побеждает на WorldArena 2.0 Track 1 с action-conditioned видео world model для робототехнической манипуляции
Alibaba
Action-conditioned видео world model для робототехнической манипуляции, которая принимает наблюдаемый кадр, языковую инструкцию и последовательность действий end-effector / gripper для предсказания будущих наблюдений, оптимизируясь на достоверность, а не только на реалистичность. Заняла 1-е место на Track 1 и 2-е на Track 2 WorldArena 2.0 Challenge.
Почему это важно
87 upvotes на HF Daily Papers; победившая заявка на крупном публичном world-model бенчмарке от ведущей индустриальной лаборатории, с кодом, опубликованным на github.com/AMAP-ML/DreamX-Phi, что указывает на практическое обучение робототехнических политик из видео-роллаутов.
Важность: 3/5
Alibaba DreamX-Phi 1.0 побеждает на WorldArena 2.0 Track 1; 87 upvotes HF Daily.