简介
Generalist AI推出了GEN-1.5模型，旨在让机器人通过单次示范学习新的物理任务。该模型能够结合传感器、视频、语言、位置和运动数据，对3至12秒的示范进行评估，并在无需微调或梯度更新的情况下执行。GEN-1.5使用30秒的上下文窗口，每秒生成100个动作指令。
进展
在10项短时操作任务中，GEN-1.5通过单次示范取得了平均59%的成功率。使用五分钟的数据和10个梯度步骤后，每项任务约包含50次示范，这一比例提升至83%。
详情
使用一分钟的数据和单个梯度步骤时，测得的成功率为66.5%。
该模型能够结合不同示范，构建较长的任务序列，自行完善中间动作，并将模拟中的示范以零样本方式迁移至真实机器人。据称，该模型的预训练已持续超过八个月，其一些上下文学习和即兴发挥能力在此过程中自行涌现。