小米ai技术矩阵真的是大而全,这次发布的具身大模型的核心作用不是让机器人“看懂”世界,而是为机器人“创造”用于训练的海量数据。它旨在解决机器人训练中真实数据难以获取、成本高昂的痛点。
这个名为 Xiaomi-Robotics-U0 的模型,是一个拥有380亿参数的多模态模型,能够统一完成以下四类核心任务:
具身场景生成、具身迁移、机器人交互视频生成、通用文生图和图像编辑
这个模型的核心价值在于为机器人打造一个高效、可控的“数据工厂”,
数据增强:无需重新采集,就能对已有数据进行增强,例如更换背景、光照、物体等,让训练数据更加多样化。
生成稀缺数据:能够从零生成危险、极端或现实中难以触达的长尾场景数据,用于训练机器人应对各种复杂情况。
提升泛化能力:通过使用该模型扩增的数据进行训练,机器人在面对未知光照、陌生背景等干扰时,任务完成度平均提升了超过26%。
加速工程落地:通过其提出的 FlashAR+ 推理加速方案,生成效率相比原始模型提升了近83倍,大幅加快了数据生成的工程应用速度。
Xiaomi-Robotics-U0 是一个为具身智能服务的数据生成引擎,它通过创造海量、多样、高质量的合成数据,来加速机器人策略的训练和泛化能力的提升
