奥比中光与李飞飞团队的合作主要体现在以下方面:
1. 技术合作:奥比中光的RGB-D相机Femto Bolt被李飞飞团队采用,用于捕捉实验场景的彩色图像及深度信息。这一合作有助于李飞飞团队的空间智能研究,特别是ReKep(Relational Keypoint Constraints,关系关键点约束)系统的开发与实施。
2. 共同研究:李飞飞教授团队在空间智能领域的研究,特别是在机器人操作和家务自动化等领域的应用,得到了奥比中光技术的支持。奥比中光的深度相机提供了高质量的RGB和深度数据,为李飞飞团队的ReKep系统提供了关键的3D视觉数据支撑。
3. 项目合作:奥比中光还与李飞飞教授团队合作,共同研发了大模型机械臂1.0。这一项目结合了机械臂与大模型,利用语音、语言、视觉-语言大模型,以及奥比中光深度相机的数据输入,打造出一个能够理解、执行语音任务的机械臂。
4. 深度融合大视觉模型:李飞飞团队在该研究中结合了视觉模型与视觉-语言模型,包括GPT-4o(OpenAI为聊天机器人ChatGPT发布的语言模型),充分展示了视觉与机器人学习的深层次融合。
5. 机器人视觉领域合作:奥比中光拥有超过8年的商用落地经验,致力于打造机器人的“眼睛”。今年3月,奥比中光与英伟达携手,将Femto Bolt先进的iToF技术与NVIDIA Orin AGX的人工智能计算能力结合,搭配Universal Robots UR5机械臂,实现了高精度的物品检测、拣选和放置。
这些合作展示了奥比中光与李飞飞团队在空间智能和机器人技术领域的紧密合作关系,双方通过技术共享和项目合作,共同推动了空间智能和机器人技术的发展。
本文作者可以追加内容哦 !