3d机器视觉+ ai 多模态大模型+灵巧手

$奥比中光-UW(SH688322)$  

NeuralFeels开创新增市场空间。MetaFAIR团队的NeuralFeels技术结合了视觉和触觉功能，通过多模态融合的方式，利用RGBD相机（即3D视觉传感器）让机器手/灵巧手能够对未知物体持续进行3D建模，更精确地估计手势操作中物体的姿态和形状。这项技术通过视觉和触觉的结合，实现更准确的姿态跟踪和形状重建，为机器人在复杂环境中的操作提供了新的可能性。今年，公司融合多模态大模型推出了最新2.0版机械臂方案，能够基于语音指令自动执行一系列复杂任务，识别精度和操作效率均显著提升。截至目前，公司已实现两代多模态大模型在机械臂上的应用部署baseline，初步探索落地3D视觉传感器、大模型与机械臂等硬件终端的适配结合。在人工智能时代，公司致力于打造“机器人与AI视觉产业中台”，并高度重视各类AI技术的研发和创新。未来，公司将持续提升大模型机械臂/灵巧手等的理解能力、在复杂或动态变化环境中的泛化能力以及人机交互的自我学习能力，根据不同应用需求优化解决方案能力，加速其在各类场景中的落地应用。