关于我们

About Us

地址:重庆市南岸区茶园通江大道江桥路1号

电话:023-62632090

传真:023-62633009

邮箱:cq_gyecid@sina.com


企业微信公众号
企业新闻
当前位置:主页 > 新闻资讯 > 企业新闻 >

团队研发“慧心极目·明眼快手” 大模型机械臂系统

2024-05-24文章来源:迎龙创新港·大学科技园
       近日,重庆邮电大学慧心极目科研团队成功研发了一套名为“慧心极目·明眼快手”的大模型机械臂系统,以图像和语音指令为输入,结合视觉语言大模型进行智能分析与决策,使机械臂能够准确理解人类语言并执行复杂任务。从仿真环境到现实世界,该多模态大模型机械臂系统通过具身智能的支持,实现了更高级别的智能操作。
       “慧心极目·明眼快手”大模型机械臂系统具备环境感知、关联推理、自主决策和交互学习等功能。该系统通过实时感知和交互,与环境进行互动,使智能机械臂能够像人类一样在真实物理环境中感知、理解并执行各种任务。具体而言,系统通过摄像头获取视觉信息感知环境,利用语音传感器监听用户语音指令,然后通过语言视觉大模型分析多模态信息,实现多传感器融合感知、复杂指令理解、智能分析与决策,最终生成具体控制指令,通过机械臂轨迹规划和末端抓取控制,执行复杂任务。
       慧心极目团队致力于人机混合智能增强交互研究,通过多模态视觉大模型和机器人智能控制算法的研发,探索人在回路的内在原理,推动人机混合智能交互的发展,实现人机协同与具身智能。“慧心极目·明眼快手”大模型机械臂系统在高新波教授的带领下完成,项目核心成员包括冷佳旭副教授、甘吉副教授,以及研一学生黎泉、李昆鸿等。
团队研发“慧心极目·明眼快手” 大模型机械臂系统
2024-05-24    来源:迎龙创新港·大学科技园
       近日,重庆邮电大学慧心极目科研团队成功研发了一套名为“慧心极目·明眼快手”的大模型机械臂系统,以图像和语音指令为输入,结合视觉语言大模型进行智能分析与决策,使机械臂能够准确理解人类语言并执行复杂任务。从仿真环境到现实世界,该多模态大模型机械臂系统通过具身智能的支持,实现了更高级别的智能操作。
       “慧心极目·明眼快手”大模型机械臂系统具备环境感知、关联推理、自主决策和交互学习等功能。该系统通过实时感知和交互,与环境进行互动,使智能机械臂能够像人类一样在真实物理环境中感知、理解并执行各种任务。具体而言,系统通过摄像头获取视觉信息感知环境,利用语音传感器监听用户语音指令,然后通过语言视觉大模型分析多模态信息,实现多传感器融合感知、复杂指令理解、智能分析与决策,最终生成具体控制指令,通过机械臂轨迹规划和末端抓取控制,执行复杂任务。
       慧心极目团队致力于人机混合智能增强交互研究,通过多模态视觉大模型和机器人智能控制算法的研发,探索人在回路的内在原理,推动人机混合智能交互的发展,实现人机协同与具身智能。“慧心极目·明眼快手”大模型机械臂系统在高新波教授的带领下完成,项目核心成员包括冷佳旭副教授、甘吉副教授,以及研一学生黎泉、李昆鸿等。
版权所有:重庆经开区投资集团 & 重庆广阳湾投资集团 渝ICP备:18004108号