买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本申请涉及一种具身机器人视觉交互方法、系统、终端及介质,包括获取机器人的视觉图像数据,视觉图像数据包括RGB图像、深度图像和红外图像;将视觉图像数据输入至预先训练好的图像处理模型中进行处理,得到得到视觉图像数据的特征点数据;使用多模态特征融合算法对视觉图像数据的特征点数据进行深度融合,生成机器人周围环境的空间感知数据;基于空间感知数据,进行三维重建和场景分析,得到识别分析结果;根据识别分析结果,生成机器人的交互方案,交互方案包括路径规划、与物体的交互动作和语音语调;根据机器人的交互方案,调整机器人的行为策略。本申请具有提高具身机器人视觉交互的准确性的效果。
主权项:1.一种具身机器人视觉交互方法,其特征在于,所述一种具身机器人视觉交互方法包括:获取机器人的视觉图像数据,所述视觉图像数据包括RGB图像、深度图像和红外图像;将所述视觉图像数据输入至预先训练好的图像处理模型中进行处理,得到所述得到所述视觉图像数据的特征点数据;使用多模态特征融合算法对所述视觉图像数据的特征点数据进行深度融合,生成所述机器人周围环境的空间感知数据;基于所述空间感知数据,进行三维重建和场景分析,识别所述机器人所处环境中的关键交互对象和障碍物,得到识别分析结果;根据所述识别分析结果,生成所述机器人的交互方案,所述交互方案包括路径规划、与物体的交互动作和语音语调;根据所述机器人的交互方案,调整所述机器人的行为策略。
全文数据:
权利要求:
百度查询: 上海归墟机器人科技有限公司 一种具身机器人视觉交互方法、系统、终端及介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。