首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于多模态感知与情景理解的人机协作方法及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:广东省科学院智能制造研究所

摘要:本发明涉及一种基于多模态感知与情景理解的人机协作方法及系统,该方法包括:获取人机协同作业相关的多模态数据,通过预设的耦合机制对所述多模态数据进行数据融合,得到多模态融合数据;基于多模态融合数据,利用时空图卷积网络对人机协同作业的作业人员进行行为识别,确定作业人员的行为意图;基于所述行为意图,建立人机交互策略。本发明通过多模态数据的高效耦合,实现了对非结构环境的全面感知;结合作业行为模式及其演化规律的认知与推理,确保了对作业人员行为意图的精准理解;基于行为意图理解的人机自然交互机制,显著提升了人机协作的效率和安全性。

主权项:1.一种基于多模态感知与情景理解的人机协作方法,其特征在于,包括:S1,获取人机协同作业相关的多模态数据,通过预设的耦合机制对所述多模态数据进行数据融合,得到多模态融合数据;其中,所述多模态数据包括文本数据、图像数据和三维数据;S2,基于多模态融合数据,利用时空图卷积网络对人机协同作业的作业人员进行行为识别,确定作业人员的行为意图;S3,基于所述行为意图,建立人机交互策略。

全文数据:

权利要求:

百度查询: 广东省科学院智能制造研究所 一种基于多模态感知与情景理解的人机协作方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

相关技术
相关技术
相关技术
相关技术