首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于MR设备的手眼协调计算机操控系统及方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:武汉科技大学

摘要:本申请涉及混合现实技术领域,具体公开了一种基于MR设备的手眼协调计算机操控系统及方法,操控系统包括凝视估计系统和手姿势识别系统:凝视估计系统使用MR设备对内人眼相机采集的人眼图像信息,基于瞳孔检测方案检测瞳孔,结合MR设备对外场景相机采集的场景图像信息,使用眼动校准方案进行校准后得到场景相机下的可能凝视点,映射到计算机屏幕上得到系统操控位置;手姿势识别系统使用MR设备对外场景相机采集手部图像信息,基于手姿势及手部运动检测方案获取计算机系统操控指令,结合系统操控位置对计算机实现鼠标及键盘的操控动作。本申请提出的操控方案替代传统键盘鼠标在MR设备上实现了一种基于人体感官的更自然、更智能的多模态系统操控方式。

主权项:1.一种基于MR设备的手眼协调计算机操控方法,其特征在于:包括以下步骤:步骤S1:使用MR设备进行人眼可能凝视点估计,结合MR设备场景相机得到人眼凝视位置;步骤S2:使用Apriltag进行计算机显示屏幕定位及锁定,结合人眼凝视位置得到人意愿计算机操控位置;步骤S3:使用MR设备场景相机进行手部姿势检测以及手部运动检测,结合手部姿势和手部运动检测信息得到人意愿计算机系统操控指令;步骤S4:结合人意愿计算机操控位置以及人意愿计算机操控指令实现在计算机系统下的鼠标及键盘操控。

全文数据:

权利要求:

百度查询: 武汉科技大学 一种基于MR设备的手眼协调计算机操控系统及方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。