买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：合众新能源汽车股份有限公司

摘要：本发明提供了一种基于ARHUD的成像方法和系统，适于在位于汽车前档风玻璃上的具有增强现实效果的抬头显示屏ARHUD上呈现经过处理的变更图像。成像方法包括如下步骤：通过车内摄像头持续地采集座舱内驾驶员的面部图像，并在面部图像中获取多个面部关键点；对多个面部关键点进行三角剖分处理后，将多个面部关键点中的至少一部分仿射变换至目标关键点，以获得变更图像；以及将变更图像投射在ARHUD上。本发明的基于ARHUD的成像方法和系统可以在汽车的场景中实现对面部图像的修容处理，提升座舱智能化程度，提高用户驾车体验。

主权项：1.一种基于ARHUD的成像方法，适于在位于汽车前档风玻璃上的具有增强现实效果的抬头显示屏ARHUD上呈现经过处理的变更图像，其特征在于，包括如下步骤：通过车内摄像头持续地采集座舱内驾驶员的面部图像，并在所述面部图像中获取多个面部关键点；对所述多个面部关键点进行三角剖分处理后，将多个面部关键点中的至少一部分仿射变换至目标关键点，以获得变更图像；以及将所述变更图像投射在所述ARHUD上；所述方法还包括：通过车外摄像头持续地获取车辆前方的车前图像；当检测到所述车前图像中出现行人时，对具有所述行人画面的车前图像进行关键点检测，以获得所述行人眉心位置的图像坐标；根据所述车外摄像头的内参和外参以及所述行人相较于所述车外摄像头的深度信息获取所述行人眉心位置的世界坐标；获取所述行人的视线方向，并根据所述视线方向、所述车内摄像头的内参和外参以及驾驶员相较于所述车内摄像头的深度信息，获得驾驶员面部图像中的每个像素点对应的世界坐标；以及根据所述行人眉心位置的世界坐标和所述驾驶员面部图像中的每个像素点对应的世界坐标，将所述变更图像通过水平镜像处理呈现在汽车的前挡风玻璃外的对应位置；所述方法还包括：响应于位于中控屏幕上的滑竿按键、语音输入、移动端应用程序指令或位于ARHUD上的滑竿控制中的任一种控制方式，将所述多个面部关键点中的至少一部分仿射变换至所述目标关键点；其中，所述位于ARHUD上的滑竿控制包括在ARHUD上显示滑竿的影像，获取所述滑竿每个像素点的世界坐标，通过所述车内摄像头识别一个或多个手指关节点，获取所述手指关节点的世界坐标并将手指关节点连结成一条直线，其中，若所述直线位于所述滑竿的预设区域内且手指做出指定动作，则触发所述滑竿跟随所述手指移动，以实现将所述多个面部关键点中的至少一部分仿射变换至所述目标关键点。

全文数据：

权利要求：

百度查询： 合众新能源汽车股份有限公司 基于ARHUD的成像方法和系统