买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜厦门赫玛科技有限公司申请的专利基于多模态交互的自助收银方法、系统及存储介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119863875B 。

龙图腾网通过国家知识产权局官网在2025-06-20发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510348316.8，技术领域涉及：G07G1/00；该发明授权基于多模态交互的自助收银方法、系统及存储介质是由王俊杰设计研发完成，并于2025-03-24向国家知识产权局提交的专利申请。

本基于多模态交互的自助收银方法、系统及存储介质在说明书摘要公布了：本发明公开了一种基于多模态交互的自助收银方法、系统及存储介质，属于数据处理技术领域，该方法包括：拍摄预定区域的初始图像，将初始图像拆分为多张商品图像，识别每张商品图像以获取其中包括的商品信息及第一置信度；基于第一置信度大于第一阈值的商品信息生成第一商品列表，基于所有商品图像和重量信息进行联合推理，获取未识别商品的商品信息及第二置信度；若第二置信度小于第一阈值，基于售卖货架的取放信息对商品信息进行验证；若验证成功，将未识别商品的商品信息加入至第一商品列表中，获得第二商品列表，基于第二商品列表生成金额信息，并展示收款界面。本发明结合多种方法获取待结算的商品信息，从而大大提升了商品识别的准确度。

本发明授权基于多模态交互的自助收银方法、系统及存储介质在权利要求书中公布了：1.一种基于多模态交互的自助收银方法，其特征在于，包括：接收开始指令后，拍摄预定区域的初始图像，将所述初始图像拆分为多张商品图像，基于深度识别模型识别每张所述商品图像以获取其中包括的商品信息及第一置信度；基于所述第一置信度大于第一阈值的所述商品信息生成第一商品列表，并统计所述初始图像中已识别商品和未识别商品的第一数量和第二数量；若所述第一数量和所述第二数量满足预设条件，获取所述预定区域的重量信息，基于所有所述商品图像和所述重量信息进行联合推理，获取未识别商品的所述商品信息及第二置信度；若所述第二置信度小于所述第一阈值，基于未识别商品的所述商品信息定位对应售卖货架，基于所述售卖货架的取放信息对所述商品信息进行验证；若验证成功，将未识别商品的所述商品信息加入至所述第一商品列表中，获得第二商品列表，若验证失败，则生成手动录入提醒；接收完成信息后，基于所述第二商品列表生成金额信息，并展示收款界面，直至收到完成结算信息或取消支付信息；基于所有所述商品图像和所述重量信息进行联合推理包括以下步骤：建立重量数据库，所述重量数据库包括每种商品的标准重量和浮动范围，设置重量传感器的误差分布，基于所述重量数据库获取已识别商品的第一重量，基于所述预定区域内商品的总重量和所述第一重量计算未识别商品的第二重量，基于所述浮动范围和所述误差分布修正所述第二重量获得其重量分布范围；获取候选信息，所述候选信息为单张所述商品图像识别结果中所述第一置信度大于第二阈值的所述商品信息，基于所述重量数据库获取所述候选信息的所述标准重量及所述浮动范围，基于所述标准重量及所述浮动范围生成满足所述重量分布范围的候选组合，基于所述候选组合的所述重量分布范围计算每种所述候选组合的组合评分；基于所述第一置信度和所述组合评分计算每种所述候选组合的候选评分，筛选最大所述候选评分对应的所述候选组合为目标组合，其中包括的所述候选信息作为未识别商品的推理结果，对应的所述候选评分作为所述第二置信度。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人厦门赫玛科技有限公司，其通讯地址为：361000 福建省厦门市同安区集安路687-1号501室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。