买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：腾讯科技(深圳)有限公司

摘要：本申请实施例公开了一种解说视频检索方法、装置、电子设备及存储介质，该方法包括：从短视频平台的同一个视频类目中获取已被发布的候选解说视频；对候选解说视频进行视频镜头切分，得到若干个候选解说片段，抽取候选解说片段中各帧的片段图像；提取各个片段图像的候选图像特征，基于候选图像特征构建候选特征库；接收基于短视频平台的客户端上传的目标图像，提取目标图像的目标图像特征，基于目标图像特征在候选特征库中进行相似度匹配，根据匹配结果从候选解说片段中确定目标解说片段，根据目标解说片段得到目标图像的检索结果，能够提升检索数据库的构建效率，可应用于云技术、视频检索、人工智能、智慧交通、辅助驾驶等多种场景。

主权项：1.一种解说视频检索方法，其特征在于，包括：从短视频平台的旅游类目中获取已被发布的候选解说视频；其中，所述候选解说视频包括用于对景点进行解说的视频；对所述候选解说视频进行视频镜头切分，得到若干个候选解说片段，从所述候选解说片段的候选视频特征中提取所述候选解说片段的片段特征，根据所述片段特征对所述候选解说片段进行分类，得到所述候选解说片段的对象标签，利用所述对象标签标记对应的所述候选解说片段，其中，所述对象标签用于指示所述候选解说片段中包含的景点的子景点，所述对象标签包括对象标记信息和子对象标记信息，或者所述对象标签包括多个子对象标记信息；抽取所述候选解说片段中各帧的片段图像；提取各个所述片段图像的候选图像特征，基于所述候选图像特征构建候选特征库；其中，所述候选图像特征包括多个候选特征元素，所述基于所述候选图像特征构建候选特征库，包括：确定所述候选图像特征中所有所述候选特征元素的特征均值；确定所述候选特征元素与所述特征均值之间的特征差值，对所述特征差值进行转置，得到转置差值，根据所述特征差值和所述转置差值生成所述候选图像特征的协方差矩阵；构建所述协方差矩阵的对角矩阵，基于所述对角矩阵对所述协方差矩阵进行特征值分解，得到参考特征；提取所述参考特征中首列的参考特征元素，对所述转置差值与所述参考特征元素之间的乘积进行归一化，得到所述候选特征元素对应的注意力权重，根据所述注意力权重对所述候选特征元素进行加权，得到所述候选特征元素对应的注意力元素；基于各个所述注意力元素构建所述片段图像的注意力特征，基于所述注意力特征构建候选特征库；接收基于所述短视频平台的客户端上传的目标图像，提取所述目标图像的目标图像特征，基于所述目标图像特征在所述候选特征库中进行相似度匹配，根据匹配结果从所述候选解说片段中确定目标解说片段，获取各个所述候选解说片段的所述对象标签，在除了所述目标解说片段以外的其他所述候选解说片段中，确定与所述目标解说片段标记有相同所述对象标签的参考解说片段，将所述目标解说片段以及所述参考解说片段作为所述目标图像的检索结果，其中，标记相同的所述对象标签表示所述对象标签中的标记信息部分一致，所述目标图像是在触发所述客户端的客户端界面中的控件后，由所述客户端调用摄像头组件采集并上传至服务器的。

全文数据：

权利要求：

百度查询： 腾讯科技(深圳)有限公司 解说视频检索方法、装置、电子设备及存储介质