恭喜浪潮电子信息产业股份有限公司张润泽获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜浪潮电子信息产业股份有限公司申请的专利情绪识别方法、装置、设备及存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115050077B 。
龙图腾网通过国家知识产权局官网在2025-05-16发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202210760941.X,技术领域涉及:G06V40/16;该发明授权情绪识别方法、装置、设备及存储介质是由张润泽;李仁刚;赵雅倩;郭振华;范宝余;李晓川设计研发完成,并于2022-06-30向国家知识产权局提交的专利申请。
本情绪识别方法、装置、设备及存储介质在说明书摘要公布了:本申请公开了情绪识别方法、装置、设备及存储介质,应用于神经网络技术领域,该情绪识别模型训练方法包括:获取待测视频和待测音频;在待测视频中确定多个待测视频帧,并利用标签集合中的各个情绪标签分别与待测文本模板拼接生成各个情绪标签分别对应的待测文本数据;将待测视频帧、待测文本数据和待测音频输入情绪识别模型,得到待测非文本编码数据和各个待测文本数据分别对应的各个待测文本编码数据;利用待测非文本编码数据分别和各个待测文本编码数据生成待测相似度数据;将最大待测相似度数据对应的情绪标签确定为待测视频对应的情绪识别结果;该方法引入了标签的本身所包含的语义信息,提高准确率。
本发明授权情绪识别方法、装置、设备及存储介质在权利要求书中公布了:1.一种情绪识别方法,其特征在于,包括:获取待测视频和待测音频;在待测视频中确定多个待测视频帧,并利用标签集合中的各个情绪标签分别与待测文本模板拼接生成各个所述情绪标签分别对应的待测文本数据;将所述待测视频帧、所述待测文本数据和所述待测音频输入情绪识别模型,得到待测非文本编码数据和各个待测文本数据分别对应的各个待测文本编码数据;利用所述待测非文本编码数据分别和各个所述待测文本编码数据生成待测相似度数据;将最大待测相似度数据对应的情绪标签确定为所述待测视频对应的情绪识别结果;其中:所述利用标签集合中的各个情绪标签分别与待测文本模板拼接生成各个所述情绪标签分别对应的待测文本数据,包括:从预设模板库中选取所述待测文本模板;对所述待测文本模板分别和各个所述情绪标签进行向量映射处理,得到一个待测模板向量和各个标签向量;将所述模板向量分别和各个所述标签向量进行拼接,得到所述待测文本数据;所述情绪识别模型的训练过程,包括:获取训练视频、训练音频和情绪标签;在所述训练视频中确定多个训练视频帧,并从预设模板库中选取一个目标文本模板,对所述目标文本模板和所述情绪标签进行向量映射处理,得到模板向量和标签向量,对所述模板向量和所述标签向量进行拼接,得到训练文本数据;将所述训练视频帧、所述训练文本数据和所述训练音频输入初始模型,得到训练文本编码数据以及训练非文本编码数据;所述训练文本编码数据基于所述训练文本数据得到,表征情绪标签的情绪语义特征;所述训练非文本编码数据基于训练视频帧和训练音频得到,表征图像和声音表征的情绪特征;利用所述训练文本编码数据和所述训练非文本编码数据生成相似度数据;利用所述相似度数据生成损失值,并基于所述损失值对所述初始模型进行参数调节;若检测到满足训练完成条件,则将参数调节后的所述初始模型确定为情绪识别模型;所述初始模型包括文本编码器、图像编码器和音频编码器,还包括池化网络模块和时间递归网络模块,所述文本编码器的输出为所述池化网络模块的输入,所述图像编码器的输出为所述时间递归网络模块的输入;所述将所述训练视频帧、所述训练文本数据和所述训练音频输入初始模型,得到训练文本编码数据以及训练非文本编码数据,包括:将所述训练文本输入所述文本编码器,得到多个初始文本编码;将所述多个初始文本编码输入所述池化网络模块,得到所述训练文本编码数据;将所述训练视频帧输入所述图像编码器,得到多个初始图像编码,并将所述训练音频输入所述音频编码器,得到初始音频编码;将所述多个初始图像编码输入所述时间递归网络模块,得到中间图像编码;将所述中间图像编码和所述初始音频编码进行拼接,得到所述训练非文本编码数据。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浪潮电子信息产业股份有限公司,其通讯地址为:250101 山东省济南市高新区浪潮路1036号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。