龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：上海大学
摘要：本发明提供一种利用记忆网络和门控循环单元实现视频摘要的方法，包括：预处理数据集，获取视频的视频帧特征；设计以所述视频帧特征为输入，以帧重要性分数为输出的整体网络模型；整体网络模型中进行模型训练；将从完成训练的整体网络模型中得到的帧重要性分数转换为关键镜头；将所述关键镜头组合为动态视频摘要,测试视频摘要结果。本发明，其整体网络模型将输入的视频进行特征处理，利用帧重要性分数获取动态视频摘要，提高了模型的整体有效性。
主权项：1.一种利用记忆网络和门控循环单元实现视频摘要的方法，其特征在于，包括：预处理数据集，获取视频的视频帧特征；设计以所述视频帧特征为输入，以帧重要性分数为输出的整体网络模型；训练所述整体网络模型；转换从完成训练的整体网络模型输出的帧重要性分数为关键镜头；组合所述关键镜头为动态视频摘要；所述以视频帧特征为输入，以帧重要性分数为输出的整体网络模型，包括：输入模块，所述输入模块用于融合输入的所述视频帧特征的前后向信息，使用一个一层的双向GRU处理输入的视频帧特征序列；记忆模块，所述输入模块输出的融合后的结果作为所述记忆模块的输入，获得存储记忆；所述记忆模块使用多hops结构反复检索所述存储记忆中的信息，输出保留有用信息的记忆输出；输出模块，所述记忆模块的记忆输出作为所述输出模块的输入，所述输出模块将所述记忆输出回归为所述帧重要性分数；构建所述输出模块，包括：所述记忆输出与所述双向GRU输出的融合序列做残差连接；将所述残差连接的输出依次经过LN层和Dropout层；将所述Dropout层的输出结果输入到一个两层的全连接网络中，其中，最后一个全连接层的输出层结点个数为1，得到对应于每个视频帧的帧重要性分数。
全文数据：
权利要求：
百度查询： 上海大学 一种利用记忆网络和门控循环单元实现视频摘要的方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号