买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:新华智云科技有限公司;新华融合媒体科技发展(北京)有限公司
摘要:本申请涉及一种横屏视频素材转化为竖屏视频素材的方法,通过识别横屏视频素材中的至少一个转场时间节点,可以实现自动定位横屏视频素材中的各个转场位置,通过基于运动目标显著性的主体识别算法识别短横屏视频素材中的画面主体,可以实现结合运动信息自动筛选出显著性的画面主体,通过对画面主体逐帧进行长时跟踪,可以保证画面主体在运动出画面后,且在二次进入时,仍然能再次识别并跟踪上该画面主体,最终依据跟踪结果生成短竖屏视频素材,将所有短竖屏视频素材拼接为一个完整的竖屏视频素材,使得最终完整的竖屏视频素材可以保留横屏视频素材中的全部主体信息,不会丢失任何主体信息。
主权项:1.一种横屏视频素材转化为竖屏视频素材的方法,其特征在于,所述方法包括:获取横屏视频素材,识别横屏视频素材中的至少一个转场时间节点;依据至少一个转场时间节点将横屏视频素材分割为多个短横屏视频素材;在每一个短横屏视频素材中,基于运动目标显著性的主体识别算法识别短横屏视频素材中的画面主体;对每一个短横屏视频素材中的画面主体进行逐帧跟踪,依据每一个短横屏视频素材中的画面主体的逐帧跟踪结果生成短竖屏视频素材,得到多个短竖屏视频素材;将所有短竖屏视频素材拼接为一个完整的竖屏视频素材;所述在每一个短横屏视频素材中,基于运动目标显著性的主体识别算法识别短横屏视频素材中的画面主体,包括:选取一个短横屏视频素材;选取短横屏视频素材中的第一帧图像和第二帧图像;对第一帧图像和第二帧图像基于flownet进行光流预测,得到第一帧图像和第二帧图像的光流图像;对第一帧图像和第二帧图像的光流图像中的每一个像素计算x方向绝对值和y方向绝对值之和,得到光流绝对值和;对光流绝对值和进行二值化,并依据光流绝对值和的二值化结果在第一帧图像和第二帧图像的光流图像中划分出多个光流连通域,得到光流连通域的集合{F1,F2,…,Fi},其中,i为光流连通域的序号;对第一帧图像进行静态显著性分割;依据第一帧图像的静态显著性分割结果在第一帧图像中划分出多个静态显著性连通域,得到静态显著性连通域的集合{S1,S2,…,Sm},其中,m为静态显著性连通域的序号;计算光流连通域的集合{F1,F2,…,Fi}中的每一个光流连通域和静态显著性连通域的集合{S1,S2,…,Sm}中的每一个静态显著性连通域之间的交并比,得到多个交并比;选取一个交并比,判断该交并比是否大于预设交并比阈值;若该交并比大于预设交并比阈值,则获取与该交并比对应的光流连通域和静态显著性连通域的并集所展现的图形的外接矩形框,将该外接矩形框作为候选画面主体;返回所述选取一个交并比,判断该交并比是否大于预设交并比阈值,直至每一个交并比均被选取一次,得到至少一个候选画面主体;计算所有候选画面主体的光流绝对值和,将所有候选画面主体依照光流绝对值和从大到小进行排序,将光流绝对值和最大的候选画面主体作为短横屏视频素材中的画面主体;返回所述选取一个短横屏视频素材,直至得到所有短横屏视频素材中的画面主体为止;所述对每一个短横屏视频素材中的画面主体进行逐帧跟踪,包括:选取一个短横屏视频素材;获取短横屏视频素材中的第n帧,并获取第n帧中画面主体的位置;n初始设置为1;获取短横屏视频素材中的第n+1帧;以第n帧中画面主体的中心在第n+1帧中所在位置作为圆心,以预设搜索半径为半径在第n+1帧中绘制一个圆形,将该圆形的外接矩形所覆盖的区域作为局部搜索区域;预设搜索半径初始定义为局部搜索半径;在局部搜索区域中截取多个与第n帧中画面主体形状相同且覆盖面积相同的局部子搜索区域;搜寻第n帧中画面主体在第n+1帧中的所在位置;在第n+1帧中,计算第n帧中画面主体和每一个局部子搜索区域的相似度,得到多个相似度;获取多个相似度中的最大相似度,判断最大相似度是否大于相似度阈值;若最大相似度大于相似度阈值,则将与最大相似度对应的局部子搜索区域的位置作为第n+1帧中画面主体的位置,完成第n+1帧中画面主体的定位;将n加1,将预设搜索半径定义为局部搜索半径,返回所述获取短横屏视频素材中的第n+1帧,直至完成短横屏视频素材中所有视频帧的画面主体的定位;返回所述选取一个短横屏视频素材,直至所有短横屏视频素材均完成所有视频帧的画面主体的位置的定位。
全文数据:
权利要求:
百度查询: 新华智云科技有限公司 新华融合媒体科技发展(北京)有限公司 横屏视频素材转化为竖屏视频素材的方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。