买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：武汉TCL集团工业研究院有限公司

摘要：本申请公开了一种基于光流的视频插帧的生成方法、存储介质及终端设备，所述方法包括获取第一图像帧和第二图像帧；根据所述第一图像帧和所述第二图像帧，确定前向光流图和后向光流图；基于所述第一图像帧、所述前向光流图、第二图像帧以及后向光流图，确定所述第一图像帧和所述第二图像帧对应的插帧图像。本方法通过前向光流图和后向光流图同一插帧位置的两张预测插帧图像，在基于两张预测插帧图像确定插帧图像，这样一方面可以使得对原视频的插帧，提高原视频的视频帧率，从而提高原视频的播放效果。另一方通过两张预测插帧图像确定插帧图像可以提高插帧图像的图像效果，从而进一步提高原视频的播放效果。

主权项：1.一种基于光流的视频插帧的生成方法，其特征在于，所述方法包括：获取原视频中的第一图像帧和第二图像帧；根据所述第一图像帧和所述第二图像帧，确定前向光流图和后向光流图；基于所述第一图像帧、所述前向光流图、第二图像帧以及后向光流图，确定所述第一图像帧和所述第二图像帧对应的插帧图像；其中，所述基于所述第一图像帧、所述前向光流图、第二图像帧以及后向光流图，确定所述第一图像帧和所述第二图像帧对应的插帧图像具体包括：基于所述第一图像帧、所述前向光流图、所述第二图像帧以及所述后向光流图确定所述第一图像帧对应的第一预测帧和所述第二图像帧对应的第二预测帧，其中，所述第一预测帧和所述第二预测帧的确定过程为：基于预设的预测插帧时刻和目标光流图，确定所述预测插帧时刻对应的预测光流图，其中，当目标光流图像为前向光流图时，预测光流图为预测前向光流图，当目标光流图像为后向光流图时，预测光流图为预测后向光流图；基于所述预测光流图以及目标图像帧，确定目标预测帧；其中，当目标光流图像为前向光流图时，目标图像帧为第一图像帧，目标预测帧为第一预测帧；当目标光流图像为后向光流图时，目标图像帧为第二图像帧，目标预测帧为第二预测帧；基于所述第一预测帧和所述第二预测帧，确定所述第一图像帧和所述第二图像帧对应的插帧图像；获取所述第一图像帧对应的第一特征图，以及第二图像帧对应的第二特征图；确定所述第一图像帧对应的第一掩膜图，其中，所述第一掩膜图用于反映所述第一图像帧携带的目标区域；确定所述第二图像帧对应的第二掩膜图，其中，所述第二掩膜图用于反映所述第二图像帧携带的目标区域；基于所述预测前向光流图、所述预测后向光流图、所述第一图像帧、所述第二图像帧、所述第一预测帧、所述第二预测帧、所述第一掩膜图以及所述第二掩膜图，确定所述插帧图像对应的残差图；基于所述残差图以及所述插帧图像，确定修正插帧图像；将所述修正插帧图像作为所述第一图像帧和所述第二图像帧对应的插帧图像。

全文数据：

权利要求：

百度查询： 武汉TCL集团工业研究院有限公司 基于光流的视频插帧的生成方法、存储介质及终端设备