买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:微软技术许可有限责任公司
摘要:一种计算系统,包括处理器和存储由处理器可执行的指令的存储器,以获得视频中的图像帧的序列。序列的目标图像帧被输入到轨迹感知变换器的视觉标记嵌入网络中,以输出多个查询标记。多个不同的图像帧被输入到运动估计网络、视觉标记嵌入网络,和值嵌入网络中,以分别输出针对每个图像帧的位置图、多个关键标记,和多个值嵌入。从多个不同的图像帧中选择具有来自多个关键标记之中的最接近的相似性值的图像帧,以及在目标时间步处根据索引查询标记、所选择的帧的值嵌入,和目标图像帧的函数来生成超分辨率图像帧。
主权项:1.一种计算系统,包括:处理器;以及存储器,存储由所述处理器可执行的指令,以:获得视频中的图像帧的序列,其中所述序列的每个图像帧与多个时间步中的时间步相对应;将针对所述序列的目标时间步的目标图像帧输入到轨迹感知变换器的视觉标记嵌入网络中,从而使所述视觉标记嵌入网络输出多个查询标记;将多个不同的图像帧输入到所述轨迹感知变换器的运动估计网络中,从而使所述运动估计网络针对每个图像帧输出位置图,所述位置图指示所述图像帧内的与所述目标图像帧内的索引位置相对应的位置,所述索引位置已经沿所述图像帧与所述目标图像帧之间的轨迹移动;将所述多个不同的图像帧输入到所述视觉标记嵌入网络中,从而使所述视觉标记嵌入网络输出多个关键标记;将所述多个不同的图像帧输入到所述轨迹感知变换器的值嵌入网络中,从而使所述值嵌入网络输出多个值嵌入;针对沿所述轨迹的每个关键标记,计算与所述索引位置处的查询标记的相似性值;从所述多个不同的图像帧选择具有来自所述多个关键标记之中的最接近的相似性值的图像帧;以及在所述目标时间步处根据所述查询标记、在与所述索引位置相对应的所述位置处的所选择的所述帧的值嵌入、所述最接近的相似性值,和所述目标图像帧的函数,生成超分辨率图像帧。
全文数据:
权利要求:
百度查询: 微软技术许可有限责任公司 针对视频超分辨率的轨迹感知变换器
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。