买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本申请公开了一种自动拍摄将书籍电子化的方法。获取目标纸质书籍连续地、不间断地翻页的视频,提取出连续的目标书籍翻页图片。使用训练好的光流估计模型根据任意两张连续的目标书籍翻页图片推理出翻书动作,使用训练好的角点检测模型根据任意一张目标书籍翻页图片推理出目标书籍每一页的四个角点,根据光流估计模型与角点检测模型的推理结果共同判断目标书籍是否处于稳定状态,仅在目标书籍处于稳定状态时自动拍摄仅一张目标书籍的用于电子化的照片。本申请无需人工判断拍摄时机,而是利用基于深度学习的光流估计算法自动识别翻书动作,自动确定适合拍摄的稳定状态,提升将书籍电子化的操作效率,缩短处理时间。
主权项:1.一种自动拍摄将书籍电子化的方法,其特征是,包括如下步骤:步骤S1:获取纸质书籍翻页的视频,提取视频帧作为书籍翻页图片,在每张书籍翻页图片上标注角点;连续的书籍翻页图片以及角点标注作为训练数据集;步骤S2:使用训练数据集中任意两张连续的书籍翻页图片训练一种光流估计模型,使所述光流估计模型根据任意两张连续的书籍翻页图片之间的光流的方向和幅度推理出翻书动作;步骤S3:使用训练数据集中任意一张书籍翻页图片和角点标注训练一种角点检测模型,使所述角点检测模型从每张书籍翻页图片中识别出书籍的每一页的四个角点;所述步骤S2和步骤S3或任意在前,或同时进行,或交叉进行;步骤S4:获取目标纸质书籍连续地、不间断地翻页的视频,从视频帧中提取出连续的目标书籍翻页图片;步骤S5:使用训练好的光流估计模型根据任意两张连续的目标书籍翻页图片推理出翻书动作,使用训练好的角点检测模型根据任意一张目标书籍翻页图片推理出目标书籍每一页的四个角点,根据光流估计模型与角点检测模型的推理结果共同判断目标书籍是否处于稳定状态,仅在目标书籍处于稳定状态时自动拍摄仅一张目标书籍的用于电子化的照片;步骤S6:对目标书籍用于电子化的全部照片进行后处理,包括透视变换、形变矫正、增强锐化、清晰度提升的一种或多种处理;步骤S7:处理后的目标书籍的全部页码的电子化图片送入训练好的光流估计模型,训练好的光流估计模型对任意两张目标书籍的连续的电子化图片进行光流估计,将前一张图片的光流场映射到后一张图片使得后一张图片的书籍内容位置与前一张图片的书籍内容位置对齐,也就是使得前后两张图片的书籍内容的四周边缘留白保持一致,最后将目标书籍的全部页码的电子化图片输出为电子书籍。
全文数据:
权利要求:
百度查询: 上海合合信息科技股份有限公司 上海临冠数据科技有限公司 上海生腾数据科技有限公司 上海盈五蓄数据科技有限公司 一种自动拍摄将书籍电子化的方法及装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。