龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：苏州元脑智能科技有限公司
摘要：本发明涉及数据写入技术领域，公开了一种数据湖无锁写入方法、装置、设备、介质及产品，包括：接收写入任务；将各写入端的每次写入操作拆分成插入操作和修改操作，并将插入操作放入数据插入队列，将修改操作放入数据修改队列；利用数据插入队列将所有插入操作按照时间戳排序，并保存新增数据的结果；利用数据修改队列将所有修改操作按照时间戳排序，并保存数据修改的过程；将数据插入队列和数据修改队列发送至提交队列，利用提交队列按照时间戳顺序基于每次插入操作，重放修改操作，生成写时复制表或读时合并表的格式数据并提交，以完成写入任务。整个写入过程支持无锁写入数据，能够提升写入场景的性能，降低写入延迟，提高写入任务的处理速度。
主权项：1.一种数据湖无锁写入方法，其特征在于，所述方法包括：接收写入任务；将各写入端的每次写入操作拆分成插入操作和修改操作，并将插入操作放入数据插入队列，将修改操作放入数据修改队列；利用所述数据插入队列将所有插入操作按照时间戳排序，并保存新增数据的结果；利用所述数据修改队列将所有修改操作按照时间戳排序，并保存数据修改的过程；将所述数据插入队列和所述数据修改队列发送至提交队列，在所述提交队列中按照时间戳对所述数据插入队列中的插入操作和所述数据修改队列中的修改操作进行排序，在排序的过程中基于每次插入操作来重放修改操作；从排序好的所述提交队列的队首依次取出每个数据操作进行处理，生成写时复制表或读时合并表的格式数据；处理完毕之后取出下一个数据操作；若取出的下一个数据操作对应的时间戳晚于上一次数据操作对应的时间戳，则判定上一次写入操作已处理完毕，标记为已提交，以完成所述写入任务。
全文数据：
权利要求：
百度查询： 苏州元脑智能科技有限公司 数据湖无锁写入方法、装置、设备、介质及产品
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号