Document
拖动滑块完成拼图
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种高并发数据采集场景下的数据熔断控制方法和装置 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:江苏金恒信息科技股份有限公司

摘要:本申请公开了一种高并发数据采集场景下的数据熔断控制方法和装置,属于物联网数据处理技术领域,方法包括:分别构建秒级和分钟级两个粒度的数据处理缓存数据结构,对进入转发或存储模块的数据流量进行存储;基于可用带宽计算每秒数据流量上限值,基于每秒数据流量上限值和不同场景的管控要求分别计算不同设定时间周期的数据处理上限值;基于不同的流量监控定时周期分别从数据处理缓存数据结构处获取对应的缓存数据流量值,将获取的缓存数据流量值分别与数据处理上限值进行比较,判断数据缓存队列是否为空,如果为空,解除超限状态,实时处理全部数据;如果不为空,将全部数据存入数据缓存队列,按照数据处理上限值定时处理数据。

主权项:1.一种高并发数据采集场景下提高数据服务可靠性的方法,其特征在于,包括:将数据采集模块、数据计算模块、历史数据存储模块、实时缓存模块以及数据转发模块部署在集群内部的同一台服务器;基于高并发场景分别构建秒级和分钟级两个粒度的数据处理缓存数据结构,对进入数据转发模块或历史数据存储模块的数据流量进行存储;基于可用带宽计算每秒数据流量上限值,基于每秒数据流量上限值和不同场景的管控要求分别计算不同设定时间周期的数据处理上限值;基于不同的流量监控定时周期分别从数据处理缓存数据结构处获取对应的缓存数据流量值,将获取的缓存数据流量值分别与数据处理上限值进行比较,判断是否触发超限条件;如果触发超限条件,判断数据缓存队列是否为空,如果数据缓存队列为空,解除超限状态,实时处理全部数据;如果数据缓存队列不为空,将全部数据存入数据缓存队列,按照数据处理上限值定时处理数据;基于高并发场景构建秒级粒度的异常缓存数据结构,对不同模块的数据处理异常次数进行存储;获取单位时间内单个模块的数据处理异常次数,与预先设定阈值进行比较,并根据比较结果确定熔断措施类型。

全文数据:

权利要求:

百度查询: 江苏金恒信息科技股份有限公司 一种高并发数据采集场景下的数据熔断控制方法和装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。