买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:中宇联云计算服务(上海)有限公司
摘要:本发明涉及基于云网融合的高效数据处理系统及其实现方法,此系统包括数据接入单元,用于实时接收来自不同数据源的数据;数据预处理单元,用于对接收到的原始数据进行清洗、去重、格式转换预处理操作;云资源调度单元,根据数据处理任务的需求,动态分配云计算资源,并通过智能调度算法实现资源的优化配置和负载均衡;数据处理单元,采用Spark或Flink分布式计算框架对预处理后的数据进行并行处理;数据存储与输出单元,将处理后的数据存储在分布式文件系统或数据库中,并根据业务需求提供数据查询、分析和可视化功能,并将处理结果输出到指定的目标系统或应用中;数据监控单元,用于实时监控系统的运行状态、资源利用率和性能指标。
主权项:1.基于云网融合的高效数据处理系统,其特征在于,包括依次通信连接的数据接入单元、数据预处理单元、云资源调度单元、数据处理单元、数据存储与输出单元、监控单元以及优化单元;所述数据接入单元用于实时接收来自不同数据源的数据;所述数据预处理单元用于对接收到的原始数据进行清洗、去重、格式转换预处理操作,以确保数据质量和一致性;所述云资源调度单元根据数据处理任务的需求,动态分配云计算资源,包括计算节点、存储空间和网络带宽,并通过智能调度算法,实现资源的优化配置和负载均衡;所述数据处理单元采用Spark或Flink分布式计算框架对预处理后的数据进行并行处理;所述数据存储与输出单元将处理后的数据存储在分布式文件系统或数据库中,并根据业务需求提供数据查询、分析和可视化功能,并将处理结果输出到指定的目标系统或应用中;所述数据监控单元用于实时监控系统的运行状态、资源利用率和性能指标。
全文数据:
权利要求:
百度查询: 中宇联云计算服务(上海)有限公司 基于云网融合的高效数据处理系统及其实现方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。