买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:集美大学
摘要:本发明涉及地学算法共享技术领域,且公开了一种基于kubernetes平台实现地学数据共享的系统,包括管理端页面、一个管理端系统和多个Worker端系统,管理端系统启动任务后会基于算法镜像和相关驱动数据自动生成一个Worker端,在Kubernetes中表现为Pod形式执行;本发明采用基于Kubernetes的容器编排技术,实现了地学算法的管理和共享功能。算法拥有者可以将自己的算法资源上传进行汇交,汇交的算法都需要经过技术和安全审查才能对外发布共享,提高了算法的资源质量。此外,本发明能够实现算法的重现和秒级服务启动能力,能够提高服务集群资源利用率,保障算法的重现准确性和服务稳定性。
主权项:1.一种基于kubernetes平台实现地学数据共享的系统,其特征在于:包括管理端页面、一个管理端系统和多个Worker端系统,管理端系统启动任务后会基于算法镜像和相关驱动数据自动生成一个Worker端,在Kubernetes中表现为Pod形式执行;所述管理端页面主要提供给用户在web上操作系统功能,进行算法共享、运行功能的管理;所述管理端系统包括认证模块、配置管理模块、算法管理模块、镜像管理模块、数据集模块和任务模块,其中:认证模块:主要包括注册、账号审核、登录功能,对用户权限的认证;配置管理模块:主要包括系统中各种参数的配置;算法管理模块:主要包括地学算法上传、查看、更新、删除功能,上传的算法默认为待审核状态,待管理员审核后状态变更为可分享或禁止状态,普通用户只能查看到可分享状态的算法以及自己上传的算法;镜像管理模块:算法只有打包为镜像并推送到镜像仓库才能处于可执行状态,供用户生成任务执行,因此镜像来源包括2大类:用于上传的算法打包为镜像或用户直接上传的镜像;数据集模块:用于地学算法的驱动数据集,包括数据集上传、查看、删除功能,上传的数据集主要存储于Ceph分布式文件存储;任务模块:只要打包为镜像的算法才能处于可执行状态,包括:任务启动、任务查看、任务中断、任务删除功能;所述Worker端系统包括任务执行、日志上报、进度监控模块,其中:任务执行:即任务的执行完整生命周期;日志上报:Worker端中的任务通过指定格式输出日志,日志模块采集到Worker的日志,并存储到ES文件系统中持久化保存;进度监控:独立的进程持续监控Worker端启动的Pod的生命周期,并将任务状态发送至消息队列,管理端消费任务状态的消息,并更新任务状态;所述管理端系统和每个Worker端系统之间通过消息队列进行数据交互。
全文数据:
权利要求:
百度查询: 集美大学 一种基于kubernetes平台实现地学数据共享的方法和系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。