买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜浙江数新网络有限公司申请的专利Spark任务运行网关实现方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119583553B 。

龙图腾网通过国家知识产权局官网在2025-04-08发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510134906.0，技术领域涉及：H04L67/1001；该发明授权Spark任务运行网关实现方法及系统是由李斌松;原攀峰;张轩;陈廷梁设计研发完成，并于2025-02-07向国家知识产权局提交的专利申请。

本Spark任务运行网关实现方法及系统在说明书摘要公布了：本发明提供Spark任务运行网关实现方法及系统，涉及资源调度技术领域，包括接收双集群配置信息；建立与YARN和Kubernetes集群的连接；获取资源状态信息并建立任务分发表；接收Spark任务请求；根据资源负载指数选择目标集群；将任务请求转换为对应的任务描述文件；提交任务并记录响应信息。本发明实现了双集群资源的动态调度和负载均衡，提高了资源利用率和任务处理效率。

本发明授权Spark任务运行网关实现方法及系统在权利要求书中公布了：1.Spark任务运行网关实现方法，其特征在于，包括：接收双集群配置信息，所述双集群配置信息包括YARN集群配置参数、Kubernetes集群配置参数、网关负载阈值、资源平衡系数以及任务切换阈值；根据所述YARN集群配置参数与所述Kubernetes集群配置参数分别建立与YARN集群和Kubernetes集群的连接；周期性获取所述YARN集群和所述Kubernetes集群的资源状态信息，基于所述资源状态信息计算得到资源负载指数，建立双集群任务分发表，所述双集群任务分发表记录每个集群的资源负载指数、可用计算资源量以及任务运行记录；接收Spark任务请求，所述Spark任务请求包括任务类型标识、资源需求参数、任务优先级标识以及任务执行超时时间；从所述双集群任务分发表获取所述YARN集群和所述Kubernetes集群的当前资源负载指数；当两个集群的资源负载指数均未超过所述网关负载阈值时，将所述Spark任务请求分配至所述YARN集群和所述Kubernetes集群中资源负载指数最低的集群，并且将资源负载指数最低的集群作为目标集群；当所述目标集群的资源负载指数超过所述网关负载阈值时，判断另一集群的资源负载指数是否满足任务运行条件，若将满足所述任务运行条件的集群作为新的目标集群；根据所述目标集群的类型将所述Spark任务请求转换为对应的任务描述文件，其中，针对所述YARN集群生成包含资源需求参数的YARN应用程序描述文件，针对所述Kubernetes集群生成包含容器规格定义的Pod配置文件；将所述任务描述文件提交至目标集群，获取任务提交响应信息，所述任务提交响应信息包括任务标识符、初始运行状态、资源分配详情；将所述任务提交响应信息记录至所述双集群任务分发表。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人浙江数新网络有限公司，其通讯地址为：311121 浙江省杭州市余杭区仓前街道文一西路1218号7号楼201室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。