• / 13

分布式大规模实时数据调度引擎系统及其数据调度方法

关 键  词:
分布式 大规模 实时 数据 调度 引擎 系统 及其 方法
资源描述:

《分布式大规模实时数据调度引擎系统及其数据调度方法》由会员分享,可在线阅读,更多相关《分布式大规模实时数据调度引擎系统及其数据调度方法(13页珍藏版)》请在我爱发明网上搜索。

1、久 化存储。 5.根据权利要求3所述的数据调度引擎系统, 其特征在于, 所述任务执行器, 还用于将分引擎系统, 其特征在于, 所述数据接入单元, 还用于将所述业务数据通过任务队列缓存到分布式数据库做持力进行分析, 按照后端算力的能力集大小调度对应的业务数据进行处理。 4.根据权利要求3所述的数据调度的业务数据流量上报到所述监控模块; 所述任务执行器, 用于将所述数据接入单元消费的业务数据以及后端算单元, 用于所述任务调度引擎开启所述数据调度任务时, 执行并实时消 费接入的业务数据, 还用于将接入度模型包括M个数据接入单元 以及N个任务执行器, 其中, M和N均为大于等于2的整数; 所述数据接入。

2、权利要求1所述的数据调度引擎系统, 其特征在于, 所述任务调度引擎上搭载有任务调度模型, 所述任务调由规则数据, 并将所述路由规则数据提供给所述任务调度引擎用于 实时控制业务数据的调度情况。 3.根据所述数据调度引擎系统还包括路由管理模块, 所述路由管理模块, 用于接收所述任务 管理模块下发的所述路中数据 接入单元和/或任务执行器的数量。 2.根据权利要求1所述的数据调度引擎系统, 其特征在于, 并上报到所述 任务管理模块; 所述任务管理模块, 还用于根据所述业务数据流量实时调整所述任务调度引擎消费所述数据调度任务的业务数据; 所述监控模块, 用于监控所述任务调度引擎实时消费的业务数据流量, 。

3、; 所述任务调度引擎, 用于基于所述路由规则数据开启所述数据调度任务, 并按照所述 数据调度任务实时度、 流转; 其中, 所述任务管理模块, 用于将数据调度任务以及路由规则数据下发到所述任务调 度引擎、 监控模块以及任务调度引擎; 各模块在所述任务管理模块的协调下运 作, 实现数据流在各模块之间的调1.一种分布式大规模实时数据调度引擎系统, 其特征在于, 所述数据调度引擎系统包 括: 任务管理模块书7页 附图3页 CN 111984393 A 2020.11.24 CN 111984393 A 务执行器两个维度的 配置调度策略, 保证了服务高可用性以及数据调 度的实时性。 权利要求书2页 说明。

4、调度引擎中数据接入单元和/或 任务执行器的数量。 上述方案, 数据调度引擎系 统配置数据接入单元和任消费的业务数据流量, 并上报到任务管 理模块; 任务管理模块, 还用于根据业务数据流 量实时调整任务任务, 并按照数据调度任务实时消费数据调度 任务的业务数据; 监控模块, 用于监控任务调度 引擎实时调度 任务以及路由规则数据下发到任务调度引擎; 任 务调度引擎, 用于基于路由规则数据开启数据调 度度引 擎系统包括: 任务管理模块、 监控模块以及任务 调度引擎; 其中, 任务管理模块, 用于将数据度方法 (57)摘要 本申请公开了一种分布式大规模实时数据 调度引擎系统及其数据调度方法, 该数据调G06F 9/54(2006.01) (54)发明名称 分布式大规模实时数据调度引擎系统及其 数据调(51)Int.Cl. G06F 9/48(2006.01) G06F 9/50(2006.01) 哲 (74)专利代理机构 深圳市威世博知识产权代理 事务所(普通合伙) 44280 代理人 黎坚怡 江大华技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 张21)申请号 202011085241.2 (22)申请日 2020.10.12 (71)申请人 浙19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日。

展开阅读全文
  我爱发明网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
关于本文
本文标题:分布式大规模实时数据调度引擎系统及其数据调度方法
链接地址:https://www.woaifaming.net/doc/4880.html
关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

copyright@ 20018-2021 我爱发明网版权所有

经营许可证编号:粤ICP备20005300号-1



收起
展开