1.一种实时数据采集任务调度方法,其特征在于,包括:构建第一数据采集框架,所述第一数据采集框架包括第一管理单元以及若干个第一数据采集单元;所述第一管理单元用于第一任务调度;所述第一管理单元包括:通过第一启停管理机制控制第一统计模块、第一监视模块以及第一控制模块进行第一任务调度;所述第一启停管理机制包括:根据所述第一统计模块以及第一监视模块获取的数据,生成第一控制指令;所述第一控制模块根据第一控制指令进行启停管理;所述第一控制指令包括针对若干个工况的控制指令;所述若干个工况至少包括第一工况、第二工况以及第三工况;当存在任一第一数据采集单元故障时,记作第一工况;当运行的第一数据采集单元数量大于所需第一数据采集单元数量时,记作第二工况;当运行的第一数据采集单元数量不大于所需第一数据采集单元数量时,记作第三工况;所述第一控制指令还包括:当第一工况时,针对第一工况的控制指令包括第一筛选指令以及第一分配指令;当第一工况时,发生故障的所述第一数据采集单元向第一管理单元发送第一筛选指令,所述第一管理单元响应于所述第一筛选指令进行第一筛选以及第二筛选,并生成第一分配指令;除该故障第一数据采集单元外的其余若干个第一数据采集单元根据所述第一分配指令进行重新分配操作;采集任务的基本单位为前置通道,采集任务动态分配策略包括以下步骤:统计系统内相应前置应用的通道数量;获取当前运行的采集容器数量,根据负载均衡算法将通道平均分配到相应采集容器中;当某个容器发生故障时,其所管理的通道将被重新分配到其它正常的容器中;通道分配的步骤如下:步骤一,读取前置通道模型,筛选出所属容器为空的通道;步骤二,获取当前运行的容器信息,筛选出具备接收新增通道的采集容器;步骤三,采用轮循的负载均衡算法,将前置通道依次分配给相应的采集容器,保持各容器管理的通道数量相对均衡;步骤四,为避免通道在容器间不必要切换导致的采集业务异常,通道分配到容器后一般保持固定;当采集容器故障时,管理节点立刻拉起新的容器,接管故障容器的全部通道;所述第一数据采集单元响应于所述第一任务调度进行第一数据采集。
2.如权利要求1所述的实时数据采集任务调度方法,其特征在于,所述第一数据采集单元包括:响应于所述第一任务调度生成第一数据采集逻辑;所述第一数据采集逻辑为基于第一通信模块、第一解析模块以及第一消息处理模块所设计的逻辑;通过第一通信模块、第一解析模块以及第一消息处理模块实施第一数据采集逻辑,进行第一数据采集。
3.如权利要求2所述的实时数据采集任务调度方法,其特征在于,所述第一数据采集单元还包括:任一第一数据采集单元仅负责一类业务数据的采集。
4.一种实时数据采集任务调度系统,其特征在于,包括:框架构建模块,用于构建第一数据采集框架,所述第一数据采集框架包括第一管理单元以及若干个第一数据采集单元;所述第一管理单元用于第一任务调度;所述第一管理单元包括:通过第一启停管理机制控制第一统计模块、第一监视模块以及第一控制模块进行第一任务调度;所述第一启停管理机制包括:根据所述第一统计模块以及第一监视模块获取的数据,生成第一控制指令;所述第一控制模块根据第一控制指令进行启停管理;所述第一控制指令包括针对若干个工况的控制指令;所述若干个工况至少包括第一工况、第二工况以及第三工况;当存在任一第一数据采集单元故障时,记作第一工况;当运行的第一数据采集单元数量大于所需第一数据采集单元数量时,记作第二工况;当运行的第一数据采集单元数量不大于所需第一数据采集单元数量时,记作第三工况;所述第一控制指令还包括:当第一工况时,针对第一工况的控制指令包括第一筛选指令以及第一分配指令;当第一工况时,发生故障的所述第一数据采集单元向第一管理单元发送第一筛选指令,所述第一管理单元响应于所述第一筛选指令进行第一筛选以及第二筛选,并生成第一分配指令;除该故障第一数据采集单元外的其余若干个第一数据采集单元根据所述第一分配指令进行重新分配操作;采集任务的基本单位为前置通道,采集任务动态分配策略包括以下步骤:统计系统内相应前置应用的通道数量;获取当前运行的采集容器数量,根据负载均衡算法将通道平均分配到相应采集容器中;当某个容器发生故障时,其所管理的通道将被重新分配到其它正常的容器中;通道分配的步骤如下:步骤一,读取前置通道模型,筛选出所属容器为空的通道;步骤二,获取当前运行的容器信息,筛选出具备接收新增通道的采集容器;步骤三,采用轮循的负载均衡算法,将前置通道依次分配给相应的采集容器,保持各容器管理的通道数量相对均衡;步骤四,为避免通道在容器间不必要切换导致的采集业务异常,通道分配到容器后一般保持固定;当采集容器故障时,管理节点立刻拉起新的容器,接管故障容器的全部通道;所述第一数据采集单元响应于所述第一任务调度进行第一数据采集。
5.一种电子设备,其特征在于,包括:存储器和处理器;所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该计算机可执行指令被处理器执行时实现权利要求1至3任意一项所述一种实时数据采集任务调度方法的步骤。
6.一种计算机可读存储介质,其特征在于:其存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现权利要求1至3任意一项所述一种实时数据采集任务调度方法的步骤。