一种任务处理方法、装置、电子设备及存储介质与流程

文档序号:32669691发布日期:2022-12-24 02:08阅读:32来源:国知局
一种任务处理方法、装置、电子设备及存储介质与流程

1.本发明涉及数据处理技术领域,尤其涉及一种任务处理方法、装置、电子设备及存储介质。


背景技术:

2.为了在互联网应用中存在大量的待执行任务时,能够及时处理各待执行任务,通常会将各待处理任务纳入统一的管理平台进行任务调度和处理。
3.目前,通常采用的方法是获取当前需要执行的待执行任务,并获取相应的任务参数,将各待处理任务以及相应的任务参数派发至相应的执行平台,以基于各执行平台进行处理。但是这样的任务调度方法无法灵活的根据当前的待执行任务进行任务调度,且需要根据每个待处理任务的任务参数进行相应的调节,十分不方便。
4.为了解决上述问题,需要对任务调度方法进行改进。


技术实现要素:

5.本发明提供了一种任务处理方法、装置、电子设备及存储介质,以解决任务调度不灵活,以及任务管理不便的问题。
6.第一方面,本发明实施例提供了一种任务处理方法,包括:
7.获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务;
8.将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态;
9.当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度。
10.第二方面,本发明实施例还提供了一种任务处理装置,包括:
11.待执行任务生成模块,用于获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务;
12.待执行任务执行模块,用于将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态;
13.任务状态修改模块,用于当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度。
14.第三方面,本发明实施例还提供了一种电子设备,包括:
15.至少一个处理器;以及
16.与所述至少一个处理器通信连接的存储器;其中,
17.所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序
被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的任务处理方法。
18.第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的任务处理方法。
19.本实施例的技术方案,获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务,根据每日的任务计划生成相应的任务列表,以从任务列表中获取当前需要进行处理的待处理任务,将各待处理任务发送至目标执行平台,以基于目标执行平台获取相应的任务关联信息,并反馈,以使调度平台基于接收到的任务关联信息,生成与各待处理任务相对应的待执行任务。将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态,在本技术方案中,调度平台需要将待处理任务进行封装处理,得到待执行任务,然后将待执行任务发送至目标执行平台,以基于目标执行平台执行待执行任务,并反馈各待执行任务的任务执行状态至调度平台。当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度,根据各待执行任务的任务执行状态是否为执行成功状态,可以确定相应的待执行任务的处理进度,如执行成功状态表示该待执行任务已执行完毕,反之,执行失败状态表示相应的待执行任务执行失败,也就是说,根据任务执行状态可以确定相应待执行任务的任务处理进度,方便对待执行任务的管理和监督。解决了任务调度不灵活,以及任务管理不便的问题,取到了根据当日的任务列表中的任务计划灵活进行任务调度的效果。
20.应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
21.为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
22.图1是根据本发明实施例一提供的一种任务处理方法的流程图;
23.图2是根据本发明实施例二提供的一种任务处理方法的流程图;
24.图3是根据本发明实施例三提供的一种任务处理方法的流程图;
25.图4是根据本发明实施例二提供的一种待执行任务生成示意图;
26.图5是根据本发明实施例三提供的一种任务处理装置的结构示意图;
27.图6是实现本发明实施例的任务处理方法的电子设备的结构示意图。
具体实施方式
28.为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是
本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
29.需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
30.在对本技术方案进行详细阐述之前,先对本技术方案的应用场景进行简单介绍,以便更加清楚的理解本技术方案。无论是互联网应用或者企业级应用,都充斥着大量的批处理任务,针对这些批量处理任务,通常需要把分散的以及可靠性差的批处理任务纳入统一的平台,也就是所谓的批量调度系统来进行任务调度。批量调度平台作为核心批处理系统,能够高效的整合及管理系统中的批量任务,从而保证批量任务有序且高效的运行。目前,在基于调度平台进行任务调度处理时,通常需要根据每天的所需要执行的任务进行相应的任务参数的调节,然后将当日的调度任务发布至相应的执行平台,如,代理服务平台。但是这样的任务调度方式较为繁琐,同时,由于每日需要进行调度的任务以及任务参数是不固定的,无法实现自动化的任务调度处理。为了能够自适应的根据当日的待处理的任务进行任务调度,可以采用本技术方案的任务处理方法进行任务调度。
31.实施例一
32.图1为本发明实施例一提供了一种任务处理方法的流程图,本实施例可适用于调度平台自动和灵活的进行任务调度的情况,该方法可以由任务处理装置来执行,该任务处理装置可以采用硬件和/或软件的形式实现,该任务处理装置可配置于可执行任务处理方法的计算设备中。
33.如图1所示,该方法包括:
34.s110、获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务。
35.其中,任务调度处理通常是由调度平台向执行平台派发当日的待处理任务,在派发待处理任务之前,调度平台需要先确定当日需要进行处理的任务。其中,任务列表可以理解为用于记录当日需要进行处理的待处理任务的列表,如,在任务列表中包含任务1、任务2和任务3,则待处理任务即为任务1、任务2和任务3。任务关联信息可以理解为与待处理任务相关联的任务信息,如,任务参数、任务执行平台以及任务执行标准等一系列的与待处理任务相关联的任务信息。待执行任务可以理解为基于与各待处理任务相关联的任务关联信息生成的待执行的任务。
36.需要说明的是,在本技术方案中,可以预先设置用于获取任务列表中各待处理任务的程序,也可以将该程序视为待处理列表中的待处理任务,但其作用仅用于获取任务列表中实际需要执行的待处理任务,也就是说,在任务列表中包含用于调取当日需要执行的待执行任务的程序(即,待处理任务之一),同时,任务列表中还包括当日需要执行的待处理任务,需要说明的是,该程序虽然可以视为待处理任务,但并不需要执行,而是用于获取当日实际需要执行的待处理任,如,可以记录任务名称或者任务编号等可以用于标识待处理任务的信息,但不包含与待处理任务相关联的任务关联信息,也就是说,调度平台仅能从任
务列表中确定需要处理的任务,但是具体的任务关联信息无法从任务列表中获得。
37.具体的,调度平台包含一个用于获取待处理任务的程序,该程序可以是以插件形式存在,也可以以程序函数的形式存在,也就是说,只要能获取当日需要执行的待处理任务即可。进一步的,该程序可以从当日的任务列表中,获取当日需要执行的待处理任务,进一步的,还需要获取与待处理任务相关联的任务关联信息,以基于各待处理任务以及相应的任务关联信息,生成待执行任务。
38.进一步的,在得到各待执行任务后,调度平台将会删除任务列表中的待处理任务,并将待执行任务发送至相应的执行平台,以基于相应的执行平台执行待执行任务。也就是说,在调度平台根据待处理任务以及相关联的任务关联信息之后,生成相应的待执行任务,需要将任务列表中的相应的待处理任务删除,并将相应的待执行任务记录在该任务列表中,以将各待执行任务发送至执行平台,并基于执行平台执行各待执行任务。
39.这样设置的好处在于,仅需要获取每日的任务列表中的待处理任务,并发送至执行平台,进而根据执行平台反馈的任务关联信息,调度平台即可生成相应的待执行任务,而不需要人工每日将需要执行任务进行相应的发布。换句话说,若任务列表中包含m个待处理任务,每个待处理任务需要的任务参数为n个,则基于人工进行任务调度时,需要基于调度平台生m*n个待执行任务,并将m*n个待处理任务发送至执行平台进行执行。而基于本技术方案的任务处理方法,仅需要制定每日的任务列表,若待处理任务的数量为m个,将用于获取各待处理任务的任务检测程序也视为一个待处理任务的话,相当于只需要在任务列表中设置m+1个待处理任务,即可自动获取与各待处理任务相关联的任务关联信息,并自动生成相应的待执行任务,在此过程中,完全可以自动化处理,可以大大降低人工工作量,相应的可以提高任务调度的效率,同时,也可以降低由于人工进行任务调度的出错率。
40.可选的,所述获取任务列表中的至少一个待处理任务,包括:基于任务检测程序,对预先生成的任务列表中的任务信息进行检测,得到至少一个待处理任务。
41.其中,任务检测程序可以理解为用于对任务列表中的待处理任务进行检测的程序,或者也可以是一个插件工具等,任务检测程序即可理解为上述过程中用于获取当日的待处理任务的程序,也即待处理任务之一,需要注意的是,将任务检测程序作为待处理任务存在在任务列表中,仅是为了方便获取当日的待处理任务,并不是实际需要执行的待处理任务。需要说明的是,任务检测程序可以设置在任务列表中,也可以不设置在任务列表中,也就是说,任务检测程序可以是独立存在的,只要可以获取任务列表中的当日实际需要执行的待处理任务即可。
42.需要说明的是,在本技术方案中,任务列表是预先生成的,可以由工作人员每日在任务列表中输入当日需要执行的待处理任务,也可以是由计算机自动获取当日需要执行的待处理任务,并记录在任务列表中。
43.具体的,在调度平台中可以预先设置任务检测程序,以基于任务检测程序对预先生成的任务列表中的待处理任务的任务信息进行检测,以获得当日需要执行的至少一个待处理任务。
44.s120、将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态。
45.其中,目标执行平台可以理解为用于执行待执行任务的平台,可以理解的是,目标
执行平台的数量可以为一个,也可以为多个,当目标执行平台的数量为多个时,在待执行任务的任务关联信息中携带了各待执行任务相对应的目标执行平台所对应的平台标识,以基于平台标识确定与各待执行任务相对应的目标执行平台。任务执行状态可以用于表征待执行任务是否执行成功,可以包括执行成功状态或执行失败状态。
46.在实际应用中,调度平台用于负责将每日的任务列表中记录的待执行任务,派发给各目标执行平台,以基于目标执行平台对待执行任务进行处理,并根据待执行任务的执行情况,反馈相应的任务执行状态,如任务a,执行状态为执行成功状态,任务b执行状态为执行失败状态。进一步的,任务执行状态不仅可以用文字进行表示,为了方便计算机的识别,还可以用不同的标识信息对应的相应的任务执行状态,如,执行成功状态为1,执行失败状态为0,则可以表示为,任务a:1,任务b:0。
47.可选的,所述将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态,包括:将各所述待执行任务进行封装处理,生成与预设数据格式相对应的待发送文件;将各待发送文件发送至所述目标执行平台,以基于所述目标执行平台根据各所述待发送文件执行相应的待执行任务,并反馈相应的待执行任务的任务执行状态。
48.在实际应用中,待执行任务基于待处理任务以及相应的任务关联信息得到的,为了使目标执行平台能够执行待执行任务,还需要对待执行任务进行格式转换,得到预设数据格式的待发送文件,并将待发送文件发送至相应的目标执行平台,以使目标执行平台对待发送文件进行解析后,获得需要进行处理的待执行任务,并在执行各待执行任务后,将各待执行任务的任务执行状态反馈至调度平台。
49.需要说明的是,在本技术方案中,目标执行平台在执行各待执行任务时,可以是依次执行,也可以是同时的并行执行。在反馈各待执行任务的任务执行状态时,可以是当所有的待执行任务执行完毕后,将所有的任务执行状态一起反馈给调度平台,也可以是每当完成一个待执行任务后,即将相应的任务执行状态反馈至调度平台。
50.s130、当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度。
51.在实际应用中,调度平台需要记录每个待执行任务的任务执行状态,为了方便查看当日的任务处理进度,当调度平台接收到目标执行平台反馈的任务执行状态后,对任务列表中的各待执行任务执行状态进行修改,如,当待执行任务执行成功时,将任务执行状态修改为执行成功状态。可以理解的是,根据任务列表中各待执行任务的任务执行状态可以确定当日的任务执行进度,当所有的待执行任务的任务执行状态均为执行成功状态时,表示当日的待执行任务均已完成。
52.可选的,还包括:记录各待执行任务所对应的实际执行时长,若所述实际执行时长大于相应的预设执行时长,则生成相应的预警提示,并发送。
53.其中,实际执行时长可以理解为目标执行平台执行各待执行任务时所用的时长。预设执行时长可以理解为预先设置的与各待执行任务相对应的期望时长,可以理解的是,预设执行时长可以为针对所有的待执行任务设置的统一的执行时长,也就是说,每个待执行任务的预设执行时长可以设置为相同的。此外,由于每个待执行任务的任务参数不同或
者任务执行难度不同等,每个待执行任务的预设执行时长也可以设置为不同的,在此不做具体限定,可根据实际情况设置。需要说明的是,各待执行任务的预设执行时长可以记录在相应的待执行任务的任务信息中,因此,在目标执行平台在接收到各待执行任务后,可以确定与各待执行任务相对应的预设执行时长。
54.具体的,目标执行平台在执行各待执行任务时,根据各待执行任务所携带的预设执行时长,以及相应的待执行任务的实际执行时长,可以确定各实际执行时长是否大于相应的预设执行时长。若是,则表明相应的待执行任务的执行时长超过了预期时长,可能存在任务执行异常的情况,此时,目标执行平台应生成与该待执行任务相对应的预警提示,可以将该待执行任务的任务执行状态记录为执行失败状态,并反馈给调度平台。同时,还可以将预警提示发送至目标客户端,以使相关工作人员可以根据预警提示及时查看并处理。
55.本实施例的技术方案,获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务,根据每日的任务计划生成相应的任务列表,以从任务列表中获取当前需要进行处理的待处理任务,将各待处理任务发送至目标执行平台,以基于目标执行平台获取相应的任务关联信息,并反馈,以使调度平台基于接收到的任务关联信息,生成与各待处理任务相对应的待执行任务。将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态,在本技术方案中,调度平台需要将待处理任务进行封装处理,得到待执行任务,然后将待执行任务发送至目标执行平台,以基于目标执行平台执行待执行任务,并反馈各待执行任务的任务执行状态至调度平台。当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度,根据各待执行任务的任务执行状态是否为执行成功状态,可以确定相应的待执行任务的处理进度,如执行成功状态表示该待执行任务已执行完毕,反之,执行失败状态表示相应的待执行任务执行失败,也就是说,根据任务执行状态可以确定相应待执行任务的任务处理进度,方便对待执行任务的管理和监督。解决了任务调度不灵活,以及任务管理不便的问题,取到了根据当日的任务列表中的任务计划灵活进行任务调度的效果。
56.实施例二
57.图2为本发明实施例二提供的一种任务处理方法的流程图,可选的,对所述根据各待处理任务所对应的任务关联信息,生成相应的待执行任务进行细化。
58.如图2所示,该方法包括:
59.s210、获取任务列表中的至少一个待处理任务。
60.s220、将各待处理任务发送至目标执行平台,以基于所述目标执行平台获取与各所述待处理任务相对应的任务关联信息,并反馈。
61.其中,任务关联信息包括与待处理任务相对应的任务名称、任务参数、任务参数获取路径以及任务执行平台等一系列与待处理任务相关联的信息。
62.在本技术方案中,基于调度平台生成的待处理任务可以视为一个任务结点,也就是说,虽然调度平台可以从任务列表中获取当日需要执行的任务,但是调度平台无法从任务列表中获取与待处理任务相关联的任务信息,而与待处理任务相关联的任务关联信息存储在目标执行平台中。因此,调度平台在获取待处理任务后,将待处理任务发送至目标执行
平台,可以基于目标执行平台获取与待处理任务相关联的任务关联信息,并将与各待处理任务相关联的任务关联信息反馈至调度平台。
63.可选的,所述将各待处理任务发送至目标执行平台,以基于所述目标执行平台获取与各所述待处理任务相对应的任务关联信息,并反馈,包括:生成与各所述待处理任务相对应的待发送报文,并将各待发送报文发送至所述目标执行平台,以在各所述待发送报文通过校验后,基于所述目标执行平台反馈相应的任务关联信息,并反馈。
64.需要说明的是,目标执行平台无法直接识别调度平台从任务列表中获取的待处理任务,因此,需要向将待处理任务进行转换,得到目标执行平台可以识别的待发送报文,并将待发送报文发送至目标执行平台。可以理解的是,待发送报文中包含相应的待处理任务所对应的任务关联信息。
65.具体的,调度平台对待处理任务进行处理,得到与各待处理任务相对应的待发送报文后,将各待发送报文发送至目标执行平台。目标执行平台在接收到各待发送报文后,先对各待发送报文进行解析,并对解析后的待发送报文进行校验,如,报文格式、报文长度以及报文内容等。若待发送报文通过校验,则目标执行平台获取待发送报文中携带的待处理任务,并从预设的数据库中获取与各待处理任务相对应的任务关联信息,并将各任务关联信息反馈至调度平台。
66.s230、当接收到各任务关联信息时,基于各所述任务关联信息生成相应的待执行任务。
67.具体的,调度平台在接收到各任务关联信息后,根据与各待处理任务相对应的任务关联信息可以生成相应的待执行任务,以将各待执行任务发送至目标执行平台,由目标执行平台对待执行任务进行处理。
68.可选的,所述基于各所述任务关联信息生成相应的待执行任务,包括:获取各所述任务关联信息的信息标识;基于目标映射表,确定与各信息标识相关联的待处理任务;针对各待处理任务,根据与当前待处理任务相关联的当前任务关联信息,生成与所述当前待处理任务相对应的当前待执行任务。
69.其中,目标映射表中包括各所述待处理任务所对应的任务标识、各所述任务关联信息的信息标识,以及各任务标识与相应的信息标识之间的对应关系;
70.在实际应用中,目标执行平台反馈各任务关联信息时,各任务关联信息携带有相应的信息标识,以根据信息标识可以确定与各任务关联信息相关联的待处理任务。具体的,可以预先生成目标映射表,并在目标映射表中记录各任务关联信息与相应的待处理任务的对应关系,以基于目标映射表,确定与各待处理任务相关联的任务关联信息。
71.以其中一个待处理任务为当前待处理任务为例,基于目标映射表,从各任务关联信息中获取与当前待处理任务相关联的当前任务关联信息,并对当前任务关联信息进行封装处理,即可得到与当前待处理任务相对应的当前待执行任务。
72.s240、将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态。
73.s250、当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度。
74.本实施例的技术方案,将各待处理任务发送至目标执行平台,以基于所述目标执行平台获取与各所述待处理任务相对应的任务关联信息,并反馈,由于目标执行平台无法直接识别待处理任务,因此,先基于调度平台将待处理任务转化为待发送报文,并将待发送报文发送至目标执行平台,以基于目标执行平台对待发送报文进行校验后,确定与通过校验的待发送报文相对应的待处理任务,并获取相应的任务关联信息,并反馈至调度平台。当接收到各任务关联信息时,基于各所述任务关联信息生成相应的待执行任务,当调度平台接收到各任务关联信息后,将与各待处理任务相对应的任务关联信息进行封装处理,可以得到相应的待执行任务,并将各待执行任务发送至目标执行平台,以基于目标执行平台执行各待执行任务,并反馈相应的任务执行状态。解决了无法自动获取与待处理任务的任务关联信息,并根据各任务关联信息生成相应的待执行任务的问题,取到了自动获取任务关联信息,并生成待执行任务的效果。
75.实施例三
76.在一个具体的例子中,批量开发人员需要在批量调度平台配置两种结点,一个生成结点a,在本技术方案中,生成结点a可以理解为用于从任务列表中获取待处理任务的结点或程序;m个目标结点b(即,待处理任务)。a的批量任务作用是动态生成b的子结点(即,待执行任务),b的批量任务作用是根据不同参数条件执行不同业务。a需要配置为b的前序(a需先于b执行)。如图3所示,调度服务(即,调度平台)从当日作业计划表(即,任务列表)中筛选出待调度的结点a,然后请求代理服务执行结点a的批量任务,代理服务(即,目标执行平台)接收到调度报文(即,待发送报文)后首先进行合法性校验,然后通过java反射加载a的批量任务并开始执行。进一步的,a的批量任务开始执行后,首先获取结点a的一些参数,如当前作业计划以及结点号等信息,然后定义需要动态生成子结点的b类结点(即,待处理任务),以及要生成的子结点的数量和任务参数等信息(即,任务关联信息),最后调用代理服务(即,目标执行平台)的动态生成子结点接口,准备向批量调度平台的接收服务发送动态生成子结点请求(即,待执行任务所对应的请求)。
77.代理服务(即,目标执行平台)动态生成子结点接口接收到批量任务调用后,首先进行参数校验,然后根据需要生成的子结点的数量生成子结点编号并进行组装(即,将待处理任务的任务关联信息生成任务请求),然后将该任务请求转发给调度平台的接收服务。当调度平台的接收服务接收到该任务请求后首先校验请求报文,然后从结点表中查询b类结点的原始配置参数,并根据动态生成子结点请求中的相关子结点编号以及子结点参数等进行组装,得到待执行任务,并将待执行任务发送至代理服务(即,目标执行平台)。
78.进一步的,组装完成过后首先删除当日作业计划表中已经生成的b类结点(即,待处理任务),然后向当日作业计划表中插入已经组装好的b类结点的子结点(即,待执行任务),并将各待执行任务发送至目标执行平台,以基于目标执行平台执行各待执行任务,并反馈各待执行任务的任务执行状态。当调度平台的接口服务收到返回结果后首先判断动态生成子结点的生成结果,然后根据生成结果修改批量任务的执行状态,此时批量任务的所有逻辑执行结束,然后由代理服务进行结果上报,接收服务收到上报结果后修改a结点的执行状态,整个a结点的调度流程结束,在实际任务调度过程中,调度服务(即,调度平台)从当日作业计划表(即,任务列表)中筛选出需要调度的b类结点的子结点(即,待执行任务)进行任务调度。
79.示例性地,如图4所示,调度平台中的生成结点(即,任务检测程序)可以从当日的任务列表中获取当日需要执行的目标结点1和目标结点2(即,待处理任务)。然后将目标结点1和目标结点2发送至目标执行平台,以使目标执行平台根据目标结点1和目标结点2获取相应的任务关联信息,并反馈至调度平台。在接受到目标执行平台反馈的任务关联信息后,调度平台可以基于待处理任务以及相应的任务关联信息生成相应的待执行任务,如,子结点1、子结点2、子结点3和子结点4,并将任务列表中的各待处理任务删除,即,将目标结点1和目标结点2删除,将各待执行任务记录在任务列表中,即,将子结点1、子结点2、子结点3和子结点4记录在任务列表中。
80.将任务列表中的各待执行任务发送至目标执行平台,目标执行平台即可执行各待执行任务,并将各待执行任务的任务执行状态反馈至调度平台。当调度平台接收到各任务执行状态后,可以对相应的待执行任务的任务执行状态进行修改,当所有的待执行任务的任务状态均为执行成功状态时,则可以确定当日的任务列表中的任务均已完成。
81.本实施例的技术方案,获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务;将各待执行任务发送至目标执行平台,以基于目标执行平台执行各待执行任务,并反馈相应的待执行任务的任务执行状态;当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各任务执行状态确定相应待执行任务的处理进度。解决了任务调度不灵活,以及任务管理不便的问题,取到了根据当日的任务列表中的任务计划灵活进行任务调度,以及方便任务管理的效果。
82.实施例四
83.图5为本发明实施例四提供的一种任务处理装置的结构示意图。如图5所示,该装置包括:待执行任务生成模块310、待执行任务执行模块320和任务移除模块330。
84.其中,待执行任务生成模块310,用于获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务;
85.待执行任务执行模块320,用于将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态;
86.任务状态修改模块330,用于当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任务执行状态确定相应待执行任务的处理进度。
87.本实施例的技术方案,获取任务列表中的至少一个待处理任务,并根据各待处理任务所对应的任务关联信息,生成相应的待执行任务,根据每日的任务计划生成相应的任务列表,以从任务列表中获取当前需要进行处理的待处理任务,将各待处理任务发送至目标执行平台,以基于目标执行平台获取相应的任务关联信息,并反馈,以使调度平台基于接收到的任务关联信息,生成与各待处理任务相对应的待执行任务。将各待执行任务发送至目标执行平台,以基于所述目标执行平台执行各所述待执行任务,并反馈相应的待执行任务的任务执行状态,在本技术方案中,调度平台需要将待处理任务进行封装处理,得到待执行任务,然后将待执行任务发送至目标执行平台,以基于目标执行平台执行待执行任务,并反馈各待执行任务的任务执行状态至调度平台。当检测到任务执行状态为执行成功状态时,根据各任务执行状态对相应的待执行任务的任务执行状态进行修改,以基于各所述任
务执行状态确定相应待执行任务的处理进度,根据各待执行任务的任务执行状态是否为执行成功状态,可以确定相应的待执行任务的处理进度,如执行成功状态表示该待执行任务已执行完毕,反之,执行失败状态表示相应的待执行任务执行失败,也就是说,根据任务执行状态可以确定相应待执行任务的任务处理进度,方便对待执行任务的管理和监督。解决了任务调度不灵活,以及任务管理不便的问题,取到了根据当日的任务列表中的任务计划灵活进行任务调度的效果。
88.可选的,待执行任务生成模块,用于基于任务检测程序,对预先生成的任务列表中的任务信息进行检测,得到至少一个待处理任务。
89.可选的,待执行任务生成模块包括:待处理任务发送单元,用于将各待处理任务发送至目标执行平台,以基于所述目标执行平台获取与各所述待处理任务相对应的任务关联信息,并反馈;
90.待执行任务生成单元,用于当接收到各任务关联信息时,基于各所述任务关联信息生成相应的待执行任务。
91.可选的,待处理任务发送单元,用于生成与各所述待处理任务相对应的待发送报文,并将各待发送报文发送至所述目标执行平台,以在各所述待发送报文通过校验后,基于所述目标执行平台反馈相应的任务关联信息,并反馈;
92.其中,所述待发送报文中包含相应的待处理任务所对应的任务关联信息。
93.可选的,待执行任务生成单元包括:信息标识确定子单元,用于获取各所述任务关联信息的信息标识;
94.待处理任务确定子单元,用于基于目标映射表,确定与各信息标识相关联的待处理任务;其中,所述目标映射表中包括各所述待处理任务所对应的任务标识、各所述任务关联信息的信息标识,以及各任务标识与相应的信息标识之间的对应关系;
95.待执行任务生成子单元,用于针对各待处理任务,根据与当前待处理任务相关联的当前任务关联信息,生成与所述当前待处理任务相对应的当前待执行任务。
96.可选的,待执行任务执行模块包括:待发送文件生成单元,用于将各所述待执行任务进行封装处理,生成与预设数据格式相对应的待发送文件;
97.待执行任务执行单元,用于将各待发送文件发送至所述目标执行平台,以基于所述目标执行平台根据各所述待发送文件执行相应的待执行任务,并反馈相应的待执行任务的任务执行状态。
98.可选的,任务处理装置,还用于记录各待执行任务所对应的实际执行时长,若所述实际执行时长大于相应的预设执行时长,则生成相应的预警提示,并发送。
99.本发明实施例所提供的任务处理装置可执行本发明任意实施例所提供的任务处理方法,具备执行方法相应的功能模块和有益效果。
100.实施例五
101.图6示出了本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不
意在限制本文中描述的和/或者要求的本发明的实现。
102.如图6所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(rom)12、随机访问存储器(ram)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(rom)12中的计算机程序或者从存储单元18加载到随机访问存储器(ram)13中的计算机程序,来执行各种适当的动作和处理。在ram 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、rom 12以及ram 13通过总线14彼此相连。输入/输出(i/o)接口15也连接至总线14。
103.电子设备10中的多个部件连接至i/o接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
104.处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(cpu)、图形处理单元(gpu)、各种专用的人工智能(ai)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(dsp)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如任务处理方法。
105.在一些实施例中,任务处理方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由rom 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到ram 13并由处理器11执行时,可以执行上文描述的任务处理方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行任务处理方法。
106.本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、芯片上系统的系统(soc)、负载可编程逻辑设备(cpld)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
107.用于实施本发明的任务处理方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
108.在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质
可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
109.为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,crt(阴极射线管)或者lcd(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
110.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(lan)、广域网(wan)、区块链网络和互联网。
111.计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与vps服务中,存在的管理难度大,业务扩展性弱的缺陷。
112.应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
113.上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1