一种业务数据的分布式处理方法及装置与流程

文档序号:29523216发布日期:2022-04-07 00:36阅读:135来源:国知局
一种业务数据的分布式处理方法及装置与流程

1.本技术实施例涉及智能电缆技术领域,尤其涉及一种业务数据的分布式处理方法及装置。


背景技术:

2.随着我国通讯业的飞速发展,电缆作为电能或信号输送的基础,其需求量也与日俱增。目前,为了较好的对电缆运行状态进行实时监控,实现对电缆更好的运行维护效果,电缆的运维设置也越来越趋向于智能化。智能电缆通过相关运行状态的检测设置,可以实现对电缆的电压、电流、局部电流等参数进行实时监测,甚至可以监测电缆故障,日常运行状态等,以此可较好地实现对电缆的运行管理,优化电缆的运维效果。除了运行监测数据之外,智能电缆在运行过程中,还会产生诸如服务请求、配置管理等多种类型的业务数据。服务器通过收集智能电缆各类型业务数据,可以实现智能电缆运行过程中的不同业务处理,实现更加智能化的电缆运行和管理。
3.但是,由于智能电缆线路众多,且覆盖范围相对较广,智能电缆在运行过程中会产生大量的业务数据。数据量庞大的业务数据会统一汇聚到系统后台服务器进行处理,会导致系统后台服务器较大的数据处理压力,影响业务数据的处理效率,进而影响智能电缆的正常运行。


技术实现要素:

4.本技术实施例提供一种业务数据的分布式处理方法及装置,能够缓解系统后台的海量业务数据处理压力,提升业务数据处理效率,保障业务数据处理的稳定性和成功率,解决智能电缆的海量业务数据处理效率低下的技术问题。
5.在第一方面,本技术实施例提供了一种业务数据的分布式处理方法,包括:
6.各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询所述映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至所述目标服务器;
7.所述目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,所述业务数据处理代码用于处理对应数据类型信息的业务数据,所述中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;
8.若当前业务数据处理成功,完成当前业务数据处理流程,若当前业务数据处理失败,所述目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。
9.进一步地,所述目标服务器广播当前业务数据至其余处理服务器进行业务数据处理,包括:
10.所述目标服务器广播当前业务数据至其余处理服务器;
11.在设定监听周期内监听其余处理服务器基于当前业务数据返回的处理结果,基于所述处理结果执行当前业务数据的处理流程。
12.进一步地,基于所述处理结果执行当前业务数据的处理流程,包括:
13.若在所述设定监听周期内监听到所述处理结果,完成当前业务数据处理流程;
14.若在所述设定监听周期内未监听到所述处理结果,上报当前业务数据的异常信息至所述中心服务器。
15.进一步地,若在所述设定监听周期内监听到所述处理结果,完成当前业务数据处理流程,还包括:
16.所述目标服务器向回复所述处理结果的处理服务器请求共享当前业务数据的业务数据处理代码,存储请求到的业务数据处理代码。
17.进一步地,在上报当前业务数据的异常信息至所述中心服务器之后,还包括:
18.所述中心服务器基于所述异常信息生成新的业务数据处理代码,将新的业务数据处理代码发送至所述目标服务器进行更新。
19.进一步地,在上报当前业务数据的异常信息至所述中心服务器之后,还包括:
20.所述目标服务器统计设定时间段内的所述异常信息,基于统计结果确定所述异常信息对应的异常电缆节点,并上报所述异常电缆节点至所述中心服务器。
21.进一步地,在基于中心服务器预配置的业务数据处理代码进行当前业务数据处理之后,还包括:
22.所述中心服务器统计设定时间段内各类型业务数据的处理量,根据所述处理量调整各个所述处理服务器对应的业务数据处理代码。
23.在第二方面,本技术实施例提供了一种业务数据的分布式处理装置,包括:
24.发送模块,用于通过各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询所述映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至所述目标服务器;
25.接收模块,用于通过所述目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,所述业务数据处理代码用于处理对应数据类型信息的业务数据,所述中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;
26.处理模块,用于在当前业务数据处理成功时,完成当前业务数据处理流程,在当前业务数据处理失败时,通过所述目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。
27.在第三方面,本技术实施例提供了一种电子设备,包括:
28.存储器以及一个或多个处理器;
29.所述存储器,用于存储一个或多个程序;
30.当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面所述的业务数据的分布式处理方法。
31.在第四方面,本技术实施例提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的业务数据的分布式处理方法。
32.本技术实施例通过各个电缆节点预先存储业务数据的各个数据类型信息与对应
处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至目标服务器;目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,业务数据处理代码用于处理对应数据类型信息的业务数据,中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;若当前业务数据处理成功,完成当前业务数据处理流程,若当前业务数据处理失败,目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。采用上述技术手段,能够缓解系统后台的海量业务数据处理压力,提升业务数据处理效率,保障业务数据处理的稳定性和成功率。
附图说明
33.图1是本技术实施例一提供的一种业务数据的分布式处理方法的流程图;
34.图2是本技术实施例一中的业务数据处理系统的结构示意图;
35.图3是本技术实施例一中的业务数据的广播处理流程图;
36.图4是本技术实施例二提供的一种业务数据的分布式处理装置的结构示意图;
37.图5是本技术实施例三提供的一种电子设备的结构示意图。
具体实施方式
38.为了使本技术的目的、技术方案和优点更加清楚,下面结合附图对本技术具体实施例作进一步的详细描述。可以理解的是,此处所描述的具体实施例仅仅用于解释本技术,而非对本技术的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本技术相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
39.实施例一:
40.图1给出了本技术实施例一提供的一种业务数据的分布式处理方法的流程图,本实施例中提供的业务数据的分布式处理方法可以由业务数据的分布式处理设备执行,该业务数据的分布式处理设备可以通过软件和/或硬件的方式实现,该业务数据的分布式处理设备可以是两个或多个物理实体构成,也可以是一个物理实体构成。一般而言,该业务数据的分布式处理设备可以是智能电缆的业务数据处理系统等处理设备。
41.下述以智能电缆的业务数据处理系统为执行业务数据的分布式处理方法的主体为例,进行描述。参照图1,该业务数据的分布式处理方法具体包括:
42.s110、各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询所述映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至所述目标服务器。
43.具体的,本技术在进行业务数据处理时,通过各个智能电缆的电缆节点自行选择处理服务器进行业务数据分发。处理服务器基于接收到的业务数据,采用预配置的业务数据处理代码进行业务数据处理。本技术实施例采用多个处理服务器分别负责相应业务类型
的业务数据处理工作,以此来缓解系统的业务数据处理压力,实现海量业务数据的高效处理,提升智能电缆海量业务数据的处理效率。可以理解的是,智能电缆为了实现各类型业务服务,会在电缆沿线设置多个电缆节点,通过电缆节点执行运行监测、服务请求、配置管理等多种类型的业务工作。电缆节点会通过与中心服务器交互执行这些业务工作,因此,需要中心服务器对电缆节点上报的业务数据进行高效处理,以确保智能电缆的正常运行。
44.在此之前,中心服务器预先根据业务数据的所有类型设置相应的处理代码,处理代码用于进行相应类型业务数据的处理。举例而言,对应电流、电压等智能电缆运行监测数据,需要将这部分数据对应数据发送端的电缆节点id进行存储,并基于监测数据进行数据分析生成对应电缆节点的监测曲线图。此外,根据实际需要,还可以基于当前电缆节点的监测数据进行大数据分析,预测该电缆节点未来的运行状态。则对于电缆节点的运行监测数据,需要设置运行监测数据存储、分析和预测的处理代码,以实现对这类型业务数据的处理。又例如,对于配置信息更新请求,需要根据配置信息更新请求返回最新版本配置信息至电缆节点。则对应这类型业务数据的处理,需要预先设置相应配置信息更新规则。基于此,中心服务器预先对应不同类型的业务数据设置了相应的处理代码,将各类型业务数据的处理代码配置给不同的处理服务器,以使不同的处理服务器负责对应业务类型的业务数据。
45.进一步地,基于各个处理服务器预先配置的对应业务类型的业务数据处理代码,中心服务器根据处理代码包含的业务数据的数据类型信息,与对应处理服务器绑定构建映射关系。以此可以得到不同处理服务器与对应数据类型信息(即业务数据的业务类型)的映射关系。将这些映射关系全部存储至系统中的各个电缆节点,以便于后续电缆节点根据新生成的业务数据的数据类型信息,进行业务数据分发。
46.具体的,如图2所示,提供本技术实施例的业务数据处理系统的结构示意图。其中,业务数据处理系统包括电缆节点11、处理服务器12和中心服务器13。对应电缆节点11新生成的业务数据,根据业务数据的数据类型信息查询预先存储的映射关系,确定当前业务数据的处理服务器12作为目标服务器,进而将业务数据发送至目标服务器处理。目标服务器接收到业务数据后,即可根据中心服务器13预先配置的对应类型的业务数据处理代码进行业务数据处理。例如,参照图2,电缆节点11通过查询映射关系,确定编号4的处理处理服务器12为当前业务数据的目标服务器,进而将当前业务数据发送至目标服务器进行处理。
47.需要说明的是,对应一条智能电缆线路,为了执行各类型业务操作,需要在智能电缆沿线设置多个电缆节点,由电缆节点执行运行监测、服务请求乃至配置管理等多种类型的业务操作。而对应电缆节点产生的各类型业务数据,则通过上传至处理服务器,以便于处理服务器对应进行处理。处理服务器预先会配置对应类型业务数据的处理代码,以用于后续进行业务数据的分布处理。
48.需要说明的是,在进行处理代码配置时,对应一个处理服务器,可以分发一个或者多个处理代码,可以根据处理服务器的计算能力以及各类型业务数据的数据量进行适应性分配。可以理解的是,若一个处理服务器的计算能力可以满足多种业务数据的处理,则可以分发多种处理代码至该处理服务器,以便于充分利用该处理服务器的算力,节省处理服务器的布置成本,避免算力资源的浪费。同样的,对于一种类型的业务数据,若其数据量相对较大,单一处理服务器难以满足该类型业务数据庞大数据量的处理,则需要将对应的处理代码分配至多个处理服务器,后续在进行该类型业务数据分发时,电缆节点通过查询映射
关系确定多个目标服务器,采用随机选择一个目标服务器的方式处理业务数据。也可以通过轮询各个目标服务器确定其当前的业务数据处理能力(如计算能力、存储能力等),进而选择业务数据处理能力最优的目标服务器发送当前业务数据。此外,也可以由配置相应处理代码的目标服务器按照自身当前算力适应性进行业务数据领取及处理。以此同样可以充分利用各处理服务器的算力,避免业务数据处理不及时,单一处理服务器存在较大处理压力的情况。
49.s120、所述目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,所述业务数据处理代码用于处理对应数据类型信息的业务数据,所述中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码。
50.进一步地,业务数据处理系统在运行过程中,电缆节点会产生大量的业务数据,业务数据在电缆节点生成后,会根据业务类型查询映射关系确定处理服务器,进而将业务数据分发至对应的处理服务器。本技术实施例中,对应每一个业务数据,均包含业务数据对应的数据类型信息和数据发送时间戳。电缆节点在发送业务数据至处理服务器时,会在业务数据中添加当前业务数据的数据类型信息以及对应的数据发送时间戳,以便于后续处理服务器进行业务数据的处理。
51.对应处理服务器一端,在接收到业务数据后,首先解析出业务数据包含的数据类型信息和数据发送时间戳。然后根据数据类型信息确定处理该业务数据所需要使用的处理代码,进而提取中心服务器预配置的处理代码进行进行对应数据类型信息的业务数据处理。
52.可选的,处理服务器可以对应接收到的业务数据设置相应的数据处理队列,业务数据在数据处理队列中按照数据发送时间戳进行排列。进而按照自身配置处理代码,在对应的数据处理队列中依据数据发送时间戳顺序领取业务数据进行处理,以此可以保障业务数据的有序处理,进一步提升业务数据处理效率。
53.s130、若当前业务数据处理成功,完成当前业务数据处理流程,若当前业务数据处理失败,所述目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。
54.示例性的,各个处理服务器依据自身配置的处理代码进行业务数据处理时,对应智能电缆的运行监测数据,在接收到这部分业务数据后,处理服务器根据处理代码首先对其进行整理存储,确定该业务数据的数据发送源,即对应的电缆节点id,然后按照数据发送时间戳将该业务数据存储至对应电缆节点id的存储区域中,以此完成对应电缆节点运行监测数据的存储,以便于进行智能电缆的运行维护。进一步地,基于该业务数据进行数据分析,判断当前电缆节点是否出现运行异常,并在出现运行异常时进行异常上报。
55.进一步的,基于当前业务数据以及对应电缆节点的历史数据,可以生成对应电缆节点的监测曲线图,以便于后续中心服务器在进行运行监控时对监测曲线图进行调用。此外,根据实际需要,还可以基于当前电缆节点的监测数据进行大数据分析,预测该电缆节点未来的运行状态。根据实际设置处理代码的各项具体处理内容,处理服务器适应性进行业务数据的处理操作。并在完成处理后,对处理结果进行存储或者返回至中心服务器。此外,对应一些服务请求类型的业务数据,处理服务器在根据处理代码完成业务数据后,会将处理结果返回至相应的电缆节点,以便于电缆节点基于处理服务器返回的处理结果进行相应服务请求的处理。
56.具体地,若通过预配置处理代码结合上述处理流程可以完成业务数据处理,则完成当前业务数据处理流程。而在进行业务数据处理过程中,可能存在一些当前处理代码无法完成处理或者处理失败的业务数据,对应这部分业务数据,为了保障业务处理的稳定性和及时性,需要根据处理失败的业务数据生成广播信息,将这部分业务数据广播至其余处理服务器进行处理。通过借助系统中其余处理服务器的处理代码以确保业务数据处理成功。
57.其中,业务数据的广播处理流程包括:
58.s1301、所述目标服务器广播当前业务数据至其余处理服务器;
59.s1302、在设定监听周期内监听其余处理服务器基于当前业务数据返回的处理结果,基于所述处理结果执行当前业务数据的处理流程。
60.目标服务器通过在系统中广播包含当前业务数据的处理请求,对应系统中的其余处理服务器,在接收到该业务数据后,根据自身配置的处理代码进行业务数据处理,若处理成功,则返回该处理结果至目标服务器,若处理失败,则忽略这一业务数据。
61.对于目标服务器一端,会在设定监听周期内监听其余处理服务器返回的处理结果。其中,若在所述设定监听周期内监听到所述处理结果,完成当前业务数据处理流程;若在所述设定监听周期内未监听到所述处理结果,上报当前业务数据的异常信息至所述中心服务器。可以理解的是,基于接收到的处理结果,则标识该业务数据处理完成,结束当前业务数据处理流程。反之,如若在设定监听周期内未监听到处理结果,表明其余处理服务器也无法完成当前业务数据处理,则需要根据这一业务数据处理失败的情况生成异常信息,异常信息上报至中心服务器,以便于通过中心服务器进行该业务数据的处理。
62.在一个实施例中,若其余处理服务器成功处理当前业务数据并返回处理结果,则所述目标服务器向回复所述处理结果的处理服务器请求共享当前业务数据的业务数据处理代码,存储请求到的业务数据处理代码。可以理解的是,为了便于目标服务器后续成功处理同类型业务数据,则需要目标服务器更新对应的处理代码,以具备同类型业务数据的处理能力。因此通过先对应处理服务器请求处理代码并进行更新,避免了反复广播业务数据以请求其余处理服务器处理的情况,提升业务数据处理效率和稳定性。
63.在一个实施例中,所述处理服务器依据设定的上报时序,周期性上报业务数据处理结果至所述中心服务器存储,各个所述处理服务器的所述上报时序不同。可以理解的是,对应业务数据的处理结果,需要周期性汇总至中心服务器,以便于中心服务器了解智能电缆各项业务的处理情况,并基于业务数据处理结果进行相关的运维管理操作。则处理服务器在周期性上报业务数据处理结果时,按照不同的上报时序进行处理结果的上报。由于处理服务器众多,如若在某一个统一的时间节点进行处理结果的统一上报,则会导致管理结果产生较大的数据接收和处理压力。因此,本技术实施例对应不同处理服务器设置不同的处理结果上报时序,以实现处理结果的错峰上报。例如,按照处理服务器的数量,将一天分为对应数量的时段,每一个处理服务器在对应的时段上报处理结果。通过分时段上报处理结果,一方面缓解了中心服务器的数据接收压力。同时,对于处理结果的存储或者处理,也相对较为稳定、高效。
64.可选的,处理服务器在根据处理异常的业务数据生成异常信息并上报至所述中心服务器时。由于异常信息指示了哪个业务数据出现了处理异常的情况,基于这一异常信息,
中心服务器会进一步进行该业务数据的重新处理,以确保数据处理成功。
65.其中在处理异常信息时,所述中心服务器轮询所有预存的所述处理代码处理所述异常信息,并在处理失败时,输出异常提示,以提示人工介入处理所述异常信息。可以理解的是,对于处理失败的业务数据,可能存在业务数据错误分配或者处理服务器已有处理代码不足以处理对应业务数据的情况。那么在接收到异常信息后,中心服务器首先会根据自身预先配置的所有处理代码进行异常信息处理,在依序轮询处理代码处理异常信息后,若成功处理异常信息,则异常信息处理流程结束。若未成功处理异常信息,表明当前系统已有处理代码无法处理异常,此时通过输出异常提示,以告知运维人员进行异常信息的人工处理。以此可以提升异常信息的处理效率,优化信息处理效果。
66.在一个实施例中,所述中心服务器基于所述异常信息生成新的业务数据处理代码,将新的业务数据处理代码发送至所述目标服务器进行更新。可以理解的是,对应已有处理代码无法处理的异常信息,在通过异常提示之后,可以由人工更新已有处理代码,通过处理代码更新以满足异常信息的处理。并且,在完成异常信息处理之后,为了保障之后对应处理服务器可以独立完成业务数据处理,避免再次出现处理异常的情况,则进一步将更新后的处理代码同步至对应处理服务器,以保障对应处理服务器处理业务数据的稳定性和有效性。
67.此外,在轮询处理异常信息时,若发现存在处理代码可以处理异常信息,则在完成处理之后,将这一处理代码同步至处理异常的处理服务器,以保障之后对应处理服务器可以独立完成业务数据处理,避免再次出现处理异常的情况。
68.进一步地,对应业务数据处理系统在运行过程中,实时处理业务数据的目标服务器所产生的异常信息,通过所述目标服务器统计设定时间段内的所述异常信息,基于统计结果确定所述异常信息对应的异常电缆节点,并上报所述异常电缆节点至所述中心服务器。可以理解的是,处理服务器在产生异常信息时,表明已有处理代码无法处理该业务数据。若通过一段时间内的数据统计,发现处理服务器在处理某一个电缆节点的业务数据时,经常会产生异常信息,则表明该电缆节点可能出现运行异常,导致其业务数据出现异常,出现高频次处理失败的情况。基于此,本技术实施例通过处理服务器统计设定时间段内的所述异常信息,若设定时间段内某一个电缆节点的业务数据异常信息达到设定数量阈值,则确定该电缆节点为异常电缆节点,通过上报异常电缆节点至中心服务器,以此可以便于中心服务器及时处理电缆节点的异常情况,保障电缆节点的稳定运行。
69.在一个实施例中,所述中心服务器统计设定时间段内各类型业务数据的处理量,根据所述处理量调整各个所述处理服务器对应的业务数据处理代码。可以理解的是,通过统计各类型业务数据的处理量,对于处理量较大的业务数据,可以适应性增加处理服务器进行该业务数据的处理。对于处理量较少的业务数据,则其对应处理服务器的算力相对充足,可以为其分配其他业务数据进行处理。基于此,本技术根据各类型业务数据的处理量,结合各个处理服务器的计算能力,适应性为算力充足的处理服务器分配处理量较大的业务数据的处理代码,以利用该处理服务器处理对应业务数据,实现处理服务器的算力均衡,进一步提升业务数据的处理效率,优化处理服务器的利用率。此外,根据实际需要,当已有处理服务器无法满足某一业务数据的处理时,还可以适应性新增处理服务器,并为该处理服务器配置处理量较大的业务数据的处理代码,以此来保障对应类型业务数据的高效处理,
保障业务数据处理系统的稳定运行。
70.在一个实施例中,业务数据处理系统在新增所述处理服务器时,所述中心服务器根据系统新增业务或者设定时间段内各类型业务数据的处理量,为新增的所述处理服务器分配对应的处理代码。可以理解的是,为了充分利用处理服务器的计算资源,避免部分处理服务器的计算资源浪费,同时又确保所有类型业务数据都能够及时处理,则在每新增一个处理服务器时,需要对新增处理服务器分配合适的处理代码。其中,若系统中新增了其他类型的业务数据,则优先分配新增业务的处理代码给该处理服务器,以确保新增业务的业务数据可以稳定处理。此外,也可以根据设定时间段内各类型业务数据的处理量,确定处理量较大的业务数据类型,为新增处理服务器分配该类型业务数据的处理代码,以使系统能够提供充足的计算资源处理较大处理量的业务数据。
71.上述,通过各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至目标服务器;目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,业务数据处理代码用于处理对应数据类型信息的业务数据,中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;若当前业务数据处理成功,完成当前业务数据处理流程,若当前业务数据处理失败,目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。采用上述技术手段,能够缓解系统后台的海量业务数据处理压力,提升业务数据处理效率,保障业务数据处理的稳定性和成功率。
72.实施例二:
73.在上述实施例的基础上,图4为本技术实施例二提供的一种业务数据的分布式处理装置的结构示意图。参考图4,本实施例提供的业务数据的分布式处理装置具体包括:发送模块21、接收模块22和处理模块23。
74.其中,发送模块21用于通过各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询所述映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至所述目标服务器;
75.接收模块22用于通过所述目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,所述业务数据处理代码用于处理对应数据类型信息的业务数据,所述中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;
76.处理模块23用于在当前业务数据处理成功时,完成当前业务数据处理流程,在当前业务数据处理失败时,通过所述目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。
77.处理模块23具体通过所述目标服务器广播当前业务数据至其余处理服务器;在设定监听周期内监听其余处理服务器基于当前业务数据返回的处理结果,基于所述处理结果执行当前业务数据的处理流程。
78.若在所述设定监听周期内监听到所述处理结果,完成当前业务数据处理流程;
79.若在所述设定监听周期内未监听到所述处理结果,上报当前业务数据的异常信息
至所述中心服务器。
80.处理模块23还通过所述目标服务器向回复所述处理结果的处理服务器请求共享当前业务数据的业务数据处理代码,存储请求到的业务数据处理代码。
81.分布式处理装置还用于通过所述目标服务器统计设定时间段内的所述异常信息,基于统计结果确定所述异常信息对应的异常电缆节点,并上报所述异常电缆节点至所述中心服务器。
82.通过所述中心服务器基于所述异常信息生成新的业务数据处理代码,将新的业务数据处理代码发送至所述目标服务器进行更新。
83.通过所述中心服务器统计设定时间段内各类型业务数据的处理量,根据所述处理量调整各个所述处理服务器对应的业务数据处理代码。
84.上述,通过各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至目标服务器;目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,业务数据处理代码用于处理对应数据类型信息的业务数据,中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;若当前业务数据处理成功,完成当前业务数据处理流程,若当前业务数据处理失败,目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。采用上述技术手段,能够缓解系统后台的海量业务数据处理压力,提升业务数据处理效率,保障业务数据处理的稳定性和成功率。
85.本技术实施例二提供的业务数据的分布式处理装置可以用于执行上述实施例一提供的业务数据的分布式处理方法,具备相应的功能和有益效果。
86.实施例三:
87.本技术实施例三提供了一种电子设备,参照图5,该电子设备包括:处理器31、存储器32、通信模块33、输入装置34及输出装置35。该电子设备中处理器的数量可以是一个或者多个,该电子设备中的存储器的数量可以是一个或者多个。该电子设备的处理器31、存储器32、通信模块33、输入装置34及输出装置35可以通过总线或者其他方式连接。
88.存储器32作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本技术任意实施例所述的业务数据的分布式处理方法对应的程序指令/模块(例如,业务数据的分布式处理装置中的发送模块、接收模块和处理模块)。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器可进一步包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
89.通信模块33用于进行数据传输。
90.处理器31通过运行存储在存储器中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的业务数据的分布式处理方法。
91.输入装置34可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及
功能控制有关的键信号输入。输出装置35可包括显示屏等显示设备。
92.上述提供的电子设备可用于执行上述实施例一提供的业务数据的分布式处理方法,具备相应的功能和有益效果。
93.实施例四:
94.本技术实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种业务数据的分布式处理方法,该业务数据的分布式处理方法包括:各个电缆节点预先存储业务数据的各个数据类型信息与对应处理服务器的映射关系,在新生成业务数据时,基于当前业务数据的数据类型信息查询所述映射关系,确定对应的处理服务器为目标服务器,将当前业务数据发送至所述目标服务器;所述目标服务器接收到业务数据后,基于中心服务器预配置的业务数据处理代码进行当前业务数据处理,所述业务数据处理代码用于处理对应数据类型信息的业务数据,所述中心服务器预先对应不同的处理服务器配置对应类型的业务数据处理代码;若当前业务数据处理成功,完成当前业务数据处理流程,若当前业务数据处理失败,所述目标服务器广播当前业务数据至其余处理服务器进行业务数据处理。
95.存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如cd-rom、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如dram、ddrram、sram、edoram,兰巴斯(rambus)ram等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
96.当然,本技术实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的业务数据的分布式处理方法,还可以执行本技术任意实施例所提供的业务数据的分布式处理方法中的相关操作。
97.上述实施例中提供的业务数据的分布式处理装置、存储介质及电子设备可执行本技术任意实施例所提供的业务数据的分布式处理方法,未在上述实施例中详尽描述的技术细节,可参见本技术任意实施例所提供的业务数据的分布式处理方法。
98.上述仅为本技术的较佳实施例及所运用的技术原理。本技术不限于这里所述的特定实施例,对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本技术的保护范围。因此,虽然通过以上实施例对本技术进行了较为详细的说明,但是本技术不仅仅限于以上实施例,在不脱离本技术构思的情况下,还可以包括更多其他等效实施例,而本技术的范围由权利要求的范围决定。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1