一种数据属性的生成方法、装置以及电子设备与流程

文档序号:33513729发布日期:2023-03-22 05:38阅读:42来源:国知局
一种数据属性的生成方法、装置以及电子设备与流程

1.本技术涉及数据处理技术领域,尤其是涉及一种数据属性的生成方法、装置以及电子设备。


背景技术:

2.在实际应用过程中,开发人员往往需要根据业务采集需求,预设采集事件及采集属性,从而进行数据采集,但随着业务采集需求的增加,需要开发人员根据不同的业务采集需求重新编写代码进行代码发版,不同的业务采集需求导致开发人员重复进行代码发版的工作,从而影响开发人员的工作效率。
3.目前,上述数据采集的方式还具有单个属性维度相对单一的问题,若是遇到不同的业务采集需求,可能存在对一些现有存储的常规数据重复加工以满足业务采集需求的多样性,但是这种对数据重复加工的方式会导致占用处理资源,影响数据采集的性能。因此,如何扩充数据的属性维度以满足不同的业务采集需求,成为了亟待解决的问题。


技术实现要素:

4.有鉴于此,本技术的目的在于提供一种数据属性的生成方法、装置以及电子设备,能够通过获取目标事件对应的原始属性,将原始属性按照生成方式进行数据处理后,生成目标属性,通过对已入数据库的原始属性对应的属性数据二次加工,生成新的属性数据,从而扩充数据库中存储的数据的属性维度以满足不同的业务采集需求,并减少了对数据库中存储的数据的重复加工,节省了处理资源,从而提高数据的采集性能。
5.本技术主要包括以下几个方面:
6.第一方面,本技术实施例提供了一种数据属性的生成方法,所述生成方法包括:
7.响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;
8.获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;
9.若不具有,则通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
10.进一步的,所述目标属性为第一目标属性,并确定对应生成方式为计算方式,所述通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性的步骤,包括:
11.获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
12.获取用于确定目标属性的至少一个运算符号,并基于所述至少一个运算符号以及所述目标原始属性,生成所述目标属性的计算公式;
13.将每个目标原始属性对应的属性数据代入所述目标属性的计算公式中,得到所述
目标属性对应的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
14.进一步的,所述目标属性为第二目标属性,并确定对应生成方式为截取方式,所述通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性的步骤,包括:
15.获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
16.针对每个目标原始属性,确定该目标原始属性对应的属性数据是键值对格式还是链接格式;
17.若是键值对格式,则按照该属性数据对应的键抽取该属性数据对应的值,并基于该属性数据对应的值生成所述目标属性;
18.若是链接格式,则获取该目标原始属性对应的属性数据的抽取部位,并按照所述链接格式包括的各个组成部分将该属性数据进行拆分,得到各个组成部分对应的子内容,在所述各个组成部分中获取所述抽取部位对应的目标组成部分,并基于所述目标组成部分对应的子内容生成所述目标属性。
19.进一步的,所述目标属性为第三目标属性,并确定对应生成方式为合并方式,所述通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性的步骤,包括:
20.获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
21.将每个目标原始属性对应的属性数据确定为所述目标属性对应的属性数据,基于所述目标属性对应的属性数据生成所述目标属性。
22.进一步的,所述目标属性为第四目标属性,并确定对应生成方式为去重方式,所述通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性的步骤,包括:
23.获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
24.将所述每个目标原始属性对应的属性数据进行拼接,将所述拼接后的属性数据确定为所述目标属性对应的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
25.进一步的,所述响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式的步骤,包括:
26.响应于针对目标事件新增目标属性的第一操作,在预先设置的生成方式列表中获取所述第一操作指示的生成方式;
27.将所述第一操作指示的生成方式确定为所述目标属性的生成方式。
28.进一步的,所述生成方法还包括:
29.将所述目标属性更新为所述目标事件对应的原始属性,获取针对目标事件进行数据分析所需的每个服务器的标识;
30.基于每个服务器的标识控制对应的服务器从数据库中获取所述目标事件下的每个原始属性对应的属性数据;
31.将每个服务器获取到的每个原始属性对应的属性数据进行展示,以便对所述目标事件进行数据分析。
32.进一步的,所述生成所述目标属性后,所述生成方法还包括:
33.将所述第一操作所指示的目标属性的生成方式存储在数据库中;
34.响应于所述目标属性的获取操作,从所述数据库中获取所述目标属性的生成方式,通过所述目标属性的生成方式生成所述目标属性。
35.第二方面,本技术实施例还提供了一种数据属性的生成装置,所述生成装置包括:
36.获取模块,用于响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;
37.确定模块,用于获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;
38.生成模块,用于在确定所述原始属性中不具有所述目标属性时,通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
39.第三方面,本技术实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述的数据属性的生成方法的步骤。
40.本技术实施例提供的一种数据属性的生成方法、装置以及电子设备,所述生成方法包括:响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;若不具有,则通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
41.这样,采用本技术提供的技术方案能够通过获取目标事件对应的原始属性,将原始属性按照生成方式进行数据处理后,生成目标属性,通过对已入数据库的原始属性对应的属性数据二次加工,生成新的属性数据,从而扩充数据库中存储的数据的属性维度以满足不同的业务采集需求,并减少了对数据库中存储的数据的重复加工,节省了处理资源,从而提高数据的采集性能。
42.为使本技术的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
43.为了更清楚地说明本技术实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本技术的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
44.图1示出了本技术实施例所提供的一种数据属性的生成方法的流程图;
45.图2示出了本技术实施例所提供的另一种数据属性的生成方法的流程图;
46.图3示出了本技术实施例所提供的一种数据属性生成的示意图;
47.图4示出了本技术实施例所提供的一种数据属性的生成装置的结构图之一;
48.图5示出了本技术实施例所提供的一种数据属性的生成装置的结构图之二;
49.图6示出了本技术实施例所提供的一种电子设备的结构示意图。
具体实施方式
50.为使本技术实施例的目的、技术方案和优点更加清楚,下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行清楚、完整地描述,应当理解,本技术中的附图仅起到说明和描述的目的,并不用于限定本技术的保护范围。另外,应当理解,示意性的附图并未按实物比例绘制。本技术中使用的流程图示出了根据本技术的一些实施例实现的操作。应当理解,流程图的操作可以不按顺序实现,没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外,本领域技术人员在本技术内容的指引下,可以向流程图添加一个或多个其他操作,也可以从流程图中移除一个或多个操作。
51.另外,所描述的实施例仅仅是本技术一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本技术实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本技术的实施例的详细描述并非旨在限制要求保护的本技术的范围,而是仅仅表示本技术的选定实施例。基于本技术的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的全部其他实施例,都属于本技术保护的范围。
52.为了使得本领域技术人员能够使用本技术内容,结合特定应用场景“数据属性的生成”,给出以下实施方式,对于本领域技术人员来说,在不脱离本技术的精神和范围的情况下,可以将这里定义的一般原理应用于其他实施例和应用场景。
53.本技术实施例下述方法、装置、电子设备或计算机可读存储介质可以应用于任何需要生成数据的属性的场景,本技术实施例并不对具体的应用场景作限制,任何使用本技术实施例提供的一种数据属性的生成方法、装置以及电子设备的方案均在本技术保护范围内。
54.值得注意的是,在实际应用过程中,开发人员往往需要根据业务采集需求,预设采集事件及采集属性,从而进行数据采集,但随着业务采集需求的增加,需要开发人员根据不同的业务采集需求重新编写代码进行代码发版,不同的业务采集需求导致开发人员重复进行代码发版的工作,从而影响开发人员的工作效率。
55.目前,上述数据采集的方式还具有单个属性维度相对单一的问题,若是遇到不同的业务采集需求,可能存在对一些现有存储的常规数据重复加工以满足业务采集需求的多样性,但是这种对数据重复加工的方式会导致占用处理资源,影响数据采集的性能。因此,如何扩充数据的属性维度以满足不同的业务采集需求,成为了亟待解决的问题。
56.基于此,本技术提出了一种数据属性的生成方法、装置以及电子设备,所述生成方法包括:响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;若不具有,则通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
57.这样,采用本技术提供的技术方案能够通过获取目标事件对应的原始属性,将原始属性按照生成方式进行数据处理后,生成目标属性,通过对已入数据库的原始属性对应的属性数据二次加工,生成新的属性数据,从而扩充数据库中存储的数据的属性维度以满足不同的业务采集需求,并减少了对数据库中存储的数据的重复加工,节省了处理资源,从而提高数据的采集性能。
58.为便于对本技术进行理解,下面将结合具体实施例对本技术提供的技术方案进行详细说明。
59.请参阅图1,图1为本技术实施例所提供的一种数据属性的生成方法的流程图,如图1中所示,所述生成方法包括:
60.s101、响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;
61.该步骤中,本实施例提供的一种数据属性的生成方法部署在进行数据分析的服务器上,应用在数据入库之后以及数据分析之前,即将采集到的原始属性对应的属性数据存储在数据库后,对属性数据进行数据分析前还需要对属性数据进行二次加工得到目标属性,以达到扩充属性维度的目的;示例性的,数据库中存储有之前采集到的原始属性对应的属性数据,例如,某个商品的原始属性“原价”对应的属性数据“200元”,原始属性“现价”对应的属性数据为“100元”,在对属性数据进行分析之前,若是还想获取该商品的折扣率(数据库中未存储有“折扣率”),则可以通过对原始属性(原价和现价)对应的属性数据进行二次加工(数据处理),以得到目标属性“折扣率”对应的属性数据“50%”。
62.需要说明的是,响应于针对目标事件新增目标属性的第一操作,确定第一操作所指示的目标属性的生成方式的步骤,包括:
63.s1011、响应于针对目标事件新增目标属性的第一操作,在预先设置的生成方式列表中获取所述第一操作指示的生成方式;
64.s1012、将所述第一操作指示的生成方式确定为所述目标属性的生成方式。
65.作为示例,生成方式可包括计算方式、截取方式、合并方式、去重方式、转化方式以及校验方式中的至少一项。具体说来,生成方式可预先设置,并根据用户的操作来选择,例如,页面上显示预先设置的生成方式列表,在用户需要针对目标事件新增目标属性时,可在进行新增操作后针对在页面上显示的多个生成方式进行筛选,当用户选择了列表中的某一生成方式时,响应于用户的选择操作,后台基于用户的选择操作获取到该生成方式,将该生成方式确定为新增目标属性的生成方式。这里,生成方式可以是根据历史经验或者业务需求来确定,此外,还可以通过将数据库中存储的原始属性进行不同的数据处理从而生成新的属性,上述生成方式的预先设置方式仅是示例性的,其他的预先设置方式也可以,本技术在此不做任何限定。
66.此外,作为示例,目标事件可以是与实际业务相关的事件,例如登录事件、上传事件以及播放事件等。
67.s102、获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;
68.该步骤中,数据库中存储有多个事件中每个事件对应的原始属性,以及每个原始属性对应的属性数据;例如,交易事件下包括的原始属性可以有姓名、密码以及交易金额
等,姓名对应的属性数据是“张三”,交易金额对应的属性数据是“1000”。这里,需要在数据库中存储的原始属性中确定是否具有目标属性,若具有,说明已经存在目标属性的生成方式,可以直接通过目标属性的生成方式生成对应的属性数据,从而得到目标属性,无需新建;若数据库中存储的原始属性的生成方式中不具有目标属性的生成方式,则基于第一操作所指示的目标属性的生成方式生成目标属性。
69.s103、若不具有,则通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
70.需要说明的是,在生成目标属性后,生成方法还包括:
71.1)、将所述第一操作所指示的目标属性的生成方式存储在数据库中;
72.2)、响应于所述目标属性的获取操作,从所述数据库中获取所述目标属性的生成方式,通过所述目标属性的生成方式生成所述目标属性。
73.这里,还可以将得到的目标属性的生成方式存储在数据库中,后续在响应于目标属性的获取操作时,则可以直接在数据库中获取对应的生成方式,从而生成目标属性,以达到扩充目标事件下的数据的属性维度。
74.示例性的,目标属性是“折扣率”,第一操作指示的目标属性“折扣率”的生成方式为计算方式“(原价-现价)
÷
原价
×
100%”,将目标属性“折扣率”以及目标属性“折扣率”对应的生成方式存储在数据库中,后续在进行关于折扣率的数据分析时,可以直接从数据库中获取目标属性“折扣率”对应的生成方式,通过该生成方式计算出具体的折扣率数值(属性数据),从而生成目标属性“折扣率”。
75.下面,将以各个生成方式为例,来说明如何生成针对目标事件的新增的目标属性。
76.作为第一示例,目标属性为第一目标属性,并确定对应生成方式为计算方式,生成目标属性的步骤请参阅图2,如图2所示,通过第一操作所指示的目标属性的生成方式,对目标事件对应的属性数据进行处理,生成目标属性的步骤,包括:
77.s201、获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
78.这里,目标原始属性根据第二操作被确定,第二操作可以是用户基于经验在界面所显示的原始属性中选择的用于使用计算方式确定目标属性的目标原始属性,也可以是根据预定规则,从所述目标事件对应的原始属性筛选出来用于使用计算方式确定目标属性的目标原始属性。示例性的,在页面上显示的原始属性(例如:商品名、现价、原价等)中,用户通过鼠标点击的方式或者在页面进行输入的方式确定出目标原始属性(例如:原价和现价),并获取确定出的目标原始属性以及每个目标原始属性对应的属性数据(例如:原价对应的属性数据是200元,现价对应的属性数据是100元)。
79.s202、获取用于确定目标属性的至少一个运算符号,并基于所述至少一个运算符号以及所述目标原始属性,生成所述目标属性的计算公式;
80.该步骤中,可以在页面显示的多个运算符号中,通过点击或者输入的选择操作,获取确定目标属性的运算符号;例如“+”、
“‑”

“×”

“÷”
以及括号等运算符号;示例性的,若是想要新增的目标属性是折扣率,根据折扣率的计算公式=(原价-现价)
÷
原价
×
100%,可以人为在页面配置该计算公式,将上述获取到的目标原始属性(原价和现价)和获取到的运算符号配置成上述计算公式的形式,以生成折扣率的计算公式。
81.s203、将每个目标原始属性对应的属性数据代入所述目标属性的计算公式中,得到所述目标属性对应的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
82.例如,将获取到的目标原始属性原价200元和现价100元带入上述折扣率的计算公式,得到目标属性折扣率对应的属性数据为50%。
83.作为第二示例,目标属性为第二目标属性,并确定对应生成方式为截取方式,通过第一操作所指示的目标属性的生成方式,对目标事件对应的属性数据进行处理,生成目标属性的步骤,包括:
84.1)、获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
85.该步骤中,目标原始属性根据第三操作被确定,第三操作可以是用户基于经验在界面所显示的原始属性中选择的用于使用截取方式确定目标属性的目标原始属性,也可以是根据预定规则,从所述目标事件对应的原始属性筛选出来用于使用截取方式确定目标属性的目标原始属性。
86.2)、针对每个目标原始属性,确定该目标原始属性对应的属性数据是键值对格式还是链接格式;
87.示例性的,目标原始属性对应的属性数据若是json字符串,则为键值对格式,若是url字符串,则为链接格式。
88.3)、若是键值对格式,则按照该属性数据对应的键抽取该属性数据对应的值,并基于该属性数据对应的值生成所述目标属性;
89.该步骤中,若是获取到的目标原始属性是键值对格式,例如目标原始属性是“证件号”,“证件号”对应的属性数据是:{“身份证号”:“111”,“社保卡号”:“222”,“工号”:“333”},可以通过在页面预先配置截取属性数据中的键,例如配置截取的属性数据中的键是“工号”,可以将“工号”作为目标属性的名称,“工号”对应的值“333”作为目标属性对应的属性数据,基于目标属性的名称和目标属性对应的属性数据生成目标属性。
90.4)、若是链接格式,则获取该目标原始属性对应的属性数据的抽取部位,并按照所述链接格式包括的各个组成部分将该属性数据进行拆分,得到各个组成部分对应的子内容,在所述各个组成部分中获取所述抽取部位对应的目标组成部分,并基于所述目标组成部分对应的子内容生成所述目标属性。
91.该步骤中,若是获取到的目标原始属性是链接格式,例如目标原始属性“登录链接”对应的属性数据是:“https://www.xxx.com/ccccc.html”,可以通过在页面预先配置属性数据中的抽取部分,例如配置截取的属性数据中的抽取部位是“域名”,可以将“域名”作为目标属性的名称,“域名”对应的子内容“www.xxx.com”作为目标属性对应的属性数据,基于目标属性的名称和目标属性对应的属性数据生成目标属性。
92.作为第三示例,目标属性为第三目标属性,并确定对应生成方式为合并方式,通过第一操作所指示的目标属性的生成方式,对目标事件对应的属性数据进行处理,生成目标属性的步骤,包括:
93.1)、获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
94.该步骤中,目标原始属性根据第四操作被确定,第四操作可以是用户基于经验在界面所显示的原始属性中选择的用于使用合并方式确定目标属性的目标原始属性,也可以是根据预定规则,从所述目标事件对应的原始属性筛选出来用于使用合并方式确定目标属性的目标原始属性。
95.2)、将每个目标原始属性对应的属性数据确定为所述目标属性对应的属性数据,基于所述目标属性对应的属性数据生成所述目标属性。
96.示例性的,将具有相同含义不同名称的原始属性作为目标原始属性,例如“age”和“age1”代表不同版本下的年龄属性,可以在页面上输入“age2”作为目标属性的名称,即将“age”和“age1”合并后的名称,并将“age”和“age1”对应的属性数据作为“age2”的属性数据,基于目标属性的名称和目标属性对应的属性数据生成目标属性“age2”,以此解决因历史版本原因导致的属性名称不一致的问题。
97.作为第四示例,目标属性为第四目标属性,并确定对应生成方式为去重方式,通过第一操作所指示的目标属性的生成方式,对目标事件对应的属性数据进行处理,生成目标属性的步骤,包括:
98.1)、获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
99.该步骤中,目标原始属性根据第五操作被确定,第五操作可以是用户基于经验在界面所显示的原始属性中选择的用于使用去重方式确定目标属性的目标原始属性,也可以是根据预定规则,从所述目标事件对应的原始属性筛选出来用于使用去重方式确定目标属性的目标原始属性。针对每个目标原始属性,若该目标原始属性下具有多个相同的属性数据,则说明该目标原始属性不具有唯一性,例如在“姓名”这个目标原始属性下有两个属性数据均是“张三”,无法区分出两个“张三”的不同。
100.2)、将所述每个目标原始属性对应的属性数据进行拼接,将所述拼接后的属性数据确定为所述目标属性对应的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
101.示例性的,在页面上选择“性别”、“年龄”以及“身高”等目标原始属性,获取姓名为“张三”时,对应的“性别”、“年龄”以及“身高”等目标原始属性对应的属性数据,可以用于区分“张三”的不同。例如可以将“性别”、“年龄”以及“身高”等目标原始属性对应的属性数据依次进行拼接,得到目标属性对应的属性数据,基于目标属性对应的属性数据生成目标属性。
102.作为第五示例,目标属性为第五目标属性,并确定对应生成方式为转化方式,通过第一操作所指示的目标属性的生成方式,对目标事件对应的属性数据进行处理,生成目标属性的步骤,包括:
103.1)、获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
104.该步骤中,目标原始属性根据第六操作被确定,第六操作可以是用户基于经验在界面所显示的原始属性中选择的用于使用转化方式确定目标属性的目标原始属性,也可以是根据预定规则,从所述目标事件对应的原始属性筛选出来用于使用转化方式确定目标属性的目标原始属性。因为有些数据在进行采集时是通过将小数定义为字符型进行上报的,
若是在后续进行数据分析时,例如数据间需要进行一些数学计算时,若是该数据是字符型则无法直接进行计算,需要将数据从字符型转化为整型或者小数型才可以进行计算。
105.2)、针对每个目标原始属性对应的属性数据,确定该属性数据的数据类型是否是字符型;
106.3)、若是,则将数据类型是字符型的属性数据通过预设的转化执行语句转化为保留预设位数的数值型属性数据,将转化后所述数据类型是数值型的属性数据确定为目标属性对应的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
107.该步骤中,预设的转化执行语句可以是将字符型转化为保留四位小数的小数类型的语句,保留的预设位数可以是根据历史经验提前设置的,将转化后的小数类型的属性数据作为高精度类型的目标属性对应的属性数据,基于目标属性对应的属性数据生成目标属性。
108.作为第六示例,目标属性为第六目标属性,并确定对应生成方式为校验方式,通过第一操作所指示的目标属性的生成方式,对目标事件对应的属性数据进行处理,生成目标属性的步骤,包括:
109.1)、获取用于确定目标属性的多个目标原始属性和每个目标原始属性对应的属性数据;
110.该步骤中,目标原始属性根据第七操作被确定,第七操作可以是用户基于经验在界面所显示的原始属性中选择的用于使用校验方式确定目标属性的目标原始属性,也可以是根据预定规则,从所述目标事件对应的原始属性筛选出来用于使用校验方式确定目标属性的目标原始属性。示例性的,想要校验用户的id是否符合预设的id生成规则,则在页面上输入或选择“userid”这个目标原始属性的名称,以获取“userid”以及“userid”对应的属性数据。
111.2)、针对每个目标原始属性对应的属性数据,确定该属性数据是否满足该目标原始属性对应的预设规则;
112.该步骤中,目标原始属性对应的预设规则可以是人为在页面提前进行配置的,可以配置属性数据的长度,以及各个组成部分对应的子规则;示例性的,“userid”对应的属性数据需要满足长度是8个字符,其中,可以将属性数据分为两个组成部分,第一个组成部分即前两个字符,第二个组成部分即后六个字符;第一个组成部分对应的子规则为:由字母组成,并确定这两个字母是否在预设的字母组合规则中,预设的字母组合规则为人为预先设置的代表不同客户群体的类别;第二个组成部分对应的子规则为:有六个数字组成。确定“userid”对应的属性数据是否满足上述“userid”预设的规则。
113.3)、若是不满足,则将无效确定为所述目标属性的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
114.该步骤中,若是不满足,说明属性数据是无效的;示例性的,若是用户自造了一个“userid”对应的属性数据,并不满足“userid”预设的规则,所以目标属性对应的属性数据是“false”,来显示出这个用户是无效用户。目标属性是通过正则表达式(预设规则)校验某个属性数据的数据质量而创建的布尔类型的属性。
115.4)、若满足,则将有效确定为所述目标属性的属性数据,并基于所述目标属性对应的属性数据生成所述目标属性。
116.该步骤中,若是满足,说明属性数据是有效的,目标属性对应的属性数据是“true”,来显示出目标属性所校验的属性数据是有效的,或者是符合预设规则,是有质量的内容。
117.需要说明的是,生成方法还包括:
118.1)、将所述目标属性更新为所述目标事件对应的原始属性,获取针对目标事件进行数据分析所需的每个服务器的标识;
119.2)、基于每个服务器的标识控制对应的服务器从数据库中获取所述目标事件下的每个原始属性对应的属性数据;
120.3)、将每个服务器获取到的每个原始属性对应的属性数据进行展示,以便对所述目标事件进行数据分析。
121.示例性的,请参阅图3,图3示出了本技术实施例所提供的一种数据属性生成的示意图,如图3所示,通过数据库中存储的原始属性1、原始属性2、

,以及原始属性n对应的属性数据,按照目标属性的生成方式将对应的原始属性的属性数据进行二次加工,得到目标属性的属性数据,从而生成目标属性,将目标属性以及目标属性的属性数据存储在数据库中,这样,在获取下游进行数据分析时经过的每个节点,即每个服务器的标识(服务器1、服务器2、

,以及服务器n),均可以基于服务器的标识控制对应的服务器直接从数据库中获取目标属性的属性数据进行数据分析;而在现有技术中,当想要进行数据分析的数据(目标属性的属性数据)不在数据库中存储时,进行数据分析时所经过的每个服务器均需要从数据库中获取生成目标属性所需的原始属性的属性数据,每个服务器还需要分别将获取到的原始属性的属性数据进行二次加工从而生成目标属性再进行数据分析,这种每个服务器均进行生成目标属性的方式占用了处理资源,影响了数据处理的速度,从而影响后续数据分析的效率;而本实施例提供的技术方案可以将生成的目标属性存储在数据库中,对于每个服务器而言只需要直接从数据库中获取目标属性的属性数据即可,无需再进行大量的计算,不仅节约了内存开销,还提高了后续数据分析的效率。
122.本技术实施例提供的一种数据属性的生成方法,所述生成方法包括:响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;若不具有,则通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
123.这样,采用本技术提供的技术方案能够通过获取目标事件对应的原始属性,将原始属性按照生成方式进行数据处理后,生成目标属性,通过对已入数据库的原始属性对应的属性数据二次加工,生成新的属性数据,从而扩充数据库中存储的数据的属性维度以满足不同的业务采集需求,并减少了对数据库中存储的数据的重复加工,节省了处理资源,从而提高数据的采集性能。
124.基于同一申请构思,本技术实施例中还提供了与上述实施例提供一种数据属性的生成方法对应的一种数据属性的生成装置,由于本技术实施例中的装置解决问题的原理与本技术上述实施例一种数据属性的生成方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
125.请参阅图4、图5,图4为本技术实施例所提供的一种数据属性的生成装置的结构图
之一,图5为本技术实施例所提供的一种数据属性的生成装置的结构图之二。如图4中所示,所述生成装置410包括:
126.获取模块411,用于响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式
127.确定模块412,用于获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;
128.生成模块413,用于在确定所述原始属性中不具有所述目标属性时,通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
129.可选的,所述目标属性为第一目标属性,并确定对应生成方式为计算方式,所述生成模块413用于:
130.在所述采集数据包括的多个采集属性中,响应于参与所述目标属性计算的采集属性的计算操作,获取所述计算操作对应的多个第一采集属性以及每个第一采集属性对应的属性数据;
131.在每个第一采集属性之间包括的多个运算符号中,响应于运算符号的选择操作,获取每个第一采集属性之间的目标运算符号;
132.将每个第一采集属性对应的属性数据按照对应的目标运算符号拼接后进行运算,得到所述目标属性对应的属性数据,从而生成所述目标属性。
133.可选的,所述目标属性为第二目标属性,并确定对应生成方式为截取方式,所述生成模块413用于:
134.在所述采集数据包括的多个采集属性中,响应于针对采集属性的截取操作,获取所述截取操作对应的第二采集属性以及所述第二采集属性对应的属性数据;
135.确定所述第二采集属性对应的属性数据是键值对格式还是链接格式;
136.若是键值对格式,则按照所述属性数据对应的键抽取所述属性数据对应的值,将所述属性数据对应的值确定为所述目标属性对应的属性数据,从而生成所述目标属性;
137.若是链接格式,则获取所述第二采集属性对应的属性数据的抽取部位,并按照所述链接格式包括的各个组成部分将所述第二采集属性对应的属性数据进行拆分,得到各个组成部分对应的子内容,在所述各个组成部分中获取所述抽取部位对应的目标组成部分,将所述目标组成部分对应的子内容确定为所述目标属性对应的属性数据,从而生成所述目标属性。
138.可选的,所述目标属性为第三目标属性,并确定对应生成方式为合并方式,所述生成模块413用于:
139.在所述采集数据包括的多个采集属性中,响应于针对合并方式的采集属性的合并操作,获取所述合并操作对应的多个第三采集属性以及每个第三采集属性对应的属性数据;
140.基于每个第三采集属性,响应于合并所述第三采集属性的操作,获取所述操作对应的目标属性的名称,并将每个第三采集属性对应的属性数据确定为所述目标属性对应的属性数据,从而生成所述目标属性。
141.可选的,所述目标属性为第四目标属性,并确定对应生成方式为去重方式,所述生
成模块413用于:
142.在所述采集数据包括的多个采集属性中,基于每个采集属性对应的属性数据,确定是否具有相同的属性数据;
143.若具有,则响应于针对采集属性的去重操作,在所述采集数据包括的除了所述具有相同的属性数据的采集属性之外的其余多个采集属性中,获取所述去重操作对应的多个第四采集属性以及每个第四采集属性对应的属性数据;
144.将所述每个第四采集属性对应的属性数据进行拼接,将所述拼接后的属性数据确定为所述目标属性对应的属性数据,从而生成所述目标属性。
145.可选的,所述目标属性为第五目标属性,并确定对应生成方式为转化方式,所述生成模块413用于:
146.在所述采集数据包括的多个采集属性中,响应于针对采集属性的转化操作,获取所述转化操作对应的第五采集属性以及所述第五采集属性对应的属性数据;
147.确定所述第五采集属性对应的属性数据是否是字符型;
148.若是,则将字符型的属性数据通过预设的转化执行语句转化为保留预设位数的小数类型,将所述小数类型的属性数据确定为目标属性对应的属性数据,从而生成所述目标属性。
149.可选的,所述目标属性为第六目标属性,并确定对应生成方式为校验方式,所述生成模块413用于:
150.在所述采集数据包括的多个采集属性中,响应于针对采集属性的校验操作,获取所述校验操作对应的第六采集属性以及所述第六采集属性对应的属性数据;
151.确定所述第六采集属性对应的属性数据是否满足所述第六采集属性预设的规则;
152.若是不满足,则将无效确定为所述目标属性的属性数据,从而生成所述目标属性;
153.若满足,则将有效确定为所述目标属性的属性数据,从而生成所述目标属性。
154.可选的,所述获取模块411具体用于:
155.响应于针对目标事件新增目标属性的第一操作,在预先设置的生成方式列表中获取所述第一操作指示的生成方式;
156.将所述第一操作指示的生成方式确定为所述目标属性的生成方式。
157.可选的,如图5所示,所述生成装置410还包括分析模块414,所述分析模块414用于:
158.将所述目标属性更新为所述目标事件对应的原始属性,获取针对目标事件进行数据分析所需的每个服务器的标识;
159.基于每个服务器的标识控制对应的服务器从数据库中获取所述目标事件下的每个原始属性对应的属性数据;
160.将每个服务器获取到的每个原始属性对应的属性数据进行展示,以便对所述目标事件进行数据分析。
161.可选的,所述生成模块413还用于:
162.将所述第一操作所指示的目标属性的生成方式存储在数据库中;
163.响应于所述目标属性的获取操作,从所述数据库中获取所述目标属性的生成方式,通过所述目标属性的生成方式生成所述目标属性。
164.本技术实施例提供的一种数据属性的生成装置,所述生成装置包括:获取模块,用于响应于针对目标事件新增目标属性的第一操作,确定所述第一操作所指示的目标属性的生成方式;确定模块,用于获取所述目标事件对应的原始属性以及每个原始属性的生成方式,并确定所述生成方式中是否具有所述目标属性的生成方式;生成模块,用于在确定所述原始属性中不具有所述目标属性时,通过所述第一操作所指示的目标属性的生成方式,对所述目标事件对应的属性数据进行处理,生成所述目标属性。
165.这样,采用本技术提供的技术方案能够通过获取目标事件对应的原始属性,将原始属性按照生成方式进行数据处理后,生成目标属性,通过对已入数据库的原始属性对应的属性数据二次加工,生成新的属性数据,从而扩充数据库中存储的数据的属性维度以满足不同的业务采集需求,并减少了对数据库中存储的数据的重复加工,节省了处理资源,从而提高数据的采集性能。
166.请参阅图6,图6为本技术实施例所提供的一种电子设备的结构示意图。如图6中所示,所述电子设备600包括处理器610、存储器620和总线630。
167.所述存储器620存储有所述处理器610可执行的机器可读指令,当电子设备600运行时,所述处理器610与所述存储器620之间通过总线630通信,所述机器可读指令被所述处理器610执行时,可以执行如上述图1以及图2所示方法实施例中的数据属性的生成方法的步骤,具体实现方式可参见方法实施例,在此不再赘述。
168.本技术实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时可以执行如上述图1以及图2所示方法实施例中的数据属性的生成方法的步骤,具体实现方式可参见方法实施例,在此不再赘述。
169.所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
170.在本技术所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
171.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
172.另外,在本技术各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
173.所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本技术各个实施例所
述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read-only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。
174.最后应说明的是:以上所述实施例,仅为本技术的具体实施方式,用以说明本技术的技术方案,而非对其限制,本技术的保护范围并不局限于此,尽管参照前述实施例对本技术进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本技术实施例技术方案的精神和范围,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1