本发明涉及数据处理,具体而言,涉及一种目标对象评估方法、系统、电子设备及存储介质。
背景技术:
1、面向监管区域监管对象进行评估,是监管区域中监管对象日常管理教育和管理工作的基础重要工作之一,所有进行教育的监管对象,都需要按照监管区域管理要求和教育办法,进行各种方向的评估,这些评估覆盖身心健康状态、职业能力、社会适应性、教育难易度等维度。
2、然而,传统的监管区域评估系统中的各评估维度是独立的,这也就导致了系统间的数据不能有效地共享、复用。在综合报告环节,往往需要大量的人力工作来对数据进行提取、汇总以构建报告和报表。此外,若是通过如人工智能等新进的手段进行评估,因为数据的孤立性,也很难从全局维度进行综合考量,无法很好的利用数据样本。
技术实现思路
1、为了解决上述技术问题,本申请实施例提供了一种目标对象评估方法、装置、电子设备及存储介质。
2、第一方面,本申请实施例提供了一种目标对象评估方法,所述方法包括:
3、对目标对象对应的多个业务系统进行数据采集和汇聚,得到原始数据;
4、将所述原始数据存入数据仓库的初步存储层,得到数据源实体;
5、将所述数据源实体标准化,得到标准化数据,将所述标准化数据汇聚至所述数据仓库的实体层,得到资源实体;
6、对所述资源实体进行算法计算和统计分析,得到因子化数据,所述因子化数据包括算法结果数据和统计分析数据;
7、将所述因子化数据提交至接口层,根据数据作业计划对所述因子化数据进行处理,得到评估结果。
8、在一实施方式中,所述对目标对象对应的多个业务系统进行数据采集和汇聚,得到原始数据,包括:
9、基于etl方法对多个所述业务系统进行数据抽取和转换,并加载入所述数据仓库。
10、在一实施方式中,所述将所述数据源实体标准化,得到标准化数据,包括:
11、判断所述数据源实体是否为结构化数据;
12、若所述数据源实体为结构化数据,则通过全局数据库模型形成唯一数据表,将所述唯一数据表确定为所述标准化数据;
13、若所述数据源实体为非结构化数据,则通过特征处理,形成所述数据源实体对应的特征文件,将所述特征文件确定为所述标准化数据。
14、在一实施方式中,所述将所述数据源实体标准化,得到标准化数据,还包括:
15、对所述数据源实体进行数据清洗和数据转换。
16、在一实施方式中,所述将所述标准化数据汇聚至所述数据仓库的实体层,得到资源实体,包括:
17、对所述标准化数据进行关系分析,得到所述资源实体;
18、在一实施方式中,所述对所述标准化数据进行关系分析,包括:
19、对所述标准化数据进行目标结果表设计和过程建模,得到所述资源实体所述资源实体包括最终结果表元数据和建模过程表。
20、第二方面,本申请实施例提供了一种目标对象评估系统,所述系统包括采集汇聚子系统和综合数据应用子系统,所述系统包括:
21、所述采集汇聚子系统,用于对目标对象对应的多个业务系统进行数据采集和汇聚,得到原始数据;
22、所述综合数据应用子系统,用于将所述原始数据存入数据仓库的初步存储层,得到数据源实体;
23、所述综合数据应用子系统,用于将所述数据源实体标准化,得到标准化数据,将所述标准化数据汇聚至所述数据仓库的实体层,得到资源实体;
24、所述综合数据应用子系统,用于对所述资源实体进行算法计算和统计分析,得到因子化数据,所述因子化数据包括算法结果数据和统计分析数据;
25、所述综合数据应用子系统,用于将所述因子化数据提交至接口层,根据数据作业计划对所述因子化数据进行处理,得到评估结果。
26、在一实施方式中,所述采集汇聚子系统,还用于:
27、基于etl方法对多个所述业务系统进行数据抽取和转换,并加载入所述数据仓库。
28、第三方面,本申请实施例提供了一种电子设备,包括存储器以及处理器,所述存储器用于存储计算机程序,所述计算机程序在所述处理器运行时执行第一方面提供的目标对象评估方法。
29、第四方面,本申请实施例提供了一种计算机可读存储介质,其存储有计算机程序,所述计算机程序在处理器上运行时执行第一方面提供的目标对象评估方法。
30、本实施例提供的目标对象评估方法,采用成熟技术平台,提高灵活性和可靠性;支持多模态数据采集;数据汇聚面向的目标是业务系统、量表、问卷,这些数据中包含结构化和非结构化数据,还包含媒体类数据,支持全域全量采集这些不同模态的数据,统一管理。此外,还包括在线可插拔式数据处理组件开发,基于数据平台,算法处理和统计分析模块,可以直接在平台中进行编写和上线,且即插即用。降低了整个系统的开发管理难度,同时又大大提高了灵活性。
1.一种目标对象评估方法,其特征在于,应用于目标对象评估系统,所述方法包括:
2.根据权利要求1所述的目标对象评估方法,其特征在于,所述对目标对象对应的多个业务系统进行数据采集和汇聚,得到原始数据,包括:
3.根据权利要求1所述的目标对象评估方法,其特征在于,所述将所述数据源实体标准化,得到标准化数据,包括:
4.根据权利要求1所述的目标对象评估方法,其特征在于,所述将所述数据源实体标准化,得到标准化数据,还包括:
5.根据权利要求1所述的目标对象评估方法,其特征在于,所述将所述标准化数据汇聚至所述数据仓库的实体层,得到资源实体,包括:
6.根据权利要求5所述的目标对象评估方法,其特征在于,所述对所述标准化数据进行关系分析,得到所述资源实体,包括:
7.一种目标对象评估系统,其特征在于,所述系统包括采集汇聚子系统和综合数据应用子系统,所述系统包括:
8.根据权利要求7所述的目标对象评估系统,其特征在于,所述采集汇聚子系统,还用于:
9.一种电子设备,其特征在于,包括存储器以及处理器,所述存储器存储有计算机程序,所述计算机程序在所述处理器运行时执行权利要求1至6中任一项所述的目标对象评估方法。
10.一种计算机可读存储介质,其特征在于,其存储有计算机程序,所述计算机程序在处理器上运行时执行权利要求1至6中任一项所述的目标对象评估方法。