一种实现数据处理的方法、装置、计算机存储介质及终端与流程

本文涉及但不限于数据处理技术，尤指一种实现数据处理的方法、装置、计算机存储介质及终端。

背景技术：

为了服务业务决策者进行决策，数据仓库建设主要基于多个业务维度生成的既定的业务数据。

目前，数据仓库一般很难在业务模型发生改变时，迅速调整以获得业务数据，如何提升业务数据的获取效率，成为一个有待解决的技术问题。

技术实现要素：

以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。

本发明实施例提供一种实现数据处理的方法、装置、计算机存储介质及终端，能够提升业务数据的处理效率。

本发明实施例提供了一种实现数据处理的方法，包括：

根据预设的逻辑模型对源数据进行处理，生成资产化数据；

通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；

其中，所述资产化数据包括：以预设标签构建的目录生成的数据。

在一种示例性实施例中，所述舆情图谱信息包括以下一项或任意组合的信息：舆情趋势图、舆情情绪统计和舆情人物画像。

在一种示例性实施例中，所述根据预设的逻辑模型对源数据进行处理之前，所述方法还包括：

通过元数据编辑所述逻辑模型；

其中，所述编辑包括以下一项或任意组合的处理：新增、调整和删除。

在一种示例性实施例中，所述处理包括以下一项或任意组合：

汇聚、清洗和标准化。

在一种示例性实施例中，所述源数据包括一个或一个以上业务系统的数据时，所述生成舆情图谱信息之后，所述方法还包括：

从所述舆情图谱信息中，从业务系统的数据中获取一项或一项以上事件的事件相关参数；

将获取的各所述事件相关参数，分别与对应的事件指标阈值进行比对；

当事件相关参数大于对应的事件指标阈值时，通过预设方式反馈事件的决策相关信息。

在一种示例性实施例中，当所述业务主题发生调整时，所述生成舆情图谱信息之后，所述方法还包括：

根据调整后的业务主题对所述资产化数据重新进行融合。

另一方面，本发明实施例还提供一种计算机存储介质，所述计算机存储介质中存储有计算机程序，所述计算机程序被处理器执行时实现上述实现数据处理的方法。

再一方面，本发明实施例还提供一种终端，包括：存储器和处理器，所述存储中保存有计算机程序；其中，

处理器被配置为执行存储器中的计算机程序；

所述计算机程序被所述处理器执行时实现如上述实现数据处理的方法。

还一方面，本发明实施例还提供一种实现数据处理的装置，包括：处理单元和生成单元；其中，

处理单元用于：根据预设的逻辑模型对源数据进行处理，生成资产化数据；

生成单元用于：通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；

其中，所述资产化数据包括：以预设标签构建的目录生成的数据。

在一种示例性实施例中，所述装置还包括编辑单元，用于：

通过元数据编辑所述逻辑模型；

其中，所述编辑包括以下一项或任意组合的处理：新增、调整和删除。

与相关技术相比，本申请技术方案包括：根据预设的逻辑模型对源数据进行处理，生成资产化数据；通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；其中，所述资产化数据包括：以预设标签构建的目录生成的数据。本发明实施例通过逻辑模型进行数据处理，提升了业务数据的处理效率。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

附图说明

附图用来提供对本发明技术方案的进一步理解，并且构成说明书的一部分，与本申请的实施例一起用于解释本发明的技术方案，并不构成对本发明技术方案的限制。

图1为本发明实施例实现数据处理的方法的流程图；

图2为本发明实施例实现数据处理的装置的结构框图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，下文中将结合附图对本发明的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。

在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图1为本发明实施例实现数据处理的方法的流程图，如图1所示，包括：

步骤101、根据预设的逻辑模型对源数据进行处理，生成资产化数据；

其中，所述资产化数据包括：以预设标签构建的目录生成的数据；

本发明实施例逻辑模型包括但不限于以下任一种类的已有模型：层次数据模型、网状数据模型、关系数据模型、或面向对象模型，为本领域技术人公知的定义，在此不做赘述；本发明实施例可以由本领域技术人员根据源数据的种类和结构进行分析设定用于对源数据进行处理的逻辑模型。

在一种示例性实施例中，所述处理包括以下一项或任意组合：

汇聚、清洗和标准化。

以数据中台作为源数据的处理平台，假设对源数据进行汇聚、清洗和标准化处理，采用的逻辑模型为上述示例的任一已有模型，例如关系数据模型(将数据抽象为结构化的二维表形式)，则本发明实施例对源数据进行处理过程包括：将源数据汇聚到数据中台，通过关系数据模型将数据汇聚到数据中台的汇聚层；读取汇聚到汇聚层中的数据，并按照设定的清洗规则进行清理后，按照关系数据模型对完成清理后的数据进行存储；对存储的完成清洗后的数据，按照设定的标准化格式进行处理后，按照关系数据模型进行保存。本发明实施例将编辑的逻辑模型同步至汇聚、清洗和标准化的各阶段进行物理建模，根据编辑的逻辑模型可以对存量和增量的源数据进行处理。

在一种示例性实施例中，根据预设的逻辑模型对源数据进行处理之前，本发明实施例方法还包括：

通过元数据编辑逻辑模型；

其中，编辑包括以下一项或任意组合的处理：新增、调整和删除。

本发明实施例通过元数据对逻辑模型的编辑可参照本领域技术人员的惯用技术手段实现，例如、通过元数据中的若干参数定义新增的逻辑模型，通过调整一项或一项以上参数调整逻辑模型，通过删除逻辑模型涉及参数，删除逻辑模型；根据元数据进行逻辑模型的编辑，提升了逻辑模型变更时对源数据的处理效率；

在一种示例性实施例中，本发明实施例源数据包括以下一种或一种以上数据：业务系统的数据、行业主题论坛的数据、和舆论网站的数据；

本发明实施例通过逻辑模型对源数据进行处理后，可以基于添加至数据表和/或字段的标签构建目录，根据构建的目录生成上述资产化数据；标签可以包括：数据关键字、业务主题等。

步骤102、通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；

在一种示例性实施例中，本发明实施例业务主题包括但不限于：采购、销售、售后、库存等主题。

在一种示例性实施例中，舆情图谱信息包括以下一项或任意组合的信息：舆情趋势图、舆情情绪统计和舆情人物画像。以汽车销售系统为例，本发明实施例舆情图谱信息可以包括但不限于：备件销售与库存统计信息，关联车型统计信息和销售地区统计信息，销量时间维度统计信息和销量地区统计信息等。

需要说明的是，本发明实施例在确定业务主题后，可以参照相关技术对生成的资产化数据进行融合；例如、业务主题为销售时，本发明实施例可以根据资产化数据的目录确定销售信息后，采用相关技术对资产化数据中的销售信息进行融合，获得与销售相关的舆情图谱信息，具体融合为本领域技术人员的惯用技术手段，在此不做赘述。

在一种示例性实施例中，对资产化数据进行融合时，当资产化数据中包含相同的两份或多份数据时，按照预设策略选择并保留其中一份数据；在一种示例性实施例中，可以根据数据的来源，结合本领域技术的经验或历史信息确定数据的可靠性，根据数据的可靠性保留其中一份数据。

在一种示例性实施例中，源数据包括一个或一个以上业务系统的数据时，生成舆情图谱信息之后，本发明实施例方法还包括：

从舆情图谱信息中，从业务系统的数据中获取一项或一项以上事件的事件相关参数；

将获取的各事件相关参数，分别与对应的事件指标阈值进行比对；

比对出事件相关参数大于对应的事件指标阈值时，通过预设方式反馈事件的决策相关信息。

本发明实施例决策相关信息可以包括：应对当前事件的关键信息，决策相关信息可以帮助管理层达成共识，制定正确的售后、销售、舆论处理、地区政策调整等的决策。应对当前事件的关键信息包括但不限于：与当前事件相似的在前事件的处理信息。另外，本发明实施例决策相关信息可以通过业务系统直接反馈给管理层账户，也可以通过邮箱、即时通信应用的发送给管理层。本发明实施例通过事件指标阈值的设置，对需要关注的事件可以进行监督，为发现和决策相关事件提供了数据支持。

在一种示例性实施例中，当业务主题发生调整时，所述生成舆情图谱信息之后，本发明实施例方法还包括：

根据调整后的业务主题对资产化数据重新进行融合。

本发明实施例对资产化数据重新进行融合，可以快速的获得对应于调整的业务主题获得的舆情图谱信息。

本申请包括：根据预设的逻辑模型对源数据进行处理，生成资产化数据；通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；其中，资产化数据包括：以预设标签构建的目录生成的数据。本发明实施例通过逻辑模型进行数据处理，提升了业务数据的处理效率。

本发明实施例还提供一种计算机存储介质，计算机存储介质中存储有计算机程序，计算机程序被处理器执行时实现上述实现数据处理的方法。

本发明实施例还提供一种终端，包括：存储器和处理器，所述存储中保存有计算机程序；其中，

处理器被配置为执行存储器中的计算机程序；

所述计算机程序被所述处理器执行时实现如上述实现数据处理的方法。

图2为本发明实施例实现数据处理的装置的结构框图，如图2所示，包括：处理单元和生成单元；其中，

处理单元用于：根据预设的逻辑模型对源数据进行处理，生成资产化数据；

生成单元用于：通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；

其中，所述资产化数据包括：以预设标签构建的目录生成的数据。

在一种示例性实施例中，所述装置还包括编辑单元，用于：

通过元数据编辑逻辑模型；

其中，编辑包括以下一项或任意组合的处理：新增、调整和删除。

在一种示例性实施例中，业务主题包括但不限于：采购、销售、售后、库存等业务的主题。

在一种示例性实施例中，所述处理单元具体用于：通过逻辑模型对所述源数据进行以下一项或任意组合的处理：汇聚、清洗和标准化。

在一种示例性实施例中，所述装置还包括反馈单元，用于：

从舆情图谱信息中，获取业务系统的数据中涉及的一项或一项以上事件的事件相关参数；

将获取的各所述事件相关参数，分别与对应的事件指标阈值进行比对；

比对出事件相关参数大于对应的事件指标阈值时，通过预设方式反馈事件的决策相关信息。

本发明实施例决策相关信息可以包括：应对当前事件的关键信息，决策相关信息可以帮助管理层达成共识，制定正确的售后、销售、舆论处理、地区政策调整等的决策。应对当前事件的关键信息包括但不限于：与当前事件相似的在前事件的处理信息。

在一种示例性实施例中，生成单元还用于：

当业务主题发生调整时，根据调整的业务主题对资产化数据重新进行融合。

本申请包括：根据预设的逻辑模型对源数据进行处理，生成资产化数据；通过预设的一个或一个以上业务主题对生成的资产化数据进行融合，生成舆情图谱信息；其中，资产化数据包括：以预设标签构建的目录生成的数据。本发明实施例通过逻辑模型进行数据处理，提升了业务数据的处理效率。

“本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些组件或所有组件可以被实施为由处理器，如数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。这样的软件可以分布在计算机可读介质上，计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的，术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于ram、rom、eeprom、闪存或其他存储器技术、cd-rom、数字多功能盘(dvd)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质”。