一种非正常信息处理方法与流程

文档序号:15999345发布日期:2018-11-20 19:15阅读:212来源:国知局

本发明属于可信领域,尤其涉及一种非正常信息处理方法。



背景技术:

数据仓库对海量数据进行抽取、转换、清洗和加载,从中挖据有分析价值的数据,并通过不断聚集展示分析结果,为市场精准化营销水平和深度运营能力提供了有力支撑。由此,数据质量监控或检测成为数据仓库建设的重中之重,现有检测方法一般包括如下步骤:维护人员通过终端登陆前台系统,并访问经分后台数据库;维护人员通过前台系统的分析结果,如趋势分析图及双条对比分析线等,对系统生成的指标进行检查;分析历史数据并设定波动阀值,在数据波动范围超过阀值时进行数据异常告警;以及,根据检查结果初步分析波动原因,并通过后台数据库表,检查明细,如果指标不正常,则处理故障。基于上述诸多问题,现在亟需一种新的非正常信息处理方法,本发明能够及时发现非正常数据,并对所述非正常数据进行定位,通过删除或者恢复的方法使所述非正常数据变成正常数据,在进行非正常数据的定位时无需对所述非正常数据进行语义分析,从而大大的提高了信息处理的效率的同时降低处理的复杂度。



技术实现要素:

为了解决现有技术中的上述问题,本发明提出了一种非正常信息处理方法,该方法包括如下步骤:

S1:接收来自一个或多个信息端的原始信息;

S2:对所述原始信息进行分析以发现非正常原始信息,对非正常原始信息进行处理以获取待发送信息。

进一步的,所述步骤S1具体为,通过将原始信息保存在缓存存储器中以等待后续处理。

进一步的,信息端基于用户请求发送原始信息。

进一步的,所述对所述原始信息进行分析以发现非正常原始信息,具体为:对来自每个信息端的原始信息的信息量进行计算,如果所述信息量小于第一阀值,则对所述信息量对应的信息端进行非正常分析,如果非正常分析结果正常,则重新从所述信息端接收原始信息,直到非正常分析结果正常或重新接收的次数超过第一次数阀值;否则,如果所述信息量大于第二阀值,则对所述信息量对应的信息端进行可信评估,如果可信评估结果不正常,则重新从所述信息端接收原始信息,直到可信评估结果正常或重新接收的次数超过第二次数阀值;否则,直接将所述评估结果正常的信息端对应的原始信息作为待发送信息。

进一步的,如果非正常分析结果不正常或重新接收的次数大于等于第一次数阀值,则去除所述信息端对应的原始信息。

进一步的,如果非正常分析结果不正常,则暂时停止从所述信息端接收原始信息,并发送自查消息给所述信息端。

进一步的,所述信息端进行自查包括对信息端本身的原始信息获取和生成进行自查和对信息端和客户端之间的通信通道进行自查。

进一步的,如果可信评估结果不正常但重新接受的次数大于等于第二次数阀值,则对所述非正常原始信息进行置信以得到所述待发送信息。

本发明的有益效果包括:能够及时发现非正常数据,并对所述非正常数据进行定位,通过删除或者恢复的方法使所述非正常数据变成正常数据,在进行非正常数据的定位时无需对所述非正常数据进行语义分析,从而大大的提高了信息处理的效率的同时降低处理的复杂度。

【附图说明】

此处所说明的附图是用来提供对本发明的进一步理解,构成本申请的一部分,但并不构成对本发明的不当限定,在附图中:

图1是本发明的非正常信息处理方法的流程图。

【具体实施方式】

下面将结合附图以及具体实施例来详细说明本发明,其中的示意性实施例以及说明仅用来解释本发明,但并不作为对本发明的限定。

对本发明所应用的一种非正常信息处理方法进行详细说明,所述方法包含下述步骤:

S1:接收来自一个或多个信息端的原始信息,将所述原始信息保存在缓存存储器中;

通过将原始信息保存在缓存存储器中以等待后续处理;

优选的:信息端基于用户请求发送原始信息;所述用户请求中包含所要请求的信息的种类;

S2:对所述原始信息进行分析以发现非正常原始信息,对非正常原始信息进行处理以获取待发送信息;

所述对所述原始信息进行分析以发现非正常原始信息,具体为:对来自每个信息端的原始信息的信息量进行计算,如果所述信息量小于第一阀值,则对所述信息量对应的信息端进行非正常分析,如果非正常分析结果正常,则重新从所述信息端接收原始信息,直到非正常分析结果正常或重新接收的次数超过第一次数阀值;否则,如果所述信息量大于第二阀值,则对所述信息量对应的信息端进行可信评估,如果可信评估结果不正常,则重新从所述信息端接收原始信息,直到可信评估结果正常或重新接收的次数超过第二次数阀值;否则,直接将所述评估结果正常的信息端对应的原始信息作为待发送信息;

优选的:所述原始信息为基于用户请求从信息端获取;

优选的:所述信息端为一个或多个;

优选的:如果非正常分析结果不正常或重新接收的次数大于等于第一次数阀值,则去除所述信息端对应的原始信息;

优选的:如果非正常分析结果不正常,则暂时停止从所述信息端接收原始信息,并发送自查消息给所述信息端,直到信息端自身进行自查的自查结果正常;对于信息量过小的情况一般情况对应信息端本身出现了非正常;

优选的:所述信息端进行自查包括对信息端本身的原始信息获取和生成进行自查和对信息端和客户端之间的通信通道进行自查;

优选的:如果可信评估结果不正常但重新接受的次数大于等于第二次数阀值,则对所述非正常原始信息进行置信以得到所述待发送信息;

所述对所述非正常原始信息进行置信,具体为:确定所述不正常的类型,基于所述类型选取置信方式进行置信;

优选的:对于信息重复的不正常类型,对所述原始信息进行去重复;对于内嵌木马的不正常类型,对所述原始信息进行木马发现和去除;

优选的:所述第一次数阀值和第二次数阀值为高级用户设置;

优选的:所述第一次数阀值大于第二次数阀值;对于可信评估有问题的情况,可以通过置信得到可信的数据,因此无需进行过多次的尝试;

S3:将所述待发送信息发送给客户端;具体的:计算每个待发送信息的排名顺序,并将所述待发送信息按照排名顺序排序,将排序后的待发送信息分次发送给客户端;

所述计算每个待发送信息的排名顺序,具体为:获取每个待发送信息对应的信息端排名PM;获取每个待发送信息和未经处理原始信息的信息量比值PR;基于下式计算所述排名顺序IM;IM=PM×PR;

所述将排序后的待发送信息分次发送给客户端,具体为:将待发送信息按照其所对应的信息端的不同分次发送给客户端。

以上所述仅是本发明的较佳实施方式,故凡依本发明专利申请范围所述的构造、特征及原理所做的等效变化或修饰,均包括于本发明专利申请范围内。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1