一种基于通讯大数据的垃圾信息清除系统及设备的制作方法

1.本发明涉及信息处理技术领域，尤其涉及一种基于通讯大数据的垃圾信息清除系统及设备。


背景技术：

2.随着互联网技术的飞速发展，该技术已经成为人们日常生活中的一部分，人们可以通过互联网学习丰富的知识，查阅丰富的信息，提高生活质量。由于其开放性，在方便人们获取信息的同时，各种不良信息也随之泛滥有害信息极大地危害着社会的稳定和人们的身心健康，尤其是对青少年的危害最大，网络内容“垃圾”已经侵入了我们的生活。如果单纯地使用人工去进行大量信息的审核和过滤，不但成本高，而且费时费力，因此急需一种能够自动对网络垃圾信息进行拦截删除的系统，来提高垃圾信息的拦截过滤效果，为用户提供干净良好的网络信息环境。


技术实现要素：

3.本发明的目的是为了解决现有技术中存在的缺点，而提出的一种基于通讯大数据的垃圾信息清除系统及设备。
4.为了实现上述目的，本发明采用了如下技术方案：
5.一种基于通讯大数据的垃圾信息清除系统，包括用户终端、大数据分析处理模块和信息处理模块，所述用户终端包块用于接收和发送信息的信息收发单元、用于对用户终端接收数据进行过滤的垃圾信息过滤单元、用于对用户终端本地存储数据进行检测过滤的本地数据检测单元和用户对垃圾信息拦截策略进行定制的个性化定制单元；
6.所述信息处理模块包括为用户提供搜索功能的信息搜索单元、对信息搜索单元检索出的信息进行过滤的搜索结果过滤单元、对过滤信息进行记录的过滤记录保存单元和对用户上传信息进行审核的上传信息审核单元；
7.所述大数据分析处理模块包括用于对垃圾信息进行识别的垃圾信息识别库、用户信息云储存单元、对垃圾信息识别库的拦截对照信息进行更新的拦截信息更新单元和月度报告汇总单元。
8.优选的：所述信息收发单元通过网络、蓝牙和usb数据传输的方式帮助用户终端进行数据的收发传输，垃圾信息过滤单元对用户终端通过信息收发单元接收到的信息进行筛分过滤，并将过滤出的垃圾信息删除。
9.进一步的：所述本地数据检测单元定期对用户终端中存储的数据和安装的软件进行扫描过滤检测，将检测到的垃圾信息和软件报告给用户提醒用户及时删除，用户通过个性化定制单元可对垃圾信息过滤单元的过滤等级和过滤信息偏向进行个性化定制调整。
10.进一步优选的：所述信息搜索单元通过搜索引擎对用户输入的文字、图片和音频信息通过网络进行搜索，搜索结果过滤单元对信息搜索单元搜索到的文字、图片和音频信息进行垃圾信息过滤，随后将过滤检测后的信息发送给信息收发单元。
11.作为本发明一种优选的：所述过滤记录保存单元根据搜索结果过滤单元过滤出的搜索结果，对给出该垃圾信息的源头链接进行标记记录，对后续通过该链接发送的信息进行高等级过滤，该链接下多次发现垃圾信息后对该链接进行封禁，上传信息审核单元对用户通过信息收发单元上传到网络上的文字、图片和音频内容进行垃圾信息过滤检查。
12.作为本发明进一步优选的：所述垃圾信息识别库为搜索结果过滤单元和垃圾信息过滤单元提供垃圾信息过滤对照文件，拦截信息更新单元对垃圾信息识别库中储存的对照组进行实时更新和调整。
13.作为本发明再进一步的方案：所述用户信息云储存单元对用户的基本信息进行存储，同时对每个用户设置的个性化定制单元数据进行存储，用户通过个性化定制单元根据个人需求自行设置需要拦截的关键词和对应链接，用户信息云储存单元对这些设置进行存储。
14.在前述方案的基础上：所述月度报告汇总单元将每月搜索结构过滤单元和垃圾信息过滤单元拦截清除的信息进行汇总，并做成对应报告发送到对应用户的用户终端上。
15.一种基于通讯大数据的垃圾信息清除设备，包括与用户终端通讯连接的通讯基站、垃圾信息过滤服务器和云服务器，所述云服务器与通讯基站通讯连接，垃圾信息过滤服务器与通讯基站通讯连接，用户终端通过通讯基站与垃圾信息过滤服务器和云服务器通讯连接。
16.本发明的有益效果为：
17.1.搜索结果过滤单元配合垃圾信息过滤单元对传输到用户终端的信息进行多重审查，在源头和终端对垃圾信息进行清除，提高对垃圾信息的过滤效果，同时过滤记录保存单元可对搜索结果过滤单元检测出的垃圾信息进行溯源记录，对发送该垃圾信息的链接进行标记，从而提高垃圾信息拦截的准确性和效率。
18.2.用户在使用用户终端搜索接收和发送信息时，垃圾信息过滤单元会对这些接收和发送的信息进行垃圾信息过滤，包括使用图片识别过滤、音频识别过滤和文字关键词识别过滤等功能，避免用户接收网络上存在的垃圾信息，也避免用户将垃圾信息发送传输到网络上。
19.3.本地数据检测单元可对储存在用户终端内部的数据进行定期检测，避免用户通过u盘等移动储存设备将垃圾信息传输到用户终端内部，用户可通过个性化定制单元定制垃圾信息过滤单元的信息过滤等级，以达到最佳的使用体验，同时通过个性化登记单元关闭和开启本地数据检测单元的检测功能。
20.4.通过使用云存储来存储用户的基本信息和个性化拦截设置，让用户在使用不同的用户终端进行信息收发时，都可通过网络登录垃圾信息清除系统，垃圾信息清除系统根据对应用户的基本信息和个性化设置继续对用户使用的用户终端进行垃圾信息拦截清除服务，让用户可以时刻处于垃圾信息清除系统的保护下进行网络信息交互。
附图说明
21.图1为本发明提出的一种基于通讯大数据的垃圾信息清除系统的主视结构示意图；
22.图2为本发明提出的一种基于通讯大数据的垃圾信息清除系统的用户终端结构示
意图；
23.图3为本发明提出的一种基于通讯大数据的垃圾信息清除系统的信息处理模块结构示意图；
24.图4为本发明提出的一种基于通讯大数据的垃圾信息清除系统的大数据分析处理模块结构示意图；
25.图5为本发明提出的一种基于通讯大数据的垃圾信息清除设备的主视结构示意图。
26.图中：1用户终端、2垃圾信息过滤服务器、3云服务器、4通讯基站。
具体实施方式
27.下面结合具体实施方式对本专利的技术方案作进一步详细地说明。
28.下面详细描述本专利的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本专利，而不能理解为对本专利的限制。
29.实施例1：
30.一种基于通讯大数据的垃圾信息清除系统，如图1-4所示，包括用户终端1、大数据分析处理模块和信息处理模块，所述用户终端1 包块用于接收和发送信息的信息收发单元、用于对用户终端接收数据进行过滤的垃圾信息过滤单元、用于对用户终端本地存储数据进行检测过滤的本地数据检测单元和用户对垃圾信息拦截策略进行定制的个性化定制单元；
31.所述信息处理模块包括为用户提供搜索功能的信息搜索单元、对信息搜索单元检索出的信息进行过滤的搜索结果过滤单元、对过滤信息进行记录的过滤记录保存单元和对用户上传信息进行审核的上传信息审核单元；
32.所述大数据分析处理模块包括用于对垃圾信息进行识别的垃圾信息识别库、用户信息云储存单元、对垃圾信息识别库的拦截对照信息进行更新的拦截信息更新单元和月度报告汇总单元。
33.如图2所示，所述信息收发单元通过网络、蓝牙和usb数据传输的方式帮助用户终端1进行数据的收发传输，垃圾信息过滤单元对用户终端1通过信息收发单元接收到的信息进行筛分过滤，并将过滤出的垃圾信息删除；
34.如图2所示，所述本地数据检测单元定期对用户终端1中存储的数据和安装的软件进行扫描过滤检测，将检测到的垃圾信息和软件报告给用户提醒用户及时删除，用户通过个性化定制单元可对垃圾信息过滤单元的过滤等级和过滤信息偏向进行个性化定制调整；
35.用户在使用用户终端1搜索接收和发送信息时，垃圾信息过滤单元会对这些接收和发送的信息进行垃圾信息过滤，包括使用图片识别过滤、音频识别过滤和文字关键词识别过滤等功能，避免用户接收网络上存在的垃圾信息，也避免用户将垃圾信息发送传输到网络上，同时本地数据检测单元可对储存在用户终端1内部的数据进行定期检测，避免用户通过u盘等移动储存设备将垃圾信息传输到用户终端1 内部，用户可通过个性化定制单元定制垃圾信息过滤单元的信息过滤等级，以达到最佳的使用体验，同时通过个性化登记单元关闭和开启本地数据检测单元的检测功能。
36.如图3所示，所述信息搜索单元通过搜索引擎对用户输入的文字、图片和音频信息通过网络进行搜索，搜索结果过滤单元对信息搜索单元搜索到的文字、图片和音频信息进行垃圾信息过滤，随后将过滤检测后的信息发送给信息收发单元；
37.如图3所示，所述过滤记录保存单元根据搜索结果过滤单元过滤出的搜索结果，对给出该垃圾信息的源头链接进行标记记录，对后续通过该链接发送的信息进行高等级过滤，该链接下多次发现垃圾信息后对该链接进行封禁，上传信息审核单元对用户通过信息收发单元上传到网络上的文字、图片和音频内容进行垃圾信息过滤检查；
38.搜索结果过滤单元配合垃圾信息过滤单元对传输到用户终端1 的信息进行多重审查，在源头和终端对垃圾信息进行清除，提高对垃圾信息的过滤效果，同时过滤记录保存单元可对搜索结果过滤单元检测出的垃圾信息进行溯源记录，对发送该垃圾信息的链接进行标记，从而提高垃圾信息拦截的准确性和效率。
39.如图4所示，所述垃圾信息识别库为搜索结果过滤单元和垃圾信息过滤单元提供垃圾信息过滤对照文件，拦截信息更新单元对垃圾信息识别库中储存的对照组进行实时更新和调整；
40.垃圾信息识别库能够为垃圾信息的过滤提供对照文件，从而让垃圾信息的拦截清理工作能够顺利进行，同时拦截信息更新单元可以对垃圾信息识别库中用于对照的文字、图片和音频进行实时更新，让垃圾信息的过滤能够更加全面。
41.如图4所示，所述用户信息云储存单元对用户的基本信息进行存储，同时对每个用户设置的个性化定制单元数据进行存储，用户通过个性化定制单元根据个人需求自行设置需要拦截的关键词和对应链接，用户信息云储存单元对这些设置进行存储；
42.通过使用云存储来存储用户的基本信息和个性化拦截设置，让用户在使用不同的用户终端1进行信息收发时，都可通过网络登录垃圾信息清除系统，垃圾信息清除系统根据对应用户的基本信息和个性化设置继续对用户使用的用户终端1进行垃圾信息拦截清除服务，让用户可以时刻处于垃圾信息清除系统的保护下进行网络信息交互。
43.如图4所示，所述月度报告汇总单元将每月搜索结构过滤单元和垃圾信息过滤单元拦截清除的信息进行汇总，并做成对应报告发送到对应用户的用户终端1上。
44.本实施例中，垃圾信息过滤单元和搜索结构过滤单元均通过布尔模型来对通讯信息进行筛分过滤。
45.实施例2：
46.一种基于通讯大数据的垃圾信息清除设备，如图5所示，包括与用户终端1通讯连接的通讯基站4、垃圾信息过滤服务器2和云服务器3，所述云服务器3与通讯基站4通讯连接，垃圾信息过滤服务器 2与通讯基站4通讯连接，用户终端1通过通讯基站4与垃圾信息过滤服务器2和云服务器3通讯连接。
47.用户终端1可以是计算机、平板电脑和智能手机等具有网络信息收发功能的智能终端，云服务器3通过云储存功能对用户信息进行存储，垃圾信息过滤服务器2根据大数据分析和用户根据需求的设定来制定对应的垃圾信息拦截策略，用户终端1、垃圾信息过滤服务器2 和云服务器3通过通讯基站4来完成相互之间的网络信息传递。
48.实施例3：
49.一种基于通讯大数据的垃圾信息清除系统，本实施例在实施例1 的基础上，垃圾
信息拦截技术还包括黑名单过滤、规则过滤和概率统计过滤；
50.黑名单过滤：维护一个骚扰电话号码和垃圾短信发送号码的黑名单；可通过公开网站下载，用户主动标记，标记个数超出阙值则定义为骚扰信息；黑名单中的垃圾信息不多时，可采用散列表、二叉树等动态数据结构来存储，有效减少内存的消耗；
51.规则过滤：预先设定一些规则，如果信息符合这些规则，就判定它是垃圾信息；规则方式可以如下：
52.1.包含特殊单词(或词语)，比如一些非法、淫秽、反动词语等；
53.2.群发号码，非正常的信息号码等；
54.3.格式花哨、内容很长，比如包含各种表情、图片、网页链接等；
55.概率统计过滤采用朴素贝叶斯算法进行筛选过滤；其算法规则为：
[0056][0057]
其中，p(wn出现在短信中|短信是垃圾短信)表示垃圾短信中包含wn这个单词的概率有多大；
[0058]
p(短信是垃圾短信)把样本中垃圾短信的个数除以总样本短信个数。
[0059]
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。