一种支持非结构化数据的采集分析系统和方法与流程

文档序号:17489460发布日期:2019-04-23 20:18阅读:来源:国知局

技术特征:

技术总结
本发明公开了一种支持非结构化数据的采集分析系统,包括:数据采集模块,用于获取Web页面上传的数据作为第一数据,对所述第一数据进行校验,得到第二数据,将第二数据存入非结构化数据库中;数据处理模块,用于从非结构化数据库中抽取第二数据,对第二数据进行数据清洗,得到第三数据,然后将第三数据存入结构化数据库中;数据分析模块,用于对非结构化数据库中的数据或者结构化数据库中的数据进行分析处理。本发明采用非结构数据库对原始数据进行存储,然后逐步将原始数据处理为结构化的数据并存储在结构化数据库中,使得本系统可以有助于减轻Web应用的负载压力,提升非结构化数据处理的效率。本发明可以广泛应用于数据处理技术。

技术研发人员:颜文德;徐明;叶祖锋;王华松
受保护的技术使用者:广州欧赛斯信息科技有限公司
技术研发日:2018.11.13
技术公布日:2019.04.23
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1