目前,我国每年善生并被存储的数据总量超过800EB,相当于全人类讲过的话160倍。我国的电子政务发展指数为0.6071,排名第63位。经过这几年的发展的,已经偶60余个地×××府出台了城市大数据发展计划。
政务大数据处理平台是一款汇集大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性大数据分析平台。它提供了基于hadoop存储、数据立方体与计算的OLPA可视化分析功能,使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析,并以多种可视化方式展示分析结果。
国内提供大数据平台架构的组织机构总体上来说不是很多,主要也是由于大数据开发偏底层,技术难度太大限制了它的普及程度。但能够提供政务大数据解决方案的也是有一些的,这里就简单介绍下大快搜索的政务大数据解决方案,以供学习参考。
首先,通过一张图来看一下大快搜索的政务大数据解决的总体架构:
技术架构图:
大快政务大数据解决方案的平台特色:
1、基于人工只能的全文搜索引擎:各种政务文件、数据和各种档案等一并汇总,提供全维度数据可用的,分权限高速全文搜索引擎,引擎基于自然语言处理和人工智能技术,支持模糊检索,语义检索,并提供高安全性的查询权限管理,可根据不同的机构、级别设置不同查询权限。
2、政务数据综合管理平台:数据互联互通,通过双数据集动态同步技术,实现各机构的数据统一汇总,便于第一时间掌握全面动态信息。
3、政务数据资源的管理平台:可以有效的对各种异构数据有效的管理,政府可以逐步整合和管控各种社会数据资源,为大数据产业的发展打好数据资源基础。
4、完善的大数据分析基础运行环境:集成了完整的Hadoop系统,可以为各种大数据应用分析系统,提供统一完善的运行环境,并有效保障信息安全和在基础软件层面保证系统的互联互通。
5、系统安全:内置系统安全组件和与市政务云互联互通的无缝衔接功能。
6、全程管控功能:系统提供对各种数据源、数据交换过程、软件、服务等运行状态监控,以及数据交换的全流程跟踪功能。
7、强大的容灾备份功能:基于大数据的海量数据管理能力,对原有政务系统的数据,可以做到无缝的全自动灾备还原。
原文地址:http://blog.51cto.com/13636660/2115331