政务大数据解决方案之大快DKhadoop

从事大数据行业的朋友应该都知道大数据已经上升到了国家战略高度，2015年8月31日，×××印发了《促进大数据发展行动纲要》。旨在通过建立“用数据说话、用数据决策、用数据管理、用数据创新”的管理机制，实现基于数据的科学决策。目前，我国每年善生并被存储的数据总量超过800EB，相当于全人类讲过的话160倍。我国的电子政务发展指数为0.6071，排名第63位。经过这几年的发展的，已经偶60余个地×××府出台了城市大数据发展计划。政务大数据处理平台是一款汇集大数据处理、在线分析、数据挖掘、数据模型、可视化展现于一体的综合性大数据分析平台。它提供了基于hadoop存储、数据立方体与计算的OLPA可视化分析功能，使用户通过托拉拽的简单操作即可在亚秒级的时间内完成多维度、全方位的数据分析，并以多种可视化方式展示分析结果。国内提供大数据平台架构的组织机构总体上来说不是很多，主要也是由于大数据开发偏底层，技术难度太大限制了它的普及程度。但能够提供政务大数据解决方案的也是有一些的，这里就简单介绍下大快搜索的政务大数据解决方案，以供学习参考。首先，通过一张图来看一下大快搜索的政务大数据解决的总体架构：技术架构图：大快政务大数据解决方案的平台特色：1、基于人工只能的全文搜索引擎：各种政务文件、数据和各种档案等一并汇总，提供全维度数据可用的，分权限高速全文搜索引擎，引擎基于自然语言处理和人工智能技术，支持模糊检索，语义检索，并提供高安全性的查询权限管理，可根据不同的机构、级别设置不同查询权限。2、政务数据综合管理平台：数据互联互通，通过双数据集动态同步技术，实现各机构的数据统一汇总，便于第一时间掌握全面动态信息。3、政务数据资源的管理平台：可以有效的对各种异构数据有效的管理，政府可以逐步整合和管控各种社会数据资源，为大数据产业的发展打好数据资源基础。4、完善的大数据分析基础运行环境：集成了完整的Hadoop系统，可以为各种大数据应用分析系统，提供统一完善的运行环境，并有效保障信息安全和在基础软件层面保证系统的互联互通。5、系统安全：内置系统安全组件和与市政务云互联互通的无缝衔接功能。6、全程管控功能：系统提供对各种数据源、数据交换过程、软件、服务等运行状态监控，以及数据交换的全流程跟踪功能。7、强大的容灾备份功能：基于大数据的海量数据管理能力，对原有政务系统的数据，可以做到无缝的全自动灾备还原。