大数据在政府中的应用.doc

大数据在政府中的应用 一、大数据的概念 大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具， 在合理时间内达到撷取、管理、处理、并整理成为帮助政府提供决策支持以及企业经营 决策更积极目的的资讯。 大数据可分成大数据技术、大数据工程、大数据科学和大数据应用等领域。目前人们 谈论最多的是大数据技术和大数据应用。工程和科学问题尚未被重视。大数据工程指大 数据的规划建设运营管理的系统工程；大数据科学关注大数据网络发展和运营过程中发 现和验证大数据的规律及其与自然和社会活动之间的关系。 大数据的4个"V"，或者说特点有四个层面：第一，数据体量巨大。从TB级别，跃升到 PB级别；第二，数据类型繁多。前文提到的网络日志、视频、图片、地理位置信息等等 。第三，价值密度低，商业价值高。以视频为例，连续不间断监控过程中，可能有用的 数据仅仅有一两秒。第四，处理速度快。1秒定律。最后这一点也是和传统的数据挖掘技 术有着本质的不同。业界将其归纳为4个"V"——Volume（数据体谅巨大），Variety（数据 种类繁多），Value（价值密度低），Velocity（处理速度快）。 海量数据存储、数据挖掘、图像视频智能分析，都是大数据的重要组成部分。 大数据的应用和发展离不开三大要素： 一是不同参与主体参与的大量数据信息（原材料基础）； 二是支撑大数据存储和运算的IT基础设施； 三是挖掘大数据潜在价值并进行应用的能力； 如果说云计算为数据资产提供了保管、访问的场所和渠道，那么如何盘活数据资产， 使其为国家治理、政府决策支持、企业决策乃至个人生活服务，则是大数据的核心议题 ，也是云计算内在的灵魂和必然的升级方向。 二、大数据挖掘技术 大数据挖掘技术——是采用自动或半自动化的智能方式，从海量的数据中寻找隐藏在数 据中的模式、趋势和相关性。是从数据集中识别出有效的、新颖的、潜在有用的，以及 最终可理解的模式的非平凡过程。从这里发现的知识，应该是先前未知的，不能靠直觉 发现的知识，发现的知识要未知、实用和有商业价值。 它综合使用统计分析、数据仓库、人工智能、信息科学等多个学科的技术，从海量的 客户数据中找出传统经营分析难以洞察的客户行为模式，给出客户的详细描述，并可以 有效预测客户的行为倾向。 数据挖掘的基本特征： 1、数据挖掘是在没有明确假设的前提下挖掘信息、发现知识； 2、数据挖掘所得到的信息应具有先前未知、有效和可实用性三个特征； 3、先前未知的信息是指该信息是预先未曾预料到的； 4、数据挖掘是要发现那些不能靠直觉发现的信息和知识，基本是违背直觉的知识和 信息； 5、挖掘出的信息越是出乎意料，就可能越有价值。 数据挖掘的完整步骤： 1、理解数据和数据的来源； 2、获取相关知识和技术； 3、整合和检查数据； 4、去除错误或不一致的数据； 5、建立模型和假设； 6、实际数据和挖掘工作； 7、测试和检验挖掘结果； 8、解释和应用； 三、政府对于大数据应用的相关政策或制度（大数据应用的环境） 对于向服务转型的我国政府来说，大数据对于政府信息化的核心价值是，能够打造出 更加透明的政府、更加智慧的政府、更加负责任的政府。 2012年3月，美国政府发布《大数据研究和发展倡议》，投资2亿美元发展大数据, 用以强化国土安全、转变教育学习模式、加速科学和工程领域的创新速度和水平；2012 年7月，日本提出以电子政府、电子医疗、防灾等为中心制定新ICT（信息通讯技术）战 略，发布"新ICT计划"，重点关注大数据研究和应用；2013年1月,英国政府宣布将在对地 观测、医疗卫生等大数据和节能计算技术方面投资1.89亿英镑。 2012年12月，国家发改委数据分析软件开发和服务列入专项指南；《"十二五"国家政 务信息化工程建设规划》、《国家电子政务"十二五"规划》；2013年科技部将大数据列入9 73基础研究计划；2013年度国家自然基金指南中，管理学部、信息学部和数理学部将大 数据列入其中。2012年12月，广东省启动了《广东省实施大数据战略工作方案》；北京成 立"中关村大数据产业联盟"。 2013年1月11日，中国工业和信息化部颁发《关于数据中心建设布局的指导意见》； 2013年5月10日，广东省颁发《广东省信息化发展规划纲要（2013-2020年）》； 2013年5月11日，由中国信息协会电子政务专业委员会、中国电子学会通信学分会联 合组织召开的"2013年政府网络与数据建设发展论坛"在北京国宾酒店隆重召开。 2013年6月28日，重庆市人民政府通过《重庆市大数据行动计划》并与7月30日正式实施 ； 2013年7月，陕西省颁发《"数字陕西·智慧城市"发展纲要（2013- 2017）》和《"数字陕西·智慧城市"发展纲要实施意见》，西咸