第1章 导言

1.1 研究的背景

据中国互联网数据中心的报告显示：2010年，全球数据量已达1.2ZB，到2020年将暴增到35ZB;2011年，全球被创建和复制的数据总量为1.8ZB;2013年，生成这样规模的信息量只需10min。而在如此庞大的数据中，只有10%的数据是存储在数据库中的结构化数据，其余的则是由邮件、视频、微博、页面点击等产生的大量的半结构化数据和非结构化数据。2011年5月全球知名咨询公司麦肯锡发布的《大数据：创新、竞争和生产力的下一个前沿领域》，使人们深刻意识到大数据时代已经来临。该报告指出：“大数据已经渗透到每一个行业和业务职能领域，逐渐成为重要的生产因素；而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。”

面对大数据的挑战，很多国家和政府将政府数据的管理提升到国家战略层面，从国家政策或者制度层面规划大数据的发展、挖掘大数据的潜力。例如，2012年3月，美国奥巴马政府推出“大数据研究与开发计划”，提出“通过收集、处理庞大而复杂的数据信息，从中获得知识和洞见，提升能力，加快科学、工程领域的创新步伐，强化美国国土安全，转变教育和学习模式”。而英国、法国、日本等国政府也已经关注大数据和大数据技术，积极开展和推动政府、企业大数据的管理及大数据技术的应用。

政府是数据最大的生产者和拥有者，政府数据约占整个社会数据的80%以上，政府数据的开放对于政府利用大数据技术和方法促进政府信息和数据资源的利用、政府的管理向精细化方向转变以及提高政府科学决策的水平具有重要的作用。