大数据时代一种基于数据的新技术

大数据时代一种基于数据的新技术

大数据已经改变了我们的世界。通过对海量数据的交换、整合和分析,发现新的知识,创造新的价值,带来新的发现,大数据时代正在向我们走来。(一)数据是人类最重要的资产大数据被认为是继云计算、物联网之后的信息技术产业又一次颠覆性革命,它将越来越对个人生活方式、企业运行、公共管理乃至国家治理模式,产生巨大影响。根据权威机构预计,全球数据总量每过两年就会增长一倍,到2020年人类拥有的数据总量将会达到惊人的35万亿GB。数据正成为巨大的经济资产,成为“新世纪的矿产与石油”。可以说,一个大规模生产、分享和应用数据的时代正在开启。根据维基百科的定义,大数据是巨量数据、海量数据、大资料,指的是所涉及的数据量规模巨大到无法通过人工在合理时间内达到截取、管理、处理并整理成为人类所能解读的信息。大数据产生自互联网的技术发展和应用的快速扩展非常迅速。云计算、物联网、移动互联网的产生和在各行各业的广泛应用,使得PC机、手机、平板电脑和各类传感器等每时每刻都在产生大量的数据。科学研究领域、各类互联网企业、物联网在交通、运输、物流、医疗、监控等领域的应用使得数据量呈井喷式增长。(二)基于大数据的价值和意义维克托?迈尔?舍恩伯格在《大数据时代》中提到,大数据时代不再探求难以捉摸的因果关系,应该更加注重相关关系,也就是说,人们只需知道“是什么”,而不再关心“为什么”。尽管这一说法多有争议,但它至少说明,大数据将改变人类原来的思维惯例与行为方式,为人类认知世界和与世界交流开拓了一种新的途径。近年来,应用大数据的成功案例不少,比如,美国谷歌公司应用大数据技术,比政府的公共卫生部门早两周时间预告2009年甲型H1N1流感的暴发。2012年美国大选之际,统计学家内特?希尔(NateSilver)利用数据和统计模型,准确预测对了所有50个州的选举结果,选举人票数和得票率都惊人地准确,完胜多组资深政治学专家和观察者。在我国,在公共治理领域,如何唤醒沉睡的大数据,各级政府应有时不我待的意识。首先,政府部门在数据占有上具有天然的优势。政府统计部门花费了大量人力、物力,掌握了人口普查、经济普查等庞大的信息资料,日常工作中也积累了大量与社会经济生活息息相关的数据。从大数据的角度看来,这些沉睡在档案袋、文件夹中的数据,有着巨大的价值,能产生惊人的效用。可一些政府部门还没有“大数据思维”,把自己掌握的丰富信息锁在柜中、束之高阁,或是摆脱不了“数据小农意识”,动辄以保密和隐私拒绝公开相关信息。这无疑大大妨碍了政府在大数据时代提高自身服务能力的步伐。比如,公民在购买住房、办理相关证件时,往往需要填报各种表格,表格中的信息完全可以利用政府拥有的基础数据自动生成,这样可以大大减少公民及政府部门的重复劳动,提高办事效率。人民网舆情监测室发布信息,截至2013年底,中国网民数量超过6亿,互联网普及率超过45%,手机即时通信网民超过5亿人。政府和网民同样处在互联网环境中,不论是谁,大数据的发展会使得政府和个人的行为被记录、被分析和被预测,使得整个社会更加真实透明,这是不可逆转的事实。可以说,在公共管理等诸多领域,合理、充分地开发大数据的价值和能量,基于数据和事实说话,将使政府管理更有效率、更加开放、更加透明。比如,在房地产价格统计上,银行的贷款信息及住建部门的网签数据能让房价数据更真实可靠;在就业领域,搜索引擎大数据可以帮助劳动部门监测预警失业率和劳动力市场供求状况;道路上拍摄的交通影像数据可以帮助相关部门推算公路运输的货运量;有人大代表建议,通过分析春节期间移动用户漫游情况,掌握人口的流动规模与迁徙规律,为交通管理、铁路运输、公共安全管理等提供决策参考;利用手机上的交通软件,既可以搜集大量的路况同步数据,也可以依据上下班时段的交通流量估算失业率,通过对主要商圈的监控估算消费情况,等等。这些数据分析一旦落地,将大大提高政府管理的精细化,提高决策的科学性。不难预计,在医疗健康、食品卫生、地质灾害、社会舆情、信息安全、国土安全等领域,大数据的分析研究可以有效实现对于重大安全、危机、风险的防范和预警,大大提升国家治理水平。由于大数据可以整合分析不同范围、不同行业、不同群体,不同系统之间的数据,使得人们在数字化基础上追求智慧化成为可能。智慧大学、智慧交通、智慧城市乃至智慧地球,正是人们利用大数据进行的有益尝试。在新加坡,智能交通综合信息管理平台通过准确预测交通流速和流量,显著提升了高峰时段车辆的通行效率。因此,大数据不仅是技术变革,更是一场社会变革,必然伴随公共管理与公共服务领域的变革。很大程度上,大数据是政府治理现代化的一条技术路径,具有催生管理革命的效果,也将给政府职能转变和机构改革带来新的气象。(三)第二,数据是宏观调控的重要基础近日,美国奥巴马政府决定投资2亿美元先导资金启动“大数据研究和发展计划”,希望增强收集海量数据、分析萃取信息的能力。该计划尤其提到大数据技术,事关美国国家安全、科学和研究的步伐以及引发教育和学习的变革。有人称,该计划的重要性堪比当年的“信息高速公路”。因此,有专家认为,数据信息将继边防、海防、空防之后,成为另一个大国博弈的空间,占有和控制数据主权是确保信息时代国家竞争力的重要措施。“谁拥有了大数据,谁就占有了制高点。就政府而言