美国大数据研究与发展计划

美国大数据研究与发展计划背景美国大数据研究与发展计划20世纪90年代初，美国数据仓库之父比尔•恩就多次在演讲中提到“BIGDATA”，但受限于当时的信息技术水平，大数据的理念未能真正建立起来。大数据计划的发展历史2005年，美国IBM公司出版了《无所不包的数据》一书，阐述了大规模收集数据如何改变企业公司的业务和人们的生活，这其中的“无所不包的数据就是指“大数据”。大数据计划的发展历史2010年1月，美国政府提出了一系列主题为“我的大数据”的倡议与措施，以便美国公民可以更安全地获取他们的个人数据，用来更好地处理私人领域的业务申请活动和服务；2010年3月，美国政府要求各部门实施自己的“大数据”战略，实现从数据到知识、知识到决策、决策到行动的快速转化。大数据计划的发展历史2011年1月，美国总统科技顾问委员会指出，大数据技术蕴含着重要的战略价值，联邦政府应当加大投资研发力度，并建议在美国国家科学技术委员会成立“大数据高级指导小组”；2011年6月，美国麦肯锡全球研究院发布了题为《大数据：下一个创新、竞争和生产力的前沿》的研究报告，“大数据(BIGDATA)”一词才真正“热”起来。大数据计划的发展历史2012年3月29日，奥巴马政府公布了“大数据研发计划”（BigDataResearchandDevelopmentInitiative）该计划旨在改进现有人们从海量和复杂的数据中获取知识的能力，从而加速美国在科学与工程领域发明的步伐，增强国家安全，转变现有的教学和学习方式。明确提出1、首批共有6个联邦部门宣布投资2亿美元，共同提高收集、储存、保留、管理、分析和共享海量数据所需核心技术的先进性，并形成合力；

2、现联邦政府对大数据研发的投入旨在提高美国的科学发现、环境与生物医药研究、教育和国家安全的能力；3、此计划是对总统科技顾问委员会（PCAST）2011年提出的增加美国在大数据研发方面投入的建议的回应；4、OSTP专门成立了大数据高层指导小组。投资与支持1. 增强科研能力，推进科研方式转变2. 提高政府管理水平和决策能力3. 抓住技术机遇，推进经济发展目的内容美国大数据研究与发展计划大数据是一种大规模数据的管理和利用的商业模式和技术平台的泛指。大数据的定义

大数据的特点数据规模呈现几何级数增长的特征包括了所有数据类型的采集、分类、处理、分析和展现等多方面最终实现从大数据挖掘潜在巨大价值的目的大数据与传统海量数据的区别针对大数据给美国信息安全带来的挑战，美国政府采取了把大数据研发上升为国家战略、成立大数据研发管理机构、研发大数据信息安全技术、大力推进大数据中心建设、培养大数据信息安全人才、开展大数据研发多方合作等一系列举措，来加强国家的网络和信息安全建设。利用大数据的主要做法奥巴马总统上任伊始，号召公众与私营部门利用数据的力量，提高生产力，改善生活质量，服务大众社会。利用大数据的主要做法2009年，奥巴马政府将大量数据库向民众开放，并且将许多数据公布在美国政府的中央信息交换库——D网站上。利用大数据的主要做法2010年，美国国会通过更新法案，进一步提高了数据采集精度和上报频度。截至目前，网站上有超过40万种各类原始数据文件，涵盖了农业、气象、金融、就业、人口等近五十个门类，汇集了数千个应用程序和软件工具。利用大数据的主要做法以美国各级政府为主导依托高校和科研机构，鼓励广泛参与，并以多种形式充分合作。包括联邦政府机构和各州政府，也包括高校、非政府组织和企业等组织形式上主要以具体项目为纽带，研究目标明确，任务具体。计划实施和各机构任务分配应用美国大数据研究与发展计划美国政府在基于大数据的信息网络安全战略方面，充分体现出了其一贯特点：善于利用其综合优势，在保持其领先的长期定位下，不断推出变革性、引领性的信息网络安全国家战略，并通过有力的协调组织、迅速落实。可以形象地说是“常忧患、起得早、协调好、干的快、不动摇”。美国大数据应用一些相关的公司已经赞助大数据相关的比赛，并给大学提供这方面的研究资助。大学里也开始开设一门全新的研究型课程，培养下一代的“数据科学家”。一些无国界的组织帮助非营利性机构对公益性服务的数据进行采取、分析和可视化处理。白宫科技政策办公室将会非常有兴趣支持建立一个跟大数据相关论坛，包括最新的公私组织之间的合作。美国大数据应用六个联邦政府的部门和机构宣布新的2亿美元的投资，用于大数据的应用。项目涉及计算机、国防、生物、医学、物理、地球、应急、航天、社会等方方面面。六个联邦部门为：国防部(DOD)，国土安全部(DHS)，能源部(DOE)，退伍军人管理部(VA)

，卫生和人类服务部(HHS)，美国国家安全局(NSA)

。美国大数据应用国防部(DOD)多尺度异常检测（ADAMS）项目Insight计划Machine

Reading

项目Mind's

Eye

项目Mission-oriented

Resilient

Clouds

项目对加密数据的编程计算(PROCEED)的研究工作在视频和图像的检索和分析工具(VIRAT)计划美国大数据应用国土安全部(DHS)卓越研究中心和可视化数据分析（CVADA）退伍军人管理部(VA)企业数据仓库（CDW）基因组信息系统综合科学(GenISIS)计划美国国家安全局(NSA)

情报共同体（IC）项目美国大数据应用能源部(DOE)高性能存储系统(HPSS)对千万亿次的数据的分析处理GridFTP的服务器开放科学网格生物和环境研究计划（BER）系统生物学知识库（Kbase）美国核数据计划(USNDP)美国大数据应用卫生和人类服务部(HHS)生物传感虚拟实验室环境（VLE）