大数据时代的机遇与挑战论文3000字

大数据时代的机遇与挑战论文3000字随着信息时代的到来，大数据(bigdata)一词逐渐被人们认知和熟悉，其常被用于定义和描述“信息爆炸时代产生的海量数”。随着“大数据”时代的来临，在商业、经济及其他领域中，人们做出决策不仅仅依靠经验和直觉，常以数据分析作为决策依据，这种方式大大提高了决策的科学性，最大限度避免决策失误。用好大数据，必将对商业发展、科学研究和政府决策产生积极的影响。1大数据的基本概况大数据(bigdata)就是指那些少于传统数据库系统处置能力的数据，其具备以下四个基本特性，即为海量性、多样性、易变性、高速性。同时数据类型多样、数据价值密度相对较低、处理速度慢、时效性建议高等也就是其主要特征。2大数据的时代影响大数据，对经济、政治、文化等方面都具备较为深刻的影响，其可以协助人们展开定量管理，极具科学性和针对性，得数据者得天下。大数据对于时代的影响主要包含以下几个方面：(1)“大数据决策”更加科学有效。如果人们以大数据分析作为基础进行决策，可全面获取相关决策信息，让数据主导决策，这种方法必将促进决策方式的创新和改变，彻底改变传统的决策方式，提高决策的科学性，并推动信息管理准则的重新定位。2022年爆发的甲型h1n1流感就是利用大数据的一个成功范例，谷歌公司通过分析网上搜索的大量记录，判断流感的传播源地，公共卫生机构官员通过这些有价值的数据信息采取了有针对性的行动决策。(2)“大数据应用领域”推动行业融合。虽然大数据来源于通信产业，但其影响绝不局限于通信产业，势必也将对其他产生较为深刻的影响。目前，大数据正逐渐广为应用于各个行业和领域，越来越多的企业已经开始以数据分析为辅助手段强化公司的日常管理和运营管理，例如麦当劳、肯德基、苹果公司等旗舰专卖店的边线都就是基于小数据分析顺利完成选址的，另外数据分析技术在零售业也应用领域越来越广为。(3)“大数据开发”推动技术变革。大数据的应用需求，是大数据新技术开发的源泉。相信随着时代的不断发展，计算机系统的数据分析和数据挖掘功能将逐渐取代以往单纯依靠人们自身判断力的领域应用。借助这些创新型的大数据应用，数据的能量将会层层被放大。另外，须要特别注意的就是，大数据在个人隐私的方面，难导致一些隐私外泄。我们须要深入细致严谨的看待这个问题，综合运用法律、宣传、道德等手段，为维护个人隐私，作出更积极主动的不懈努力。3大数据的应对策略3.1布局关键技术研发技术创新。目前而言，大数据的技术门槛较高，在这一领域有竞争力的多为一些在数据存储和分析等方面有优势的信息技术企业。为促进产业升级，我们必须加强研究，重视研发和应用数据分析关键技术和新兴技术，具体可从以下几个方面入手：第一，夯实发展基础，以大数据核心技术为着手点，加强人工智能、机器学习、商业智能等领域的理论研究和技术研发，为大数据的应用奠定理论基础。二是加快基础技术(非结构化数据处理技术、可视化技术、非关系型数据库管理技术等)的研发，并使其与物联网、移动互联网、云计算等技术有机融合，为解决方案的制定打下坚实基础。三是基于大数据应用，着重对知识计算(搜索)技术、知识库技术、网页搜索技术等核心技术进行研发，加强单项技术产品研发，并保证质量的提升，同时促使其与数据处理技术的有机结合，建立科学技术体系。3.2提升软件产品发展水平。一是促进以企业为主导的产学研合作，提高软件发展水平。二是运用云计算技术促进信息技术服务业的'转型和发展，促进中文知识库、数据库与规则库的建设。三是采取鼓励政策引导软硬件企业和服务企业应用新型技术开展数据信息服务，提供具有行业特色的系统集成解决方案。四是以大型互联网公司牵头，并聚集中小互联网信息服务提供商，对优势资源进行系统整合，开拓与整合本土化信息服务。五是以数据处理软件商牵头，这些软件商必须具备一定的基础优势，其可充分发挥各自的数据优势和技术优势，优势互补，提高数据软件开发水平，提高服务内容的精确性和科学性。同时提高大数据解决方案提供商的市场能力和集成水平，以保障其大数据为各行业领域提供较为成熟的解决方案。3.3快速大力推进大数据示范点应用领域。大数据时代，我们应积极推进大数据的示范应用，可从以下几个方面进行实践：第一，对于一些数据量大的领域(如金融、能源、流通、电信、医疗等领域)，应引导行业厂商积极参与，大力发展数据监测和分析、横向扩展存储、商业决策等软硬件一体化的行业应用解决方案。第二，将大数据逐渐应用于智慧城市建设及个人生活和服务领域，促进数字内容加工处理软件等服务发展水平的提高。第三，促进行业数据库(特别是高科技领域)的深度开发，建议针对不同的行业领域建立不同的专题数据库，以提供相应的内容增值服务，形成有特色化的服务。第四，以重点领域或重点企业为突破口，对企业数据进行相应分析、整理和清洗，逐渐减少和去除重复数据和噪音数据。3.4优化健全大数据发展环境。信息安全问题是大数据应用面临的主要问题，因此，我们应加强对基于大数据的情报收集分析工作信息保密问题的研究，制定有效的防范对策，加强信息安全管理。同时，为优化完善大数据发展环境，应采取各种鼓励政策(如将具备一定能力企业的数据加工处理业务列入营业税优惠政策享受范围)支持数据加工处理企业的发展，促使其提高数据分析处理服务的水平和质量。三是夯实大数据的应用基础，完善相关体制机制，以政府为切入点，推动信息资源的集中共享。努力做到上面的几点，当大数据时代到来的时候，遭遇大量数据将不是束手无策，而是成竹在胸，而从数据中获得的好处也将推动国家和企业的快速发展。大数据为经营的横向跨界、产业的越界混融、生产与消费的合一提供了有利条件，大数据必将在社会经济、政治、文化等方面对人们生活产生巨大的影响，同时大数据时代对人类的数据驾驭能力也提出了新的挑战与机遇。面对新的挑战与发展机遇，我们应积极应对，以掌握未来大数据发展主动权。当人们还在津津乐道云计算、物联网等主题时，“大数据”一词已逐渐沦为it网络通信领域热门词汇。争夺战大数据发展先机摇身一变沦为世界各国高度重视的问题，其中鲜有ibm、emc、甲骨文、谷歌等在内的巨头厂商的强势干预，纷纷跑马圈地，它们资金投入巨额资金争相抢占市场该领域的主动权、话语权。大数据，是继云计算、物联网、移动互联网之后的又一个具有国家战略意义的新兴产业，它将进一步推动整个信息技术产业的创新发展，带来新的信息技术应用需求。随着物联网、云计算、移动互联网等新技术的发展，手机、平板电脑、pc以及遍布各地的传感器，其已成为大数据的来源和承载方式。而它们所产生的爆炸式增长的非结构化数据，随着自然语言处理、模式识别和机器学习等人工智能技术的发展，也将推动大数据市场的快速发展。大数据时代的到来，除了促进现有的信息技术产业的改革创新，其对我们生产生活的方式也将产生关键性影响。从个人视角来看，不管就是日常工作中碰到的海量邮件或从网上以获取的社交、购物、娱乐、自学、投资理财等信息，还是生活中最常用的手机存储，大数据已经渗透到我们日常生活的方方面面，很大地方便了我们的生活;对企业而言，互联网公司已已经开始使用大数据去冲击传统行业，精准营销与大数据驱动的产品快速运算，推动企业商业模式技术创新;在社会公共服务方面，教育、医疗、交通等行业在大数据的影响下，发生了各种代莱应用领域，数据化、社交化后的新媒体平台、智能交通与城市数字监管系统，以及病历存储调用的医疗云等，此外，政府还可以通过大数据去高效率顺利完成信息采集，这样可以优化升级管理运营。然而大数据在给我们展示前所未有的发展机遇的同时，也给国家信息安全、信息技术、人才等方面带来了很大的挑战。不久前，斯诺登披露了美国国家安全局(nsa)一直进行信息监视活动、已收集数以百万计的全球人的信息数据的消息，在全球范围内掀起轩然大波。该事件对“大数据”的信息安全敲响了警钟。大数据让大规模生产、分享和应用数据成为可能，将信息存储和管理集中化，我们在百度上面的搜索记录，无意识阅读的产品广告、旅游信息，习惯去哪个商场进行采购等这些痕迹，却不知所有的关系和活动在数据化之后都被一些组织或商家公司掌控，这也使得我们一方面享受了“大数据”带来的诸多便利，但另一方面无处不在的“第三只眼”却在时刻监控着我们的行动。面对大数据在信息安全方面存在的隐忧，我们在技术上要应对其“大容量、多类别、高时效”的三大挑战。此外，在人才方面，无穷快速增长的数据须要适当减少it人员，且专业化技术人才和管理人才的市场需求已经开始加强，而目前传统的教育模式很难培育出来这种既精通业务又能够展开小数据分析的人才，同时it人员本身搭载严重不足的现状与紧迫的人才需求矛盾可以更加注重。“数据为王”的大数据时代已经到来，技术需求也在发生重大转变，创新型人才的地位日益凸显，大数据带来的信息风暴正在变革我们的生活、工作和思维，从而开启重大的时代转型。这是我国实现跨越式发展的宝贵机会，我们要重视大数据的开发利用，将它作为转变经济增长方式的有效抓手，趁其风势，发展壮大我国的信息行业。一、大数据背景2022年以来，大数据(bigdata)一词越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据，并命名与之相关的技术发展与创新。“大数据”时代降临，在商业、经济及其他领域中，决策将日益基于数据和分析而作出，而并非基于经验和直觉。数据信息量的快速收缩并变小，它同意着企业的未来发展，虽然很多企业可能将并没意识到数据爆炸性快速增长增添问题的隐患，但是随着时间的流逝，人们将越来越多的意识到数据对企业的重要性。“大数据”来临是一场革命，庞大的数据资源使得各个领域开始了量化进程，无论学术界、商界还是政府，所有领域都将开始这种进程。二、大数据影响随着云时代的来临，大数据(bigdata)也吸引了越来越多的关注。大数据(bigdata)通常用来形容一个公司创造的大量非结构化和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像mapreduce一样的框架来向数十、数百或甚至数千的电脑分配工作。“大数据”在互联网行业所指的就是这样一种现象：互联网公司在日常运营中分解成、积累的用户网络犯罪行为数据。这些数据的规模就是如此巨大，以至于无法用g或t去来衡量。大数据到底有多大?一组名为“互联网上一天”的数据告诉我们，一天之中，互联网产生的全部内容可以刻满1.68亿张dvd;发出的邮件有2940亿封之多(相当于美国两年的纸质信件数量);发出的社区帖子达200万个(相当于《时代》杂志770年的文字量);卖出的手机为37.8万台，高于全球每天出生的婴儿数量37.1万……三、数据价值一分钟内，微博推特上新发的数据量超过10万;社交网络“脸谱”的浏览量超过600万……这些巨大数字，意味著什么?它意味着，一种全新的致富手段也许就摆在面前，它的价值堪比石油和黄金。事实上，当你仍然在把微博等社交平台当做抒情或者发议论的工具时，华尔街的行骗高手们却正在发掘这些互联网的“数据财富”，先人一步用其预判市场走势，而且获得了上佳的收益。让我们一起来看看——他们是怎么做的。这些数据都能干啥。具体内容存有六大价值：1、华尔街根据民众情绪抛售股票;2、对冲基金依据购物网站的顾客评论，分析企业产品销售状况;3、银行根据求职网站的岗位数量，推断就业率;4、投资机构收集并分析上市企业声明，从中找寻宣告破产的蛛丝马迹;5、美国疾病控制和预防中心依据网民搜索，分析全球范围内流感等病疫的传播状况;6、美国总统奥巴马的竞选团队依据选民的微博，实时分析选民对总统竞选人的偏好。四、可视化“数据就是代莱石油。”亚马逊前任首席科学家andreasweigend说道。instagram以10亿美元出售之时，设立于1881年的世界最小影像产品及服务商柯达正提出申请宣告破产。大数据是如此重要，以至于其获取、储存、搜索、共享、分析，乃至可视化地呈现，都成为了当前重要的研究课题。“当时时变化莫测的、海量的数据发生在眼前，就是怎样一幅壮丽的景象?在后台凝视着这一切，可以不能存有吻合上帝俯瞰人间星火的感觉?”，美国洛杉矶就有企业宣称，他们将全球夜景的历史数据建立模型，在过滤掉波动之后，做出了投资房地产和消费的研究报告。在数据可视化呈现出方面，存有这么一个故事，一位在美国物流部门工作的小伙，被facebook高价挖角，步入了其数据研究小组。他后来吃惊地辨认出，里面全系列就是源自物流企业、供应链方面的技术人员和专家，原来就是“facebook想要晓得，能够无法用物流的角度和流程的方式，分析用户的路径和犯罪行为的目的。”五、三大案例1、2022年3月22日，奥巴马政府正式宣布投资2亿美元带动大数据有关产业发展，将“大数据战略”下降为国家意志。奥巴马政府将数据定义为“未来的新石油”，并则表示一个国家具有数据的规模、活性及表述运用的能力将沦为综合国力的关键组成部分，未来，对数据的占据和掌控甚至将沦为陆权、海权、空权之外的另一种国家核心资产。2、联合国也在2022年发布了大数据政务白皮书，指出大数据对于联合国和各国政府来说是一个历史性的机遇，人们如今可以使用极为丰富的数据资源，来对社会经济进行前所未有的实时分析，帮助政府更好地响应社会和经济运行。3、而最为积极主动的还是众多的it企业。麦肯锡在一份名叫《大数据，就是下一轮技术创新、竞争和生产力的前沿》的专题研报中明确提出，“对于企业来说，海量数据的运用将沦为未来竞争和快速增长的基础”，该报告在业界引发广为反响。ibm则提出，上一个十年，他们抛弃了pc，成功转向了软件和服务，而这次将远离服务与咨询，更多地专注于因大数据分析软件而带来的全新业务增长点。ibm执行总裁罗睿兰认为，“数据将成为一切行业当中决定胜负的根本因素，最终数据将成为人类至关重要的自然资源。”在国内，百度已经致力于研发自己的大数据处理和存储系统;腾讯也明确提出2022年已经至了数据化运营的黄金时期，如何资源整合这些数据沦为未来的关键任务。事实上，自2022年以来，有关“大数据”主题的并购案层出不穷，且并购数量和规模呈逐步上升的态势。其中，oracle对sun、惠普对autonomy两大并购案总金额高达176亿美元，大数据的产业价值由此可见一斑。六、提供更多依据编辑大数据是信息通信技术发展积累至今，按照自身技术发展逻辑，从提高生产效率向更高级智能阶段的自然生长。无处不在的信息感知和采集终端为我们采集了海量的数据，而以云计算为代表的计算技术的不断进步，为我们提供了强大的计算能力，这就围绕个人以及组织的行为构建起了一个与物质世界相平行的数字世界。大数据虽然孕育出于信息通信技术的日渐广泛和明朗，但它对社会经济生活产生的影响绝不局限于技术层面。在本质上，它就是为我们对待世界提供更多了一种全新的方法，即为决策犯罪行为将日益基于数据分析作出，而不是像是过去更多凭借经验和直觉作出。事实上，大数据的影响并不仅仅限于信息通信产业，而是正在“吞噬”和重构很多传统行业，广泛运用数据分析手段管理和优化运营的公司其实质都是一个数据公司。麦当劳、肯德基以及苹果公司等旗舰专卖店的位置都是建立在数据分析基础之上的精准选址。而在零售业中，数据分析的技术与手段更是得到广泛的应用，传统企业如沃尔玛通过数据挖掘重塑并优化供应链，新崛起的电商如卓越亚马逊、淘宝等则通过对海量数据的掌握和分析，为用户提供更加专业化和个性化的服务。七、应付措施一个好的企业应该未雨绸缪，从现在开始就应该着手准备，为企业的后期的数据收集和分析做好准备，企业可以从下面六个方面着手，这样当面临铺天盖地的大数据的时候，以确保企业能够快速发展，具体为下面六点。1、目标几乎每个组织都可能有源源不断的数据需要收集，无论是社交网络还