大数据时代的挑战及应对策略研究

1、    大数据时代的挑战及应对策略研究    莫平凡【摘要】随着互联网和信息技术的进步，我们的社会已经进入了大数据时代。在这样一个信息化的社会中，节奏飞快，无时无刻不在产生大量的信息。在每个社会领域中，大数据的应用至关重要，它在节约社会成本，提高生产效率和提供公共服务方面等方面发挥了重要的作用。本文在大数据背景下，分析了大数据时代下数据的特征，对社会形成的挑战以及应对策略这几个方面。【关键词】大数据 特征 挑战 应对策略一、引言我们的社会是一个高速发展的社会，技术发达、信息通畅，大家的交流越来越密切，生活也越来越便利，正是大数据才促成了这一发展趋势。当前

2、大数据已经发展成为一个新兴产业，同时与其他各产业相互交叉融合，在社会生活中发挥了巨大的作用。但是它对我们传统的生活生产方式也提出了巨大的挑战，我们需要积极应对。处于这样的一种情况下，有必要对大数据特征进行分析，及时发现我们面对的挑战，并提出切实的可行性措施，更好的应对当前的时代环境。二、定义与特征虽然大数据一词早已活跃于我们的视听，但是想必很多人对此并没有深入的了解，在此，首先给出了大数据的定义和特征，给出大家一个相对客观的描述。大数据（big data）定义：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海

3、量、高增长率和多样化的信息资产。大数据的特征： volume（大量）：数据量很庞大，基于大数据的出现，数据存储单位从pb发展到zb、db；velocity（高速）：不仅获取信息的速度非常快，而且处理数据速度也快；variety（多样）：信息类型的多样，从文字到图片再到视频，种类繁多；value（低价值密度）：指虽然数据量多，但是有价值的信息却并不多，用低成本创造高价值；veracity（真实性）：数据质量真实可信。三、大数据时代带来的挑战与问题（一）数据存储与管理挑战大数据背景下，全世界的数据量呈爆炸式增长，这对于传统的数据存储技术来说是个巨大的挑战。当前数据类型多样化，有结构化数据，也有非结

4、构化数据，继续运用传统数据的存储方式，可能导致数据出现混乱。信息时代下，社会主体担心数据被窃取，因而各自都是独立存储数据，造成了数据之间的独立，这对于当前环境下各个主体的发展是极不利的。（二）信息挖掘能力的挑战当前数据类型繁多，不仅是数据存储和管理面临挑战，对数据挖掘获得有利信息也是一大挑战。传统的数据挖掘算法已经不能适应新出现的多种数据类型，这成为了数据挖掘的一大瓶颈。如果我们获得了越来越多的数据，而不能对此进行系统分析处理来获取有价值的信息，那么已获得的数据对我们来说就如同白纸，毫无价值。（三）数据安全与隐私问题信息时代下，各种活动大都要通过网络来完成，使得大量数据在不同的网络之间传播，数

5、据足迹的累积性和相关性增加了数据的被泄露的风险。传统的保护措施与方法已经不能再适应大数据的需要，而且黑客越来越活跃在网络世界，严重威胁信息安全。另外隐私保护成为更具挑战的一项问题，无论是政府、集体还是个人，都有数据公开与隐私保护的矛盾性。（四）大数据下缺乏技术型人才社会要发展，人才是关键，在大数据的背景下，更需要高级技术人才。如果人才资源不足就会严重阻碍大数据的发展，社会就会停止进步。大数据产业是一个融合性比较高的产业，覆盖范围很大，所以需要的技术人才必须具备综合的能力。这样才能更好的了解各个行业，了解各个技术层面，以较综合的视角提供解决问题的可行方案。四、应对策略（一）升级数据处理技术目前在

6、数据存储、管理与分析方面面临挑战，改革创新数据处理技术被提上日程。大数据时代数据量非常庞大，对此可将收集到的数据进行分类，梳理数据脉络，确定有价值的数据。在数据存储方面需要改革之前数据的孤立状态，建立数据集中存储系统，最关键的是数据的压缩技术和冗余数据删除技术。在此基础之上，就可以实现有效率的数据分析，最大程度的挖掘数据隐含价值。（二）加强数据安全保护措施小到个人隐私，大到商业机密甚至是国家数据安全，都受到来自大数据时代的挑战。对此，在数据安全方面，要对数据的存储和传输进行加密处理，并且要实时追踪监测，加强对数据的监管能力。这也有必要对国家相关工作部门进行提出相应的工作要求，严控网络信息安全，

7、打击黑客犯罪，维护网络治安。（三）培养高级数据处理人才大数据产业在2015年就已经被提高到国家战略层面，国务院印发的纲要中指出要加大人才培养力度。目前，在大数据行业打拼的从业者大部分都是半路出家，鲜有人接受过系统化的培养和教育。人才是关键，在大数据这一新兴产业中，尤其突出。政府、高校及培训机构应该大力提倡数据处理人才的培养，抓住机遇，提升竞争力。五、结语随着大数据的飞速发展、互联网的高度普及，我们的生活节奏大大加快，生活方式也有了很大的变化，一方面这是大数据给我们带来的好处，另一方面我们也应该认识到大数据带来的问题。目前，大数据的发展还处于简单应用阶段，要达到成熟还有一些问题需要解决，仍有很长的路要走。本文只是对大数据的相关问题做了简要论述，希望能给大家带来借鉴价值。参考文献：1陳如明.大数据时代的挑战价值与应对策略j.移动通信，2012.2王孝周等.大数据时代的挑战价值与应对策略研究j.信息通信，2015.3