【大数据环境下基于社交网络数据的网络舆情探析10000字】

摘要：关键词：TOC\o"1-3"\h\u32109一、引言 近年来，经新媒体曝光的社会公共事件逐渐增多，新媒体已成为社会公共事件曝光的主要渠道。一系列社会公共事件在网上掀起讨论狂潮，网友纷纷转发自己见解，新媒体这个虚拟空间变成了民意集散地，新闻的产生源。从以报纸、广播、电视为主要媒介的大众媒体时代，发展到以网络为载体，以微信、微博、论坛、贴吧为主要阵地的自媒体时代，媒体的传播特征及规律有了很大的变化。随着媒体传播的发展，涉警舆情也发生了变化。人民网舆情监测中心2014年12月31日发布的(((20I4年中国互联网舆情分析报告》显示公安机关是舆情压力的主要承担者;社会矛盾热点事件中，暴力事件、警民关系事件共95件，占总热点事件394件的24%。经济社会在发展中暴露出严重的矛盾后，尤其是经济发展的攻坚阶段更是这样。中国正处十经济快速发展的社会转型期，社会矛屑急剧显现，自然灾害、公共卫生事件、社会安全事件等各种事故不断发生。突发社会安全事件属于突发事件的一种，影响了社会稳定与和谐，而且引起政府与人民的广泛关注。如果不能坚持正确的引导方向，这些矛盾会更加尖锐。舆论在这个时候的作用至关重要，通过及时、正确地公开重要信息消除流言和偏见，有利于人民战胜困难，解决内部矛后，从而维护社会稳定。党的执政能力中包含舆论引导能力，正确的引导舆论就会有利于国家的长治久安，舆论的误区引导力则会扰乱人心，给社会带来不安定因素。因此必须把提高舆论引导能力放在突出的位置上。所以只有建立科学有效的应对机制，才能更好的朝着全面和可持续的目标迈进，才能构建一个和谐的社会环境。大数据英文对应为BIGDATA，这个BIG最显著的特点就是体量巨大，数据的单位从B，到MB，到GB，到TB，再到PB，体现的是数据总量的指数级增长。大数据概念可以被理解为是一种工具，这件工具的作用基于两点:“信息不对称”和由掌握大量数据所产生的“可预测性”。大数据概念包含了搜集数据和分析数据的内涵，在此基础上，由掌握的大量数据，可以得到相应领域的详细分析，获得信息不对称的优势，并能够预测相关事物的发展趋势。大数据时代与之前时代的最重要区别在于数据观的不同，即如何看待数据。大数据时代的数据观，强调数据的整体性、混杂性以及数据间的相关关系。网络舆情是通过互联网表达和传播的，公众对自己关心或与自身利益紧密相关的各种公共事务所持有的多种情绪、态度和意见交错的总和曾润喜博士把网络舆情定义为由于各种事件的刺激而产生的通过互联网传播的人们对于该事件的所有认知、态度、情感和行为倾向的集合。对于网络舆情的合理分类，是有效治理网络舆情的前提。结合近些年我国发生的网络舆情事件，归纳梳理目前国内学界对网络舆情的分类，本文采用较通用的分类方法，即根据舆情关注的重点及领域进行划分，主要分为政治类、经济类、社会生活类、自然环境类这四大类网络舆情，同时这四大类网络舆情也可分为常规性舆情和突发性舆情。当前生活中的网络舆情变化，多数情况下是由谣言、不实信息和突发事件等引起的，故网络谣言和突发事件也可分为这四大类。所谓涉警网络舆情，就是指网民通过互联网对涉及公安机关和人民警察的社会突发事件持有的社会政治态度、情绪和观点的总称，是网民立场和利益诉求与警方在网络上的互动反映，反映出一定时期网民对涉警舆情的所见所闻、所思所想。其中有积极的，也有负面性质的，本文所研究的网络涉警舆情主要侧重于负面的舆情。无论是由网络热点事件引发的涉警舆情危机还是现实生活中出现的舆情危机事件，网络舆论都在其中扮演着十分重要的角色，而且伴随着舆情危机形成、发生、发展的各个阶段和全部过程。中国社会正处于一个转型期，人民群众内部矛盾呈现不断涌现的局面是网络舆情产生的大背景。在社会经济大跨步的发展过程中，人们的思想观念、民主意识和政治诉求也发生了巨大的变化，特别是互联网技术载体不断发展的基础上，人们通过各种介质连接互联网发表看法、倾诉诉求、呼吁民主的呼声日益高涨，这种舆情不断发酵、扩散，使得网络舆情逐渐常态化和公开化。公安工作特殊的政治性是涉警网络舆情产生的直接原因。公安机关因其自身的政治属性和特殊职能往往成为众矢之的。深入分析近年来引发网络轩然大波的涉警网络舆情事件，其中大部分都与公安机关执法勤务、公共服务等具体行为有关。客观上，公安机关的一部分不作为、乱作为的执法不规范行为也会导致群众的不满，引来网络上的曝光和声讨，并最终形成涉警网络舆情。网络信息来源的多元化是涉警网络舆情产生的重要推手。在这个属于互联网的时代，“人人都可以是媒体”。网民们获得了可以自由传播各类言论的自由，但也正是这种毫无限制的自由，使得信息的权威性和可信度大大降低，网络舆情因此呈现出混乱无序的局面。1、焦点式其特点是网络舆情由一件或多件焦点事件所导致和引发。涉警网络舆情源于具有明显的焦点事件，是焦点式的关键。2013年的炫富女红十字会事件、2009年云南“躲猫猫”事件、宁波的PX事件等都是较典型的网络焦点式。“焦点”一般集中在关乎国计民生的重大事件，即事涉公权力大、公益性强、公众关注度高的“三公部门”公信力和公职人员声誉的“涉腐”、“涉富”、“涉权”案件和议题。2、诱发式该模式是问题或事件本身并不明显，但因为具有聚焦和扩散效应，议题的性质演变为涉警网络舆情危机。其明显特点是“小问题引发大事件”。其与焦点式的区别是议题在起点阶段的显著程度和知晓程度不一样。3、泄愤式该模式是动员者和参与者认为自己受到不公正待遇，通过网络平台进行发泄而导致为网络舆情危机。泄愤式一般有煽动倾向。除了贪图名利，有人还因私人恩怨在网络上恶意传播、散布虚假信息，造成恶劣的社会影响。4、涉警信息以负面内容为主目前社会民众针对政府执法机构的总体评定正面内容较少，负面较多。从自媒体上的涉警信息分析也是如此。第一，一些地方的政府执法机构，工作效率不高，服务质量较差，违法违纪行为等事情通过自媒体传播、炒作、放大，由此政府机构的权威性、公正性遭到极大的质疑与挑战。第二，由于社会民众的错误认识，把个别执法人员的不良行为以偏概全，偏离曲事实进行非法传播、炒作，对执法机构的形象造成严重的影响。大数据环境下网络舆情分析应包括以下几个方面，信息的采集，存储，处理，分析，跟踪，生成舆情报告个统计各类汇总数据。因此，将网络舆情分析系统设计为4大功能模块:信息采集模块，信息预处理模块，舆情分析模块，舆情报告模块。1、信息采集模块信息采集模块主要负责Web页面的采集，采集之前要先确定采集目标和内容，然后再采用合适的网络爬虫进行采集。（1）确定采集目标对新闻、微信、BBS、论坛、博客、微博、贴吧等新型或传统的舆情载体进行全面采集，尤其要对论坛、微博、贴吧等这些舆情高发的网站进行深度采集。（2）确定采集内容网页抓取按照一定的周期进行，抓取包括版块列表和文章内容两类信息。此模块采集到的信息未进行处理，多为不规则数据。版块列表采集主要完成版块列表网页的初始URL的确定、爬行深度设定、采集规则的制定、参数传入，最终对初始网页源文件进行分析后抓取出对应的URL存入URL种子库。（3）信息采集方法舆情信息采集模块是网络舆情分析系统的基础模块，大数据环境下主要是利用并发网络爬虫从互联网上抓取网页信息。在工作过程中，爬虫会根据制定好的网页分析算法过滤掉与搜索目标不相关的链接，即设置采集黑白名单，并且将有用的URL链接形成队列保留下来，然后将从队列URL链接对应的网页中依据一定的搜索策略选择下一步要抓取的URL，不断重复上述过程，直到达到系统制定的停止条件。2、信息预处理模块舆情信息预处理模块的主要任务是对采集到的网页进行去重去噪处理，得到格式化信息并构造文本向量。该模块是舆情信息分析系统的数据准备阶段。（1）将采集的Web页面上与文本无关的HTML源代码清洗干净。由于新闻网站和BBS论坛的网页结构各不相同，所以在数据清洗前先要要对网站结构进行学习，设定抽取模板，在本系统中主要采用机器学习的方式实现。（2）滤除抓取到的重复和无意义网页数据，将缺失数据填补或剔除，以确保数据的完整性，避免噪声数据影响处理结果。（3）以词典为基础对文本进行分词、分类处理后将形成的格式化数据。（4）提取正文特征项及标题特征项。3、舆情分析模块舆情分析模块是网络舆情分析系统的核心模块，主要采用Hadoop框架的HDFS分布式文件系统进行数据存储，采用Map/Reduce编程模型实现数据处理，提高系统的并行计算能力，让系统适用于大数据处理。该模块主要完成舆情话题识别、舆情话题跟踪及舆情话题评估。4、舆情报告模块舆情报告模块主要是为了满足不同用户需求，自动实现为用户推荐近期舆情热点、进行相关内容的汇总统计、推荐搜索的关键词、辅助进行内容的采编等功能，并且能够按照用户需求生成统计报表。当热点舆情或负面舆情达到或超过某个热度时，系统可以以短信、邮件等形式进行自动报警，提醒相关监测人员关注该舆情信息，防患于未然。魏则西，西安电子科技大学计算机专业学生，滑膜肉瘤晚期患者，于2016年4月12日去世。以《你认为人性最大的‘恶’是什么》的网文为由头，其生前曾将在百度搜索医院的经历及在北京武警二院治疗的过程、发在知乎的提问回帖中，其经历立刻在网上发酵。至5月1日左右，许多人通过微信朋友圈的海量转发得知。该事件自魏则西在知乎上发帖后持续在网上发酵二事发后，引发民众对我国搜索引擎排名，医疗机构证书等等讨论。图1：魏则西事件当时的百度搜索指数图2：魏则西事件时的搜索热门关键词图3：网民在舆论环境下对事件的关注变化在最开始时，政府人员对网路舆情采取踢皮球模式，面对记者咨询都是以不清楚事情源头或者此事不是自己负责为由头，踢足球模式对问题采取回避和漠视态度，随着网络群体性事件的爆发，政府正逐渐针对网络群体性事件总结出相应的应对模式和反应机制，开始对网民诉求进行不同程度的回应。各级政府的网络舆情处置培训正深入推进，政府新闻发言人普遍设立，在面对突发性的网络群体性事件谨慎应对意识大大提高。“魏则西事件”中，最终民众的热切期待还是得到了政府部门的回应，“魏则西事件”中，最终民众的热切期待还是得到了政府部门的回应，这种回应不是过去强力的打压政策，而是以实际行动作为回应。5月2日晚，网信办在谈话中提到，根据网民举报，相关部门已经针对该事件成立联合调查小组对百度公司展开调查，同时也对互联网企业是否依法经营进行深入调查并做出适当处理。2016年5月3日，联合调查小组专门调查了“魏则西事件”。5月4日，针对“魏则西事件”，武警部队也成立了调查工作组，进驻武警北京总队第二医院，并声明，将全力配合相关部门的调查，一旦发现问题，就依照法律规定进行严肃处理。如果政府对舆情一味地采取封堵态度，会造成网络中各种谣言和传言泛滥，很可能会给不法分子提供可乘之机，故意煽动民愤，或者通过变相恶意造谣，利用那些不明事实真相的网民，进而推动网络群体性事件进化升级。“魏则西事件”中，从2016年2月起的事件酝酿，引起网友广泛关注热议到2016年4月魏则西去世，政府职能部门一直在当把头埋进沙子的鸵鸟。相关的医疗监管部门自始至终没有发声，去主动回应社会公众的担扰和疑虑，让那些已经存在质疑甚至抗议心理的民众变得亢奋，不少网民甚至对“魏则西事件”不是很了解，也随大流地参与其中，一场“多数人的对话”就此展开，当事态迅速扩大网民矛头直指当前医疗体系时才避重就轻地对百度进行商业调查，此时已延误错过了改变网络舆情意见流向和发展态势的良好时机，也对政府形象造成了难以挽回的伤害。警务信息公开中的重要一个因素就是专业的电子技术人才，警务部门招募电子技术人员主要是通过公务员考试、调任、或者是公益岗人员。基层警务工作的工作量很大，基本上都还要负担其他工作；公益岗是近些年来为了配合公安部要求从社会选拔招录的，每个地区的公益岗招募条件和待遇均不一样，这部分人没有执法权，只是负责文书工作和案件信息的纠错。目前警务部门招录的公务员和公益岗人员均有一定的电脑知识，但是公益岗人员由于其权限的限制不能完全负担警务信息公开的发布，信息的搜集整理也需要专业人才来完成；而即便是有公益岗的设置，公安机关的警力缺口仍然得不到满足，大部分公益岗人员都参与执勤。再者，各级公安局和公安分局也没有完全配备技术人员，对信息的搜集和整理缺乏针对性和地域性，警务信息公开面临两难境地。预警指挥机制不完善从整体上分析发现，基层所有公安部门没有创建健全、规范的涉警网络舆情预警指挥工作系统。首先，表现在预警工作缺少预见性和规范化标准。因对预警中所含具体的信息缺少预见性和规范化标准，造成公安部门及工作人员无法即时把握或对预警信息没有引起关注，无法迅速制定有效的处理措施，造成处置工作落后，常常陷于被动状态。其次，预警指挥缺少标准性。一旦出现预警信息，通常是多方指挥，行动滞后，逐级上报，无法实现切实可行的决策。第三，在通常情况下，涉警网络舆情关系到政府多个有关机构，因此舆情应对工作公安机关一家难以解决，要求政府有关机构互相合作、相互支持，有目的性进行网络舆论指导。可在实践案件中，多数涉警网络舆情均由公安部门独家行回复和处置，由此造成工作质量不高，效果明显不好，缺少一个整体协调的体系实行整体运作与调配。第四，公安机关舆情的处理流程与方式缺少规范化标准，具有较强的随意性。重点表现在未能创建详细的舆情处理程序，未能建立系统化的舆情处理方法与策略，舆情处理方法不正确，未制定与网络媒体交流合作的工作体系等。从整体上来说，从市公安局到基层所队，公安宣传工作都存在着一定的应景性和盲目性，缺少宣传上的宏观规划和微观调控。从外部协调卜米说，没有充分认识到现代社会对大众传媒的高度依赖性，缺乏与新闻媒体的协调和沟通，一些公安新闻资源得不到媒体的共享利用；在应对突发事件和民警违法违纪案件等负而报道时一普遍缺乏有效的工作机制，对新型媒体特别是网络的负面炒作应对乏力；对一些涉警的负面报道或采访，经常对媒体记者采取堵、躲、捂的方式和态度，结果往往适得其反，不仅造成警方与媒体之间的关系紧张，而且不利于和谐警民关系的构建。从内部管理上来看，目前公安机关内部宣传资源的管理和利用一定程度上缺乏有效的整合，政工宣传部门、指挥中心、网监支队等部门，都涉及到公安宣传工作，部门之间指挥缺乏统一性，特别是多头指挥，决策迟缓。在应对突发事件和民警违法违纪案件等负面报道时有关部门层层汇报，不能及时果断处理，容易造成五龙治水，最终准都管不了、谁也管不好的被动局面。涉警网络舆情是一把双刃剑，对公安机关具有正负两方面的双重作用。正确认识和应对网络涉警舆情作用的两重性，对公安机关自身建设意义重大。人才的培养是大数据技术应用良好的基础和保障，但目前大数据人才缺口严重，具体到政府领域，能够利用大数据进行治理创新的复合型人才更是少之又少，所以在我国函需培养一批既懂大数据专业知识，又谙熟公共管理知识和政府业务流程的复合型大数据人才。警务信息公开是一项具有很强的专业性和技术性的工作，国外一些国家都强调政府信息公开工作人员的专业性，如英国建立了信息官制度，随着公民对政府信息的需求度及知情权意识的逐步提升，公安机关信息公开机构的工作量将逐步加大，现在考虑配备专职负责人员，可以未雨绸缪，不断的为公安机关信息公开工作积累经验，培养专门人才。公安机关的警务信息公开工作量较大，处理的警务信息和所涉及的警务信息公开申请较多，是典型的公权力大、公益性强、公众关注度高的部门，更应当配备专职负责人员。在强调警务公开工作人员专业性的同时，主管部门应该进一步加强和完善培训机制，有针对性的对警务信息公开工作中不同具体工作人员的需要开展培训工作。通过培训，既要提升负责警务信息公开工作的公务人员推进政府信息公开意识和观念，更要提高工作人员利用先进技术手段提高政府信息的分类、保管和检索的能力及有效应对各种警务信息公开申请的能力。运用一定的人力和技术手段对网络舆情的关注内容、走向、跟帖数量、言论煽动性、整体价值观等方面进行有效的密切的监测与分析，掌握舆情动态情况。对倾向性、苗头性、误导性的问题舆论，及时研判分析，提出应对措施，并报告单位领导和上级公安机关，为管理机构和决策者的科学研判决策提供全面、准确、真实的材料依据。1、进行日常网络监测在网络涉警舆情应急处置工作领导小组的统一领导下，各成员单位及人员根据各自的分工和职责，承担本部门本岗位上的舆情监测任务，全天侯二十四小时不间断的常态化监测重点论坛、网站、QQ群和微博等。口常监测能随时了解掌握网络舆情的即时动态、走向趋势和特点特性，为舆情处置领导提供有效的研判依据，便于及时准确地作出处置应对决策。2、对重点网站论坛和高频使用的词汇进行监测对一些负面舆情张贴频率较高和访问量大的网站及跟帖评论较多的论坛，公安机关在口常工作中加强巡查力度，争取做到早发现、早研判、早应对、早处置。另外，要加大投入，开发应用智能监测工具，对网络涉警舆论、公共危机事件中的高频敏感语言进行总结提炼，内部编制的搜索查询字典不断更新，特别是对涉富涉官涉警涉党涉政等的言论、信息和措辞不当、网络恶搞词汇进行实时监测和智能报警，确保能够在第一时间内发现可能被热炒的煽动性误导性强的言论。3、对网络上的重点人群进行监测通过有关分析发现，收入越低、学历越低、年龄越低的社会群体，在互联网上发表意见的所占比例越高。服务产业人员、农村务工人员比公司企业管理人员、政府事业单位人员发表意见的比例高，中小学生比大学生更喜欢在网上发表意见，特别喜欢跟帖。对这些特点人员要分类制定针对性强的舆论研判应对措施。同时，加强对比较活跃的QQ群、论坛、网络社区、微博等的监测，对网络上职业性的炒家和推手要注重收集器网络虚拟身份、炒作手段。意见立场和关注方向，建立必要的台账，开展接力是监控，以防其推波助斓、兴风作浪、误导舆论指向。4、对公共危机事件敏感事件进行监测像官员违法违纪、官二代富二代事件、城管事件、涉及公安部门人员事件都是能聚集网络舆论的焦点，极易引起网民的高度关注和兴趣。对这些负面舆情风险高的案事件，相应部门在刚开始时就要严密全程监测其舆情的发展情况，预测其走向，在适当的时机采取针对性措施进行动态引导，跟踪处置，最大限度地将舆情控制和引导在健康理性可控的轨道上来。1、建立网络舆情的引导机制，切实提高舆情引导的能力各级公安机关都应该成立相应的舆情处置相关部门，并针对有可能产生网络舆情的敏感性事件的各个环节，建立有效的引导机制。事前要建立实时把握、正面引导的机制。从大局出发，延伸工作触角，加强对网络舆情的分析。实时掌控网络舆情发展的动态，紧紧围绕负面舆情折射出来的的潜在不稳定因素，迅速查明真相，将事实公布给社会，回应群众所关注的事件，借助主流媒体的影响，引导媒体舆论向有利于社会和谐和社会稳定的方向发展，防止一些敏感的社会问题逐步发展成为群体性事件。在事件发展中期要建立现场应对相关媒体采访的机制。在每一个敏感案事件处置工作中，都要安排一名专职、专业的发言人。事件过后要建立公开发布机制，安排专门的人员负责协调工作，以“统一口径，及时发布”为原则，借助社会主流媒体的影响力，在第一时间发布真实的信息、正面的报道，向大众还原事实的真相，紧抓工作的主动权。2、发挥各级公安网站的舆论引导作用近年来，各级公安机关已有部分开通了官方网站、微博、微信等，一方面将平时的工作成绩和成功案例或成果展示出来，做到政务公开；另一方面，也可以有效地引导网络舆情。在此方面已经有了很多成功的例子，所以各级公安机关都要将公安互联网站的建设与发展普及开来，有利于占领舆论阵地，不断将维护公安网络信息安全和引导社会舆论方向，当做在新时期的重要战略举措来落实。同时，公安网站还要把好关，做好正面的宣传工作，畅通网上举报投诉通道，引导有利公安机关的网上舆论氛围。把握舆论导向，适时主动引导。充分利用各种工作平台和渠道，及时监测和搜集涉谣言信息舆情动态对于涉警、不良影响。3、把握网络舆论引导过程中的原则（1）在舆情引导的过程中，最重要的“引”字与“导”字。要晓之以情，不是简单粗暴地地把自己的观点强加给对方。所以，在舆论引导的工作中要时刻抓住公众所关注的热点问题，还原事实真相，消除群众的疑问。只有这样，才能真正使公众心服口服，舆情风暴才能真正的风平浪静。（2）在负面舆情广泛传播的时候，要认真调查事情真相，准确、快速通过主流媒体公布相关情况。本着早控制、早处理的原则，在口常工作中，时刻保持警惕，对于事态较为复杂的，要实时公布工作措施及进展情况，杜绝谣言的扩散与传播。本着实事求是的原则，不偏袒、不掩盖，公正公平，有法可依，赢取群众的信任。公安机关和公安民警要积极利用网络正面影响，合理引导其负面影响，提高应对网络舆情的能力，推动公安工作的不断发展进步。现阶段对网络舆情的重视使网络环境处于健康有序状态，在新兴技术领导下，4G网络普及到人民日常生活中，会有越来越快的网络传输速度，越来越近的空间距离，越来越大的舆论影响力，越来