基于贵州交通行业网络舆情监控平台建设方案

1、基于XX省交通行业网络舆情监测平台郭晓峰2月23日第1页项目概述1总体架构及关键技术32汇报提要项目建设内容项目效益分析项目报价45第2页1、项目概述-背景“7.23”甬温线尤其重大铁路交通事故铁道部新闻讲话人王勇平在新闻公布会上关于掩埋解释理由评论“不论你信不信，反正我信了”。李光斗在微博中写到“一个新名词诞生：轻度追尾”，被转发10万屡次，“轻度”一词瞬间在网络走红，这个新议题是新闻媒体在进行事件报道时没有斟酌好报道字眼造成。四川青城山都江堰官方辟谣景区被传索桥断裂游客受伤 是谣言两段题为“都江堰索桥断裂造成人员死亡”视频在网上流传，引发大量群众恐慌情绪和大范围二次传输，警方调查核实后，于

2、当晚公布微博辟谣并公布原版视频（.2.24越南莱州省，.3.9巴基斯坦），及时安抚群众担心心情。第3页1、社会舆情覆盖面和起源渠道更宽更广，不停深入和渗透到社会各个领域和各个层面2、社会舆情多样化、个性化和差异性、震撼性特点愈加显著，更轻易引发社会波动，甚至产生风采3、社会舆情传输速度更加快，传输方式愈加多式多样，舆情改变愈加紧捷、复杂；1、项目概述-新时代网络舆情特点交互性与及时性自由行与可控性情绪化与非理性个性化与群体极化性隐匿性与外显性丰富性与多元性网络舆情社会舆情伴随互联网发展影响力日益增大，网络舆情已成为各方关注焦点。第4页1、项目概述-项目必要性以大数据观念变革传统网络舆情管理思维

3、，准确把握网络舆情内在特征及其在演化过程中潜在规律，对于新形势下做好网络舆情管理工作含有主要理论意义和实践价值。有效引导建立机制加强分析研判掌握主动权增加信息透明度，准确、及时地公布权威信息，使谣言破灭，从而有效引导舆论。建立权威专业组织体系、加强互联网人才队伍建设、采取适当舆情引导与控制伎俩，是建立科学有效舆情应对机制必需。善与媒体沟通，借助媒体传达贵州交通行业声音，掌握舆论引导主动权。加强网络舆情分析与研判工作，区分不一样性质包括本行业负面舆情，能够正确为相关部门提供决议参考。第5页1、项目概述-建设目标关注热点，抓住难点，快速实现网络舆情搜集处理工作，为领导决议参考服务。有利于全方面掌握

4、民意，提升执政水平及时了解和掌握社情民意，提升宣传思想工作预见性、针对性、实效性。加紧网络舆论监管效率有利于组织力量展开信息整理、分析、引导和应对工作，提升贵州交通相关部门对网络突发舆情公共事件应对能力。舆情监测方式转变针对互联网海量舆情自动实时监测、自动敏感内容分析和自动实时报警功效。有效地处理了传统以人工方式对舆情监测实施难题。建设目标第6页项目概述1总体架构及关键技术32汇报提要项目建设内容项目效益分析项目报价45第7页采取J2EE技术体系，前端采取Ajax开发技术，操作简单、易用、高效、稳定。平台全部功效均采取纯B/S结构设计，零客户端维护。2、总体架构及关键技术-总体概述实时采集网络

5、舆情信息，如门户网站、知名论坛、搜索引擎、博客、贴吧，微博等，7*二十四小时为用户提供信息采集、信息处理、信息编辑功能，实时掌握所关注网络舆情信息，为贵州交通行业相关部门提供决议参考依据。第8页2、总体架构及关键技术-关键技术云计算技术网络爬虫技术自然语言智能处理技术舆情智能分析技术0104030201网络爬虫技术是一个按照一定规则，自动地抓取互联网信息程序或者脚本。02云计算技术云计算平台提供了分布式文件存放和并行计算能力，处理海量数据挖掘任务。04舆情智能分析技术自动分类技术自动聚类技术相同性排重技术03自然语言智能处理技术自动分词技术自动关键词和自动摘要技术全文检索技术分布式文件系统Go

6、ogle文件系统(GFS)分布式文件系统(HDFS)文件系统(KFS)分布式并行计算框架MapReducePregel（Google）Dryad（微软）第9页2、总体架构及关键技术-业务流程业务流程网络舆情监测平台是针对互联网这一新兴媒体，经过对海量网络舆情信息进行实时自动采集、分析、汇总、监视、并识别其中关键信息，及时通知到相关人员，从而第一时间应急响应，为正确舆论导向及搜集民众意见提供直接支持一套信息化平台。第10页2、总体架构及关键技术-网络舆情处理流程网络舆情监测组成舆情分析与汇报网络数据采集数据处理舆情信息采集对象新闻门户网站微博论坛博客贴吧第11页2、总体架构及关键技术-网络拓扑关

7、系对舆情数据清洗、过虑、分析第12页项目概述1总体架构及关键技术32汇报提要项目建设内容项目效益分析项目报价45第13页3、项目建设内容-主要功效设计数据采集依据用户设置信息源对数据进行采集数据处理信息预处理、二次分析处理、数据统计用户能够手动操作舆情。如：设置属性、加入简报、收藏、上报等依据系统配置和用户设置在网页上显示舆情信息舆情操作舆情浏览系统配置、用户管理、用户自定义设置信息管理经过分析出现重大负面信息时，系统将开启预警机制，快速报警提醒自动预警第14页3、项目建设内容-舆情浏览舆情浏览：最新舆情实时展现最新获取到舆情信息分类浏览将舆情分类为正面舆情、负面舆情、突发事件等舆情起源依据用

8、户选择起源网站显示舆情信息当地浏览分为本省和省外显示舆情信息信息要素显示舆情标题、摘要、高频词数、点击数、回帖数、起源网站等近期热点按舆情热度、点击数、回复数、转载数、时间次序显示舆情统计每一个舆情浏览都有显示舆情分析图第15页3、项目建设内容-专题舆情专题舆情：专题浏览专题舆情导出领导相关舆情热度分析经过用户自定义舆情专题列表，用户能够轻松区分和分类查阅专题舆情。 第16页3、项目建设内容-趋势分析 趋势分析模块能够多维度、多类别、多时间、多平台等分析舆情信息，并生成对应分析图表与数据列表第17页3、项目建设内容-舆情过滤数据过滤准垃圾过滤基于双重过滤能够过滤网页中广告、图片、链接等无价值信

9、息智能去重依据“文章相同性技术”确定是否重复、去重级别；采取汉字分词技术对文章关键字比较计算，得出文章相同度内容萃取包含时间过滤、起源过滤、排重过滤、热度过滤、显示过滤、舆情排序。第18页3、项目建设内容-舆情操作设置文章属性、添加到舆情简报、添加到指定专题、添加到指定类别、添加到收藏夹、添加到导控任务、添加到指定账户、上报舆情。第19页3、项目建设内容-舆情报表第20页3、项目建设内容-舆情报警专门针对各大新闻网站进行高效率监控，以非常快速方法扫描这些网站首页按照指定采集任务在采集目标中采集舆情信息，自动比照，包括到敏感词，进行“敏感报警“经过用户设置“地域、人名和机构”关键词分析，对上述这

10、些舆情进行了再次细分，把只与当地下属单位相关舆情归纳到“当地敏感”能够定义多个邮件、多个手机，能够定义任务开启时间、间隔和报警方式。首页报警敏感报警当地敏感报警报警设置报警任务能够依据自己工作习惯和工作需要，定制报警任务第21页3、项目建设内容-系统设置第22页项目概述1总体架构及关键技术32汇报提要项目建设内容项目效益分析项目报价45第23页4、项目效益分析经过信息关联分析与共享、人工经验知识分享与机器自动学习相结合方式，实现对网络舆情信息研判与事件综合分析预测。网络舆情监测平台对采集到舆情信息进行趋势分析，舆情分布、影响力查询等快速掌握舆情发展动向，为领导提供决议作用。利用网络爬虫和大数据技术替换人工浏览方式，降低人工查看舆情，人力投入转到对舆情信息结果处理和防范等重点上。网络舆情基于自然语言了解文本挖掘技术，提升了交通相关部门对于网络舆情应对能力和快速反应能力，加强了对社见面信息全方面动态控制能力。有效布署工作人员经济和社会效益降低人工对比分析误差提升管理效能为领导提供决议依据第24页项目概述1总体架构及关键技术32汇报提要项目建设内容项目效益分析项目报价45第2