面向运营商的垃圾短信过滤技术与系统研究详解演示文稿

面向运营商的垃圾短信过滤技术与系统研究详解演示文稿第一页，共二十三页。优选面向运营商的垃圾短信过滤技术与系统研究第二页，共二十三页。汇报提纲背景介绍运营商现有系统介绍垃圾短信集中管控系统方案垃圾短信过滤经营分析系统支撑方案总结与展望第三页，共二十三页。背景

随着短信业务的发展，手机用户受到越来越多垃圾短信的骚扰。2011年下半年手机短信息状况调查报告显示，用户平均每周收到垃圾短信11.4条，收到垃圾短信息占全部短信息的比例为22.6%。垃圾短信治理刻不容缓，治理好垃圾短信成为运营商提高通信服务质量的关键所在。垃圾短信产生的原因：利益驱动，短信业务被发展成了廉价的广告平台立法滞后，手机实名制没有实际应用SP行业缺乏自律，移动运营商对SP监管不严格运营商垃圾短信过滤系统和技术存在不足，需要根据需要进一步研究与改造。第四页，共二十三页。垃圾短信的定义根据一般垃圾短信的特征，认为满足以下两个条件的短信为垃圾短信。条件1：垃圾短信发送者和接收者之间不存在社会网络的联系，也就是说垃圾短信发送者和接收者之间不认识。条件2：内容相同或相似的短信在短时间内达到一定的发送数量。垃圾短信分类点对点垃圾短信，其发送号码为手机号码。根据发送号码与接收号码是否属于同一家运营商，还可详细分为网内点对点短信和网间点对点短信；网关垃圾短信，其发送号码为网关接入号。第五页，共二十三页。垃圾短信过滤方法垃圾短信过滤方法优点缺点流量控制方法能够快速简洁的识别出垃圾短信并对垃圾短信发送者实施关停操作当某用户被判定为垃圾短信发送者时其已经发送了大量的垃圾短信并造成严重的影响，而且这种方法容易对发送量大的非垃圾短信误判，损害用户的正常利益关键字匹配方法方法简便；关键词库易配置；容易对正常短信造成误判，因为有些正常短信中也可能含有关键词库中的关键字，仅仅依靠关键字可能就过滤掉这些短信；另一方面中文词汇太多，而且某些关键字可以使用同音字代替，关键词库不完备，过滤效率比较低下基于黑白名单的过滤方法方法简单；可人工添加，也可系统自动添加便于运营商通过客户属性信息进行控制；黑白名单不完备，且垃圾短信发送者大部分为新开卡用户第六页，共二十三页。汇报提纲背景介绍运营商现有系统介绍垃圾短信集中管控系统方案垃圾短信过滤经营分析系统支撑方案总结与展望第七页，共二十三页。短信中心系统结构

第八页，共二十三页。经营分析系统结构与流程

第九页，共二十三页。现有垃圾短信监控平台垃圾短信过滤流程

第十页，共二十三页。现有系统存在的问题与解决方法

序号现有系统存在的问题解决方法1现有系统为以省为单位进行部属，人工审核工作也是以省为单位进行，各省都要消耗大量的人力资源来审核经过过滤系统一次识别的疑似垃圾短信。建立集中管控系统，进行统一审核，并添加二次过滤规则2疑似垃圾短信数量庞大，没有审核优先级顺序，审核工作比较滞后根据指定策略通过对疑似垃圾短信进行分析，得到嫌疑度更高的疑似垃圾短信，送审后人工审核人员可优先对这些高嫌疑度疑似垃圾短信进行处理3现有系统策略单一，关键字容易被替代绕过，拦截效率低下提出了策略集的新概念，方便系统对整个策略的管理，并在策略集的基础上提出关键词策略和流量策略的具体实施模型，在模型中新加入双阀值控制的策略，可以更及时有效的对疑似垃圾短信做出相应处理4全国各省的策略不统一，不能共享各省的黑白名单发布全网统一策略，共享各省的黑白名单5中文语法复杂，关键字库不完备选取入网时长、品牌、主被叫时长、人均发送短信量、发送峰值等用户属性作为特征向量，建立了基于决策树的垃圾短信过滤系统模型第十一页，共二十三页。汇报提纲背景介绍运营商现有系统介绍垃圾短信集中管控系统方案垃圾短信过滤经营分析系统支撑方案总结与展望第十二页，共二十三页。垃圾短信集中管控系统第十三页，共二十三页。系统处理流程第十四页，共二十三页。策略集定义策略集属性

第十五页，共二十三页。关键词策略流量策略

第十六页，共二十三页。二次过滤策略二次放行策略优质客户短信放行策略短信长度策略白关键字组合不含中文的短信指定时间段内同一用户多次送审则仅审第一次

二次拦截策略疑似垃圾短信如和被审核过的短信内容相同，不进行人工审核，直接参照上次审核结果确定高嫌疑度的疑似垃圾短信优先进行人工审核第十七页，共二十三页。汇报提纲背景介绍运营商现有系统介绍垃圾短信集中管控系统方案垃圾短信过滤经营分析系统支撑方案总结与展望第十八页，共二十三页。经营分析系统垃圾短信治理应用模块功能第十九页，共二十三页。建模数据集第二十页，共二十三页。建模处理流程第二十一页，共二十三页。训练集样本品牌变量A入网渠道变量B是否垃圾短信U神州行营业厅是全球通营业厅是全球通代理商是动感地带营业厅否神州行代理商是神州行代理商是动感地带代理商是动感地带代理商是动感地带营业厅否全球通