大数据建设与应用汇报ppt课件

建设情况与应用汇报,大数据,+,+,大数据,DT时代,江西联通信息化部,1,赢在数据时代,理念篇,平台篇,应用篇,展望篇,大数据服务理念,大数据领先平台,大数据应用,展望未来,2,理念篇,3,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,大数据服务理念,+,+,=,大数据服务,数据资产变现,快捷的数据服务,数据驱动业务,提升经营决策效率全面精准、洞察客户提供精确、实时的营销服务,透明的使用数据服务数据使用像使用水、电一样便捷,提供脱敏数据，促进数据资产交易融合外部数据，促进大数据增值变现,企业赋能价值提升,平台篇,5,大数据技术与传统技术对比,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,传统的集中式计算,通过不断增加处理器的数量来增强单个计算机的计算能力，从而提高处理数据的速度，比如传统的大型机、小型机，硬件费用昂贵，新兴的互联网公司根本负担不起,优点：技术实现不复杂，有丰富的应用经验,缺点：主机费用昂贵，需要专用硬件支持，比如专用处理器，处理大量数据时遇到瓶颈,当前状况：去IOE，逐渐被互联网公司抛弃,VS,大数据分布式计算,把一组计算机通过网络相互连接组成分散系统，然后将需要处理的大量数据分散成多个部分，交由分散系统内的计算机组同时计算，最后将这些计算结果合并得到最终的结果。更加开放的HDFS：负责数据存储大规模编程模型MapReduce:负责计算,优点：使用X86服务器，硬件便宜，能处理大容量数据，关键是软件是开源的，免费,缺点：早期分布式计算技术复杂，实现比较困难，大数据技术人才匮乏,当前状况：Hadoop分布式计算框架被广泛应用,胜出,运营商到底有哪些数据,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,运营商大数据具备全面性、多维性、中立性、完整性是其它企业很难比拟的，而且通过这些不同维度数据的交叉关联，可以创造更多的新数据和新价值。,身份,上网,位置,社交,支出,通信,终端,时序,基于通信交往圈的大小，主被叫，时间序列，得到用户的社交特征,运营商的通过位置信息，可以掌握用户出行特征，给用户带来生活的极大便利,基于用户访问什么网址，下载什么应用，访问什么内容等，得到上网喜好,运营商不仅客户信息覆盖完整，还可以基于实际行为进行验证。通过身份信息，帮助金融机构快速判定用户的信用程度,运营商有客户最为详实的消费账单，比如流量费，短信费、语音费、新业务费等，能反映用户的一些特征,通过用户的通信使用情况，比如本地，漫游，长途，了解用户通话行为特征,识别记录手机终端型号，了解用户手机使用特征，发展趋势，用户换机周期等,通过用户上网，位置，通话等行为按照时间排列，了解更多规律提供更多服务,运营商数据的优势,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,数据封闭性数据局部性数据割裂性,互联网数据受限于本身的数据基因,运营商数据天然优越性,运营商数据解决互联网三大问题：你是谁，你在哪，你在干什么,主流的大数据架构平台,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,统一调度,DW,数据透明访问,分布式文件系统,大数据模型,聚合视图/分析模型,DWA,DWD,自主经营体系统,经营分析,自助查询,大数据整合,大数据采集,宽带营销,2I网络优化,智能引擎,旅游大数据,标签服务,对内应用,对外运营,大数据应用,平台的大数据处理能力,日处理上网记录,每天处理的数据规模,日处理位置信令数据,平台存储能力,每天处理文件接口数,50亿条,10亿条,2TB,500个接口,1.2PB,平台核心数据1：传统电信数据,平台核心数据2：用户位置信息,1,2,3,用户实时位置,根据用户信令定位，5分钟更新一次,用户实时轨迹,跟踪用户出现的每一个位置，生成变化轨迹,小区实时热力,某一范围内人流量变化，以热力图形式展现,6,8,工作地信息,定位用户工作时段所处的地理位置,居住地信息,定位用户宿息时段所处的地理位置,娱乐地信息,定位用户娱乐所在地的地理位置,7,4,5,地理围栏感知,在地图上圈定范围，随即进行解析、匹配、应用,实时路段客流量,根据某一路段基站经纬度，定位基站承载的客流量,10,漫游监控,国内漫游由用户开卡地确认来源地，国际漫入由IMSI确认来源国,出行方式监控,根据用户实时位置和实时轨迹，匹配交通方式（飞机、火车、汽车等）,9,平台核心数据3：用户上网行为,谁,在哪里,在什么时间,以何种方式,访问了哪些网站内容,使用了什么APP,中国联通互联网信息库,网站识别规则,APP识别规则,UA精准解析规则,IP+Port补充解析规则,四级域名分类规则,URL路径规则,站内动作识别规则,搜索识别规则,搜索词库,网站内容解析规则,URL参数规则,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,核心数据应用：用户画像,应用篇,15,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,大数据应用产品体系,宽带营销,2I2C网络优化,自助报表,旅游大数据,环保应用,精准营销,对内应用,对外应用,能力开放,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,宽带营销,点击链接,展示各小区宽带资源和端口占用情况，以及近15天将到期用户数，点击可查看即将到期用户明细，用于宽带维系。,展示基站下的宽带潜在用户（无宽带、异网宽带），点击可查看潜在用户明细，用于融合业务发展。,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,2I2C网络优化,点击链接,根据2I2C流量分布，结合基站负载数据，为基站新建、扩容、优化提供参考依据，保障2I2C用户网络服务,展示每个基站下2I2C用户数、2I2C流量占比、投诉数和订单数，用于分析参考。,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,自助报表,点击链接,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,精准营销,国际漫游流量包营销,营销场景：实时获取江西联通用户在全国国际航站楼的数据，对用户实时营销国际漫游流量包，提高国际漫游收入增长。营销效果：从18年1月12日至2月9日，共计对68170户用户进行营销，成功办理国际漫游包用户为2817户，转化率为4.1%；,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,旅游大数据平台,点击链接,e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664,环保大数据热力图,点击链接,e7d195523061f1c01ef2b70529884c179423570db