电信人口大数据项目简介

电信人口大数据项目简介XX科技股份有限公司编制目录一、 电信人口大数据项目背景 3二、 客户情况及市场情况 31. 客户情况 32. 市场情况 3三、 技术选型 3四、 项目团队构成 4五、 团队成员技能需求 5

电信人口大数据项目背景国务院2015年印发《促进大数据发展行动纲要》，其中提出，要加强顶层设计和统筹协调，大力推动政府信息系统和公共数据互联开放共享，加快政府信息平台整合，消除信息孤岛，推进电信人口大数据资源向社会开放，增强政府公信力，引导社会发展，服务公众企业；以企业为主体，营造宽松公平环境，加大大数据关键技术研发、产业发展和人才培养力度，着力推进数据汇集和发掘，深化大数据在各行业创新应用，促进大数据产业健康发展；完善法规制度和标准体系，科学规范利用大数据，切实保障数据安全。《纲要》明确，推动大数据发展和应用，在未来5至10年打造精准治理、多方协作的社会治理新模式，建立运行平稳、安全高效的经济运行新机制，构建以人为本、惠及全民的民生服务新体系，开启大众创业、万众创新的创新驱动新格局，培育高端智能、新兴繁荣的产业发展新生态。《重庆市国民经济和社会发展第十三个五年规划纲要》发布，提出今后五年全市常住人口总量控制在2300万人以内，城区常住人口比2014年下降15%左右，“大城市病”等突出问题得到有效缓解。根据城区十三五规划，到2020年，全区常住人口比2014年下降15%左右，控制在77.4万人以内，实现净疏解13.7万人。2016年常住人口下降率计划为3.2%，要实现净疏解2.9万人，常住人口下降到87.7万人，考虑今年预计新增人口数为0.7万人，实际需要疏解3.6万人。重庆城共有各类商品交易市场37家，2015年已经关停4家，十三五期间剩余的33家将通过转型升级、疏解外迁等方式调整提升。其中，区域性专业市场全面外迁，批发、仓储、物流等功能全部退出。客户情况及市场情况客户情况若客户身份信息有缺失或无法获取，也可借助位置变化轨迹和通信数据进行分析。首先，电信部门通过基站实时采集用户的位置信息，手机终端在移动过程中，可根据设备通信的基站位置创建用户移动的相应轨迹，尤其是在五一、十一、春节等长假期间，我国人群一般热衷返回户口所在地与亲人团聚，这段时间内运营商采集到的位置区域变化与人群的户籍流动方向呈现相反的趋势；其次，流动人群大多会频繁与户口所在地进行通信，而电信部门出于收费的需要，会采集并存储各个用户的通讯信息，包括被叫用户、被叫所在地等重要信息，这为研究人群主要通讯对象的户籍所在地提供了数据支持。市场情况人口的流入数量在一定程度上反映出当地的经济发展情况，也对当地的人力资源分配、城市建设、公共设施等造成一系列的社会影响，短周期内快速统计流入人口数量有利于促进城市各方面的健康发展。为进一步提高识别流入人口的准确性，可利用网络调查问卷，针对学生、务工者等不同群体建立通信行为模型，获得更加精准的属性特征。根据基站位置的分布，建立基于社区、城乡电信数据的抽样统计方法，实现小区域范围内的流入人口统计，根据流入人口的统计数量绘制城市分布密度图，有利于促进城市的规划管理。技术选型TABLEAU 针对数据分析及智能提供自助式或嵌入式的可视化分析图表ELASTICSEARCH 针对数据分析及智能提供面向用户的全局数据探索或面向应用的全局数据搜索CDH/FlumeKafka 数据采集，结合数据流技术对接各类应用系统及数据库的数据资源HADOOPYARN 针对数据服务及安全类应用的定制开发提供微服务运行环境技术管理工具CDH/HDFS 文件类数据整合与存储，HADOOP技术路线CDH/HBASE 格式类数据整合与存储，HADOOP技术路线CDH/HIVE 数据清洗HADOOP 数据清洗工具CDH/SPARK 离线数据开发及处理FLINK 实时数据开发及处理CDH/SPARK 数据服务及安全CDH/YARN+CM 数据负载及集群管理CDH/HIVESparkML 数据分析及智能项目团队构成姓名性别学历职称专业工作单位项目中的分工每年工作时间(月)签字成员A男本科高级大数据工程师应用电子技术XX科技股份有限公司项目管理12成员B男本科高级大数据工程师体育医学技术总监12成员C男本科中级软件工程师计算机科学与技术软件开发12成员D男本科高级大数据讲师计算机科学与技术软件开发12成员E男本科中级软件工程师数学与应用数学软件开发12成员F男本科高级运维工程师信息管理架构设计12团队成员技能需求成员A擅长：负责企业级云计算、大数据平台项目，大数据应用开发项目的立项、论证、验收等项目过程管理，云计算和大数据相关通识性培训。项目经历：区域医疗云计算中心、重庆三峡银行大数据平台、电信分析云项目、重庆移动业务支撑大数据平台建设。长期从事技术管理工作，对技术团队的管理和认识有自己独到的见解，善于将人员提升和管理经营有机结合。擅长技术：Windows、Linux、Exchange、数据库、Hadoop、项目管理等系统开发与管理。擅长技术：网络通信、网络安全、数据库操作、duilib、c/c++。擅长技术：Python爬虫程序开发、Python数据分析、Linux系统管理、大数据存储与管理、Hadoop大数据开发、Scala函数式编程、数据挖掘、云计算平台架构、Excel高级数据分析、图像识别、机器学习、分布式计算、数据可视化分析等。擅长技术：R语言统计分析、Excel数据分析、Qlik数据可视化、数据可视化建模、概率论与数理统计。曾在上海惠普、IBM、MOT