




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、智慧旅游大数据集成平台总体方案目录 TOC o 1-3 h z u HYPERLINK l _Toc513046219 第一章 总体方案 PAGEREF _Toc513046219 h 3 HYPERLINK l _Toc513046220 1.1 项目概述 PAGEREF _Toc513046220 h 3 HYPERLINK l _Toc513046221 1.1.1 项目背景 PAGEREF _Toc513046221 h 3 HYPERLINK l _Toc513046222 1.1.2 项目目标 PAGEREF _Toc513046222 h 4 HYPERLINK l _Toc51
2、3046223 1.2 现状与问题分析 PAGEREF _Toc513046223 h 4 HYPERLINK l _Toc513046224 1.2.1 现状梳理 PAGEREF _Toc513046224 h 4 HYPERLINK l _Toc513046225 1.2.2 问题分析 PAGEREF _Toc513046225 h 8 HYPERLINK l _Toc513046226 1.3 总体方案 PAGEREF _Toc513046226 h 11 HYPERLINK l _Toc513046227 1.3.1 总体架构设计 PAGEREF _Toc513046227 h 11
3、HYPERLINK l _Toc513046228 1.3.2 数据中心设计 PAGEREF _Toc513046228 h 14 HYPERLINK l _Toc513046229 1.3.3 安全与存储设计 PAGEREF _Toc513046229 h 29 HYPERLINK l _Toc513046230 1.3.4 云端部署服务设计 PAGEREF _Toc513046230 h 82 HYPERLINK l _Toc513046231 1.3.5 大数据标准体系设计 PAGEREF _Toc513046231 h 116总体方案项目概述项目背景旅游业是中国经济新常态下综合拉动投资
4、、消费和就业的新兴战略产业,是全面建成小康社会的奋斗目标下人民群众共同关注的民生产业。近年来随着社会经济发展、人民收入水平提高和休闲假期的增多,我国旅游业迎来了历史大发展的机遇期,实现了从短缺型旅游发展中国家向初步小康型旅游大国的历史性跨越,但在旅游业蓬勃发展的同时,也面临由投资拉动向消费驱动的转变,由封闭运行向社会融合的转变,由一业发展向多业发展共进的转变,以及由传统服务模式向现代服务模式的转变等。这不仅体现了旅游业的自身规律,更反映了新常态下的发展要求。在这样的发展背景下,旅游业需要主动引入新思维、新模式和新技术,勇于突破自身发展障碍,锐意进取、大胆创新,集合旅游政务部门、旅游专家、旅游企
5、业,特别是广大群众的智慧,共同参与和推动我国旅游业实现质的飞跃。2015年12月3日,国家旅游局数据中心成立,对实现国家旅游产业健康发展、旅游经济明显增效具有重要的战略意义。国家旅游局同时推动出台国务院旅游工作部际协调会议层面的关于加强旅游统计工作的意见、旅游系统内的关于加强旅游统计工作的通知和地方数据中心建设指导意见,试点成立一批地方旅游数据中心。在全国旅游业大力实施互联网+、大数据战略的大趋势下,旅游业也面临着转型升级的严峻挑战。当前旅游大数据,存在着应用研究不够、政府数据开放共享不足、缺乏顶层设计和统筹规划、创新应用领域不广等问题,亟待解决。为贯彻国家旅游局办公室关于印发2016年旅游数
6、据中心建设行动方案的通知(旅办发201688号)要求,深化旅游业改革和创新,促进旅游业同新一代信息技术深度融合,同时为解决旅游局现有信息化程度还不能够服务和满足于大众旅游和散客化时代对行业发展和服务管理的要求。需要建设旅游数据中心大数据集成应用平台。项目目标旅游业是国民经济的战略性产业,资源消耗低,带动系数大,就业机会多,综合效益好,在国家“互联网+”行动计划的浪潮下,发展智慧旅游,不仅能够有效带动旅游投资,促进信息消费,还能带动旅游服务业提档升级,促进旅游产业业态和模式创新。而将大数据技术应用在智慧旅游上,会将旅游业信息化发展提升一个新的高度。在现有旅游业信息化的基础上建设旅游数据中心大数据
7、集成平台是城市信息化发展的基础性项目。充分运用物联网、云计算、大数据、GIS和GPS等现代信息技术,结合先进的管理理念,建设旅游数据中心,整合市旅游局、涉旅单位等数据,切实解决数据孤岛、数据烟囱等问题,运用数据测算模型,实现数据存储清洗、数据采集挖掘、统计分析处理、旅游运行分析、宣传营销推广、智慧旅游监管、对外交流合作、旅游公共服务等建设,为政府决策提供依据支撑,为企业经营提供共享信息,为公众出游提供精准服务。通过资源整合和创新,计划利用1年的时间,把旅游数据中心建设成副省级城市旅游数据研究及应用的领先者。现状与问题分析现状梳理旅游局旅游信息化开展较早,发展速度较快,目前已经建成了旅游项目管理
8、系统、旅游局指挥中心平台、住宿业管理平台等12个自建系统。各个业务处室根据各自的业务特点建设了对应的业务与管理系统支撑了相关工作。及时的应用了国家旅游局、四川省旅游局的各业务系统,在有效的完成上级部门部署的工作之外,又形成了自己的应用特点,做了部分个性化应用延续,满足自身业务的实际需要。在旅游行业管理方面,下了较大的功夫,开发了功能完备的应急指挥平台、项目管理系统、住宿业管理平台、平安旅游监测防控系统,乡村旅游统计系统、行政处罚电子化系统、旅游质检执法、旅行社管理系统等,在旅游行业管理方面充分利用了智慧化的手段进行高效的应用。在旅游公共服务方面,建设了旅游散客综合服务平台、微博微信服务平台等,
9、提供热门景点、旅游攻略、景区游记、休闲娱乐、旅游查询、酒店、交通、美食等功能模块,为游客多视角、全方位的提供吃、住、行、游、购、娱方面的移动终端体验。自建系统具体内容如下:序号应用系统负责部门主要用途及运行情况1旅游项目管理 系统产业处收集旅游产业投资的动态信息和相关数据。目前运行情况良好。2旅游局指挥中心平台市场处整合现有的数据资源、通讯资源、网络资源、系统资源、应急资源,构建上联四川旅游运行监管及安全应急管理联动指挥平台,横向技术对接市级有关部门信息系统,下联市、县(区)旅游部门、景区、宾馆饭店、旅行社等智慧旅游信息系统的体系,实现旅游日常运行监测监控、预测预警、信息报告、综合研判、应急救
10、援、指挥调度等主要功能。现系统运行正常,正在逐步拓展数据统计及使用功能。目前运行情况良好。3旅游政务网市场处及时公开旅游管理部门机构职能、工作流程、政策法规等信息,为游客提供有效的旅游公共服务信息。目前运行情况良好。4旅游散客综合服务平台(手机APP)市场处平台分为热门景点、旅游攻略、景区游记、休闲娱乐、旅游查询、酒店、交通、美食等功能模块,为游客多视角、全方位的提供吃、住、行、游、购、娱方面的移动终端体验。目前处于改版阶段。5旅游局住宿业管理平台监管处系统包括信息管理、旅馆管理、数据中心、统计分析等9大板块,实现了规范全市住宿业管理,监测全市住宿业的发展情况,为住宿业政策制定提供数据支撑等。
11、目前运行情况良好。6“平安旅游”监测防控系统监管处应和“平安”建设,实现旅游安全信息分类分级管理,逐步形成旅游业风险管理体系,对全市星级饭店、旅行社、A级旅游景区进行全面的行业旅游安全信息动态管理。系统正在建设中。7假日旅游填报系统监管处在“春节”“十一”黄金周期间,旅游景区、旅行社、星级酒店和部分社会旅馆通过平台填报接待数据,为国家局黄金周填报系统和撰写概述提供数据支撑。目前运行情况良好。8旅游局乡村统计管理平台监管处统计乡村旅游接待游客人次、乡村旅游收入等基础指标,并实现基础分析。目前运行情况良好。9旅游经济实验室统计预警平台监管处依托旅游经济实验室,科学研判旅游运行和市场趋势,完善以规模
12、数据为基础,以过夜人天数和人均消费为核心的指标评价体系,加强旅游经济的预研。目前正在建设中。10旅游行政处罚电子化系统旅游执法支队及各区(市)县旅游行政检查、执法与处罚的无线智能化管理,运用移动执法终端与行政处罚电子化系统构建云+端平台,实现旅游执法办案的无线终端操作、数据云端共享。目前运行情况良好。11旅游质监执法监督网旅游执法支队为群众提供旅游质监执法政务信息服务,了解执法机构职能、法规知识和旅游行政执法工作程序;记录和展现我局执法机构开展行政服务指导和管理工作情况,公示违规经营行为,促进旅游市场规范;为游客提供及时接收、处理旅游质量纠纷投诉的服务平台,提高行政工作效率。目前运行情况良好。
13、12旅行社管理系统旅游执法支队结合旅游局对旅行社的行业管理职能,从规范行业管理、旅行社业务管理、整顿旅游秩序、提升服务质量、保障游客权益、提升当地旅游形象的角度建设了旅行社管理系统,以加强与规范旅行社行业的有效管理。该系统平台主要包含旅行社基础信息管理系统、旅行社旅游信息上报系统、旅行社合同管理系统、导游管理系统、旅游监控应急管理和调度系统、旅游咨询与投诉管理系统、用户与权限管理系统。除了以上自建系统外,旅游局应用了国家旅游局、四川省旅游局以及微信、官方微博自媒体平台的6个相关系统,在旅游行业管理上形成了国家级、省级、地市三级联动管理,满足上级管理需要的同时,对自身业务的梳理完成了本地管理流程
14、的规范化,支撑了下级旅游管理部门业务开展。具体应用系统如下: 1.国家旅游局A级旅游景区管理系统 按照国家旅游局要求,对全市A级景区季度接待游客情况(包括游客接待量、免票人次)和景区经营总收入(包括门票收入)情况进行统计,并审核上报国家旅游局。目前运行情况正常。 2.国家旅游局旅游厕所管理系统按照国家旅游局要求,每月在系统中上报、填报我市每个旅游厕所的施工进度,同时在系统中可以查询到各个厕所的建设情况以及完工、新建、改建等厕所数量。目前运行情况正常。 3.旅游局公众微信平台(公众号、订阅号) 微信公众号不仅要从自我内容下做文章,更可以从功能上下文章,增加用户对我们公众号的粘性,从而在潜移默化中
15、对微信号增强认知度,从而能成为知名的旅游微信平台。每周更新“旅游”微信公众号;每周一至周五更新“旅游”订阅号;每周策划一次旅游主题活动。原创软文推送、策划统筹各项与旅游相关主题活动的形式为主。目前运行情况良好。 4.旅游局官方微博(新浪、腾讯) 微博具有大量的注册用户和活跃用户,同时突破了传统营销模式的局限性。为抢占这块网络营销阵地,微博平台已成为旅游业宣传推广的标配。微博营销具有立体化、高速度、便捷性、广泛性等优势,可以实现传播品牌信息、与消费者互动、客户服务、公关服务、电子商务等功能。通过实时双向互动、图片和碎片化的语言,通过展示城市旅游形象、景区景点以及和网友互动,以及微博话题造势,塑造
16、城市旅游形象、景区品牌知名度和美誉度,从而为精准营销助力,实现旅游形象的提高和经济效益的提升。每天更新6-9条微博、及时关注并回复官方微博平台的信息及游客信息咨询;开展有奖征集等互动活动。目前运行情况良好。 5.国家旅游局假日旅游信息填报系统 按照国家旅游局要求,对全市“春节”“十一”黄金周旅游情况进行统计,对黄金周接待人数、旅游收入、交通、宾馆接待等数据进行收集汇总,并审核上报国家旅游局。国家旅游局假日旅游信息填报系统仅在黄金周期间开放,平时系统不开放。目前运行情况正常。6.四川省旅游统计综合管理系统按照四川省旅发委的要求,对全市旅游行业进行相关统计,要求涉旅企业(旅行社、A级景区、宾馆酒店
17、)通过系统将每月接待月报表进行上报,并于年底将财务年报表进行报送。每年按照国家旅游局要求进行抽样调查,通过调查问卷录入测算游客消费水平等数据。目前运行情况正常。问题分析通过对目前已有系统的梳理,经过一系列的调研分析,结合旅游发展的实际情况,发现旅游信息化建设存在以下问题和不足:1. 需求满足度下降,大部分为操作性应用旅游信息化的建设应该适应大众旅游和散客潮时代的来临。这涉及对旅游信息化本质的理解。旅游信息化是基于信息通信技术,为满足游客个性化需求,提供高品质、高满意度服务,为实现旅游资源及社会资源的共享与有效利用的系统化、集约化的变革。旅游信息内容一般涉及旅游目的地、景点、饭店、交通旅游线路和
18、旅游常识等,普通旅游网站一般都有,但在根据旅游者的特点和需求组合定制旅游产品,缺乏此类应用。此外,在消费者的旅游途中,很难进行服务质量反馈、投诉,缺少实时的服务监管系统。目前大部分系统就是统计、业务操作类系统,缺乏决策应用,不能适应旅游快速发展的需要。2系统建设分散,维护与管理难度大旅游局各系统由业务部门自身维护与应用,根据各业务部门的需求,建设自身系统,并未通盘考虑。形成了系统各自为阵的局面,但各业务部门又没有专门的信息化人才,只能靠建设厂商来维护与管理。对各信息化建设与维护厂商的管理成了业务部门的一大难题,厂商建完系统没人管理的情况已经发生,造成系统不稳定、没法办使用的情况,既耽误了业务的
19、管理,又打击了业务部门建设使用信息化的积极性。各业务系统单独维护,占用大量的IT资源成本极高,效率低下。3.数据孤岛严重,各级区县、景区用户填报繁琐根据旅游局已建系统的详细调研,现有自建的12个系统,在纵向上没有与国家局、省旅发委实现数据共享,在横向上没有与相关部门实现数据共享,存在“信息孤岛”、“数据烟囱”的情况。各系统之间没有数据共享,同样的内容由不同用户通过手工录入不同的系统,各系统数据存在不一致现象,数据冗余,再利用程度很低。各区县和景区管理者对同一数据需要在不同的系统中重复填报,效率较低且不能保证数据的一致,给下级管理部门带来众多的工作不便利。4、数据源大部分是人工填报,真实性很难考
20、量旅游行业管理类的系统,数据为各企业、各下级管理部门人工填报,市旅游局进行审核,此类信息的内容数据量非常庞大,都依靠人工进行核对,存在不及时,不准确的现象。例如旅行社管理系统中,旅行社自身的数据填报后,需要旅游局工作人员人工审核,难度非常大,这些信息旅游局是不掌握的。应该对接相关工商、税务等系统进行导入,减少人工工作的错误率。5、现有市旅游局各类信息化系统建设中无统一数据标准、参数及规范各信息系统都是不同厂家根据旅游局的实际需求以及各自的理解和认识,按照自身的技术特点进行了相关定制化的开发,所用数据标准、参数等都各不相同。给下一步数据统一打通,留下了很大的困难。数据梳理的工作是目前旅游局进行整
21、合的重中之中,去除冗余、进行业务梳理,数据清洗等工作是旅游信息化升级的重要任务。这些数据之间缺乏统一的标准,难以共享和应用,信息孤岛导致数据利用效率抵下、信息资源大量冗余等问题。6、缺乏数据支撑,很难开展决策分析应用由于缺乏大数据支撑,且数据收据渠道单一,传统统计分析形成的旅游经济运行分析报告不能满足旅游产业发展和服务游客的需要,尤其是实时数据源的分析和利用还有较大差距。针对以上问题以及完全满足本次招标内容,九次方公司提出如下解决方案: 1.构建旅游数据中心,解决信息孤岛、数据分散、数据源单一问题,一方面要着力构建旅游信息数据交换平台,制定统一的数据采集标准。研究制定旅游行业数据库和元数据库的
22、内容标准,制定旅游行业数据分级规范和旅游数据分类规范,进行数据采集、编目、分级,实现旅游数据分类归档、授权应用;建立数据共享机制,解决信息数据交换和共享问题;利用数据挖掘、数据分析等技术,构建科学化、智能化、人性化的数据分析系统,发挥数据综合服务和应用效能,提升旅游管理服务水平和营销能力。另一方面,旅游局还要做好协调发展工作,加快建设旅游企业全生命周期管理和服务系统,整合工商、税务、交通、气象、公安、卫生等部门的相关信息资源,支持市场化运作的机构建设社会化数据源采集包括百度、google、OTA、运营商、旅游攻略网站等合作,整合当地景点、交通、住宿、餐饮、购物、娱乐、天气、语言、汇率等与旅游相
23、关的信息资源,为游客提供从出发到返程的全程信息服务。2.制定系统集成统一运维机制,在引入更多的信息化服务厂商投入旅游领域建设同时,加以有效的运维管理与后续服务运营跟踪是目前解决旅游信息化建设后续问题的有效手段。比如云服务厂商、软硬件信息化企业、运营商等,充分利用各自的优势,既要考虑国内一流的旅游信息化服务商,也要考虑本地旅游信息化厂商的培育,建设一套旅游信息化运维机制,在本次招投标中形成运用,九次方公司建议在运维体系中原业务各厂家由大数据集成平台建设方统一运维管理,由大数据集成平台建设方牵头通过运营机制协调与约束各系统建设商对原系统的维护与管理。旅游局通过一个建设厂商的沟通可对原12个系统进行
24、管理与维护,大大减轻工作负担,提升工作效率。3.开展切合实际的旅游大数据应用。基于自身资源禀赋,与旅游发展存在问题,形成问题导向。针对作为国际旅游目的地、旅游集散地的发展中行业管理、精准营销、旅游诚信、经济运行等亟待解决的问题;九次方公司在构架旅游大数据发展的整体战略时,制定旅游大数据的相关标准和评价体系,并充分利用已有建设成果,将其转化成提升旅游公共服务和管理(如旅游统计、游客满意度调查、游客流量预报等)的能力;针对互联网、运营商等社会化数据的采集,为旅游大数据分析在旅游精准营销、旅游诚信评价、旅游公共服务、旅游经济运行提供预警、预测功能,有效支撑旅游管理决策。总体方案总体架构设计旅游数据中
25、心大数据集成应用平台主要内容包括构建“一库二体系一平台”, 一库”指建立旅游大数据中心数据库集群,“二体系”是具体指平台标准规范体系和安全体系,“一平台”指建成旅游数据中心大数据集成应用平台,形成“一体化”的架构设计思想。其次,对已建成的旅游局内部各子系统,进行完善和升级,实现对各应用子系统和各类用户的统一管理;平台可以支持对各旅游业务应用系统的弹性接入;支持在平台上开发基于Web Service 等技术开发标准的调用接口,使得各第三方系统、设备可以便捷的接入本平台,充分体现平台的开放性。图:旅游数据中心大数据集成应用平台总体架构旅游数据中心大数据应用集成平台支持广域网运行模式的三层网络架构体
26、系,既要可以满足用户个性化需求以及系统安全性等方面的需要;又要同时保持系统核心架构的稳定性,保证系统的可用性、可靠性和可扩展性。平台采用三层或以上体系构架,基于SOA架构实现服务,具备易部署、易管理和易使用的特点,各系统通过发布和获取服务来对外提供和获取信息。系统总体将采用B/S和C/S相结合的架构,实现基于WEB应用,实现客户端零代码维护。基础设施服务:基于服务器、存储、网络及安全设备等,通过整合基础设施资源,提高资源利用率,为各种应用提供可扩展的、安全稳定的基础支撑。本项目主要利用云计算中心的基础设施资源。平台服务:基于数据采集与交换平台,按照数据标准规范对数据进行清洗、转换、汇集、规整及
27、质量监控,建立缓冲库,通过元数据库规范数据整合、管理和服务过程,建立中心库,通过数据集市、数据仓库等形式对外提供数据检索、数据分析、数据报表、访问接口、数据比对等服务。应用层:为大数据应用体系、数据分析应用提供数据支持。标准体系:标准规范体系涉及到基础设施服务、数据管理与服务、安全保障、日常管理与运维等多个层面,是数据中心的基础。安全保障体系:安全保障体系涵盖物理安全、存储安全、网络安全、数据安全和信息安全等,为数据中心各环节、各阶段、各层面提供全方位的安全保障。接入层与用户层:提供系统所有访问用户访问接入渠道,根据本项目的要求,采用云计算中心基础网络接入,并配合统用户一认证实现远程用户接入时
28、的身份认证和授权。远程用户可采用浏览器或APP方式访问应用系统。用户层指访问和使用本项目的用户,主要包括政府、企业、以及公众。其中应用层的主要内容包括:1、旅游运行分析模块,从常规旅游统计数据、旅游大数据、旅游产业数据三个方面切入,为旅游大数据分析提供数据测算模型,精准展示旅游运行分析成果。2、旅游宣传营销子平台,通过旅游综合门户、景区视频监控、游客服务系统等,提供线路信息展示、景区热力图展示、客流量展示、高峰游客量展示、天气查询、空气质量、交通查询、导游领队查询、景区游客流量查询、旅游产品查询、在线旅游投诉和旅游法解读等,服务于游客和企业,增强公共服务能力。3、旅游市场信用子平台,构建旅游市
29、场信用监管信息化系统,提供信用信息查询服务,满足企业、公众的信用服务需求,同时为旅游行业监管提供依据支撑。4、执法双随机抽查系统,实现在线随机选择检查对象、随机选择执法检查人员,对事中事后进行监管、在系统公开发布。5、升级移动执法子平台,实现对现有市旅游局电子化行政处罚系统的升级,新增手机移动端APP的功能开发,进一步提高执法和办案效率。数据中心设计数据中心建设建库原则信息资源库用于梳理系统内部、外部各种数据资源,对各业务部门提供基础数据服务,并进而为各职能部门提供数据服务。信息资源库设计是否合理,对系统信息资源共享、业务开展起极其重要作用,信息资源库的建设不是一朝一夕可以完成,是循序渐进的过
30、程,涉及的数据不可能一次性获得,是分批分次的进行,本次建设信息库过程中我们将遵循“统筹规则、分期实施”的原则展开。逻辑结构 资源库逻辑结构资源库包括ODS层、缓冲层、基础层、应用层四个层次,具体如下:(一)ODS层:资源层是数据的源头,根据系统的资源特点,主要包括部门提供的内部资源,以及其它部门提供的共享资源。(二)缓冲层:通过数据采集交换,资源层的数据被集中到数据中心的缓冲层,实现实现内部资源、外部资源的集中存储、清洗规整。(三)基础层:该层则是按相关规范对缓冲层的数据进行分类组织,形成可再生利用的基础数据资源。为保证基础数据的标准性、规范性、扩展性,基础层还设置了各类标准、规范、配置等元数
31、据库,以及各种可复用的业务模型库等。(四)应用层:该层次则是根据应用的具体需求,直接使用基础数据,或基于主题对基础层相关资源进行重新组织,建设成各种主题库。数据中心模型设计旅游数据中心以数据源为基础,通过运用数据测算模型,实现数据存储清洗、数据采集,形成旅游数据中心核心数据模型。旅游大数据平台建库示例如下:数据编码标准规范设计编码体系是旅游大数据平台各专业管理模块之间进行链接和身份识别的代号,是管理者实施系统操作的进入门户和“钥匙”,是一种获取系统内部资源与信息的口令,是沟通系统的统一的、一致语言。因此,数据编码体系的质量,直接影响到系统管理与运行的质量,在设计与编制时必须认真对待。按照大数据
32、平台数据存储和交换的需要,结合已建成大数据中心城市的已有经验,旅游大数据平台应规范化的数据编码体系目录包含:政府-旅游局、旅游景点、公共信息、旅游线路、旅游产品、旅游活动、中介机构、酒店饭店、购物中心、娱乐会所、餐饮企业等。数据编码体系总表与明细表总表是编码体系的概括,是编码体系的总体结构,也是编码体系开展的工作指引;而明细表则是总表的说明和细化,组合在一起就是旅游大数据平台数据编码体系的框架。按照大数据平台数据存储和交换的需要,结合已建成大数据中心城市的已有经验,旅游大数据平台应规范化的数据编码体系目录包含:政府-旅游局、旅游景点、公共信息、旅游线路、旅游产品、旅游活动、中介机构、酒店饭店、
33、购物中心、娱乐会所、餐饮企业等。编码规则编写格式说明编码规则格式的说明是沟通编码规则指定者与使用者的桥梁,是对编码规则的整体解释。下面是编码规则说明的样例:信息分类的基本原则与方法信息分类就是把具有某种共同属性或特征的信息归并在一起,通过其类别的属性或特征来对信息进行区别。在信息化建设中,为了实现互联互通、资源共享、信息交换和信息处理的需要,必须遵循约定的分类原则和方法,按照信息的内涵、性质及管理的要求,将系统内所有信息,按一定的结构体系,加以分门别类的集合,从而使得每个信息在相应的分类体系中都有一个对应位置。信息分类的基本原则信息分类的基本原则为:科学性、系统性、可延性和兼容性。科 学 性科
34、学性即稳定性。为了获得一个稳定的分类体系,至关重要的是要在确定分类对象时,选准信息的最稳定的本质属性,此乃分类的基础和依据。系 统 性系统性即合理的顺序排列。可 延 性可延性是指信息分类体系的建立应满足事物或概念不断出现或变化的需要,这就要求在建立信息分类体系时,应留有足够的空位,以便安置新出现的信息,而不至于打乱已建立的分类体系或推倒重来。兼 容 性兼容性是指相关的信息分类体系间的协调性问题。随着企业信息化建设的展开,经营管理、项目管理、营销管理等各类信息系统纷纷上马,采用信息分类编码标准协调一致的问题就摆在我们面前,这就要求信息分类的原则及类目设置有可能经过技术性的处理后满足系统间信息交换
35、的要求。标 准 化标准化就是要充分考虑和参照已有的国家编码规范,这些规范是编码工作中应该认真学习和研究的。信息编码的基本原则编码的目的在于方便使用,因此编码时在考虑计算机处理信息使用方便的同时还要兼顾手工处理信息的需求。编码时应遵循如下的基本原则。唯 一 性尽管编码对象可能有不同的名称或不同的描述,但代码结构必须保证一个编码对象仅赋予一个代码,一个代码只反映一个编码对象。即:一个分类代码必须与指定的类目一一对应。可 扩 性代码结构必须能适应编码对象不断增加的需要,也就是说,必须为新的编码对象留有足够的备用码,从而使分类集可以进行必要的修订和补充。简 短 性在不影响代码系统的容量和可扩性的情况下
36、,代码位数应尽可能少,以减少差错率,减少计算机处理时间和存储空间。稳 定 性代码不宜频繁变动,否则将造成人、财、物的浪费。编码时,应考虑其变化的可能性,尽可能保持代码系统的相对稳定性。识 别 性代码应尽量有最大可能限度的含义,较多含义的代码可以反映分类编码对象更多的属性和特征,以助记忆并便于人们了解和使用。可操作性代码应尽可能方便事务员和操作员的工作,减少机器处理时间。自 检 性具有检验差错的自身核对性能,以适应机器的处理。上述原则中,有些原则彼此之间是互相冲突的,如:一个编码结构为了具有一定的可扩充性,就要留有足够的备用码,而留有足够的备用码,在一定程度上就要牺牲代码的简短性,代码的含义要强
37、、多,那么代码的简短性必然要受到一定的负面影响。因此,设计代码时必须综合考虑以求代码设计最优化的结果。数据资源整合数据中心的数据来源包括下面几类:内部各部门业务系统的数据、外各单位的业务数据。上述数据经过采集、清洗、转换后最终存储在综合基础资源库。系统内的各个业务数据库中,存在各种类型的数据库,同时还存在大量以Excel表格形式存在的数据文件。由于各单位业务系统分别在不同时期进行建设,各业务数据在数据库和数据标准化上都参差不齐,因此在整合各类数据时需要按照标准化的要求,对各种来源的数据进行清洗和转换,以提高数据中心的数据质量。从数据来源分析,旅游大数据中心的数据信息主要包括:市旅游局内部系统数
38、据市旅游局内部数据是旅游工作的具体体现,主要有景区数据、住宿业数据、旅行社数据、旅游动态数据、旅游执法数据、以及公共服务数据等。市旅游局及授权用户可实时调看及历史查阅。涉旅数据涉旅数据是有效整合部门统计数据,利用大数据完善旅游统计数据收集、整理、评估、分析工作,真实、准确反映全市旅游市场状况。主要有涉旅企业数据、对接公安、气象、安全、交通、工商、商务、食药监等、以及银联、移动、百度搜索、携程、去哪儿等数据。旅游数据中心平台通过实时对接、定期推送、数据导入等多种方式进行处理、分析、统计等。综合业务数据主要是旅游数据分析和测算、宣传、信用、行业监管、营销等业务数据,是旅游数据中心大数据集成应用平台
39、的重要数据,也是大数据应用的应用成果数据。通过采集的各类的数据,建立分析和测算模型,产生旅游产业客流监控功能、旅游产业宏观监管功能、旅游产业服务功能等。数据是保证系统良好运行的关键,要求对该类数据在中心平台实时、准确汇总。市旅游局及授权用户可实时调看、分析数据及历史查阅。地理信息数据地理空间信息数据是旅游数据中心大数据集成应用平台设计方案的基础。地理信息数据库可直接对旅游管理各相关部门、游客、服务商等提供准确、实时的基础地理信息。保证了旅游数据中心对基础地理信息的要求。包括景区、景点、住宿点、购物点、餐饮点、道路、交通线路、车站等多种类别的地理位置信息。视频监控数据景区、景点、住宿点等场所的视
40、频监控数据是本系统大数据量来源之一,3A及以上A级景区要接入实时视频监控点。市旅游局及授权用户可远程实时接入查看或调看及历史查阅。日志数据系统运行期间所产生的用户操作日志、系统运行日志等日志记录数据,要求准确、实时保存,该数据不可更改,不可删除。数据处理流程数据中心的数据建设流程如下图所示:数据处理流程包括数据采集、数据管理、数据服务、数据应用。数据采集对异构数据进行抽取、存储;数据管理对采集的数据进行清洗、转换、汇集、规整、标准化及质量监控,为数据分析提供符合要求的基础数据;数据服务对用户和业务系统提供查询、分析、报表、统计、展示等服务或接口;数据应用对数据服务及接口进行授权调用,支撑各类业
41、务系统运行。数据存储及管理数据存储数据中心数据存储除合理设计数据存储层次外,还可以利用服务器、存储设备和数据库产品特性,充分保证数据存储的要求。压缩存储数据中心采用高性能数据库,采用增强型压缩技术可存储更多的数据,并针对具体情况灵活采用最佳压缩机制,以大幅节省存储空间。数据库具备多值压缩 (MVC) 的增强功能,通过减少 I/O 和节省存储空间使性能获得大幅提升。每个数据库许可证均包括这些极具价值的压缩技术,可为客户提供卓越的灵活性和强大的高级压缩功能。多温度数据中心数据库还可以从数据温度这一视角来自动、智能地进行数据放置管理。这一内置的智能可以在不干扰用户或管理员的前提下自动将使用最频繁的数
42、据或者叫热数据放到速度最快的存储单元并将使用频率最低的数据或者叫冷 数据放到速度最慢的存储单元。数据的合理放置可支持热数据的高性能访问从而助力实时决策,同时在数据渐渐成为历史或日益变冷并迁移到成本较低的磁盘时提供自动化的生命周期管理流程。分级存储分级存储管理(Hierarchical Storage Management,HSM)是一种将离线存储与在线存储融合的技术。它将高速、高容量的非在线存储设备作为磁盘设备的下一级设备,然后将磁盘中常用的数据按指定的策略自动迁移到磁带库等二级大容量存储设备上。当需要使用这些数据时,分级存储系统会自动将这些数据从下一级存储设备调回到上一级磁盘上。对于用户来说
43、,上述数据迁移操作完全是透明的,在逻辑磁盘的容量上明显感觉大大提高了。通俗地讲,数据迁移是一种可以把大量不经常访问的数据存放在磁带库、光盘库等离线介质上,只在磁盘阵列上保存少量访问频率高的数据的技术。当那些磁带等介质上数据被访问时,系统自动地把这些数据回迁到磁盘阵列中;同样,磁盘阵列中很久未访问的数据被自动迁移到磁带介质上,从而大大降低投入和管理成本。数据库性能调整优化策略实际上随着数据中心系统上线后,随着业务在不断发展,有些性能问题可能会随着数据的变化以及数据量的不断增长逐渐暴露出来;使用者也会越来越多,这样就会导致系统的工作负载越来越繁重,所以需要不断的根据当前的实际使用情况动态的进行调整
44、,以保证系统的整体性能;因此数据仓库需要持续地进行性能管理。系统性能管理一般包括日常系统性能监控、简单的日常性性能问题排除以及不定期的系统调优服务三个部分。日常系统性能监控因为数据仓库系统始终处于动态发展的状态,所以系统性能管理也将是一个持续过程,会一直伴随在系统的发展过程中,所以对于系统性能的日常监控非常重要。日常系统性能监控需要记录和监控系统运行参数,如CPU、IO的使用情况、ETL任务的运行情况、日常系统中运行的工作负载(作业和查询)的时间及执行路径等,并对监控的内容按照一定的周期建立基线性能指标,进行不断地比对分析,及时发现性能的问题。简单的日常性性能问题排除如通过系统性能监控发现了性
45、能的问题,并经系统管理员分析是由某个新加脚本或新增查询写的不好引起的,则系统管理员可以直接提交问题单并交由项目组相关人员进行问题排除。问题排除后,由系统管理员通过之后一段时间的观察确认效果。系统调优如果当前监控周期的数据比历史基线数据指标出现了很大的下降,并经系统管理员分析很可能属于系统性能问题时,可以多种方式进行系统性能调优。数据库管理对于数据库的管理,都是由专门指定的DBA来完成。DBA有以下一些工作职责:规划并设计数据库结构,建立数据库和用户,在日常运行过程中增加、删除数据库及用户;为数据库、用户分配及调整空间大小;为数据库、用户分配及调整访问权限;建立、修改、删除数据库中表、视图、存储
46、过程等数据库对象;监控ETL任务的运行情况,随时处理异常;监控各数据库及表的大小变化情况,随时处理异常;监控和分析数据库的运行情况,资源占用情况,并随时利用一些数据库管理工具进行调整,随时处理异常;对数据库性能进行优化。数据管控元数据管理建立数据中心的统一元数据视图,从元数据中发现任何变化给全局带来的影响,缩短数据清理周期、提高数据质量。梳理业务元数据之间的关系,规范数据资源管理,确保业务元数据的分类准确、涵义明确,改进数据资源管理机制。快速提供数据变换过程和依赖描述,有助于指标和统计口径的理解,为分析应用结果提供数据质量保障。数据交换数据交换是解决多数据源、跨网络的数据采集和交换,涵盖异构数
47、据抽取与存储、实时定时数据抽取与存储、定时任务调度、数据交换管理与监控等子功能,数据交换是数据中心的核心功能。数据整合数据整合是按照数据标准规范及应用需求,对采集的不同源、不规则、不标准的数据,通过清洗、转换、规整,按照数据分析和共享的需求,重新组织,整合成符合要求的基础数据和主题数据。数据质量控制数据质量控制是通过分析、监管等形式,发现和修正数据交换过程中由于数据建设标准不一致、数据质量管理不严格而引入的问题数据。通过数据质量控制可以解决数据中心中数据不一致、不完整和不准确的问题,通过质量规则转化、质量报告等方式提供处理手段和措施。数据资源管理数据管理维护是对采集、整理的各种数据资源进行管理
48、,管理人员不需要编写SQL语句,不需要通过各种数据库自带的管理工具的情况下也能管理数据,保证数据的持续完善和更新。数据应用数据应用架构数据中心的目标在于数据资源的服务和应用,使数据能够被使用,被分析,以帮助使用者做出正确的判断和决策。数据服务和应用体系是在总体上将业务功能需求进行合理分类,并以此为依据明确应建设哪些应用系统,以及如何通过各个系统的相互协作来实现不同类型的业务需求。应用架构的设计必须立足于业务应用需要及对其合理分类,结合先进的技术手段、通过应用系统的结构化分布来促进业务能力的提升。服务和应用架构是整个数据应用信息系统的骨架。一个设计良好的应用架构可以清晰的划分各应用系统的业务边界
49、以及要实现的业务需求,可以保障正确高效的实现所有最终的业务需求、各应用系统之间正确有效的协同工作、避免系统开发建设上的重复投资。服务和应用整体架构包括数据的离散使用和综合分析两个层面,数据服务层面着重于数据的可发现和可获取,数据应用层面通过建设业务应用体系实现数据到信息、信息到知识的价值传递,支持业务分析和决策支持。数据服务和应用体系建设是基于数据,满足业务需求的持续建设过程,为有效指导应用的建设,避免重复建设和无序建设,必须对服务和应用体系进行整体规划,根据不同的应用种类进行分组和功能定位,并确定阶段内工作和推进路线图。随应用建设的增加,同时为避免应用建设的规范性和提高运维效率,需对应用技术
50、平台做出相应技术架构规划, 同时为保障应用体系的顺利有序建设,也须进行相应的管理机制与体制建设。服务和应用架构规划服务和应用体系规划以旅游数据资源情况为基础,以业务需求为导向,面向系统建设目标,规划支持业务发展、业务分析和决策支持所需的业务架构、信息架构,并规划支撑业务、信息两架构所需的应用架构、数据架构及关键应用技术架构,同时,还需根据业务需求对应用建设路线图进行设计。服务和应用体系总体规划,将作为未来35年基于数据的应用系统建设的指导性纲要文件。应用技术架构规划作为支持应用架构的基石,技术架构对数据服务与应用体系的实现起着支撑作用。随着业务模式的改变,信息应用模式正在发生着深刻的变化,相应
51、对技术架构建设也提出更高的要求,先进的技术架构能够增强业务应变能力,因此应用技术架构规划应具有如下特点:1、采用松散联系的层次架构降低集成的成本和复杂性;2、总体上采用松耦合、高内聚的企业级架构框架;3、使用工作流系统,以实现自动化的标准流程;4、随着多种服务渠道的开发使用,必须采用渠道整合软件,对各渠道进行主动的管理,保持渠道使用的一致性。数据服务应用系统建设实施数据服务应用体系建设是在应用架构规划和技术架构规划的基础上,在信息系统建设规范的指导下对数据服务和应用系统进行逐一开发完善,不断满足数据应用需求,提高数据应用水平,发挥数据资源价值。数据服务及应用系统的建设应遵循如下原则:基础先行,
52、急用先建IT系统为业务组织提供的支撑作用通常分为支持、能动和促进三个阶段,IT系统对业务的促进作用如下图所示是逐渐加强的趋势,这需要一个过程,因此整个IT系统的建设不能一蹴而就,需要分阶段实施,业务急需建设的新系统先行启动。系统专业化,架构灵活化“系统专业化,架构灵活化”原则主要体现系统建设的“松耦合”思想,通过多个相对独立的系统分别解决不同角度、不同层面的其他业务及管理问题,以避免出现各个系统间相互影响、牵一发而动全身的问题,保证系统具备一定的应变能力。管理机制与体制建设为保障数据服务及应用系统建设和使用的质量,对于应用系统建设,也应建立相关的管理机制和组织架构,建立需求管理、项目管理、项目
53、开发、系统运维相关制度和规范,并建立专业管理组织,负责相关应用建设和维护。数据共享与服务资源目录管理数据中心包括大量的数据资源、服务资源,通过资源目录系统,提供数据导航服务,以资源目录的形式展示各种资源,方便用户查找、定位所关注的资源。系统中的各种资源通过不同的分类,组成了资源目录,通过目录导航,方便用户查找所关注的资源。为用户充分地发现、使用资源提供便利。数据检索服务通过发布综合数据和主题数据,提供一般数据报表、多维数据报表、交互式查询服务、全文检索等各类数据查询服务,为第三方系统提供标准的数据查询服务接口。分布式请求服务引擎分布式请求服务引擎是解决在数据无法集中到数据中心的情况下,提供对远
54、程数据访问手段。当本地没有所需的数据时,系统将通过分布式请求服务引擎向其他数据中心或其他远程数据源发起服务请求,获取从远处请求代理返回的数据,实现跨业务系统、跨数据中心的数据共享。数据权限管理数据权限管理系统为用户提供了对数据访问进行细粒度权限控制的功能。其主要功能有:资源授权、访问策略、日志审计、规则告警等。数据服务管理通过建立服务及相关资源的接入和注册机制,使数据资源可以动态扩展、持续构建,从而屏蔽数据资源的规格形态、存储位置等信息,为用户提供一致的访问方式和服务接口。安全与存储设计九次方大数据通过提供多种安全手段,如身份鉴别、访问控制、信息加密等数据安全保护措施来保障系统运行的安全性。通
55、过制定系统安全策略和采取先进、科学、适用的安全技术能对系统实施安全防护和监控,使系统具有灵敏、迅速的恢复响应和动态调整功能的智能型系统安全体系。在系统建设中采用严格的安全保密措施,如数据库、文件和用户等多级安全机制、数据的存储、灾难恢复等。明确各级工作人员的职责,保证各司其职、各负其责。对信息安全等级保护的理解1999年国家发布并于2001年1月1日开始实施GB17859计算机信息系统安全保护等级划分准则。2003年,中办、国办转发国家信息化领导小组关于加强信息安全保障工作的意见(中办发200327号),提出实行信息安全等级保护,建立国家信息安全保障体系的明确要求。2004年9月17日,公安部
56、、国家保密局、国家密码管理委员会办公室、国务院信息办下发了关于信息安全等级保护工作的实施意见,明确了信息安全等级保护的重要意义、原则、基本内容、工作职责分工、要求和实施计划。2006年1月17日,四部门又下发了信息安全等级保护管理办法(试行),进一步确定职责分工,明确了公安机关负责全面工作、国家保密工作部门负责涉密信息系统、国家密码管理部门负责密码工作、国务院信息办负责的管理职责和要求。涉及国家秘密的信息系统应当依据国家信息安全等级保护的基本要求,按照国家保密工作部门涉密信息系统分级保护的管理规定和技术标准,结合系统实际情况进行保护。由于信息系统结构是应社会发展、社会生活和工作的需要而设计、建
57、立的,是社会构成、行政组织体系的反映,因而这种系统结构是分层次和级别的,而其中的各种信息系统具有重要的社会和经济价值,不同的系统具有不同的价值。系统基础资源和信息资源的价值大小、用户访问权限的大小、大系统中各子系统重要程度的区别等就是级别的客观体现。信息安全保护必须符合客观存在和发展规律,其分级、分区域、分类和分阶段是做好国家信息安全保护的前提。信息系统安全等级保护将安全保护的监管级别划分为五个级别:第一级:用户自主保护级完全由用户自己来决定如何对资源进行保护,以及采用何种方式进行保护。第二级:系统审计保护级本级的安全保护机制受到信息系统等级保护的指导,支持用户具有更强的自主保护能力,特别是具
58、有访问审计能力。即能创建、维护受保护对象的访问审计跟踪记录,记录与系统安全相关事件发生的日期、时间、用户和事件类型等信息,所有和安全相关的操作都能够被记录下来,以便当系统发生安全问题时,可以根据审计记录,分析追查事故责任人,使所有的用户对自己行为的合法性负责。第三级:安全标记保护级除具有第二级系统审计保护级的所有功能外,还它要求对访问者和访问对象实施强制访问控制,并能够进行记录,以便事后的监督、审计。通过对访问者和访问对象指定不同安全标记,监督、限制访问者的权限,实现对访问对象的强制访问控制。第四级:结构化保护级将前三级的安全保护能力扩展到所有访问者和访问对象,支持形式化的安全保护策略。其本身
59、构造也是结构化的,将安全保护机制划分为关键部分和非关键部分,对关键部分强制性地直接控制访问者对访问对象的存取,使之具有相当的抗渗透能力。本级的安全保护机制能够使信息系统实施一种系统化的安全保护。第五级:访问验证保护级这一个级别除了具备前四级的所有功能外还特别增设了访问验证功能,负责仲裁访问者对访问对象的所有访问活动,仲裁访问者能否访问某些对象从而对访问对象实行专控,保护信息不能被非授权获取。因此,本级的安全保护机制不易被攻击、被篡改,具有极强的抗渗透的保护能力。在等级保护的实际操作中,强调从五个部分进行保护,即:物理部分:包括周边环境,门禁检查,防火、防水、防潮、防鼠、虫害和防雷,防电磁泄漏和
60、干扰,电源备份和管理,设备的标识、使用、存放和管理等;支撑系统:包括计算机系统、操作系统、数据库系统和通信系统;网络部分:包括网络的拓扑结构、网络的布线和防护、网络设备的管理和报警,网络攻击的监察和处理;应用系统:包括系统登录、权限划分与识别、数据备份与容灾处理,运行管理和访问控制,密码保护机制和信息存储管理;管理制度:包括管理的组织机构和各级的职责、权限划分和责任追究制度,人员的管理和培训、教育制度,设备的管理和引进、退出制度,环境管理和监控,安防和巡查制度,响应制度和程序,规章制度的建立、更改和废止的控制程序。由这五部分的安全控制机制构成系统整体安全控制机制。“”的应用系统的等级保护任务是
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 泰州学院《短视频制作A》2023-2024学年第二学期期末试卷
- 四川成都市成华区重点名校2025届5月初三下学期英语试题三模试题含答案
- 浙江体育职业技术学院《地理空间数据库》2023-2024学年第二学期期末试卷
- 吉安市泰和县2025届五下数学期末联考模拟试题含答案
- 电容器在新能源发电领域的应用考核试卷
- 智慧医疗解决方案考核试卷
- 玻璃光学镀膜设计与性能考核试卷
- 电力系统谐波治理考核试卷
- 汽车制造设备升级与改造考核试卷
- 电机在电力行业能源市场分析与管理决策优化的应用考核试卷
- 人教鄂教版四年级下册科学全册教案
- 幼儿绘本故事:小鲁的池塘
- 《现代汉语:虚词》PPT课件(完整版)
- 精益生产培训管理教材
- (完整版)电线电缆载流量表
- 2022年教师资格《初中道德与法治学科知识与教学能力》真题卷
- 地质培训6-常用地质计算课件
- 教练技术红黑游戏脱盔甲
- 数学作业登记表模板
- 重庆市特种设备检验检测收费标准
- 胸腔积液诊断治疗指南
评论
0/150
提交评论