智慧旅游大数据分析实训系统需求说明

智慧旅游大数据分析实训系统需求说明功能要求必要功能1. 支持WebSphere、WebLogic、Tomcat等国外中间件，支持金蝶中间件、东方通中间件等国产中间件；2. 提供元数据搜索功能，可搜索所有系统资源，可精准定位被搜索资源的位置，支持对不同资源类型的分类查询，包括分析类型、数据集、数据源、参数等。3. 支持对资源进行元数据分析，如影响性分析、血统分析，可以从源资源定位目标资源，也可以从目标资源定位到源资源；元数据分析支持过滤要分析的数据类型，如参数、字段、图形主题等。4. 提供系统级别的一键备份与恢复机制，可自动备份；支持资源的备份恢复，并且在导出资源时可一键添加依赖资源、资源权限、数据权限。5. 提供JAVA、WebService、JS等多种技术二次开发接口，并有充分的中文说明文档。6. 支持功能模块层面集成，在第三方系统内整合模块功能。7. 支持客户自行通过JS脚本扩展或插件包扩展方式进行定制化开发，不直接修改产品源码，保证产品的稳定性与升级的方便性。8. 系统内置可视化、统一的系统监控界面，方便系统管理员进行系统运行监控与问题排查，包括进行线程、缓存、堆打印、实验监控、服务监控、会话、网络、内存、SQL监控等分析。9. 每个报表可进行耗时分析，能查看SQL执行时间、数据读取时间、服务器处理时间、数据集行数。10. 支持安全补丁热修复，即可在不重启设备的情况下，对设备当前软件版本的缺陷进行修复。安全补丁更新方式包括：在线更新和手动更新。11. 支持DB2、Teradata、Sybase、Informix、OracleTimesTen、PostgreSQL、Greenplum、Vertica、Hadoop_Hive、SparkSQL、Presto等国外数据库。12. 支持Kingbase、Gbase、达梦、星环、Gauss100、Gauss200、aliyunAnalyticDB、aliyunMaxCompute、HuaweiFusionInsightHD、Obase等国产数据库。13. 支持非关系型的多维数据库与NoSQL数据库，如Essbase、Mondrian、MongoDB等。14. 支持将目录或报表授权给用户、用户组、角色等，实现查看、编辑、删除、再授权等不同粒度的权限控制。15. 下级目录或报表可自动继承上级目录的授权设置，无需逐个目录或报表进行授权，并且是否继承的方式可配置。16. 有自研分发器，无需依赖应用服务器分发，系统可自行依据应用节点CPU、GC时间独立进行分发，可在图形化界面进行节点配置，负载均衡采用平滑加权轮询算法保证系统稳定性。17. 支持大数据量查询结果分批返回，分批返回行数、前端分页显示行数均可设置。18. 支持查询缓存，可在不同用户间的共享查询结果集，无需重复到数据库查询。支持整个系统级别、某个查询级别的启用缓存、禁止缓存设置。19. 语义模型能将数据库中的表字段进行拖拽重组，形成面向业务分析的逻辑主题，并支持在主题中对表字段进行时间层次、转换规则、参与分组等设置。20. 支持在语义模型中对指标设置默认的数据浏览格式，如百分比、小数位数、千分位、前后缀（如万元），浏览数据时该字段自动以该格式展现，无需逐个设置。21. 支持在语义模型中对指标设置默认的聚合方式，如合计、计数、唯一计数、平均等方式，方便系统管理员在模型层统一设置。22. 语义模型自动继承数据库层的表关系，且可作为私有设置在此基础上进一步修改而不会影响数据库层或其他模型。23. 语义模型支持多表关联设置，支持左连接、右连接、内连接、全连接方式，并支持按列名、按别名、按外键自动创建表关系，支持一键清除表关系。24. 在界面配置实现数据脱敏功能，支持掩码、字符替换、正则替换等脱敏算法，可支持指定不同用户组、用户、角色生效，并且可控制在浏览或者导出时候生效。25. 支持关联、筛选、建立层次、格式设置、逻辑计算等；自助数据集支持引用原生SQL数据集、可视化数据集、JAVA数据集以及即席查询和透视分析等二次分析结果。26. 支持定义Excel模板进行批量的数据导入，可设置与目标数据库表的字段映射关系，支持Java接口进行自定义扩展。27. 支持直接将Excel数据、CSV、TXT数据、数据分析包加载到系统中进行分析，无须预先定义模板。28. 通过简单拖放操作对原始数据进行处理，并可基于数据集进行数据增量或者全量抽取；支持数据抽取到缓存库中，缓存库支持多种类型，如Presto+Hive、星环、Vertica、Infobright等。29. 支持扫码添加服务器，无需输入地址。30. 使用H5标准，支持与微信企业号、钉钉集成，无需安装APP，用户根据权限直接浏览公众号中的报表；支持报表分享，可以匿名将报表分享到微信等第三方系统。31. 支持离线报表，在离线状态下可以进行钻取、跳转、改变查询条件等交互分析。32. 支持离线包推送，用户接收后可以增量更新离线数据包。33. 访问密码验证失败5次时，自动删除已下载的离线报表数据，保证离线报表数据的安全性。34. 直接支持Excel、WPS作为设计器（不是导入Excel模版，不是类Excel设计器），业务人员能够自己在Excel中完成报表开发。35. 支持Excel样式，如条件格式，快速分析，等强大的excel功能。36. 支持直接在设计器刷新报表，并可指定参数，而不是打开内置浏览器或默认浏览器预览。刷新后，可重置为设计状态。37. 设计器开发的报表，支持一键发布到PC、平板、手机等终端进行浏览，可分别设置手机和电脑的自适应方式。38. 支持基础统计分析，如平均数、标准误差、中位数、众数、方差、标准差、偏度、峰度等；支持高级统计分析，如泊松分布、正态分布、指数分布、二项分布、线性回归、t分布、F分布等；支持杜邦分析。39. 完全复用Excel函数，支持数学函数、三角函数等Excel函数；支持贴现率、内部报酬率、年度单利、年有效利率、等效利率、内部回报等财务函数；且支持自定义函数。40. 支持不规则报表、交叉报表、多区域报表、分片报表、多源报表等多种复杂报表。41. 支持跨区域公式计算；支持把某单元格或某区域的数据生成图片，将其展示在预定的位置42. 报表导出Excel格式后，在Excel打开该报表，报表中的函数依旧可以使用，而不是静态文字。43. 可灵活设计数据采集模板，并发布到PC、手机、平板上进行数据填报，并将数据回写到一张或多张数据库表中。44. 数据填报支持文件上传下载到FTP或者SFTP服务器。45. 可结合填报的权限配置，支持不同人员在同一张报表上分别填报及浏览自己的数据，并且可控制行列单元格、界面控件、Sheet页的编辑和浏览权限。46. 提供数据填报流程审核功能，支持子流程、会签，通过图形化的配置界面，可将流程与数据填报报表一起导出，并在其他环境恢复使用。47. 报表支持水印设置，支持覆盖水印与底图水印模式，水印类型包括文字水印与图片水印，并且可以使用系统函数动态获取用户名字、时间等作为水印。48. 支持报表模板管理，管理员可在设计器中将报表或者图形提交到报表模板库中，方便用户使用。49. 支持Excel图形及Excel组合图形，如迷你图、帕累托图、子弹图、小又多图等特色图形。50. 支持直接在报表设计器使用第三方模板，如美化大师，来对表格和图形进行美化。51. 内置中国及各省行政区域地图，支持地图钻取及回退；支持自定义地图；内置支持百度地图、航线地图、散点地图、热力地图等地图显示类型，支持集成第三方GIS系统。52. 支持多种数据来源的数据集，如数据库、语义模型、可视化数据集等，也支持直接写SQL。53. 支持查询结果作为数据集（如透视分析、即席分析）再与其他数据进行关联进行二次分析。54. 支持自定义字段输出格式，可以设置显示值和真实值。55. 支持可视化参数定义与管理，并支持私有参数和公共参数设置，公有参数可转化为私有参数，不被其他数据集引用。56. 支持设置报表打开时只刷新表样，并可设置切换参数后的刷新动作。57. 内置跨库处理引擎，能够进行不同数据源、异构数据源间的跨库查询，数据无需抽取，统一使用SQL访问接口。58. 支持直接在web端拖放式设计仪表盘，含有丰富的图形组件及控件组件，如TAB页组件、URL链接、文本组件、图片组件等控件；支持组件的复制。59. URL链接支持内外部资源传参，在编辑URL链接界面中对链接目标设置传值。60. 支持组件的快捷对齐、分布，支持等比缩放宽度自适应、等比缩放高度自适应、全屏铺满，支持SVG和Canvas图形渲染方式。61. 支持背景自动压缩300k以下。62. 同一自助仪表盘可支持来源于不同数据源的多个数据集，并自动按照同名字段关联或者自定义设置组件间的联动关系，来对数据进行过滤，并支持关联字段过滤时模糊匹配。63. 支持桑基图、漏斗图、旭日图、极坐标柱图、极坐标曲线图、阶梯线图、大数据散点图、力导向关系图、无盘油量图等图形；用户浏览图形数据时，可直接切换为数据模式查看数据情况。64. 仪表盘支持系统建议配色和自定义设置RGB颜色。65. 直接使用ECharts图形库展示，支持瀑布图、关系图、雷达图、油量图、热力图、树图等图形，支持ECharts图形选项配置。66. 支持默认图形组件的属性扩展，填写扩展属性，可快速变更图形样式。而非使用代码集成开发新图形样式。67. 分析过程中可以将任意字段作为筛选条件，并灵活更改查询运算符，还能根据字段类型智能显示参数控件类型。68. 支持设置报表打开时只刷新表样，并可设置切换参数后的刷新动作。69. 分析过程可以根据需要灵活设置查询条件间的组合关系，以及条件间的AND、OR逻辑运算关系。70. 条件选择框的数据来源既可以从当前字段自动获取，还能从另外的维表获取，解决大数据量下的条件框显示性能问题。71. 支持聚合、钻取、切片、交叉、行列互换、焦点项等分析方式；支持数据上钻、下钻、旋转、分级排序等分析功能。72. 即能直接使用语义模型进行分析，也可以基于清单查询的结果集一键进入数据透视模式。73. 对大数据量查询支持后台批量导出；也支持将分析结果导出为加密的数据分析包，实现数据分发。74. 提供同期值、同期增长率、前期值、环比、环比增长率、期初期末值、日均、累计值、增长值等时间计算选项，快速完成时间计算分析。75. 预留应用商店、数据答疑、数据导航、消息中心等模块接口，可平滑接入产品中。76. 支持Javabean、JS等扩展取数接口，满足第三方系统取数、特殊格式数据加载、复杂数据运算等类型的数据分析展现需求。77. 支持用户自定义门户组件布局，“零编码”配置首页展示样式；支持丰富的门户组件，包括收藏夹组件、卡片列表组件、应用商店组件、便捷入口组件等。78. 支持快速定位有用数据，快速发现需要的数据，数据脱敏受控；系统内置审批流程，用户需对未授权数据提交审批流程，审批通过后可查看真实数据。79. 支持通过设定标签对问题分类；支持在数据答疑界面提问时，设置为私密提问，指定解答人；支持通过可视化图表形式展示问答的回答数、获赞、访问、评论和最近一周访问数据分析情况。80. 支持将分析结果发布成应用；内置发布流程，应用发布成功通过消息中心告知平台所有用户；商店对应用上架、应用下架、应用重新上架等管理操作进行审核。81. 支持在“应用商店”搜索关键字查找自己想要的应用；可根据发布时间、访问量、下载量、评论数对应用进行排序；支持通过权限申请将应用安装到“已安装应用”中进行使用。82. 支持通过系统平台推送系统消息、公告、私信等各类信息，评论、点赞等互动消息会自动地通过私信消息提醒查看；可直接在可视化界面新建消息，支持设置消息置顶、附件等。83. 系统支持用户自定义自己的头像和个人信息；支持对分析、应用、问答等进行点赞、评论；支持对优秀的分析成果进行分享，可分享到微信、钉钉，提供链接、二维码等形式进行分享，可以设置访问密码及访问截止日期。84. 支持相关性分析、高维数据可视化、假设检验、全表统计等统计分析方法。85. 支持分类预测、回归预测与聚类分析；包含逻辑回归、朴素贝叶斯、向量机、决策树、随机森林、K均值、混合高斯模型等算法。86. 支持文本分析算法，能快速实现文本的处理工作，包括文本分词、TF-IDF、停用词处理、词袋模型、词频统计。87. 针对不同算法，提供不同的算法评估指标，包括但不限于：准确率、召回率、F1值、拟合优度、混淆矩阵、ROC曲线、auc值、KS曲线、均方根误差、均方误差、r2等。88. 支持自定义Python、JAVA代码，灵活帮助用户扩展算法库，用户可以定制新的机器学习平台算法节点。89. 支持算法自行进行迭代，自动选择最合适的参数，无需人工干预。90. 对于已训练好的优化模型，可以保存模型；建好的实验可以进行导入与导出；模型支持自学习。91. 支持将已经训练好的优化预测模型部署成为Web服务，提供API供实际业务使用；用户可直接通过调用该API向其发送数据，获取优化模型的预测数据，支持实时或者以批处理模式发送数据。92. 支持机器学习算法的分布式执行，以充分利用计算资源和加快性能。需要支持5个节点的分布式计算引擎。93. 通过模型离线批量预测定时调度训练好的模型DAG来将批量预测结果数据输入到目标表中。94. 挖掘平台和BI数据互通，将数据挖掘与BI统计分析相结合，形成功能互补。95. 支持在web端，拖拽式对数据进行随机采样、加权采样、分层采样，并且可选择按个数、比例进行采样。96. 能进行本地手工数据与数据库动态数据的关联分析，业务用户可通过即席查询进行清单数据筛选，基于透视分析做数据的透视汇总。97. 制作好的报表资源可以发布到电脑、平板、手机等不同终端设备进行查看，通过用户组、用户、角色进行权限管理，还可以通过Web方式将资源共享给其他用户。98. 支持数据拆分、字段过滤与映射、列选择、过滤空值、合并列、合并行、JOIN、元数据编辑、行选择、去除重复值、排序、增加序列号、聚合、分列、派生列、类型转换、行列转换。99.负载均衡分发器支持图形可视化操作方式扩展集群节点，不需要手工进行额外的文件转移。100.数据包含30余项画像维度如游客的年龄、性别、学历、职业、住宿偏好