航旅大数据项目详细设计说明书

航旅大数据项目详细设计说明书XX科技股份有限公司编制

目录一、航旅大数据系统软件模块设计 4二、航旅大数据项目系统接口及函数 42.1数据生产 42.1.1数据生产函数 42.2数据采集 52.2.1数据采集接口 52.2.2数据存储函数 62.3数据分析 72.3.1数据分析函数 72.4可视化展示 82.4.1用户接口 82.4.2菜单接口 92.4.3角色接口 102.4.4航班异常分析接口 102.4.5航班分析接口 112.4.6酒店选择分析接口 122.4.7酒店居住时长分析接口 122.4.8游客性别分析接口 13三、航旅大数据系统数据格式 141.数值类型 142.日期和时间类型 163.字符串类型 17四、航旅大数据系统数据库表结构 181.表结构设计图 18

航旅大数据系统软件模块设计表1航旅大数据模块设计表序号一级模块二级模块三级模块说明1数据生产航旅大数据数据生产2数据采集/存储使用Flume、Kafka组件将数据存储到HBASE中3数据分析使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQL中4可视化展示系统管理系统状态监控、系统信息查看5权限管理资源管理系统菜单管理、路径管理6角色管理系统使用角色管理、权限管理7用户管理系统登录用户管理8航旅数据分析航班异常分析使用图形展示各种航班异常原因占比情况。9航班分析用图形展示各种类型航班状态情况。10酒店选择分析使用图形展示各类型合作酒店状态情况。11酒店居住时长分析使用图形展示各类型合作酒店居住时长情况。12航旅游客性别分析使用图形展示航旅游客性别人群占比情况。13航旅游客年龄分析使用图形展示航旅游客年龄人群占比情况。14历年航旅人数分析使用图形展示历年航旅人数趋势情况。航旅大数据项目系统接口及函数数据生产数据生产函数函数类duct.test.MockRecords生产类TestMockRecords需求优先级高系统输入或系统外激励系统响应系统调用生产函数,设定相应的输出文件及输出路径根据设定路径，生产相应的数据文件功能需求数据生产例外以及相应处理调用的功能数据生产注释和说明数据采集数据采集接口接口地址/hhrzkg/system/dataCollection用户类系统需求优先级高系统输入或系统外激励系统响应设定flume采集的源文件和数据下沉的位置，将数据采集到kafka集群中Kafka集群出现相应的数据功能需求数据采集例外以及相应处理调用的功能数据采集注释和说明数据存储函数函数类com.hbase.consumer用户类HbaseConsumer需求优先级高系统输入或系统外激励系统响应设置kafka消费主题，使用HBASE消费数据将kafka集群中的待数据存储到HBASE中功能需求数据存储例外以及相应处理调用的功能数据存储注释和说明数据分析数据分析函数函数类com.bigdata.analysis.runner用户类CountDurationRunner需求优先级高系统输入或系统外激励系统响应配置源HBASE、目标MYSQL数据格式，配置清洗策略将HBASE数据经过分析后存储MySQL功能需求数据分析例外以及相应处理调用的功能数据分析注释和说明可视化展示用户接口接口地址/hhrzkg/system/admin用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入用户名、密码1.比对输入用户是否存在，并返回相应结果。2.新增用户；3.删除用户；4.修改用户。功能需求用户登录系统、用户修改信息、管理员新增和删除用户例外以及相应处理调用的功能系统登录、用户信息修改、新增和删除用户注释和说明菜单接口接口地址/hhrzkg/system/res用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入菜单名称、菜单地址、上级目录。1.比对输入菜单是否存在，并返回相应结果。2.新增菜单；3.删除菜单；4.比对输入菜单是否存在，不存在即修改菜单。功能需求系统管理员查询、新增、修改、删除菜单例外以及相应处理调用的功能菜单查询、新增、修改、删除注释和说明角色接口接口地址/hhrzkg/system/role用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入角色名称、角色权限1.显示角色名称、权限等信息2.新增角色；3.删除角色；4.比对输入角色是否存在，不存在即修改角色。功能需求用户授权，系统管理员对角色新增、删除、修改、查询例外以及相应处理调用的功能角色查询、新增、修改、删除注释和说明航班异常分析接口接口地址/hhrzkg/system/newAbnormal用户类系统用户需求优先级高用户输入或系统外激励系统响应1.1.展示各种航班异常原因占比情况。功能需求图形化展示各种航班异常原因占比情况。例外以及相应处理调用的功能航班异常分析注释和说明航班分析接口接口地址/hhrzkg/system/newFlight用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各种类型航班状态情况。功能需求图形化展示各种类型航班状态情况。例外以及相应处理调用的功能健康险分析注释和说明酒店选择分析接口接口地址/hhrzkg/system/newHotel用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各类型合作酒店状态情况。功能需求图形化展示展示各类型合作酒店状态情况。例外以及相应处理调用的功能酒店选择分析注释和说明酒店居住时长分析接口接口地址/hhrzkg/system/newTime用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各类型合作酒店居住时长情况。功能需求图形化展示各类型合作酒店居住时长情况。例外以及相应处理调用的功能酒店居住时长分析注释和说明游客性别分析接口接口地址/hhrzkg/system/newSex用户类系统用户需求优先级高用户输入或系统外激励系统响应展示航旅游客性别人群占比情况。功能需求图形化展示航旅游客性别人群占比情况。例外以及相应处理调用的功能航旅游客性别分析注释和说明航旅大数据系统数据格式1.数值类型这些类型包括严格数值数据类型(INTEGER、SMALLINT、DECIMAL和NUMERIC)，以及近似数值数据类型(FLOAT、REAL和DOUBLEPRECISION)。关键字INT是INTEGER的同义词，关键字DEC是DECIMAL的同义词。BIT数据类型保存位字段值，并且支持MyISAM、MEMORY、InnoDB和BDB表。作为SQL标准的扩展，MySQL也支持整数类型TINYINT、MEDIUMINT和BIGINT。下面的表显示了需要的每个整数类型的存储和范围。表2数值类型表类型大小范围（有符号）范围（无符号）用途TINYINT1byte(-128，127)(0，255)小整数值SMALLINT2bytes(-32768，32767)(0，65535)大整数值MEDIUMINT3bytes(-8388608，8388607)(0，16777215)大整数值INT或INTEGER4bytes(-2147483648，2147483647)(0，4294967295)大整数值BIGINT8bytes(-9,223,372,036,854,775,808，9223372036854775807)(0，18446744073709551615)极大整数值FLOAT4bytes(-3.402823466E+38，-1.175494351E-38)，0，(1.175494351E-38，3.402823466351E+38)0，(1.175494351E-38，3.402823466E+38)单精度

浮点数值DOUBLE8bytes(-1.7976931348623157E+308，-2.2250738585072014E-308)，0，(2.2250738585072014E-308，1.7976931348623157E+308)0，(2.2250738585072014E-308，1.7976931348623157E+308)双精度

浮点数值DECIMAL对DECIMAL(M,D)，如果M>D，为M+2否则为D+2依赖于M和D的值依赖于M和D的值小数值2.日期和时间类型表示时间值的日期和时间类型为DATETIME、DATE、TIMESTAMP、TIME和YEAR。每个时间类型有一个有效值范围和一个"零"值，当指定不合法的MySQL不能表示的值时使用"零"值。TIMESTAMP类型有专有的自动更新特性，将在后面描述。表3日期和时间类型表类型大小

(bytes)范围格式用途DATE31000-01-01/9999-12-31YYYY-MM-DD日期值TIME3'-838:59:59'/'838:59:59'HH:MM:SS时间值或持续时间YEAR11901/2155YYYY年份值DATETIME81000-01-0100:00:00/9999-12-3123:59:59YYYY-MM-DDHH:MM:SS混合日期和时间值TIMESTAMP41970-01-0100:00:00/2038结束时间是第

2147483647

秒，北京时间

2038-1-1911:14:07，格林尼治时间2038年1月19日凌晨03:14:07YYYYMMDDHHMMSS混合日期和时间值，时间戳3.字符串类型字符串类型指CHAR、VARCHAR、BINARY、VARBINARY、BLOB、TEXT、ENUM和SET。该节描述了这些类型如何工作以及如何在查询中使用这些类型。表4日期和时间类型表类型大小用途CHAR0-255bytes定长字符串VARCHAR0-65535bytes变长字符串TINYBLOB0-255bytes不超过255个字符的二进制字符串TINYTEXT0-255bytes短文本字符串BLOB0-6