版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
跨境电子商务建设项目技术解决方案应用架构设计项目主体建设内容包括“一门户、六平台、六中心、两体系”的建设,架构如下图:一门户,即襄阳跨境电子商务公共服务门户。门户网站作为申报类、办事类、查询类的统一入口,同时也提公共信息查询。建立一个可以让襄阳地区的跨境电子商务企业、物流企业、支付企业通过湖北电子口岸与襄阳海关、襄阳国检等监管执法部门进行互动交流及实时进行信息发布的门户。各类企业可以在门户网站上完成跨境电子商务相关业务的咨询;行业监管单位与相关部门也可以发布各类公告信息与解答来自襄阳电商企业的提问。六平台,是指部署在襄阳保税物流中心机房,通过湖北电子口岸与海关、国检等监管部门、跨境相关企业对接的跨境电子商务公共服务平台(也称跨境电子商务通关服务平台)。平台建设内容包括:跨境电子商务通关服务平台(进口)、跨境电子商务通关服务平台(出口)、跨境电子商务代理申报系统、保税展示销售平台、电商仓储平台和国际快件智能平台6个系统。六中心,包括三个实体中心以及三个信息化中心,其中三个实体中心包括查验中心、仓储中心、监控中心,三个信息化中心包括数据交换中心、大数据中心、统一认证中心。两体系,是指两大支撑体系,包括保税物流中心园区体系以及基础支撑平台体系。1、襄阳跨境电子商务公共服务门户(1)服务概述襄阳跨境电子商务公共服务门户主要分为门户网站、管理后台和后台发布系统。门户网站作为申报类、办事类、查询类的统一入口,同时也提公共信息查询。建立一个可以让襄阳地区的跨境电子商务企业、物流企业、支付企业通过湖北电子口岸与襄阳海关、襄阳国检等监管执法部门进行互动交流及实时进行信息发布的门户。各类企业可以在门户网站上完成跨境电子商务相关业务的咨询;行业监管单位与相关部门也可以发布各类公告信息与解答来自襄阳电商企业的提问。后台管理通过所见即所得的编辑方式,对发布内容进行实时操作,对重要内容做到快速公布或下线,建立统一的用户管理后台,实现账号管理、菜单管理、角色管理、权限配置、资源管理、账号授权等功能。(2)面向用户跨境电商企业、支付企业、物流企业、跨境电商平台等外贸相关主体。(3)服务功能介绍注册登录构建襄阳跨境电子商务公共服务门户会员体系架构,功能包括注册、登录、修改密码、找回邮箱等页面。其中登录功能支持多种安全登录方式,包括普通登录、IKEY登录、IC卡登录登。服务展示分两个维度介绍平台提供哪些服务和为哪些主体提供服务,为用户提供简洁的服务介绍和服务办理流程等资讯内容,并作为各项服务的快速入口。服务维度有跨境电商企业备案登记、商品备案登记、综合查询等;用户维度有报关行、电商平台、支付企业、物流企业和跨境电商企业等。综合查询综合查询汇聚各监管部门的公共服务内容,企业可通过综合查询服务功能,实现包括通关状态查询、HS编码查询、报关参数查询、班轮作业查询、每日外汇牌价查询、船期表查询、船舶跟踪等功能。通知公告面向用户展示重要的通知公告和最新政策法规等内容,资讯内容通过后台管理系统编辑发布。在通知公告页面资讯按发布时间降序排列,最新的四条通知将在首页展示;公告详情页可进行公告的上下篇切换。关于我们展示襄阳跨境电子商务公共服务门户的简介和网站经营主体的相关信息,包括联系我们、平台介绍等内容。用户首页用户登录后首先进入的页面,作为各业务系统的载体使用户可在统一平台进行操作,实现不同业务系统间的自由切换。默认为所用用户开通用户中心权限,使用户可以统一更改账号的相关信息和企业备案信息等,实现修改信息后在各业务系统间的统一认证。后台管理主要负责门户网站的新闻、公告、政策、法规等内容的管理和维护,通过所见即所得的编辑方式,对发布内容进行实时操作,对重要内容做到快速公布或下线,包括后台管理系统搭建、权限管理分配、登录、退出、改密、内容新增、修改、删除、预览、审核、发布、静态化、导出、日志管理、查询、统计等。2、六平台(1)跨境电子商务通关服务平台(进口)通过湖北电子口岸连接跨境进口相关电商企业、物流企业、支付企业、报关企业与海关等监管部门之间的桥梁。实现订单、运单、支付单、清单信息接入与初步校验,并与海关跨境管理平台对接,完成三单信息的传输、申报。而在保税进口业务中,还将与特殊监管区域辅助管理系统对接。。跨境电子商务进口通关服务子系统,需实现与海关跨境通关管理系统无缝对接。襄阳计划通过湖北电子口岸与海关总署跨境进口通关物流管理平台(总署统一版)实现无缝对接,并按照国务院常务会议复制推广杭州跨境电子商务综试区建设经验的要求,参照杭州综试区跨境电子商务公共服务平台开展项目建设。(2)跨境电子商务通关服务平台(出口)通过湖北电子口岸连接跨境出口相关电商企业、物流企业、支付企业、报关企业与监管部门之间的桥梁。与企业对接,按“清单验放,汇总申报”监管要求将订单、运单、清单信息接入与初步校验,并通过湖北电子口岸与监管部门信息化系统对接,实现申报数据、审批回执的互联互通。(3)跨境电子商务代理申报系统为了提高跨境电子商务出口申报量,将襄阳市邮政每年近千万单邮政出口业务及其他可能外贸类业务纳入跨境电子商务业务,实现外贸出口增长,由代理报关企业在该平台进行“清单核放、汇总申报”操作。包括接收及预处理、商品归类管理、归类知识库管理、系统管理、回执处理、申报数据汇总、统计分析等功能模块。(4)保税展示销售平台保税品展销系统是保税直购中心的日常运营系统,在满足海关监管要求的前提下,同时满足直购中心日常运营的各种管理需求。(5)跨境仓储平台货物在发货时对货物信息进行扫描,通过电商仓储平台追踪每件货物的流向。通过对发货记录的查询,即可确定该产品在仓库中的库存量。同时,还可以分析各个仓库的库存情况,及时的把握各种产品的需求度。(6)国际快件智能平台国际快件智能平台可帮助快件企业快速适应新快件系统,以辅助快件企业快速、顺利地向新快件通关系统进行快件申报。国际快件智能平台通过对快件企业上传的原始数据进行分析、梳理、校验,系统可自动化生成符合新快件通关系统申报要求的快件运单申报单据、舱单申报单据,也可定制化生成符合国检或其他监管部门要求的申报单据,并可直接生成相应的申报报文文件,便于用户直接导入相应监管系统。系统同时具备自动逻辑校验能力,并定期按照监管要求增加校验条件。此外,系统还提供HS编码归类要素查询等功能。国际快件智能平台为快件企业提供快件清单导入、快件清单导出、检验检疫单据导出、部分参数自动填充、基础格式/逻辑校验、第一法定单位匹配、分运单页面编辑、分运单查询、XML报文导出、数据格式转换等辅助报关功能。用户通过国际快件智能平台将已录入关键字段数据的EXCEL模版导入,通过系统校验、优化字段后提供EXCEL、XML等多种文件格式的申报模板导出功能。真正做到用户只需完成一次简单数据输入,即可通过系统输出多种监管部门要求的申报单据,完成后端多维申报的需求,包括海关快件申报单、海关快件申报舱单、检验检疫申报单、检验检疫申报舱单等。3、六中心(1)实体中心1.1查验中心跨境电商园区内设置集中查验场地,按照场地条件,可以单独开辟一块区域作为集中查验场地,各跨境监管仓库的货物需要查验的,集中运到查验中心查验;场地条件不允许的情况下,可以先在一个跨境电商监管仓库内设立,随着跨境电商业务的发展,其他监管仓库的货物运到该查验监管仓库内进行查验。查验中心为海关和进出口检验检疫分别设立查验监控室;设立查询X光机检查设备和传送带分拣设备。跨境进出口包裹需要查验的,由仓库工作人员使用扫码枪扫码待查验包裹上的运单号码,并把包裹放到传送带上;包裹通过X光机扫描,形成图像,海关和检验检疫执法人员在查验监控室内,可以看到包裹图像;同时为海关和检验检疫执法人员提供查验管理功能,通过运单号码调阅电商申报的清单信息,与当前包裹的图像实现同屏比对;海关和检验检疫人员可以通过数据与图像判断申报清单内容与实物是否相符。如相符,则放行;如不符,则从分拣设备上拿下该包裹,进行开包查验。对确实不符的,可以进行清单退单、移交缉私等处置。查验中心采集的图像中,对于有问题的包裹,需要保存相应的图像,对没有问题的包裹,图像不用保存。1.2仓储中心按照跨境电商进口监管要求,在监管区内划分相应区域:收货理货区跨境电商货物申报“1239”监管方式一线入区,由于境外商家基本上是电商企业、传统零售企业,对进出口贸易规则不够了解,入区货物往往与大贸订单发货质量低,溢短装情况较普遍。而且跨境电商是按照商品销售计量单位进行账册备案,与传统进出口贸易也有较大差异。所以需要在货物一线入区、进入仓储区之前,进入到收货理货区,由仓库经营者进行收货理货,有6方面作用:一是能够按照商品销售计量单位进行数量清点,保证商品入库账册准确;二是仓库对商品进行质检,对于破损、货不对板等情况进行检查,保证仓库与商家对入库商品期初值有一致的认识;三是仓库对商品的批次号、有效期等商品特性记录,满足仓库WMS系统的上架策略和拣货策略的要求;四是商品溯源,对每一件跨境进口商品可以录入、打印、黏贴商品溯源二维码,主要记录了商品进口商家、进口日期、进口报关单号、报检单号、商品主要信息等数据内容;五是黏贴拣货条码,有些商品在国外发货时,没有按照商品SKU制作条码,只是按照SPU制作,为了方便仓库拣货,提高发货准确性和效率,需要二次制作及黏贴商品条码;六是在该区域可以再划分出一小块区域,海关、检验检疫可以在此区域内对商品进行抽检;商品仓储区经过质检、理货的跨境商品进入仓储区,按照WMS的上架策略、批次策略和货物管理要求,在相应的货物进行堆放;商品拣货区按照WMS的上架策略,将一部分商品放入到拣选区各个货位上;商品打包区按照OMS系统的打包指令,仓储工人打印订单,按订单在拣货区分订单拣选商品,拉到打包区,工人按照WMS的操作指示,选择不同规格的包材,打包商品,打印物流电子面单(需通过OMS系统与相关快递公司的电子面单系统对接),黏贴物流电子面单;打包区内可以细分为打包区、复核区,并将上述步骤进行分解处理:打包区负责按订单将商品装入适合的包材中;复核区按照订单单面信息与包裹内商品核对,封胶带,贴面单,并称重(用于与商家计费),并反馈打包完成状态;商品待放行堆放区打包完成的商品,放入到围网内的待放行堆放区;如果在打包区未进行包裹称重,仓库也可以在此区域设置电子秤,对每件包裹秤重,便于后续与商家计费;商品待查验堆放区海关、检验检疫可以对待放行区域内的打包商品进行抽检,抽检方式包括:一是按照海关、检验检疫的系统指令,将查验包裹找出来,放到待查验区;二是按照海关、检验检疫的人工随机查验指令,随机抽取一些包裹,放到待查验区;X光机分拣查验区在仓储出口,或者保税区域内的公共查验区域,建设X光机和传送带,为海关、检验检疫建立两个独立的监管房间,X光机检查屏幕在两个房间均可以看到,并能够做到通过传送带上的条码阅读器读取待查验包裹的运单号,通过运单号调出该运单对应的跨境申报清单数据,X光机屏幕及清单数据在海关、检验检疫可以同时查看,便于监管人员进行实物与清单的对比;快速放行通道对于未被抽检的包裹,可以直接从快速放行通道出监管围网,放到待发货堆放区;待发货堆放区该区域由仓储企业和快递企业进行货物交接,两方在交接过程中分别用各自的码枪扫描包裹上的运单号,仓储企业通过运单号关联订单号,在WMS和OMS中分别回写包裹出库状态;快递企业在扫描运单的同时,可以在此区域放置电子秤,逐票记录每个包裹的实际重量,用于与商家结算。货物按照发货波次出库,一般一日两个波次,包裹装满一辆快递车,WMS系统将扫描的包裹订单号,汇总为一张出区核放单,并传输到保税区域辅助管理系统做出区申报。1.3监控中心按照海关和检验检疫对跨境监管仓库的管理要求,仓库要设置监控摄像头,目前的监管仓库已经有CCTV监控系统了,需要增加集中监控设备,部署在海关和检验检疫的监控房间中,供集中监控使用。但随着跨境仓储区的安装部署,尤其的高货架的安装,会影响到CCTV系统的监控访问,产生监控死角。因此需要按照场地的实际条件增加监控摄像头,并将监控信息集中到海关和检验检疫的监控室内。(2)信息化中心2.1数据交换中心数据交换中心主要功能是建立统一的标准,实现数据的传输和交换。其主要功能如下:(1)服务管理所有交换皆为服务,服务作为数据交换中心业务核心,其生命周期涵盖服务注册、发布、授权、调用、监控和事后查询、异常处理等。服务管理作为服务整个生命周期的基础模块,负责提供服务基础信息,其主要包括服务管理、注册、发布、授权、测试和编排等方面。(2)交换申请服务申请主要实现增强对参与“单一窗口”平台数据交换的企业的接入和管理功能。企业用户线上对所需要的交换服务进行业务申请,同时可根据自身需要把企业服务器接入平台作为交换节点使用。同时将对后续执行情况进行统计查看。(3)交换协议支持主流数据传输协议,包括MQ、JMS、FTP、DB、HTTP等,本次以REST、DB、RocketMQ为主,同时完善早期提供的MQ、FTP,WebService等协议。所有交换可在各个协议之间自如转换。(4)报文标准及映射完善现有数据格式标准,并增加其他主流平台数据标准。依此建立各平台间数据映射机制。(5)报文传输模式增加主流传输模式支持,主要包括单向传输、请求应答、发布订阅、信息推送等模式。根据传输技术的异同,采用异步通讯方式,即交换中心先接收所有报文,再根据业务情况进行后续业务处理,包括即时应答、报文分发等。(6)报文格式转换配合消息标准及映射,根据标准定制转换适配器进行报文格式转换。发送报文格式由各接收方(包括职能部门和企业等)制定,交换中心将根据各方标准定制相应适配器进行格式转换。(7)交换路由分发增强交换路由分发功能,报文一次接入后可分发到不同协议接收端。交换中心通过路由适配器进行报文解析后根据预设规则寻址,明确接收方后报文同时发送给多个接收端。路由规则在系统中按照业务来源指定、路由判定来源存放在报文头中。(8)交换请求调度引入分布式服务调度框架,作为服务执行过程中进行业务流转和监控核心,主要实现对来自各客户端的服务请求进行调度和回执、日志、监控等一系列操作。(9)交换异常处理新提供报文传输过程异常处理功能。报文交换中可能发生各类异常,包括报文不符合要求、接收端通讯异常、交换规则阻止等。交换中心根据监控信息对所有异常进行人工干预和自动处理。(10)交换备份存储所有通过交换中心的报文交换请求都会进行报文存储,以备后续交换审计和报文交换重启。报文将通过分布式存储系统进行存储,高可靠性的存取功能将有助于报文随时随地快速读取。(11)交换负载均衡交换中心为保障报文交换请求稳定可靠运行,提供高容错的负载均衡体系,从接收端到处理端再到发送端。同时各端可根据实际业务负载情况进行快速水平扩展。(12)交换缓存处理交换过程中将会有大量标准信息和规则信息以及认证信息被读取,系统将以缓存方式存取该部分信息供交换中心处理模块使用,同时提供相应接口供管理人员按需刷新缓存信息,保证数据一致性,避免脏数据存在。(13)交换访问控制访问认证作为服务数据交换的访问入口,主要负责对所有服务请求进行安全性访问控制,认证范围包括客户端包,服务调用权限控制、数据加解密、访问频率控制等。(14)服务查询服务查询主要提供服务交换相关业务和交换过程查询。包括调用日志记录、日志查询、调用统计等。2.2大数据中心依托政府、电商、金融、物流等多方主体的海量数据,利用大数据技术,通过对结构及非结构化数据的采集、存储及分析挖掘,汇聚企业备案数据、申报处理数据、交易数据、物流数据、金融数据、商品数据等数据,建立全球跨境贸易电子商务数据的交换汇聚枢纽,形成跨境贸易电子商务大数据中心,为跨境贸易电子商务大数据交换、整合、研究、发布提供数据基础。大数据处理中心的应用架构图如下:项目实施采集、存储和集成三个子系统。(1)数据采集子系统数据采集子系统负责为数据中心提供有价值的数据,分三大块功能:数据采集需要从不同来源获取数据,其中包括“六中心,六平台,一门户”,获取数据的来源还有各政府部门和相关企业的信息化数据。这些数据包含结构化和非结构化的数据,数据的存储形式也具有多样性,有文件,数据库,网页等。同时数据的编码也不一样,需要进行相应的转换。针对不同的数据,还需要建立增添和全量的获取机制,确保数据的完整性。项目实现平台电商交易数据、物流数据、支付数据、申报数据、备案数据、信息发布数据、信用数据、统计监测数据、风险预警等数据的采集。大数据采集处理方案按照不同的阶段,可以分为两个部分,即数据采集与数据处理,数据采集为数据处理提供原始数据,数据处理对所采集的数据提供预处理,从而方便导入数据存储系统。同时需要在数据采集与处理之间考虑数据的传输问题,即采集数据的编码。具体建设内容如下:大数据采集大数据采集是大数据平台的数据入口,其适应性与效率直接决定了大数据平台的适用范围和平台性能,所以属于非常重要的基础性工作。大数据采集根据数据类型,主要分为结构化数据采集与非结构数据采集。结构化数据采集结构化数据和传统技术关联较大,需要借助于数据库技术与设计完成,按照消息采集的同步或者异步特性,其主要可分为两类:基于JDBC接口的库表数据抽取,即同步的数据库数据提取。基于数据日志的结构化数据消息化,即异步的数据库操作过程与数据同步。该过程可以将数据库的每一个操作过程异步化为消息,从而不会错过任何一个数据操作,可以完整的重现数据库的操作。需要研究针对MySQL、Oracle等多种数据库的日志解析提取方式。如何将不同来源的结构化数据集成到大数据平台中是采集阶段需要解决的一个问题。非结构化数据采集相比较结构化数据,非结构化数据的适用范围更广,并需要支持更多的数据格式,按照数据的类型,基本可以分为三类,即消息数据、日志数据与网站数据。主要对应于分布式日志采集系统、消息处理系统、网站数据抓取系统:日志采集系统:日志采集系统主要指对各式系统与应用日志的适配,其中包括avro、thrift、exec、jms、spoolingdirectory、netcat、sequencegenerator、syslog、http、legacy以及自定义消息。网络数据抓取系统:网络数据抓取系统严格来讲可以分为两个部分,网站数据抓取系统与网络包抓取系统。网络包抓取系统即传统的包嗅探技术,在WIFI数据采集等领域有比较成熟的应用,但目前有一定的大数据隐私保护风险。消息处理系统:消息处理系统是大数据采集系统的核心组件,所有的消息都统一传输到该系统进行集中处理,其中包括离散化后的日志数据、网站数据与结构化数据。对于不同类型的非结构化数据,其采集方式差异较大。本项目中需要针对数据的特性,基于相关开源技术,研究高效可行的采集方法。大数据来源本平台数据来自三方面:跨境电商主体填报的信息:跨境电商主体填报的报关报检、跨境物流、网上销售订单信息或仓库发货清单信息等;第三方提供的信息:跨境电商物流服务商、支付机构、第三方平台等提供的货物种类、数量、金额等信息;业务部门信息管理系统交互共享的信息:海关、检验检疫、外汇管理、国税等部门信息管理系统交互共享的信息;大数据传输数据的传输系统,即数据传输格式与编码。需要研究统一的数据传输编码格式,提高消息系统的整体性和性能。例如:对网页数据也通过编码的方式,以方便利于后期解析,另一方面也提高了消息中间件的存取传输效率。该模块应该支持通过统一的入口,选择不同的数据源配置,之后自动部署相应的采集工具到采集端,开始数据的采集过程,同时可以配置数据传输的编码方式,与数据采集的消息中间件配置与地址,从而可以通过一个统一的接口,完整和便捷的实现数据的采集配置过程。另一方面,数据采集过程中的状态数据,也通过该模块进行维护,可以以可视化的方式,方便的展现于系统中,比如消息的流动情况和目前的系统消息采集吞吐率等。大数据处理数据处理即数据的Extraction、TransformationandLoading,即数据的抽取、转化与加载。对结构化数据,可以基于SQL进行抽取,而对于非结构数据,往往需要自己构造解析器,完成有效信息的提取,并通过代码或者配置完成后期的清洗或者预算。由于数据源复杂度高,需要进行适配,设计出具备高扩展性的方案。数据核算:对数据进行归整、匹配、校对和核算,便于数据的进一步处理。数据互通本项目除数据中心架构建设外,通过订单、物流单、支付单的“三单比对”确认跨境电商的交易行为,数据共享与湖北电子口岸、海关、商检、国税、外管等部门,为报关、退税、结汇提供数据依据。我司有丰富的政府监管部门、银行、企业系统对接和互联互通经验,可快速复制到本项目。(2)数据存储子系统跨境电子商务平台的数据来源多样,包括业务数据、日志数据、图像数据和其他各种结构化、半结构化和非结构化数据。数据的不断增长在超过单机可以承载的负荷时,即使不断升级硬件配置也难以跟上数据的增长速度,数据存储在数据可用性和拓展性上面临挑战。在大数据的数据存储领域,关键是从单机存储逐渐转向分布式存储。分布式数据存储的本质也是利用存储设备把采集到的数据存储起来,建立相应的数据库,为上层应用提供数据管理、查询、分析的调用接口。大数据存储重点在于解决复杂结构化、半结构化和非结构化的大数据管理与处理。重点在于实现大数据的可存储、可表示、可处理、可靠性及有效传输等几个关键指标。分布式存储和传统的单机存储一样需要提供存储需要的文件系统,缓存和数据库。然而,目前开源的大数据存储方案类型繁杂,没有统一的管理操作接口,缓存、文件系统和数据库不是一个有机的整体,这种状况极大地增加了大数据应用研发管理的难度。这就需要研发出一套包括文件系统、数据库和缓存的完整的大数据存储解决方案,旨在对外提供一个高校、简洁、一致的用户体验。通过该数据存储方案能够实现统一文件系统,统一命名空间,统一数据存取接口,灵活精简配置,精细化配额管理从而提高大数据应用研发和数据存储管理效率。大数据存储子系统的具体建设内容如下:分布式文件系统分布式文件系统是指文件系统管理的物理存储资源是通过计算机网络连接的。常见的分布式文件系统主要包括HDFS,Ceph,Lustre,MongileFS,FastDFS等。其中HDFS是一种通用的适合于运行在廉价机器集群上的通用分布式文件系统。而且HDFS具有适合超大文件存储,流失数据访问和高容错性等特点是大数据存储的分布式文件系统的理想选择。大数据存储平台选择HDFS作为存储的基础,HDFS作为存储的基础核心部分,提供分布式文件的管理任务。一方面它可以单独作为文件的存储平台,应用可以直接在HDFS上进行文件的创建、复制、删除等基本文件管理操作。另一方面HDFS作为HBase等数据库系统的存储层,提供了一个统一的数据存放管理方案。虽然HDFS拥有诸多的优点,应用场景广泛,但是HDFS存在着两个比较严重的问题:NameNode的单点失效问题和拓展性问题。针对这两个问题将采用基于Paxos一致性算法的NameNode的失效问题解决方案和提出基于数据热度自动负载均衡的Federation优化方案以期进一步提高HDFS的综合性能,为高可靠、高拓展性的大数据存储平台提供一个坚实的基础。NoSQL存储系统NoSQL主要指非关系型、分布式、不提供ACID的数据库系统。这种数据库系统摒弃了传统关系型数据库系统的设计思想,转而采用性能优先的,高可扩展性的设计思路。目前,对NoSQL最普通的理解是“非关系型的”,强调键值存储和文档数据库的优点,而不是单纯地反对关系型数据库,更多的认为是对关系型数据库的补充。本方案中的NoSQL存储系统不是指单一的某一种NoSQL管理系统,而是一个统一的NoSQL管理系统。该NoSQL存储系统为不同的NoSQL系统提供了一个统一的上层接口和灵活的配置系统。这样的NoSQL存储系统能够充分发挥不同NoSQL存储系统的优势,能够便捷地按照具体应用的需求配置不同的NoSQL存储系统。NoSQL索引系统在上节NoSQL存储系统中我们曾提到过目前的大多数的NoSQL系统的索引并没有完善的支持,特别是非RowKey的索引,将研究以HBase二级索引研发为切入口针对NoSQL的索引技术进行深入优化和研发,为后续高效的NoSQL查询系统研发提供底层支持。基于反查表的二级索引系统实现方便并且能够获得较高的查询性能,但是这种方式需要添加新的列,存在大量的数据冗余,而且这种方式下的查询只能进行简单方式的查询操作,对于复杂些的查询操作比较复杂,例如:join,union等。基于LSM树的索引实现能够获得较高的数据写入性能,但是牺牲了读性能,这对于读操作比较频繁的大数据环境不合适。利用ParquetFile替代HBase的底层文件格式,能够灵活地对文件的不同列进行索引,并且支持高效的复杂数据查询操作。因此,基于Parquet的HBase索引方案灵活的索引机制,支持高效查询,最少数据冗余是HBase索引的最佳选择。NoSQL事务系统传统的关系型数据库主要是服务于OLTP,这需要保证事务的ACID特性从而保证数据操作的正确性。但是大数据的存储平台大多是提供查询和分析为主的OLAP服务。而且分布式系统中的CAP理论说明一个分布式系统不可能满足一致性,可用性和分区容错性这三个需求,最多只能同时满其中的两个。因此在大数据存储系统中很少提供了事务的保证。以HBase为例,在实际的应用程序中,往往需要建立多张关联表,当对这些关联表进行查询或者修改时就需要保证跨表级的数据操作的原子性,然而HBase本身只能够支持HBase的行级原子性。在这种情况下就需要额外的机制保证数据操作的跨表原子性。Haeinsa已经提供了对HBase事务集成的API接口,但是为了接口的统一性和便于在事务和非事务性的HBase之间进行切换我们需要对外提供两种不同实现的接口,其中NativeAPI用于封装对原生HBase的操作,另一种Haeninsa用于封装对添加事务支持的HBase的操作。这两种接口都是对UAPI的具体实现,UAPI定义了HBase对外服务的统一接口。Config模块主要是用于对事务进行的配置管理。这种事务集成方案并没有对HBase的本身代码造成入侵,这实际上为后续研发优化事务机制保留了原生接口。分布式缓存系统大数据场景下,应用程序往往会面临着高并发量,高访问量的挑战,缓存系统的设计通过减少磁盘IO操作能够极大提高数据的读写效率。分布式缓存系统是大数据存储的重要组成部分,是提高系统性能的关键模块。本方案拟通过优化Redis的分布式集群性能,搭建适合大数据存储的分布式缓存系统。在Redis单机多实例的基础上,通过研发优化相应的Redis集群方案,实现真正的基于Redis分布式缓存系统。主要通过Redis作为内存的管理实现我们的缓存层,数据访问首先通过访问Redis集群,如果数据不在缓存中则需要从数据库中直接取数据,并将相应的数据缓存在Redis中。该缓存系统主要包括Master,SecondaryServer和Redis集群几个模块。其中Master模块是集群的管理模块,包含了集群机器的路由表,负责请求的分发。配置监控管理系统作为完整的大数据存储平台,配置监控管理系统是必不可少的一部分。配置监控管理系统主要负责对大数据存储平台进行宏观上的管理监控。例如需要将数据存储平台的各个集群的状态信息以可视化的方式进行展示,并且提供相应的web管理界面,这可以方便地对集群机器进行增加修改,添加对大数据平台的许可管理,对不同的用户分配不同的资源和相应的操作权限等等。配置监控管理系统的展现方式可以包括Web页面,CLI等。2.3统一认证中心统一认证中心主要功能是建立统一的用户信息管理中心,实现身份管理、单点登录和平台认证等功能。为用户资源的授权提供一个安全的、开放而又简易的标准,采用OAUTH认证机制,用一种简单的,标准的方式去访问需要用户授权的API服务。可高效的对接湖北电子口岸统一认证中心和国家"单一窗口"统一身份认证中心,也可授权其他统一认证中心用户访问公共服务平台上的API服务,最终实现各平台统一认证中心间双向的互认机制。(1)身份管理企业用户注册、密码找回、用户冻结/解冻、用户审核、操作员管理、企业信息维护、密码修改。(2)单点登录单点登录。通过OAUTH认证服务,允许用户经过一次登录验证,可以访问不同的子系统以及不同平台上经授权过的子系统。(3)认证代理用户在开展业务申报之前,需要对实体身份进行验证。海关10位数代码,需要通过海关系统开放的接口进行认证校验。组织机构代码,纳税人识别号等都要通过工商或国税等政府部门系统进行验证。当用户登录之后,系统自动绑定通过验证的信息。当用户发起数据交换时,系统自动获取相关部门的身份标识,并将业务发送至各个部门。(4)平台认证公共服务平台与企业,政府之间进行数据交换进行平台的相互认证。包括认证-海关、认证-检验检疫、认证-支付企业、认证-电商企业、认证-物流企业、认证-报关企业、认证-中国电子口岸等。(5)证书管理实现对证书管理功能,具体可包括证书导入导出、证书发放、证书查询等。(6)授权管理角色管理、权限管理、菜单管理、资源管理、授权管理、功能展示控制、非法访问控制。(7)认证审计认证日志记录、访问日志管理、在线用户管理。4、两体系(1)保税物流中心体系襄阳保税物流中心是经海关批准,多家企业进入并从事保税仓储物流业务的海关集中监管场所,是提高经济外向度的重要平台。襄阳保税物流中心位于襄阳市高新区,面积0.281平方公里,包括查验区、综合办公区和配套服务区等。该中心已建成保税仓库5座,海关监管仓库1座;室内仓储面积达57618平方米,可以满足年物流作业量160万吨的生产经营要求。襄阳保税物流中心具有保税仓储、简单加工和增值服务、国际物流配送等主要功能。境内货物进入保税物流中心视同出口,享受出口退税政策,并在进入中心环节退税;境外货物进入保税物流中心,享受保税政策;保税物流中心货物销售境内时,企业可根据实际贸易方式向海关办理进口报关手续。(2)硬件支撑体系硬件支撑体系是对各类业务系统的支撑承载部分,作为六大平台系统的硬件支撑,设备用来部署跨境电子商务通关服务平台(进口)、跨境电子商务通关服务平台(出口)、跨境电子商务代理申报系统、保税展示销售平台、电商仓储平台、国际快件智能平台的软件系统及相关服务软件。应用系统设计1、跨境电子商务通关服务平台(进口)借助湖北电子口岸连接跨境进口相关电商企业、物流企业、支付企业、报关企业与海关等监管部门之间的桥梁。实现订单、运单、支付单、清单信息接入与初步校验,并与海关跨境管理平台对接,与特殊监管区域辅助管理系统对接,通过湖北电子口岸接收海关回执信息反馈。业务流程设计直邮进口业务流程图注:公共平台三单数据通过湖北电子口岸传输至监管平台。直邮进口业务流程说明:(1)订单确认国内个人消费者登陆电子商务网站选购商品,网站根据商品内容告知个人综合税税款金额。消费者认可后选择收货地址、收货人、物流方式和支付方式,并完成订单确认。电商将确认后的订单信息自动发送至电商服务平台,服务平台暂存后同时通过湖北电子口岸向总署统一版管理系统提交。(2)货款及税款支付国内个人消费者根据订单跳转到第三方支付网站,利用账户预存金额或者银行划帐完成货款及税款支付。第三方支付企业应将货款及税款支付信息自动发送至电商服务平台,服务平台暂存后同时通过湖北电子口岸向总署统一版管理系统提交。(3)境外发货电子商务企业根据订单信息和支付信息将相应的物品装箱打包,打印快件运单,交由物流企业承运。物流企业在核对运单和实际物品无误后,将物品载上运输工具向国内发货。(4)舱单申报物流企业根据物品运单信息和实际的配舱情况生成舱单及分运单,通过湖北电子口岸向海关申报,系统对其进行自动确认。(5)清单申报电子商务企业或其代理人向通关服务平台报送《中华人民共和国海关跨境电子商务零售进出口商品申报清单》(以下简称《申报清单》),服务平台暂存后同时通过湖北电子口岸向总署统一版管理系统提交。(6)运抵国内国际运输工具抵达国内,物流公司在清点完货物后通过湖北电子口岸向海关发送理货报告。(7)转关或分拨入区对跨境贸易电子商务货物,机场航空一级货站为其办理转关或分拨手续,将物品用监管车辆集中转运至电子商务监管中心。监管中心场所经营人在完成货物入库后,在电商服务平台上,通过湖北电子口岸向海关报送入库明细单。(8)电子审单申报单进入总署统一版管理系统后,根据入库信息,系统自动进行“三单对碰”,并检查申报清单的逻辑关系,判断是否在正面清单,以及完成布控检查和通道判别。(9)税费计算总署统一版管理系统根据审核后的申报清单内容,结合支付信息、归类、税率、汇率等因素,自动计算出应缴纳的综合税税款,生成电子税单。(10)税款预扣总署统一版管理系统将个人电子税单通过湖北电子口岸发送给电商服务平台,电商服务平台将电子税单发送给电商及支付企业,电商平台将税单反馈给个人消费者,支付企业根据税单内容进行税款预扣操作。(11)人工审单总署统一版管理系统根据预设的风险参数,将高风险重点敏感物品申报清单转至人工审单岗位,由审单专家做重点审核。绿通道或者人工审核结束的申报单置入审结标志。(12)流水线分拣物流企业扫描快件运单条码并将物品包裹放上流水线,监管关员利用自动分拣流水线X光机进行同屏比对检查,被布控需开拆查验和退单的物品从查验分拣口下线,其余包裹送至放行区下线。(13)开拆查验监管关员利用单兵查验终端,对拣入查验区的包裹扫描条码后,依据电子申报信息进行开包查验。(14)放行拣入放行区的包裹由流水线系统通过湖北电子口岸向总署统一版管理系统发送放行区下线报文,系统凭此报文对申报单做自动放行操作;开拆查验正常的包裹,系统凭处理结果对申报单做自动放行操作。(15)国内配送物流公司将放行后的包裹通过国内物流网络送至消费者个人手中,消费者签单确认后完成整个物流流程。消费者拒签的,由物流公司暂为保管,等待进入退换货流程。(16)税款入库放行后30天内退货的,税款不予征收;放行后30天未发生退货或修撤单的,第31天至45天向海关办理纳税手续。(17)税单打印个人消费者如需纸质税单的,可待税款入库后凭身份证件到海关相关窗口打印,或由物流企业收费配送。保税进口业务流程图注:公共平台三单数据通过湖北电子口岸传输至监管平台。保税进口业务流程说明:(1)货物进区电商企业将待销售货物通过海运或空运渠道运输入境,并转关至综保区,并存入电子商务专用仓库。入区按现有规定监管,申报贸易方式为1210(保税跨境贸易电子商务)的进境备案清单,可根据通关无纸化试点情况实现无纸化申报,纳入海关贸易统计,并电子账册相应商品库存进行核增。(2)订单确认国内个人消费者登陆电子商务网站选购商品,网站根据商品内容告知个人综合税税款金额。消费者认可后选择收货地址、收货人、物流方式和支付方式,并完成订单确认。电商将确认后的订单信息自动发送至电商服务平台,服务平台暂存后同时向总署统一版管理系统提交。(3)货款及税款支付国内个人消费者根据订单跳转到第三方支付网站,利用账户预存金额或者银行划帐完成货款及税款支付。第三方支付企业应将货款及税款支付信息自动发送至电商服务平台,服务平台暂存后同时通过湖北电子口岸向总署统一版管理系统提交。(4)区内发货电子商务企业根据订单信息和支付信息在区内仓储企业内将相应的物品装箱打包,打印快件运单,交由物流企业承运。物流企业在核对运单和实际物品无误后,完成商品收寄并在电商服务平台上通过湖北电子口岸向总署统一版管理系统递交运单信息。(5)清单申报电子商务企业或其代理人向通关服务平台报送《中华人民共和国海关跨境电子商务零售进出口商品申报清单》(以下简称《申报清单》),服务平台暂存后同时向总署统一版管理系统提交。(6)电子审单申报单进入总署统一版管理系统后,根据入库信息,系统自动进行“三单对碰”,并检查申报单的逻辑关系,判断是否在正面清单,以及完成布控检查和通道判别。(7)税费计算总署统一版管理系统根据审核后的申报清单内容,结合支付信息、归类、税率、汇率等因素,自动计算出应缴纳的综合税税款,生成电子税单。(8)税款预扣总署统一版管理系统将个人电子税单通过湖北电子口岸发送给电商服务平台,电商服务平台再发送给电商及支付企业,电商平台将税单反馈给个人消费者,支付企业根据税单内容进行税款预扣操作。(9)人工审单总署统一版管理系统根据预设的风险参数,将高风险重点敏感物品申报清单转至人工审单岗位,由审单专家做重点审核。绿通道或者人工审核结束的申报单置入审结标志。(10)转运至查验点海关在综保区设立跨境贸易电子商务专用的查验点,包括卸货区、等待区和查验作业区和物流作业区。物流企业将在专用仓库收寄的物品包裹统一用专用车辆转运至查验点,等待查验。(11)开拆查验 监管关员利用单兵查验终端,对拣入查验区的包裹扫描条码后,依据电子申报信息进行开包查验。(12)放行不查验的海关通过平台直接发送放行指令;开拆查验正常的包裹,系统凭处理结果对申报清单做自动放行操作,并在海关特殊区域监管信息系统中登记出区信息,系统对专用账册库存进行核扣。物品包裹放行后,由物流企业统一装车出卡口转境内配送。(13)境内配送物流公司将放行后的包裹通过境内物流网络送至消费者个人手中,消费者签单确认后完成整个物流流程。消费者拒签的,由物流公司暂为保管,等待进入退换货流程。(14)税款入库放行后30天内退货的,税款不予征收;放行后30天未发生退货或修撤单的,第31天至45天向海关办理纳税手续。(15)税单打印个人消费者如需纸质税单的,可待税款入库后凭身份证件到海关相关窗口打印,或由物流企业收费配送。系统功能设计序号子模块名称功能点功能描述1订单管理数据接收、申报接口订单数据收发的接口,可与不同的电商系统直接进行实时对接,并与跨境管理平台对接以传送申报数据数据基础校验订单数据传输时可实现基础的信息校验,根据海关相关规则,实现对订单金额,订单流量的限制与控制数据入库实现企业推送订单数据的暂存入库回执接口接收管理平台的订单审核回执等功能后台逻辑处理实现对于订单推送流程的逻辑判断,以及与相关三单数据的匹配订单增删改查实现订单功能的增删改查功能运单管理数据接收、申报接口运单数据收发的接口,可与不同的物流企业系统直接进行实时对接,并与跨境管理平台对接以传送申报数据。数据基础校验平台对推送的运单数据进行基础的信息校验数据入库实现推送运单数据的暂存入库回执接口接收管理平台的运单审核回执等功能后台逻辑处理实现对于运单推送流程的逻辑判断,以及与相关三单数据的匹配运单增删改查实现运单功能的增删改查功能清单管理数据接收、申报接口实现接收由具有报关资质的企业替个人消费者通过湖北电子口岸向海关正式申报的进口清单数据数据入库对推送申报数据暂存清单校验清单管理功能接收申报单时根据相关规则可实现简单校验并即时给予相关提示后台逻辑处理实现对于清单推送流程的逻辑判断,以及与相关三单数据的匹配回执接口接收管理平台的清单审核回执等功能清单增删改查实现清单功能的增删改查功能支付管理数据接收、申报接口支付单数据收发的接口,可与不同的支付企业系统直接进行实时对接,并与跨境管理平台对接以批量实时传送申报数据数据基础校验对推送的支付单,根据相关规则可实现简单校验并即时给予相关提示数据入库支付数据中包含个人信息的字段和身份认证的相关信息给予加密,包括数据存储加密回执接口接收管理平台的支付单审核回执等功能后台逻辑处理实现对于支付单推送流程的逻辑判断,以及与相关三单数据的匹配支付信息增删改查实现支付单功能的增删改查功能税款划转指令发送根据审核后的进口清单内容,结合支付信息、商品备案、归类、税率、汇率等因素,自动计算出应缴纳的个人行邮税费,生成电子税单,向电商账户发送划转税款指令处理结果接收、反馈接收管理平台的支付单审核回执等功能税单接收及反馈加密接收电子税单和对电子税单进行反馈2物流信息跟踪数据接收、申报接口提供申报接口用以物流信息的申报,数据基础校验接收数据后进行基础性校验,并对校验结果进行反馈后台逻辑处理对物流状态以及物流时间等物流数据进行比对,对风险物流数据做出预警数据入库物流信息跟踪系统提供物流过程中的各类信息,包括物流状态,物流时间节点,物流车辆信息等,对推送的数据平台进行暂存回执接口用以接收审核回执等功能3保税进口管理个人消费记录实现保存消费者的个人消费记录清单归并允许通过规则将进口清单归并实时出库数据交换实现对保税仓库的实时出库管理数据交换,对出库记录进行监管实时入库数据交换实现对保税仓库的实时入库管理数据交换,对入库记录进行监管与辅助监管系统数据交换为实现对跨境贸易监管,防止通过个人申报偷漏税现象,通过与辅助监管系统的数据交换辅助监管系统改动针对监管要求,对辅助监管系统做相应的系统改造辅助监管系统联调与辅助监管系统完成功能开发联调测试电商企业申报数据交换实现与电子商务企业系统的订单数据采集和交换物流企业物流状态数据交换实现与物流企业(航空公司、船公司、仓储企业、配送公司、快递公司等)系统的运单、物流信息等数据采集和交换国检跨境电子商务检验检疫监管信息化平台数据交换与国检跨境电子商务检验检疫监管信息化平台交换备案,申报等数据4查询统计清单查询为进口清单的查询开放统一入口,根据不同用户的需求,生成多维度细化的信息组合和统计,如按区域,按季度等对查询结果进行划分。企业可对自身的数据进行统计,亦可一定权限内查询相关行业的信息。运单查询为运单的查询开放统一入口电子税单查询为电子税单的查询开放统一入口,为用户提供不同查询条件下的组合查询结果归并核放单查询跨境管理部门可对过往核放记录进行统计,为政策制定,特殊商家管理处理提供数据依据。流量统计实现对阶段性的流量进行统计,为电商和政府提供决策数据支持。根据不同用户的需求,生成多维度细化的信息组合和统计,如按区域,按季度等对流量进行划分。5系统设置企业备案申报对从事跨境业务的企业进行备案申报,实现一次备案,多次报关的业务需求商品备案申报对跨境业务涉及的商品进行备案申报,实现一次备案,多次报关的业务需求审批结果接收接收监管部门对备案信息的审批结果参数接口实现通关服务平台的相关参数设置收费标准设置对涉及平台收费的相关标准进行参数设置通知公告发布实现平台通知公告的后台设置发布6退换货管理退换货增删改查实现对推送的退换货数据进行增删改查操作数据接收、申报接口退换的货品通过跨境服务平台的申报接口向跨境管理平台进行申报数据基础校验对推送的数据按照规则进行校验,并返回校验不通过的原因数据入库从电商平台处接受消费者发起,企业确认提交的退换货信息数据,经基础校验后进行暂存回执接口通过回执接口接收跨境管理平台的审核信息后台逻辑处理实现对于退货流程的逻辑判断,通过规则判断是否在规定时间内退货,退货后是否退回跨境税,若为换货是否有相对应的可换库存,判断时间内退换货次数是否超限判定为恶意退换货等相关流程的判断。7接口企业备案接口(海关)实现企业备案信息的增删改查以及审核回执查收企业备案接口(国检)实现企业备案信息的增删改查以及审核回执查收商品备案接口(海关)实现商品备案信息的增删改查以及审核回执查收商品备案接口(国检)实现商品备案信息的增删改查以及审核回执查收订单接口实现企业订单信息批量推送以及审核回执查收运单接口实现企业运单信息批量推送以及审核回执查收清单接口实现企业清单信息批量推送以及审核回执查收支付数据接口实现企业支付单信息批量推送以及审核回执查收物流数据接口对包裹的物流数据进行实时动态更新税款转划接口实现与跨境管理平台的数据连接,对产生业务的税款进行划扣,并实时返回数据税单接口实现与跨境管理平台的数据连接,每月定期接收小税单的推送数据大税单接口实现与跨境管理平台的数据连接,每月定期接收大税单的推送数据保税进口仓库入库数据接口实现与特殊监管区域系统的连接,实时接收保税仓库的入库数据信息保税进口仓库出库数据接口实现与特殊监管区域系统的连接,实时接收保税仓库的出库数据信息通关状态接口实现企业接收查询清单的通关状态出区状态回传接口实现企业接收核放单出区状态核放单信息接口实现与特殊监管区域系统的连接,对已经审核通过的清单选择汇总生成核放单国检系统对接接口与国检信息化系统实现接口对接,实现系统数据交换,完成国检对跨境业务数据的监管审核国税系统对接接口与国税信息化系统实现接口对接,实现系统数据交换,完成国税对跨境业务征税的审核管理2、跨境电子商务通关服务平台(出口)连接跨境出口相关电商企业、物流企业、支付企业、报关企业与监管部门之间的桥梁。与企业对接,按“清单验放,汇总申报”监管要求将订单、运单、清单信息接入与初步校验,并与监管部门信息化系统对接,实现申报数据、审批回执的互联互通。业务流程跨境出口业务流程图:注:公共平台三单数据通过湖北电子口岸传输至监管平台。跨境出口业务流程说明:(1)电商企业在服务平台进行资质备案,备案信息为企业名称、企业组织机构代码、企业类型、注册资本、企业经营范围等。企业备案申请通过湖北电子口岸向海关申报后提交到管理平台,关员在管理平台对企业资质进行审核,通过审核后的电商企业才能开展相应业务。(2)电商企业进行商品备案,备案内容包括:品名、描述、HS编码等。商品备案申请通过湖北电子口岸向海关申报后,经海关核准的备案商品才能进入监管中心。电商企业在商品信息发送至服务平台前需确定商品的HS编码,海关对清单商品进行审核。(3)电商底层数据与服务平台无缝对接,在网上交易成交的同时,信息自动发送至服务平台,服务平台暂存交易清单信息,并自动发出需办理监管证件提示。(4)电商根据订单配置相应商品、封装邮包、打印邮件详情单并送交物流企业寄递。在寄递同时,服务平台根据物流企业发送的邮包收寄信息激活暂存的交易清单向湖北电子口岸发送电子申报信息。该清单向湖北电子口岸电子申报后,即成为定期申报清单。定期申报清单属于执法数据,不得擅自修改,同时在湖北电子口岸内部网络留存。(5)电商订单成交的同时,支付企业发送支付信息至服务平台,同时服务平台将支付信息通过湖北电子口岸传送给海关管理平台。管理平台自动根据订单号进行支付信息及清单信息比对,比对不一致的清单予以退回。(6)在管理平台中设置红、绿通道,对红通道的商品激活后进入现场审核,现场海关验核监管证件等后再次激活放行,涉税商品直接转为报关单方式申报;对绿通道的商品激活后进入放行环节,现场海关设置监控岗位,对进入放行环节的绿通道商品实施实时监控,发现异常情况可人工转至现场审核环节,以防范系统参数未提示的涉证商品进入绿通道。(7)管理平台自动根据查验率的设置对清单货品进行随机布控,风险管理人员也可利用该功能进行人工布控。(8)物流企业扫描邮件条形码,海关通过自动查验分拣流水线进行X光机同屏比对,涉证货物、需开箱查验货物、放行货物从不同口子下线。(9)需开箱查验的货物关员利用单兵系统终端,扫描条形码,根据屏幕显示的申报信息进行查验。(10)完成查验、放行后的邮件按现有监管规定和要求,使用在海关注册备案的海关监管车辆转运出境。(11)定期申报清单放行后,报关行可利用海关预录入系统(QP)将清单数据导入归并,以报关单方式定期向H2000系统申报。涉及出口关税的,企业应按照海关规定对涉税货物办理税款缴纳手续;涉及许可证件管理的,应提交海关批注过的相应纸质许可证件。(12)货品在快件或邮运渠道出境后,物流企业将出境信息通过服务平台反馈给海关,系统将货品出境信息按定期申报的归并方式汇总成报关单数据在H2000中对报关单作结关处理。(13)通过平台验放的快件或邮运渠道货品不进入现有统计系统,待货品定期集中形成报关单申报后,以一般贸易报关单为载体进入H2000贸易统计系统。系统功能设计序号子模块名称功能点功能描述1订单管理数据接收、申报接口订单数据收发的接口,可与不同的电商系统直接进行实时对接,并与跨境管理平台对接以传送申报数据数据基础校验订单数据传输时可实现基础的信息校验,根据海关相关规则,实现对订单金额,订单流量的限制与控制数据入库实现企业推送订单数据的暂存入库回执接口接收管理平台的订单审核回执等功能后台逻辑处理实现对于订单推送流程的逻辑判断,以及与相关三单数据的匹配订单增删改查实现订单功能的增删改查功能运单管理数据接收、申报接口运单数据收发的接口,可与不同的物流企业系统直接进行实时对接,并与跨境管理平台对接以传送申报数据。数据基础校验平台对推送的运单数据进行基础的信息校验数据入库实现推送运单数据的暂存入库回执接口接收管理平台的运单审核回执等功能后台逻辑处理实现对于运单推送流程的逻辑判断,以及与相关三单数据的匹配运单增删改查实现运单功能的增删改查功能清单管理数据接收、申报接口实现接收由具有报关资质的企业替个人消费者通过湖北电子口岸向海关正式申报的进口清单数据数据入库对推送申报数据暂存清单校验清单管理功能接收申报单时根据相关规则可实现简单校验并即时给予相关提示后台逻辑处理实现对于清单推送流程的逻辑判断,以及与相关三单数据的匹配回执接口接收管理平台的清单审核回执等功能清单增删改查实现清单功能的增删改查功能支付管理数据接收、申报接口支付单数据收发的接口,可与不同的支付企业系统直接进行实时对接,并与跨境管理平台对接以批量实时传送申报数据数据基础校验对推送的支付单,根据相关规则可实现简单校验并即时给予相关提示数据入库支付数据中包含个人信息的字段和身份认证的相关信息给予加密,包括数据存储加密回执接口接收管理平台的支付单审核回执等功能后台逻辑处理实现对于支付单推送流程的逻辑判断,以及与相关三单数据的匹配支付信息增删改查实现支付单功能的增删改查功能税款划转指令发送根据审核后的进口清单内容,结合支付信息、商品备案、归类、税率、汇率等因素,自动计算出应缴纳的个人行邮税费,生成电子税单,向电商账户发送划转税款指令处理结果接收、反馈接收管理平台的支付单审核回执等功能税单接收及反馈加密接收电子税单和对电子税单进行反馈2物流信息跟踪数据接收、申报接口提供申报接口用以物流信息的申报,数据基础校验接收数据后进行基础性校验,并对校验结果进行反馈后台逻辑处理对物流状态以及物流时间等物流数据进行比对,对风险物流数据做出预警数据入库物流信息跟踪系统提供物流过程中的各类信息,包括物流状态,物流时间节点,物流车辆信息等,对推送的数据平台进行暂存回执接口用以接收审核回执等功能3保税进口管理个人消费记录实现保存消费者的个人消费记录清单归并允许通过规则将进口清单归并实时出库数据交换实现对保税仓库的实时出库管理数据交换,对出库记录进行监管实时入库数据交换实现对保税仓库的实时入库管理数据交换,对入库记录进行监管与辅助监管系统数据交换为实现对跨境贸易监管,防止通过个人申报偷漏税现象,通过与辅助监管系统的数据交换辅助监管系统改动针对监管要求,对辅助监管系统做相应的系统改造辅助监管系统联调与辅助监管系统完成功能开发联调测试电商企业申报数据交换实现与电子商务企业系统的订单数据采集和交换物流企业物流状态数据交换实现与物流企业(航空公司、船公司、仓储企业、配送公司、快递公司等)系统的运单、物流信息等数据采集和交换国检跨境电子商务检验检疫监管信息化平台数据交换与国检跨境电子商务检验检疫监管信息化平台交换备案,申报等数据4查询统计清单查询为进口清单的查询开放统一入口,根据不同用户的需求,生成多维度细化的信息组合和统计,如按区域,按季度等对查询结果进行划分。企业可对自身的数据进行统计,亦可一定权限内查询相关行业的信息。运单查询为运单的查询开放统一入口电子税单查询为电子税单的查询开放统一入口,为用户提供不同查询条件下的组合查询结果归并核放单查询跨境管理部门可对过往核放记录进行统计,为政策制定,特殊商家管理处理提供数据依据。流量统计实现对阶段性的流量进行统计,为电商和政府提供决策数据支持。根据不同用户的需求,生成多维度细化的信息组合和统计,如按区域,按季度等对流量进行划分。5系统设置企业备案申报对从事跨境业务的企业进行备案申报,实现一次备案,多次报关的业务需求商品备案申报对跨境业务涉及的商品进行备案申报,实现一次备案,多次报关的业务需求审批结果接收接收监管部门对备案信息的审批结果参数接口实现通关服务平台的相关参数设置收费标准设置对涉及平台收费的相关标准进行参数设置通知公告发布实现平台通知公告的后台设置发布6退换货管理退换货增删改查实现对推送的退换货数据进行增删改查操作数据接收、申报接口退换的货品通过跨境服务平台的申报接口向跨境管理平台进行申报数据基础校验对推送的数据按照规则进行校验,并返回校验不通过的原因数据入库从电商平台处接受消费者发起,企业确认提交的退换货信息数据,经基础校验后进行暂存回执接口通过回执接口接收跨境管理平台的审核信息后台逻辑处理实现对于退货流程的逻辑判断,通过规则判断是否在规定时间内退货,退货后是否退回跨境税,若为换货是否有相对应的可换库存,判断时间内退换货次数是否超限判定为恶意退换货等相关流程的判断。7接口企业备案接口(海关)实现企业备案信息的增删改查以及审核回执查收企业备案接口(国检)实现企业备案信息的增删改查以及审核回执查收商品备案接口(海关)实现商品备案信息的增删改查以及审核回执查收商品备案接口(国检)实现商品备案信息的增删改查以及审核回执查收订单接口实现企业订单信息批量推送以及审核回执查收运单接口实现企业运单信息批量推送以及审核回执查收清单接口实现企业清单信息批量推送以及审核回执查收支付数据接口实现企业支付单信息批量推送以及审核回执查收物流数据接口对包裹的物流数据进行实时动态更新税款转划接口实现与跨境管理平台的数据连接,对产生业务的税款进行划扣,并实时返回数据税单接口实现与跨境管理平台的数据连接,每月定期接收小税单的推送数据大税单接口实现与跨境管理平台的数据连接,每月定期接收大税单的推送数据保税进口仓库入库数据接口实现与特殊监管区域系统的连接,实时接收保税仓库的入库数据信息保税进口仓库出库数据接口实现与特殊监管区域系统的连接,实时接收保税仓库的出库数据信息通关状态接口实现企业接收查询清单的通关状态出区状态回传接口实现企业接收核放单出区状态核放单信息接口实现与特殊监管区域系统的连接,对已经审核通过的清单选择汇总生成核放单国检系统对接接口与国检信息化系统实现接口对接,实现系统数据交换,完成国检对跨境业务数据的监管审核国税系统对接接口与国税信息化系统实现接口对接,实现系统数据交换,完成国税对跨境业务征税的审核管理3、跨境电子商务代理申报系统为了提高跨境电子商务出口申报量,将襄阳市邮政每年近千万单邮政出口业务及其他可能外贸类业务纳入跨境电子商务业务,实现外贸出口增长,由代理报关企业在该平台进行“清单核放、汇总申报”操作。包括接收及预处理、商品归类管理、归类知识库管理、系统管理、回执处理、申报数据汇总、统计分析等功能模块。系统功能如下:序号模块名称子模块名称功能点1接收及预处理邮政速递数据接收将邮政速递上传文件内容导入到数据库中预处理接收数据后,进行预处理,对数据进行有效性检查,并生成或转换相应的申报数据。邮政小包数据接收本功能从ftp服务器上将邮政小包上传文件内容导入到数据库中物流企业实单数据接收从ftp服务器上,将物流企业上传的文件导入到数据库中HTTP接口数据接收本功能通过HTTP将物流企业的数据通过接口接收并导入到数据库中运单重发接口本功能实现代理系统已经发送成功,但通关服务平台接受异常的数据重发。2商品归类管理商品归类对预处理后的数据进行补充和调整。并在跨境通关服务平台通过湖北电子口岸发送给海关。发送数据到跨境平台对放在发送队列中的数据进行处理,发送给通关服务平台,并接收回执。运行状态监控监控运行状态,及时了解数据导入,发送及申报情况。清单下载清单下载功能异常数据查询异常数据查询功能3归类知识库管理归类关系维护建立实际品名与归类参数的对应关系。归类参数维护对申报商品名称、申报商品规格的参数进行维护。归类核准维护对海关已核准可以使用的HS编码进行维护。4系统管理默认值设置设置为发送数据所准备的默认值。日志查询查询接收日志。接入方管理查询和管理接入方用户数据权限管理支持多个经营单位切换5统计分析日统计按日统计。区域统计按区域统计。客户排行按客户号统计。6回执处理校验回执跨境代理系统对客户上传至FTP的订单进行校验,输出校验错误的订单返回至FTP接口失败回执跨境通关服务平台对清单进行校验,输出失败回执至代理系统,代理系统返回至FTP接口退单回执通关管理平台返回不接受申报的清单回执,由跨境通关服务平台接口返回至代理系统,再推送至FTP接口物流企业接口回执反馈跨境通关服务平台将湖北电子口岸返回的清单回执,通过接口方式返回至代理系统,由代理系统通过接口反馈给物流企业7申报数据汇总删改单信息查询根据日期和物流企业名称,查询物流企业删改单记录录入删改单信息删改单信息上传月统计信息查询根据物流企业名称、日期和发送方式,查询该物流企业的月度清单数量,并可以导出结果。日统计信息查询根据物流企业名称、日期和发送方式,查询该物流企业的日度清单数量,并可以导出结果。8跨境进口申报跨境进口订单接收从电商处获取订单报文,并进行处理,为后续向跨境通关服务平台发送订单申报与个人物品申报单申报做数据准备跨境通关服务平台进口订单申报发送订单数据至通关服务平台跨境通关服务平台进口个人物品申报单申报向通关服务平台发送个人物品申报单申报4、保税展示销售平台保税品展销系统是保税直购中心的日常运营系统,在满足海关监管要求的前提下,同时满足直购中心日常运营的各种管理需求。业务流程流程说明:1、商品信息录入和价格备案流程:供货商人员进入系统录入商品信息后对商品价格进行备案提交到直购中心人员处,由直购中心进行审批审批通过后价格在系统中生效2、出入库业务流程:由供货商人员填写调入(出)申请(直购中心账号也可操作),申请提交到货源单位(通过接口对接)货源单位根据申请单和实际库存情况发货到货后由直购中心人员进行入(出)库确认入(出)库确认后根据申请单数量对库存做相应的增减系统功能设计模块名称子模块名称功能描述后台管理端功能模块经销商管理经销商的信息是商品调拨、销售统计、合同管理、经销商人员归属单位的基础。经销商的基本信息:名称、编号、地址、联系人姓名、联系电话、经营范围、经营国别、允许经营商品类型、备注、状态(正常、作废)。用户管理经销商人员管理的功能默认为系统管理员,系统管理员可以把权限指定给其它角色。用户的主题信息:姓名、联系电话、登录账号、登录密码、账号有限期、所属经销商、备注。直购中心人员管理的主体信息包括:姓名、部门、联系电话、登录账号、登录密码、账号有效期、职务、备注。角色管理主要角色包括:经销商负责人、经销商调拨人员、管理端人员、经营端人员、服务端人员、销售人员等。备注:有权限的用户根据实际需求自由新建、删除、维护角色。权限管理超级管理员拥有系统的权限分配功能,同时超级管理员还可以把分配权限的功能赋给其它角色。角色的权限可根据经营实际需求由直购中心的超级管理员或被授权的人员进行更改调配。具体的内容有:维护人员与角色的对应关系维护角色与功能的对应关系。货源单位管理货源单位是:货物的来源单位,如:保税仓库物流公司、其它。此模块完成货源单位的增、删、改、查功能。货源单位的基本信息如下:名称、编码、位置、联系人、备注、状态。“POS机”管理管理“POS机”的序列号、型号、摆放位置、IP地址、厂家、维修人员联系方式信息方便整理管理。主要信息如下:序列号、型号、厂家、摆放位置、IP地址、维修人员联系方式、序列号。合同信息管理管理经销商的合同信息,基本信息如下:编号、合同有限期限(包括开始和结束时间)、经销商名称、联系人、联系电话、经营范围描述、经营面积、单价(天/平米)、流水抽成比例、收费模式(1、按面积收费2、按流水比例抽收3、按面积和抽成同时收费4、面积和抽成金额取高者收取)。基础费用管理根据合同内容和经销商信息生成虚拟的应缴费用列表。费用列表包括:经销商名称、经销商编号、应用费用、费用类型(租金、流水、租金+流水),缴纳状态(缴纳状态是虚拟列和和实际缴纳费用进行比对得到的状态)。其它费用管理输入缴费类型(进场费、年费、推广费、广告费等)、金额、经销商、收费明细(附件形式)、备注等信息进行缴费记录的保存。此记录还应自动记录:收费人员、收费时间等信息。商品分类管理设定商品分类信息,分类下可以有子分类,分类信息由直购中心统一管理,所以经销商共用一个分类信息。商品基础信息管理根据条形码进行判断,保证条形码的唯一,各个经销商只能看各自的商品信息。商品的基本信息如下:名称、所属经销商、海关编号、商品类别、海关条码、上架位置、单位、规格型号、计量单位、售价、保质期、库存上限、库存下限、是否为特价商品、备注。商品价格备案与审批由经销商填写商品的价格信息,经销商可以单个、批量进行商品价格进行报批(包括:正常价、会员价、团购价),申请的时候需填写价格生效起始时间,被驳回的审批可以重新再次发起。直购中心价格审批功能,直购中心可以选择同意或驳回,驳回时需填写审批意见。商品价格更新工具按照设置的更新频率,依据已经批准的价格申请单上的生效时间和商品价格进行更新,更新完成后前台的价格即刻生效。会员信息管理主要内容有:姓名、手机号、会员编号、身份证号、注册日期、消费积分(级别根据消费者的购买金额自动更新,不允许手工修改)。首次会员信息录入的时候,需要提供一张小票单号,根据小票单号上的金额判断是否满足会员办理条件。直购中心可以通过此模块查询会员的基本信息和会员的消费记录信息。积分兑换管理由直购中心填写商品信息和兑换积分数量,根据这个积分数量对会员的积分进行核减。活动管理直购中心可以根据经销商、指定商品分类、指定商品时间范围创建活动。活动优惠和会员优惠择高或并行执行。直购库存查询经营商可根据商品类别、名称等信息进行商品直购中心实时库存信息查询,包括根据商品预警的最小值和最大值来显示库存不足提醒的功能。直购中心可以查看所有经销商的直购中心库存信息,包括根据商品预警的最小值和最大值来显示库存不足提醒的功能。保税库存查询经销商可根据商品类别、名称等信息查询保税仓库的库存信息。直购中心可以查看所有经销商的保税仓库的库存信息。商品出入库管理经销商可根据调拨来源、商品名称、商品数量、商品类型(保税、完税)及其它商品信息填写入库调拨记录单。如果调拨的来源为物流系统时,向其发送商品调拨申请单,发送完毕后更新调拨单的状态为“已发送”。如果为非物流系统,调拨申请单的发送方式可以为邮件,纸质等任意形式。库存盘点损溢管理经销商可以根据实际的盘点结果,建立损溢申请,并填写损溢原因。直购中心审批后根据商品损溢详细数据更新直购中心的库存。 报损由经销商进行“报损”,上面需要填写报损的原因。最后由直购中心审核通过以后生效。 报溢由经销商进行“报溢”,并填写“报溢”原因,最后由直购中心审核通过以后生效。后台换货管理根据原销售单号,读取原销售单里的商品信息,根据原商品信息添加需要换货的商品,填写换货数量后保存生成换货记录,换货记录可以作废(不能物理删除)前台POS功能销售统计分析管理按销售单据进行汇总分析统计根据销售日期、销售员、商品编号、销售单号等信息进行查询,列表底部显示统计信息。按商品进行统计分析管理根据商品名称、商品编码、销售日期、是否会员、保税或完税等条件进行条件检索。前台销售和退货销售流程:输入会员号(可选)。扫描商品条码,或手工选择商品。点击结算按钮。打开钱箱并向顾客收款。确认收款并执行出库操作。退货流程:根据小票上的单号进行退货,查询出来上次购买的商品选择退货数量,选择结算,在退还消费者货款后执行商品入库操作。服务台人员根据销售流水号关联销售记录(商品名称、商品类型、商品规格、销售时间、销售流水号、会员卡号等),填写退货原因,并录入退货单。前台日销售明细统计当前POS的日销售明细信息。钱箱和系统配置钱箱管理模块用来管理POS里的钱箱,可以查看每次出款和入款的记录。系统配置模块可以设置打印机、测试POS顾客显示小屏幕、小票打印测试等功能。5、跨境仓储平台货物在发货时对货物信息进行扫描,通过电商仓储平台追踪每件货物的流向。通过对发货记录的查询,即可确定该产品在仓库中的库存量。同时,还可以分析各个仓库的库存情况,及时的把握各种产品的需求度。业务流程流程说明:电商推送采购单给仓库,仓库根据采购单的数据,线下做入区申报,入区放行后,仓库进行理货,按照效期生成批次后,上架入库。流程说明:库存盘点,根据盘点结果对库存做调整。流程说明:电商平台推送订单到WMS系统,仓库根据订单生成拣货波次单,复核打包后,交接给仓库出库。系统功能设计模块名称子模块名称功能描述采购收货采购单管理接收来自电商的商品采购单收货理货提供收货理货数据,供入库申报、上架申报、电商理货报告审核收货上架接收货品,开始库内管理。销售出库电商订单管理接收电商的销售订单波次单管理根据订单集合生成拣货波次单,提高拣货作业效率。二次分拣指引对于不适合边拣边分的订单,提供二次分拣的分拨指引功能。发货复核订单打包前进行数量的复核,包装订单发货的准
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 三年级体育上册 蹲距式跳远的单跳双落动作(1)教案
- 六年级信息技术下册 第2课 世界之最教案2 浙江摄影版
- 2024-2025学年新教材高中政治 第三单元 全面依法治国 8.1 法治国家(2)教案 部编版必修3
- 机械仿生设计课程设计
- 2015年内蒙古呼和浩特市中考真题语文试题(解析版)
- 医疗科研项目管理制度优化
- 机械cad cam技术课程设计
- 机床的课程设计
- 机床方刀架的课程设计
- 机床家具课程设计
- 教师二次成长论-教师专业发展路径及要领
- 婚博会活动方案
- 项目管理培训之沟通管理课件
- 九省高三适应性联考诗歌鉴赏《临江仙+正月二十四日晚至湖上》译文赏析及试题含答案解析详解讲评课件
- 美甲店创业商业计划书
- 《软件项目质量管理》课件
- 《清洁能源的应用》课件
- 《人大复印资料》课件
- 管理经济学课后答案
- 《波特价值链模型》课件
- 2024年西南油气田分公司招聘笔试参考题库含答案解析
评论
0/150
提交评论