众安银行敏捷研发体系建设与提效的理念与实践-唐嘉龙

众安国际测试架构师现任众安银行首席测试架构师，负责众安银行整体测试架构体系建设，同时负责零售银行促活拉新活动、智能营销平台、客户与运营等业务的整体质量保障工作。曾就职于腾讯FIT金融科技业务线，负责微信支付的跨境收单支付、国际清结算及微信分付信贷管理等业务质量管理工作，同时也对EKYC中台、风控证件鉴伪、AI量化投资模型等金融领域AI算法应用有独到见解。曾发表多篇AI模型测试相关专利、并获得腾讯微创新奖。AboutZA&&600K300KStrengtheningofdigitalfinanceproductsuiteAboutZA&&600K300KStrengtheningofdigitalfinanceproductsuite 2021Sep-21Dec-21Mar-22Jun-22Dec-22Mar-23Jun23Sep-23Mar-24背景-企业数字化转型敏捷之所以更快，根本原因在于持续迭代和验证节省了大量不必要的浪费和返工背景-研发流程中常见问题业务敏捷业务敏捷需求过多，高优先级需求快速交付，快速验证需求过多，高优先级需求快速交付，快速验证环境管理环境管理环境多复杂性上升，一致性难以保证，交付慢代码评审，单元测试，持续集成环境多复杂性上升，一致性难以保证，交付慢部署管理技术债务部署管理提交代码质量差系统架构设计受限，潜在的提交代码质量差背景-众安国际研效体系建设之旅智能质效诊断最佳实践智能质效诊断最佳实践度量可视化工具自动化研发过程管理线上管理研发过程管理线上管理启动单测、静态扫描卡点启动单测、静态扫描卡点自研平台工程1.0落地启动研发过程度量分析(质效)平台工程1.0最佳实践打造自驱式质量管理平台工程2.0项目启动引入开源研发工具生态搭建自动化测试框架体系启动自建持续集成流水线项目搭建线上管理流程体系引入线上管理工具启动线上度量分析(质效) •众安CICD交付流水线架构设计•AutoQE的落地实践CodeCodeMRCodeMRCodeMRGitLabCIserver集成脚本developerTester jira l系统监控 jira l系统监控 AutoQEAutoQEJira工作流Moray工作流AutoQEAutoQEAutoQEAutoQECI卡点AutoQE卡点值检查AutoQE门禁CI卡点AutoQE卡点值检查AutoQE门禁•众安CICD交付流水线架构设计•流水线之AutoQE的理念•AutoQE的落地实践2、流水线部署方案1、流水线平台工程方案设计4、流水线自动化执行优化3、流水线环境配置管理5、流水线自动化用例管理1.开发环境2.AutoQE环境：使用develop分支，CI自动部署，并执行自动化测试用例3.SIT环境：使用release分支部署，部署后打sittag4.UAT环境：基于sittag部署，部署后打uattag：基于uattag部署，上线后打生CutyyyymmddTagAutoQE门禁AutoQE门禁AutoQE门禁 ;;持续集成流水线平台工程2.0-简版CutyyyymmddTagAutoQE门禁AutoQE门禁 TEST TESTdeveloper持续集成流水线平台工程2.0-完整版AutoQE门禁AutoQE门禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST developAutoQE门禁AutoQE门禁 SIT/UATfeature TEST SIT/UATfeature跨迭代feature TEST develop TEST TEST 1、缓存集中部署，减少发布单量级2、缓存区所有部署完毕后开始执行自动化，避免环境依赖干扰地铁：准点发车地铁：准点发车1、实时触发部署AutoQE2、K8s健康检查、优雅终止来实现应用无感切换跑车：上车即走跑车：上车即走时间窗耗时=CI单测扫描+autoqe自动化+流程等待耗时优雅发布耗时=CI单测扫描+autoqe自动化各业务线值班跟进各业务线值班跟进详细记录问题原因解决方案划分四个阶段的值•A1全量覆盖率：40%->45%->50%->60%•A2全量覆盖率：20%->25%->30%->40%SQL即代码迭代版本：文件夹命名区分环境部署：文件夹命名区分执行管理SQL即代码迭代版本：文件夹命名区分环境部署：文件夹命名区分执行管理：已部署过后台打标配置即代码迭代版本：文件夹命名区分环境部署：文件名后缀区分执行管理：已部署过后台打标rApollowebApollowebAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankAdminservice ConfigservicebankservicesAdminservice ConfigserviceAdminservice ConfigservicebankservicesAdminservice ConfigservicebankservicesAdminservice Configservicebankservices bankservices AdminAdminservice ConfigConfigservicebankservicesbankservicesCutyyyymmddTag AutoApollo配置中心AutoApollo配置中心标准化用例生成版本用例管理合入主干…版本合入主干…基准用例库接口变更感知新特性用例编写MR主干集成测试&Auto新特性用例编写MR主干集成测试&AutoQE使用JiraA创建分支集成测试&AutoQE使用!自动化生成与手工编写结合!自动化生成与手工编写结合数据驱动数据驱动JiraJiraB新特性用例集成测试&创建分支编写AutoQE使用争200500分0单系统自动化案例优化效果（1400cases）。优化前c插件优化。启用并行风控优化did优•众安CICD交付流水线架构设计•AutoQE的落地最佳实践部署成功通知部署失败通知自动化门禁通过自动化门禁未通过1、联调配置误提交2、消息堆积导致性能瓶颈3、持续执行导致OOMAutoQE测试自动化覆盖率面板应用持续构建面板单测静态扫描跟踪面板应用构建详情面板•众安CICD交付流水线架构设计•流水线之AutoQE的治理理念•AutoQE的落地实践•成效与展望CICD质量门禁3.213.215.155.157.104.245.304.24AveragetimeforAutoqeCaseExecution2502001、需求吞吐量稳定上升2、生产问题数持续下降3、系统可用性2502001、需求吞吐量稳定上升2、生产问题数持续下降3、系统可用性4个9500220/5035265202020212022