京东数据中心网络服务如何支撑618大流量

1、Welcome京东数据中心网络服务如何支撑618大流量研发中心 - 运维部Welcome- 3 -我们面对的是怎样一个618？- 4 -正处于IPO的蜜月期！- 5 -业务对接和应用调试！- 6 -2013.11.122012201320142014年618互联网流量将翻倍！- 7 -山大！但我们绝不能掉链子！- 8 -承认差距，超越自我- 9 -2014年618网络概况数据中心规模主机规模POD内主机规模互联网出口流量专线流量内部调用流量- 10 -我们面对的不仅仅是互联网流量翻倍！CDN负载均衡基础网络 京东从2009年开始自建CDN服务 承担90%互联网流量 需要解决一些性能和结构上的问

2、题2013年双11时，京东主要负载均衡业务使用的是2013年双11时，数据中心TOR上联带宽拥塞的问题愈发突显大量的跨机房服务调用和数据传输需求，对POD间、DC间的专线带宽和可靠性要求越来越高机架不足随着业务发展，商业负载均衡出一些突出问题：负载过高、宕机增加、不易扩容- 11 -问题性能容量可靠性扩展性- 12 -CDN应对大流量措施单机性能提高1倍性能容量可靠性扩展性分钟级的流量和质量- 13 -架构优化，从Active-Standby到Multi-Active全面向一级ISP迁移秒级清除缓存将50%节点互联网出口从GE升级为10GE基于热点的URL负载新增20%CDN节点服务器升级10

3、G网卡集群容量提升6倍负载均衡应对大流量措施单机性能提高1倍性能容量可靠性扩展性增加内核模块，实现对VIP流量（Bps/pps/qps）的实时统计- 14 -HTTP-Flood架构优化，从Active-Standby到Multi-Active将故障率降低10倍应用了30多个Patch接管了商业LB的90%业务部署了10倍规模的集群解决HA-Proxy多CPU负载不均问题集群容量提升10倍服务器升级10G网卡基础网络应对大流量措施消除已知性能隐患性能容量可靠性扩展性全网的分钟级流量、质量- 15 -模块化、标准化、规范化的网络设计为关键业务提供靠网络方案降低故障downtime提高网络容错能力

4、数据中心规模扩大1倍增加机房间专线带宽选型和设计优化增加数据中心出口带宽解决设计上的缺陷提升TOR上联收敛比案例- 16 -Multi-Active Load BalngNetworkNetworkAAAALoad Balance ClusterLoad Balance Cluster- 17 -ASHTTP-FloodInternetData Analyzerhttp apihttp samplingLoad Balancerpolicy depolymentControllerpolicy dbWeb Servers- 18 -网络优化网络功能结构层次化使用冗余可靠的设计InternetDC-1DC-2关键资源要一步到位降低不必要性能开销PoDPoD能用三层就不用二层DC-N最大程度降低STP影响规模会已有设计- 19 -网络- 20 -优先解决用户的迫切需求平衡短期需求和长期目标架构设计不能向问题妥协- 21 -市朝阳区北辰西路8号北辰世纪中心A座16层16F Building A, No