Erlang零成本实现云计算

Erlang零成本实现云计算

余锋（褚霸）淘宝网技术专家

中国软件技术大会北京2010

议题1.Erlang天生适合云计算

2.Erlang并行计算的效率

3.Erlang云计算基础构件

4.Erlang集群管理和维护

5.讨论Erlang是什么?通用的语言和运行环境内置并发,集群,容错机制电信和互联网行业大规模部署应用

经过时间验证的成熟商业系统Erlang的历史很老的FP语言,始于80年代末爱立信投资10亿美金主导开发EPL版权方式开源需要记住的几个年份1987

ThefirstexperimentswithErlang.

1993

DistributionisaddedtoErlang.2006

SMPsupportisaddedtoErlang.云计算定义云计算就是应用公共网络设施对逻辑的组建，像水和电一样融入大家的生活，为用户提供海量一站式的服务.-腾讯首席执行官马化腾

Cloud="CPU+Storage+Queues+Management"

-TheAmazonWebServicessaysessentiallyErlang的进程,天上的云"Erlangwasbuiltfromthegroundupforconcurrency.

Notjustinasinglemachine,butinclustersofmachines.

Lotsofmachines.

Lostofmachinesrunningmanyprocesses.

Soundslikeacloud,right?"-ColinClark语言和虚拟机天生可伸缩

函数式语言，方便排错轻量级进程异步消息机制软实时代码热升级最COOL的语言特性:内置集群和分布的基础设施和库进程分布和名称同步管理进程和节点容错管理rpcgen_servermnesia数据库

稳定性In1998,theEricssonAXD301switchwasannounced,containingoveramillionlinesofErlang,andreportedtoachieveareliabilityofnine"9"s.

-JoeArmstrongErlang零成本云计算适用的领域

互联网应用服务器消息推送系统

网关代理服务器软实时的服务集群管理

Erlang社社区快速速壮大,见证证云计算算的增长长小结Erlang天天生适合合特定领领域的云云计算议题1.Erlang天天生适合合云计算算2.Erlang并并行计算算的效率率3.Erlang云云计算基基础构件件4.Erlang集集群管理理和维护护5.讨讨论Erlang语语言运行行和开发发效率纯Erlang的运行行效率大大概是C的1/5，编编码效效率是C的7倍倍，在脚脚本语言言中属于于中等水水平.但但是云计计算不仅仅仅是纯纯计算,任务调调度和集集群管理理是Erlang的强强项,从从而拉升升系统的的整体表表现.第三方独独立评测测网站The

Computer

LanguageBenchmarksGame摩托罗拉拉C/Erlang开开发效率率比较Erlang对对SMP的支持持从2006年发布的的R11B开始始.SMP开开发人员员的信条条:"SMPshouldbetransparenttoprogramersinmuchthewayaserlangdistribution."-UlfWiger,EricssonABErlang进进程调度度及策略略调度器看看起来很很像操作系统统，实际上上Erlang的第一一个进程程名字叫叫做otp_ringFullloadornot多个运行行队列，，动态迁迁移进程程Erlang调调度器的的伸缩性性小消息，，大计算算原则架构设计计方面的的考虑不共享没有显式式的同步步并发导向向的编程程进程是低低廉的,和现实实世界对对象1:1模型型所有无依依赖的任任务,都都抽象为为进程并并发执行行终止的进进程,一一切都是是垃圾,资源集集中回收收简洁为王王Erlang技技术发展展路线图图虚拟机的的运行期期持续改改进计划划涵盖了了对众核和NUMA体系结构构的支持持，保证证了它在在未来新新的硬件件体系结结构下能能持续获获得更好好的性能能。小结Erlang并并行计算算效率高高议题1.Erlang天天生适合合云计算算2.Erlang并并行计算算的效率率3.Erlang云云计算基基础构件件4.Erlang集集群管理理和维护护5.小小结从Vmware收购谈谈起...Vmware计算虚拟拟化Redis存储RabbitMQ消息交换换系统我们可以以清楚的的看到云云计算的的三个基基础设施施!存储系统统(noSQL)CouchDBRiakMembase消息交换换系统RabbitMQEjabberdWEB服服务器MochiwebErlywebMap/Reduce系统Disco小结Erlang基基础设施施齐全,开发成本本低议题1.Erlang天天生适合合云计算算2.Erlang并并行计算算的效率率3.Erlang云云计算基基础构件件4.Erlang集集群管理理和维护护5.讨讨论集群特点点及规模模集群全连连通或者者分区连连通访问授权权:nothingorall策略略节点规规模可可强力力伸缩缩节点热热插拔拔规模可可达上上千台台典型系系统的的集群群进程程组织织图异构性性不同的的平台台Windows（smp支持持的有有待改改进））*nix不同的的体系系结构构无需关关心endianess问题题工业级级协议议的支支持（（asn.1,snmp等等）强大的的交互互性,与与其他他遗留留系统统整合合NIFC节点点（ei)Java(jinterface)CobraTCP/HTTP内置RPC部署Standalone发发布，，无需需单独独安装装Erlang运行行期不停机机维护护在线升升级，，系统统同时时运行行新旧旧代码码发现问问题在在线降降级工具化化,一一切切自动动化代码安安全代码可可远程程从网网络加加载,Diskless减减少维维护的的成本本代码可可加密密,强强加加密防防止反反编译译远程维维护强大的的内置置shellssh/sftp可集中中管理理的日日志系系统监控功功能OSmonSNMPHTTP小结Erlang集集群管管理成成本低低议题1.Erlang天生生适合合云计计算2.Erlang并行行计算算的效效率3.Erlang云计计算基基础构构件4.Erlang集群群管理理和维维护5.讨讨论论典型成成功案案例国内：：校内网网腾讯华为游戏公公司(如如4399)...国外：