全面解读pythonweb程序的9种部署方式.docx

全面解读python web 程序的9种部署方式发布时间：2013-03-26 23:04:58， 关注：+5073， 赞美：+1， 不爽：+12本文标签：fastcgigunicornuwsgiscgimod_python原始出处：鲁塔弗的博客python有很多web 开发框架，代码写完了，部署上线是个大事，通常来说，web应用一般是三层结构web server -application - DB server 主流的web server 一个巴掌就能数出来，apache，lighttpd，nginx，iis application,中文名叫做应用服务，就是你基于某个web framework写的应用代码 DB server 泛指存储服务，web开发中用mysql比较多，最近几年因为网站规模扩大，memcache，redis这种key-value等存储也流行开来放在最前面的web server有3个功能1. 高效率处理静态文件,web server都是用c开发，调用是native的函数，对IO，文件传输都做针对性的优化2. 充当一个简易的网络防火墙，可以denny一些ip，简单的控制并发连接数量等等，聊胜于无3. 处理高并发短连接请求，把成千上万用户的request 通过内网的几十个长连接进行转发，原因一个是web server处理高并发很专业，另外一个原因是大部分的application所用的框架都不具备处理高并发的能力实际上，市面上有部分web framework由于内置了支持epoll/kqueue 等高效网络库，而具备了处理高并发的能力，比如说 python的tornado，java系的tomcat,jetty等等，有人就去掉前端的web server，直接裸奔，但是在部署公网应用时候，最好别这样做，因为前面提到的1,2两个原因，用户brower到web server的网络状况是千奇百怪，你无法想象的，web server 强烈建议使用nginx，原因有三1. 性能非常卓越，非常稳定2. 安装简单，依赖包少3. conf文件非常容易配置，比apache/lighttpd都要简单部署python开发的web程序有9种方法 mod_python,这是apache内置的模块，很严重的依赖于mod_python编译使用的python版本，和apache配套使用，不推荐 cgi，这个太old，不推荐，而且nginx不支持cgi方式，只能用lighttpd或者apache fastcgi，这个是目前流行最广的做法，通过flup模块来支持的，在nginx里对应的配置指令是 fastcgi_pass spawn-fcgi，这个是fastcgi多进程管理程序，lighttpd安装包附带的，和flup效果一样，区别是flup是 python代码级引入，spawn-fcgi是外部程序。spawn-fcgi用途很广，可以支持任意语言开发的代码，php,python,perl,只要你代码实现了fastcgi接口，它都可以帮你管理你的进程 scgi,全名是Simple Common Gateway Interface，也是cgi的替代版本，scgi协议很简单,我觉得和fastcgi差不多，只是没有怎么推广开来，nginx对应的配置指令是scgi_pass，你想用就用，flup也支持。 http，nginx使用proxy_pass转发,这个要求后端appplication必须内置一个能处理高并发的http server，在python的web框架当中，只能选择tornado.python程序员喜欢发明轮子，tornado除了是一个web framework之外，它还可以单独提供高性能http server，所以，如果你采用其他python框架写代码，比如说bottle，也一样可以通过import tornado来启动一个高性能的http server，同样的可以采用http协议和nginx一起来部署。扩展开来，python包里面能处理高并发的http server还有很多，比如说gevent，也可以被其他框架引用来支持http方式部署。现实当中，用java来做web程序，通常就用http和nginx配合，应用服务器选择tomcat或者jetty uwsgi,包括4部分组成，uwsgi协议web server内置支持协议模块application服务器协议支持模块进程控制程序Gunicorn,和uwsgi类似的工具，从rails的部署工具(Unicorn)移植过来的。但是它使用的协议是 WSGI，全称是Python Web Server Gateway Interface ，这是python2.5时定义的官方标准(PEP 333)，根红苗正，而且部署比较简单，/上有详细教程 mod_wsgi,apache的一个module，也是支持WSGI协议,/p/modwsgi/fastcgi协议和http协议在代码部署中的的优劣对比 fastcgi虽然是二进制协议，相对于http协议，并不节省资源。二进制协议，只能节省数字的表达，比如 1234567，用字符串表示需要7个Byte，用数字就是4个Byte，而字符串到哪里都一样 fastcgi在传输数据的时候，为了兼容cgi协议，还要带上一堆cgi的环境变量，所以和http协议相比，用fastcgi传输数据并不省，反而多一些 fastcgi 唯一的优点是，它是长连接的，用户并发1000个request，fastcgi可能就用10个 链接转发给后端的appplication，如果用http协议，那来多少给多少，会向后端appplication 发起1000个请求 http代理转发方式，在面对超高并发的情况下会出问题，因为，tcp协议栈当中，port是int16整型你本地新建一个connect，需要消耗一个端口，最多能到65536。外部并发几十万个请求，port池耗干，你的服务器只能拒绝响应了总结我个人习惯是用 fastcgi 协议部署python程序，简单省事，选择技术方案，一定要选择最简单最常见的，本博客的fastcgi运行脚本如下kill -9 cat /tmp/django.pidecho restart django.python ./manage.py runfcgi -settings=lutaf.settings_r maxchildren=8 maxspar