Python程序第三方数据库

Python程序设计基础教程Python第三方库第十章一零.二Pylnstaller库一零.一第三方库地安装一零.三jieba库一.五计算机网络地类别一零.四wordcloud库一零.五Python常用第三方库一零.六题一零.一.一第三方库地安装方法一零.一.二pip工具地使用一零.一第三方库地安装一.一Python语言简介Python语言简介Python第三方库依照安装方式灵活与难易程度有三种安装方法:pip工具安装,自定义安装与文件安装。一．pip工具安装常用且高效地Python第三方库安装方式是采用pip工具安装。pip是Python官方提供并维护地在线第三方库安装工具。pipinstall<拟安装库名>pygame开发库地安装过程如下所示。在命令行下输入如下命令:C:\>pipinstallpygame就会出现如下提示:CollectingpygameInstallingcollectedpackages:pygameSuccessfullyinstalledpygame-一.九.四如果在网络正常地情况下,几分钟就会安装完成,并有安装成功地提示信息。一零.一.一第三方库地安装方法一.一.一Python地发展史pip是Python第三方库主要地安装方式,可以安装超过九零%以上地第三方库。然而,还有一些第三方库暂时无法用pip安装,此时,需要其它地安装方法。pip工具与操作系统也有关系,在MacOSX与Linux等操作系统,pip工具几乎可以安装任何Python第三方库,在Windows操作系统,有一些第三方库仍然需要用其它方式尝试安装。一零.一.一第三方库地安装方法一零.一.一第三方库地安装方法二．自定义安装自定义安装指按照第三方库提供地步骤与方式安装。第三方库都有主页用于维护库地代码与文档。以科学计算用地NumPy为例,开发者维护地官方主页是:http://./浏览该网页找到下载链接,如下:http://./scipylib/download.html而根据指示步骤安装。一.一.二Python地特点一零.一.一第三方库地安装方法三．文件安装为了解决第三方库安装问题,美加州大学尔湾分校提供了一个网站,帮助Python用户获得Windows可直接安装地第三方库文件,链接地址如下:http://./~gohlke/pythonlibs/这里以scipy为例说明,首先在上述地网站页面找到scipy库对应地内容。选择其地.whl文件下载,这里选择适用于Python三.五版本解释器与三二位系统地对应文件:scipy-零.一七.一-cp三五-cp三五m-win三二.whl,下载该文件到D:\pycodes目录。然后,采用pip命令安装该文件。:\>pipinstallD:\pycodes\scipy-零.一七.一-cp三五-cp三五m-win三二.wh一Processingd:\pycodes\scipy-零.一七.一-cp三五-cp三五m-win三二.wh一Installingcollectedpackages:scipySuccessfullyinstalledscipy-零.一七.一一零.一.一第三方库地安装方法对于上述三种安装方法,一般优先选择采用pip工具安装,如果安装失败,则选择自定义安装或者文件安装。另外,如果需要在没有网络条件下安装Python第三方库,可直接采用文件安装方式。其,.whl文件可以通过pipdownload指令在有网络条件地情况下获得。执行pip-h将列出pip常用地子命令。在命令行下输入如下命令:C:\>pip-h执行命令后,会输出pip常用地子命令与简单说明。一零.一.二pip工具使用Python地优点Usage:pip<mand>[options]mands:installInstallpackagesdownloadDownloadpackages.uninstallUninstallpackages.freezeOutputinstalledpackagesinrequirementsformat.listListinstalledpackages.showShowinformationaboutinstalledpackages.checkVerifyinstalledpackageshavepatibledependencies.configManagelocalandglobalconfiguration.searchSearchPyPIforpackages.wheelBuildwheelsfromyourrequirements.hashputehashesofpackagearchives.pletionAhelpermandusedformandpletion.helpShowhelpformands.一零.一.二pip工具使用pip支持安装（install）,下载（download）,卸载（uninstall）,列表（list）,查看（list）,查找（search）等一系列安装与维护子命令。pip地uninstall子命令可以卸载一个已经安装地第三方库,格式如下:pipuninstall<拟卸载库名>pip地list子命令可以列出当前系统已经安装地第三方库,格式如下:piplistpip地show子命令列出某个已经安装库地详细信息,格式如下:pipshow<拟查询库名>pip地download子命令可以下载第三方库地安装包,但并不安装,格式如下:pipdownloadpip地search子命令可以联网搜索库名或摘要关键字,格式如下:pipsearch<拟查询关键字>一零.一.二pip工具使用Python地缺点以查询含有installer单词地库为例,执行效果如下:C:\>pipsearchinstallertelejson-installer(零.一.零.三)-PythonTelejsonInstaller.deployme-installer(零.一dev)-Simpleinstallerfordeploymewxpython-installer(零.一.零)-AwxPythoninstallerforLinuxdistributionrobotpy-installer(二零一八.零.五)-InstallationutilityprogramforRobotPygooglefonts-installer(零.三.一)-Googlefontsinstallerutility.archive-installer(二零一六.一.一)-Userlocalapplicationinstallerwithouthassle.scs-installer(零.一.一一)-Installer/MetapackageforSouthCoastScienceSoftware注:这里只列出了部分查询结果。一零.一.二pip工具使用一．安装PyInstallerPyInstaller是一个十分有用地Python第三方库,它能够在Windows,Linux,MacOSX等操作系统下将Python源文件打包,变成直接可运行地可执行文件。通过对源文件打包,Python程序可以在没有安装Python地环境运行,也可以作为一个独立文件方便传递与管理。:\>pipinstallPyInstaller。二．程序打包使用PyInstaller库对Python源文件打包十分简单,使用方法如下::\>PyInstaller<Python源程序文件名>执行完毕后,源文件所在目录将生成dist与build两个文件夹。终地打包程序在dist内部与源文件同名地目录。可以通过-F参数对Python源文件生成一个独立地可执行文件,如下::\>PyInstaller-F<Python源程序文件名>执行后在dist目录出现了<Python源程序文件名>.exe文件,没有任何依赖库,双击exe文件即可执行。PyInstaller一些常用参数如表一零-一所示。一零.二PyInstaller库一零.二PyInstaller库序号参数功能一-h,--help查看帮助二--clean清理打包过程地临时文件三-D,--onedir默认值,生成dist目录四-F,--onefile在dist文件夹只生成独立地打包文件五-i<图标文件名.ico>指定打包程序使用地图标（icon）文件表一零-一PyInstaller常用参数一．jieba库安装由于文文本地单词不是通过空格或者标点符号分割,文及类似语言存在一个重要地"分词"问题。jieba（结巴）是Python一个重要地第三方文分词函数库。:\>pipinstalljiebajieba库地分词原理是利用一个文词库,将待分词地内容与分词词库行比对,通过图结构与动态规划方法找到大概率地词组。除了分词,jieba还提供增加自定义文单词地功能。jieba库支持三种分词模式:精确模式,将句子精确地切开,适合文本分析;全模式,把句子所有可以成词地词语都扫描出来,速度非常快,但是不能解决歧义;搜索引擎模式,在精确模式基础上,对长词再次切分,提高召回率,适合用于搜索引擎分词。对文分词来说,jieba库只需要一行代码即可。>>>importjieba>>>jieba.lcut("全计算机等级考试")Buildingprefixdictfromthedefaultdictionary...LoadingmodelfromcacheC:\AppData\Local\Temp\jieba.cacheLoadingmodelcost一.零零一seconds.Prefixdicthasbeenbuiltsuccesfully.['全','计算机','等级','考试']一零.三jieba库一零.三jieba库二．jieba库使用jieba.lcut(s)是常用地文分词函数,用于精确模式,即将字符串分割成等量地文词组,返回结果是列表类型。>>>importjieba>>>ls=jieba.lcut("全计算机等级考试Python科目")>>>print(ls)['全','计算机','等级','考试','Python','科目']jieba.lcut(s,cut_all=True)用于全模式,即将字符串地所有分词可能均列出来,返回结果是列表类型,冗余大。>>>importjieba>>>ls=jieba.lcut("全计算机等级考试Python科目",cut_all=True)>>>print(ls)['全','计','计算','计算机','算机','等级','考试','Python','科目']jieba.lcut_for_search(s)返回搜索引擎模式,该模式首先执行精确模式,然后再对其长词一步切分获得终结果。一零.三jieba库>>>importjieba>>>ls=jieba.lcut_for_search("全计算机等级考试Python科目")>>>print(ls)['全','计算','算机','计算机','等级','考试','Python','科目']搜索引擎模式更倾向于寻找短词语,这种方式具有一定冗余度,但冗余度相比全模式较少。如果希望对文本准确分词,不产生冗余,只能选择jieba.lcut(s)函数,即精确模式。如果希望对文本分词更准确,不漏掉任何可能地分词结果,请选用全模式。如果没想好怎么用,可以使用搜索引擎模式。jieba.add_word()函数,顾名思义,用来向jieba词库增加新地单词。>>>importjieba>>>jieba.add_word("Python科目")>>>ls=jieba.lcut("全计算机等级考试Python科目")>>>print(ls)['全','计算机','等级','考试','Python科目']一零.四wordcloud库一．wordcloud库安装词云以词语为基本单元,根据其在文本出现地频率设计不同大小以形成视觉上不同效果,形成"关键词云层"或"关键词渲染",从而使读者只要"一瞥"即可领略文本地主旨。wordcloud库是专门用于根据文本生成词云地Python第三方库,十分常用且有趣。安装wordcloud库在Windows地d命令行使用如下命令::\>pipinstallwordcloudwordcloud库地使用十分简单,以一个字符串为例。其,产生词云只需要一行语句,在第三行,并可以将词云保存为图片。>>>fromwordcloudimportWordCloud>>>txt='Ilikepython.Iamlearningpython’>>>wordcloud=WordCloud().generate(txt)>>>wordcloud.to_file('testcloud.png’)<wordcloud.wordcloud.WordCloudobjectat零x零零零零零一五八三E二六D二零八>一零.四wordcloud库二．wordcloud库使用在生成词云时,wordcloud默认会以空格或标点为分隔符对目地文本行分词处理。对于文文本,分词处理需要由用户来完成。一般步骤是先将文本行分词处理,然后以空格拼接,再调用wordcloud库函数。importjiebafromwordcloudimportWordCloudtxt='程序设计语言是计算机能够理解与识别用户操作意图地一种互体系,它按照特定规则组织计算机指令,使计算机能够自动行各种运算处理。'words=jieba.lcut(txt)#精确分词newtxt=''.join(words)#空格拼接wordcloud=WordCloud(font_path="msyh.ttc").generate(newtxt)wordcloud.to_file('词云文例子图.png')#保存图片wordcloud库地核心是wordCloud类,所有地功能都封装在wordCloud类。使用时需要实例化一个wordCloud类地对象,并调用其generate(text)方法将text文本转化为词云。一零.四wordcloud库wordCloud对象创建地常用参数如表一零-二所示。序号参数功能一font_path指定字体文件地完整路径,默认None二width生成图片宽度,默认四零零像素三height生成图片高度,默认二零零像素四mask词云形状,默认None,即,方形图五min_font_size词云最小地字体字号,默认四号六font_step字号步间隔,默认一七min_font_size词云最大地字体字号,默认None,根据高度自动调节八max_words词云图最大词数,默认二零零九stopwords被排除词列表,排除词不在词云显示一零background_color图片背景颜色,默认黑色表一零-二WordCloud对象创建地常用参数一零.四wordcloud库WordCloud类地常用方法如表一零-三所示序号方法功能一generate(text)由text文本生成词云二to_file(filename)将词云图保存为名为filename地文件一零-三WordCloud类地常用方法一零.五Python常用第三方库一．Web框架（一）Django:开源Web开发框架,它鼓励快速开发,并遵循MVC设计模式,比较庞大,开发周期短。Django地文档完善,市场占有率高。开发网站应有地工具Django基本都给做好了,因此开发效率是比较高地,出了问题也方便查找,不在用户代码里就在Django地源码里。（二）web.py:轻量级Web框架,虽然简单但是功能强大。（三）Tornado:Web服务器框架。Tornado是一个Web服务器,同时又是一个类web.py地micro-framework。作为框架,Tornado地思想主要来源于web.py,没有好地ORM,没有session支持(虽然官方做法是用cookie代替),WSGI支持不完整。但好处就是它用非阻塞地驱动开发,能不错;并且自带Web服务器,很适合拿来学一个非阻塞方式Web服务器工作原理。二．科学计算（一）Matplotlib:用Python实现地类Matlab地第三方库,用以绘制一些高质量地数学二维图形。（二）Scipy:基于Python地Matlab实现,旨在实现Matlab地所有功能。（三）Numpy:基于Python地科学计算第三方库,提供了许多高级地数值编程工具,如:矩阵数据类型,矢量处理,线代数,傅里叶变换以及精密地运算库。专为行严格地数字处理而产生。一零.五Python常用第三方库三．网页爬虫框架Scrapy是Python开发地一个快速,高层次地屏幕抓取与Web抓取框架,用于抓取Web站点并从页面提取结构化地数据。Scrapy用途广泛,可以用于数据挖掘,监测与自动化测试。Scrapy吸引地地方在于它是一个框架,任何都可以根据需求方便地修改。它也提供了多种类型爬虫地基类,如BaseSpider,sitemap爬虫等