第5章51文本与文本处理

第5章数字媒体及应用5.1

文本与文本处理5.2

图像与图形及应用5.3

数字声音及应用5.4数字视频及应用5.1文本与文本处理

5.1.1文本的输入5.1.2文本的表示与字符的编码5.1.3文本文件的类型5.1.4文本的编辑处理与检索文字处理是计算机应用的基础计算机应用＝使用计算机进行信息处理其中，文字信息的处理是各种计算机应用的基础文字数值语言音乐图像···信息的形态有多种传统的文字处理过程写作编辑排版印刷发行计算机文字处理过程文字信息在计算机中称为“文本”（text），文本是计算机中最常用的一种数字媒体文本由一系列“字符”（character）组成，每个字符均使用二进制编码表示文本在计算机中的处理过程是：（文本编辑器）文本编辑与排版格式化的电子文本（2）文本存储与传输（4）文本展现（文本阅读器）（5）文本处理（文本处理软件）（3）文本准备电子文本（1）（文字与图表的输入）5.1.1.

文本的输入文本的输入文本的输入文本输入是将文字输入到计算机中，建立文本文件(电子文档)的操作。文字输入方法概述人工输入。方法：键盘输入、手写笔联机识别输入、语音识别输入；特点：速度慢、成本高，不适合需处理大批量文字的应用。文字自动识别输入。将纸介质上的文本通过识别技术自动转换为文字的编码。方法：印刷体文字识别输入，手写体文字脱机识别输入；特点：速度快，效率高，有误差。汉字的键盘输入

汉字与键盘上的键无法一一对应，因此必须使用几个键来表示一个汉字，这就称为汉字的“键盘输入编码”优秀的汉字键盘输入编码应具有的特点：易学习、易记忆效率高(平均击键次数较少)重码少容量大(可输入的汉字字数多)汉字键盘输入方法的比较类型原理举例优点缺点数字编码使用一串数字来表示汉字电报码区位码仅使用10个数字键难记忆字音编码把汉语的拼音作为汉字的输入编码智能ABC紫光微软拼音输入简单易学，适合于非专业人员重码多，需增加选择操作，不会汉语拼音或不知道读音时无法使用字形编码把汉字的部件或笔画作为码元，按照汉字结构及其切分规则作为编码依据，确定每个汉字的输入代码五笔字形表形码郑码重码少、输入速度较快，适合于专业录入员、打字员使用缺乏统一的规范，编码规则不易掌握音形编码(或形音编码)采用字音及字形两种属性作为码元的汉字编码输入方法粤音输入法同上同时要掌握音、形两种取码方法或规则，对普通用户比较困难文字符号输入计算机的方法键盘输入自动识别输入字符信息的输入人工输入(1)数字编码,如电报码、区位码等,(2)字音编码,如智能ABC等(3)字形编码，如五笔字形和表形码等,(4)形音编码发展趋势：基于统计和学习功能的以词语(短语)或句子作为输入单位的输入方法文字符号输入计算机的方法键盘输入联机手写输入自动识别输入字符信息的输入人工输入优点：自然，流畅小型化，适合移动计算不足：识别速度和正确性还需提高书写要求还要降低文字符号输入计算机的方法键盘输入联机手写输入语音输入自动识别输入字符信息的输入人工输入优点：自然，方便，适合移动计算不足：对说话人、说话方式、说话内容的适应能力要大大增强识别速度和正确性还需大大提高文字符号输入计算机的方法印刷体识别键盘输入联机手写输入语音输入自动识别输入字符信息的输入人工输入扫描仪OCR数字文本纸介质文本文本的映象(image)识别率已达到98%功能:简、繁体字混合识别中文、西文混合识别文字、表格混合识别智能校对功能文字符号输入计算机的方法印刷体识别手写体识别键盘输入联机手写输入语音输入自动识别输入字符信息的输入人工输入

技术上非常困难，还无法实用目前准备先突破工整的楷书手写体的识别!5.1.2文本的表示与字符的编码文本表示文本是计算机表示文字及符号信息的最常用也是最基本的一种数字媒体。由于文字和符号采用了二进制编码表示，因而可以方便地进行编辑、排版和各种分析处理(如统计、排序、分类、索引、检索等)。字符、字符集及其码表文字的基本元素是字母和符号，统称为“字符”(character)，它包括：字母、数字、符号等字符集：一组特定字符的集合不同的字符集包含的字符数目与内容不同，如：中文字符集、西文字符集、日文字符集等字符的编码：字符集中每个字符都使用二进位(code)表示，称为该字符的编码不同的字符其编码各不相同字符集中所有字符的编码的一览表，称为该字符集的码表西文字符的编码——ASCII码西文是表音文字(拼音文字)，它由拉丁字母、数字、标点符号以及一些特殊符号所组成美国标准信息交换码(AmericanStandardCodeforInformationInterchange,简称ASCII码)：ASCII字符集包含96个可打印字符和32个控制字符采用7个二进位进行编码计算机中使用1个字节存储1个ASCII字符存在问题：7位代码空间太小（解决方案：8位的扩充ASCII码）不同国家和地区使用不同的字符集及其编码，互不兼容东亚地区使用的大字符集无法编码标准ASCII字符集及其码表b6b5b4b3b2b1b0

012345670123456789ABCDEFb6b5b4b3b2b1b001101001101011汉字如何编码？汉字是记录汉语（国语，华语）的文字，属于表意文字，它用符号直接表达词或词素汉字的特点数量大；多个国家和地区使用；字形复杂，同音字多，异体字多如何编码？确定收入多少字、哪些字？汉字在字符集中的排序方式确定使用的代码结构和代码空间常用的汉字编码字符集国家标准GB2312汉字扩充规范GBK国家标准GB18030台湾地区的标准汉字字符集CNS11643(BIG5，俗称“大五码”)日本工业标准汉字字符集JISX0208-90韩国国家标准汉字字符集KSC5601-87一级汉字（3755个）二级汉字（3008个）（扩充使用）字母、数字和各种符号 ………………19423位号…………191655568794区号(按汉语拼音排列)(按偏旁部首排列)GB2312汉字编码字符集1980年颁布《信息交换用汉字编码字符集·基本集》——GB2312-1980GB2312字符集由三个部分构成：拉丁字母、俄文、日文平假名与片假名、希腊字母、汉语拼音等共682个共6763个汉字和682个符号，每个汉字或符号都有一个确定位置，该位置的区号和位号就是这个汉字的“区位码”GB2312汉字的编码每一个GB2312汉字使用16位(2个字节)表示每个字节的最高位均为“1”在16位代码空间中的码位分布：第1字节第2字节00 7EA1 FE0081A1FEGB2312图形符号汉字代码空间（6763个汉字）B0F716位的代码空间共有216＝65536个码位GB2312汉字编码的不足之处GB2312-80汉字字数太少，无法满足一些特殊应用的需要：人名、地名；古籍整理、古典文献研究。没有繁体字(1990年制定了繁体字的编码标准GB12345-90《信息交换用汉字编码字符集第一辅助集》)编码效率不高:(6763+682)/65536与ASCII码不兼容区位码、国标码、机内码汉字编码概念三者关系举例区位码GB2312国标字符集构成一个二维平面，它分成94行、94列，行号称为区号，列号称为位号。

(1)区位码先转换成十六进制书表示；(2)国标码=区位码的十六进制表示+2020H；(3)机内码=国标码+8080H=区位码+A0A0H“大”：区位码为：

2083；区号：20，位号：83；转换十六进制：1453H国标码1980年中国指定的用于不同的具有汉字处理功能的计算机系统见交换汉字信息时使用的编码GB2312-801453H+2020H=3473H；得国标码：3473H;机内码国标码因其前后字节的最高位未0，与ASCII冲突。如字符“1”，ASCII未31H，国标码为23H。汉字机内码采用将国标码每个字节高位置1作为汉字机内码。3473H+8080H=B4F3H；得机内码：B4F3H几种汉字编码的对比GB2312GBKGB18030UCS-2(Unicode)6763个汉字(简体字)21003个汉字（包括GB2312汉字在内）27000多汉字(包括GBK汉字和CJK及其扩充中的汉字)2万多汉字双字节存储和表示，每个字节的最高位均为“1”双字节存储和表示，第1个字节的最高位必为“1”部分双字节、部分4字节表示(UTF-8编码)1字节、2字节、3字节等不等长编码编码不兼容！保持向下兼容GBK00FF00FF20902汉字00FF00FF6763汉字GB231200FF00FF27484汉字GB18030例:IE浏览网页时文字编码的选择5.1.3文本的文件类型根据用途分为：简单文本、丰富格式文本和超文本三类。简单文本(纯文本)

本书由南京大学出

B1BECAE9D3C9C4CFBEA9B4F3D1A7B3F6

版社(Publishing

B0E6C9E7285075626C697368696E67

HouseofNanjin

20486F757365206F66204E616E6A696E

gUniversity)出版

6720556E697665727369747929B3F6B0E6

文本的内容文本在计算机中的表示

没有字体、字号的变化，不能插入图片、表格，也不能建立超链接，其文件后缀名是.txt

由一串用于表达正文内容的字符编码所组成，几乎不包含任何其他的格式信息和结构信息举例：简单文本(纯文本)

简单文本是由一连串的字符组成的，除了用于表达正文内容的字符(包括汉字)及“回车”、“换行”、“制表”等有限的几个打印(显示)控制字符之外，几乎不包含任何其他格式信息和结构信息。这种文本通常称为纯文本或ASCII文本，文件后缀名是TXT。简单文本的特点是：呈现为一种线性结构，以行、字为单位,顺序写作与阅读是最通用的文本文件格式，文件体积小，阅读不受限制，几乎所有的文字处理软件都能识别和处理，不能插入图片、表格等，不能建立超链接。Windows附件中的“记事本”所创建的文件就是简单文本文件。丰富格式文本本书由南京大学出版社(PublishingHouseofNanjingUniversity)出版

有字体字号等属性变化、设置了段落和页面排版格式的文本称为“丰富格式文本”丰富格式文本中，除了正文内容之外，还使用了许多“标记”来描述字符的属性和格式的设置。举例：下面标题的格式为：中文用黑体，西文用ArialBlack体，居中

使用HTML语言描述为：<palign="center"><fontface="黑体">本书由南京大学出版社</font><fontface="ArialBlack">(PublishingHouseofNanjingUniversity)</font><fontface="黑体">出版</font></p>用一对<>指出的是标记，如<fontface=“黑体”>和</font>等，用于说明排版的格式和文字属性，它们不属于正文内容正文内容丰富格式文本文件内容有字符(汉字)的编码、数字图像、数字声音、数字视频信息、标记信息(格式信息、结构信息、链接信息等)。例如，RTF文件、DOC文件、PDF文件、HTML文件。RTF格式文件：RTF是为便于不同的丰富格式文本能在不同的软件和系统中互相交换使用而提出的一种中间格式标记语言，可用Windows写字板程序创建。

DOC文件：WORD文档。PDF格式文件：PDF格式文件将文字、宇型、格式、颜色、图形、图像、超文本链接、声音和视频等信息都封装在一个文件中。HTML文件：HTML文件是由HTML命令组成的描述性文本，HTML命令可以说明文字、图形、动画、声音、表格、链接等。HTML文件的结构包括头部（Head）、主体（Body）两大部分。超文本若干文本或文本中的各个部分可按照其内容的关系互相链接起来，从而形成“超文本”ABCDEFGHa1a2b2c2f1d1c1b1e1g1h1a3“超链”实际上就是一个指针，用于指向其他文本块，也可以指向同一文本块中的其他部分

超链是有向的，起点位置称为链源，它可以是文本块中的一个标题、一句句子、一个关键词、一幅画、一个图标等文本块可以是一个网页，一个文档，一段文字，也可以是一张图片，甚至一段声音或视频

超文本超文本也称为非线性文本，文本的组织结构是网状结构，即包含链接信息的丰富格式文本。阅读时除／顺序阅读方式之外，还可以通过跳转、导航、回溯等操作，实现对文本内容更为方便的访问。超文本文件特点有：各信息块按照其内容的关系互相连接，这些文本块可以是不同的文本，也可以是同一文本中的若干不同的组成部分。每个文本块都有一些指向其他文本块或从其他文本块指向该文本块的指针(超级链接)，这些指针从文本块内部的某个位置指向另外一个文本块的起始位置，用于实现文本阅读时的快速跳转。小结：文本的分类文本类型

特点

在计算机内的表示

文件扩展名

用途简单文本没有字体、字号和版面格式的变化，文本在页面上逐行排列，也不含图片和表格由一连串与正文内容对应的字符的编码所组成，几乎不包含任何其他的格式信息和结构信息.txt网上聊天短信文字录入OCR输入丰富格式文本(线性文本)有字体、字号、颜色等变化，文本在页面上可以自由定位和布局，还可插入图片和表格除了与正文对应的字符编码之外，还使用某种“标记语言”所规定的一些标记来说明该文本的文字属性和排版格式等.doc.rtf.htm.html.pdf公文论文书稿网页丰富格式文本(超文本)除上述特征外，文本中还含有超链，使文本呈现为一种网状结构同上，但还应包含用于指出“链源”和“链宿”的标记.doc.rtf.htm.html.pdf.hlp同上，以及软件的联机文档(帮助文件)5.1.4文本的编辑处理与检索复习：使用Word的操作流程创建新文档或打开老文档文稿输入编辑排版文档存盘、打印或发送输入中西文字、符号和图表进行增、删、改操作，保证文本的正确性满足清晰、美观、便于使用等要求文本编辑的主要内容

对字、词、句、段落进行添加、删除、修改等操作。字的处理：设置字体、字号、字的排列方向、间距、颜色、效果等。段落的处理：设置行距、段间距、段缩进、对称方式等。页面布局的处理：设置页边距、每页行列数、分栏、页眉、页脚等。使用计算机对文本中的字、词、短语、句子、篇章进行识别、转换、分析、理解、压缩、加密和检索等有关的处理文本处理内容：字数统计，词频统计，简/繁体相互转换，汉字/拼音相互转换词语排序，词语错误检测，文句语法检查自动分词，词性标注，词义辨识，大陆/台湾术语转换关键词提取，文摘自动生成，文本分类文本检索（关键词检索、全文检索），文本过滤文语转换（语音合成），文种转换（机器翻译）篇章理解，自动问答，自动写作等文本压缩，文本加密，文本著作权保护什么是文本处理?常用文本处理软件

面向通信的文本处理软件计算机网络上最普及的应用是用电子邮件进行通信。大多数情况下，电子邮件正文的内容一般都是简单文本，因此电子邮件内嵌的文本编辑器功能比较简单，操作使用方便。例如，微软公司的OutlookExpress，具有文字的增、删、改以及字体、字号的设置功能，也可以设定一些简单的格式和插入一些图片。当然邮件所带的附件并不受此限制。在互联网上进行聊天所使用的文本处理软件更加简单。

面向办公的文本处理软件该类软件要求文本制作要有高效率、高质量，软件面向非专业用户，易学好用，文本处理能力，既功能丰富，又操作简单。例如，Word、WPS2000。常用文本处理软件

面向出版的文本处理软件该类软件的主要功能是将文字、图形和图像等合理地安排在页面内。例如，方正集团公司的“飞腾”排版软件、美国Adobe公司的PageMaker和PDFWriter。

面向网络信息发布和电子出版的文本处理软件例如，微软的FrontPage、Acrobat软件。关于文本检索将文本按一定的方式进行组织、储存、管理，并根据用户的要求查找到所需要的文本，称为“文本检索”文本检索系统的组成和工作流程:

文本库索引数据标引匹配结果分析、排序提问①②③④⑤⑥对每一文本生成索引索引的结构为：索引标识+相应的地址索引标识可以是文本的标题(主题)、作者、分类、关键词等

给出查询要求，如标题是什么、作者是谁、属于哪一类、所包含的关键词等提问词可以使用“与”、“或”、“非”等逻辑运算进行组合由检索软件将查询要求与索引数据进行匹配，找出与查询要求相关的文本的地址；系统按地址从文本库中取出对应的一组文本，返回给用户经过分析后，按照与查询要求的相关程度（从高到低排序）返回给用户对文本检索系统的评价效果精度:

返回结果中相关的文本占返回总数的百分比召回率:

返回结果中相关的文本占全部相关文本的百分比效率:检索速度其它:易用性等全部文本返回文本所有相关文本Web信息检索系统也称为搜索引擎,例如Google、Yahoo、AltaVista、Infoseek、新浪、天网、百度等。系统结构：预先使用软件robot遍历Web，将Web上的信息下载到本地文档库对文本内容进行自动分析并建立索引用户提出检索请求时，搜索引擎通过检查索引找出匹配的文本（或URL地址）并返回给用户Web信息检索系统全文索引适用于检索难以查找的或主题比较模糊的信息；目录检索有助于逐步缩小主题或者查找某个主题常见的、质量较高的信息5.1.5文本的输出文本的输出目的：阅读、浏览或打印文本使用的软件：文本阅读器/文本浏览器嵌入在文本编辑(处理)软件中，如微软的Word，独立的软件：如Adobe公司的AcrobatReader，微软公司的IE等

文本输出的过程：对文本的格式描述进行解释生成文字和图表的映像（bitmap）传送到显示器或打印机输出输出过程中字形的生成

过程：先根据字符的字体确定相应的字库（font），再按照该字符的代码从字库中取出该字符的形状描述信息然后按形状描述信息生成字形，并按照字号大小及有关属性（粗体、斜体、下横线）将字形作必要的变换最后将变换得到的字形放置在页面的指定位置处2种不同的字库：点阵描述轮廓描述轮廓点直线二次曲线近几年考试真题1．(2008年单选)在ASCII编码中，字母A的ASCII编码为41H，那么字母f的ASCII编码为()。

A．46H

B．66H

C．67HD．78H【分析】此题是考查学生对于ASCII编码表的掌握情况，由题目中所给的字母A的ASCII编码为41H这个已知条件，可以推导出a的ASCII编码为61H，再考虑ASCII编码表中字母的顺序是连续的，所以可以得出b的ASCII编码为62H，以此类推可得出f的ASCII编码为66H。正确答案：B。2．(2007年单选)下列汉字编码标准中，不支持繁体汉字的是()。

A．GB2312—80B．GBKC．BIG5D．GBl8030【分析】此题的重点在于考查学生对一些基本知识的记忆，作为不同的汉字编码标准，考生应该熟记每一种编码内的汉字和字符的数目，以及其中主要包括哪些字符(简体中文、繁体中文、日文、韩文等)。正确答案：A。近几年考试真题3．(2006多选题)文本编辑的目的是使文本正确、清晰、美观，下列__________操作属于文本处理而不属于文本编辑功能。

A．添加页眉页脚

B．统计文本字数

C．文本压缩

D．识别并提取文本中的关键字

【分析】文本处理操作内容有：⑴设置页面、页眉、页脚和页码；⑵字数统计、字频统计；⑶关键字提取、文摘自动生成等。文本编辑功能有：页面布局处理（页数、芬兰、页眉、页脚）正确答案：BCD

近几年考试真题4．(2006填空)在中文Windows环境下，西文使用标准ASCII码，汉字采用GB2312编码，现有一段文本的内码为:ABF4D1E378C2B755，则在这段文本中，含有的汉字和西文字符的个数分别是__________。【分析】ASCII是字节数（2位），且它的最高位是0，而汉字是字数（2个字节），且它的最高位都是1。所以为：

ABF4

D1E3

78

C2B7

55

汉字汉字西文字符汉字西文字符正确答案：3个汉字和2个西文字符近几年考试真题5．(2008单选)不同文本处理软件使用的格式控制和结构说明信息并不统一，不同的丰富格式文本互不兼容，因此一些公司联合提出了一种中间格式，称为

格式。

A．DOCB．PDFC．HTMLD．RTF【分析】RTF是为便于不同的丰富格式文本能在不同的软件和系统中互相交换使用而提出的一种中间格式标记语言，可用Windows写字板程序创建。正确答案：D6．汉字输入的编码方法有数字编码、字音编码、字形编码和形音编码等4种，在同一种汉字编码字符集中，使用不同的编码方法向计算机输入的同一个汉字，它们的内码是不同的。()【分析】汉字的机内码是指在计算机中表示一个汉字的编码。所以机内码是唯一的。正确答案：×

近几年考试真题7.(2009单选)根据ASCII码值的大小，下列表达式中，正确的是

。

A、”a”<”A”<”9”B、”A”<”a”<”9”C、”9”<”a”<”A”D、”9”<”A”<”a”【分析】ASCII表中：数字<大写字母<小写字母，正确答案：D8.(2009单选)已知“江苏”两字的区位码是“2913”和“4353”，则其机内码是

。

A、3D2D和4B55B、4535和535DC、6145和7585D、BDAD和CBD5【分析】化为两个字节存储的十六进制：

2913D=1D0DH;4353D=2B35H。机内码为：江：01DDH+A0A0H=BDADH

苏：2B35H+A0A0H=CBD5H正确答案：D近几年考试真题9、(2010单选)若内存中相邻2个字节的内容为十六进制7451，则它们不可能的是

。

A、1条指令的组成部分B、1个汉字的机内码

C、1个16位整数D、2个英文字母的ASCII码

【分析】国标码和ASCII码都一样只使用每个字节的7位，最高位都是0。汉字机内码为了跟ASCII码区别，所以每个字节的最高位均为1。正确答案：B近几年考试真题10、(2010单选)超文本（超媒体）由许多节点和超链组成。下列关于节点和超链的叙述，错误的是

。

A、把节点互相联系起来的是超链

B、超链的目的地可以是一段声音或视频

C、节点可以是文字也可以是图片

D、超链的起点只能是节点中某个句子

【分析】超链接的链源可以是节点中的一个标题、句子、关键词、字、一幅图像、一个图标等。链宿可以是节点，也可以是系统中的一个文件(包括文件的标签)或者程序。正确答案：

D11、(2010判断)在ASCⅡ码表中，数字和英文字母按照ASCⅡ码值从小到大排列的顺序为：数字、大写字母、小写字母。（）正确答案：√近几年考试真题（2013判断）同一英文字母的大小写字符的ASCII码值相差32H。（√）（2015判断）UCS／Unicode编码是我国制定的汉字编码标准。

【分析】Unicode是一种字符编码方法，它是由国际组织设计，可以容纳全世界所有语言文字的编码方案。Unicode的学名是“UniversalMultiple-OctetCodedCharacterSet”，简称为UCS。UCS可以看作是“UnicodeCharacterSet”的缩写。近几年考试真题（2015多选）下列属于汉字输入编码的有（ACD）

A．电报码B．国标码C．五笔字型D．智能ABC（2012单选）下列关于超文本的叙述，错误的是（B）。

A.超文本是一项信息管理技术，也是一种电子文献形式

B.超文本采用线性结构组织信息

C.超媒体也可认为是一种超文本

D.超文本属于丰富格式文体近几年考试真题12.(2011多选题)下列文件类型中，属于丰富格式文本的文件类型有________。

A.DOC文件B.HTM文件C.PDF文件 D.TXT文件

【分析】RTF文件、DOC文件、PDF文件、HTML文件都属于丰富格式文本的文件类型。正确答案：A、B、C。13.(2014判断)已知“H”的ASCII码值为48H，则可推断出“J”的ASCII码值为50H。（×）14.（2014单选）既与我国早期汉字编码标准保持向下兼容，又与国际标准UCS/Unicode接轨的汉字编码标准是（B）。

A.Big5B．GB2312C．GB18030D．GBK【分析】ANSI和Unicode/UCS2等编码标准都兼容GB2312,共收录汉字21003个。

近几年考试真题（2013多选）下列关于超文本中文本块的叙述，正确的有（CD）。

A.文本块不能分布在不同的Web服务器中

B.文本