




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、第三章 信道及其容量u 信道的任务是以信号方式传输信息和存储信息。u 研究信道中能够传送或存储的最大信息量,即信道容量。3.1 信道的数学模型和分类 等效信道 干扰源 物理信道 解调器 编码器 译码器 信宿 信源 调制器 实际信道 编码信道 图3.1.1 数字通信系统的一般模型3.1 信道的数学模型和分类 一、信道的分类一、信道的分类 根据载荷消息的媒体不同根据载荷消息的媒体不同根据信息传输的方式根据信息传输的方式根据信息传输的方式分类中根据信息传输的方式分类中 根据信道的用户多少:两端根据信道的用户多少:两端(单用户单用户)信道信道 多端多端(多用户多用户)信道信道根据信道输入端和输出端的关
2、联:根据信道输入端和输出端的关联: 无反馈信道无反馈信道 反馈信道反馈信道根据信道的参数与时间的关系:根据信道的参数与时间的关系: 固定参数信道固定参数信道 时变参数信道时变参数信道 根据输入和输出信号的特点:根据输入和输出信号的特点: 离散信道离散信道 连续信道连续信道 半离散或半连续信道半离散或半连续信道 波形信道波形信道二、离散信道的数学模型二、离散信道的数学模型条件概率条件概率 P(y/x) 描述了输入信号和输出信号之间统计描述了输入信号和输出信号之间统计依赖关系。反映了依赖关系。反映了信道的统计特性信道的统计特性。 根据信道的根据信道的统计特性即条件概率统计特性即条件概率 P(y/x
3、)P(y/x)的不同,的不同,离散信道又可分成三种情况:离散信道又可分成三种情况: 无干扰信道无干扰信道 有干扰无记忆信道有干扰无记忆信道 有干扰有记忆信道有干扰有记忆信道 (1)无干扰无干扰(噪声噪声)信道信道 信道中没有随机性的干扰或者干扰很小,输出信号信道中没有随机性的干扰或者干扰很小,输出信号y与输入信号与输入信号 x 之间有确定的、一之间有确定的、一 一对应的关系。即:一对应的关系。即:y f (x)(0)(1)|(xfyxfyxyP(2)有干扰无记忆信道有干扰无记忆信道 信道输入和输出之间的条件概率是一般的概率分布。信道输入和输出之间的条件概率是一般的概率分布。 如果任一时刻输出符
4、号只统计依赖于对应时刻的输入符号,如果任一时刻输出符号只统计依赖于对应时刻的输入符号,则这种信道称为无记忆信道。则这种信道称为无记忆信道。)|().|.()|(iiNiNNxyPxxxyyyPxyP12121 (3) 有干扰有干扰(噪声噪声)有记忆信道有记忆信道 实际信道往往是既有干扰实际信道往往是既有干扰(噪声噪声)又有记忆的这种类型。又有记忆的这种类型。 例如在数字信道中,由于信道滤波使频率特性不理想时例如在数字信道中,由于信道滤波使频率特性不理想时造成了码字之间的干扰。造成了码字之间的干扰。 在这一类信道中某一瞬间的输出符号在这一类信道中某一瞬间的输出符号不但与对应时刻的不但与对应时刻的
5、输入符号有关,而且还与此以前其他时刻信道的输入符号及输入符号有关,而且还与此以前其他时刻信道的输入符号及输出符号有关输出符号有关,这样的信道称为有记忆信道。这样的信道称为有记忆信道。三、单符号离散信道三、单符号离散信道单符号离散信道:单符号离散信道:输入符号为输入符号为X,取值于,取值于a1,a2, ,ar。输出符号为输出符号为Y,取值于,取值于b1,b2, ,bs。条件概率:条件概率:P(y/x)P(y=bj/x=ai)P(bj/ai) 这一组条件概率称为这一组条件概率称为信道的传递概率信道的传递概率或或转移概率转移概率,可以用,可以用来来描述信道干扰描述信道干扰影响的大小。影响的大小。 信
6、道中有干扰信道中有干扰(噪声噪声)存在,可以用传递概率存在,可以用传递概率 P(bj/ai) 来描述干来描述干扰影响的大小。扰影响的大小。 一般一般简单的单符号离散信道简单的单符号离散信道可以用可以用X, P(y/x) ,Y 三者加以描三者加以描述。述。 其数学模型可以用概率空间其数学模型可以用概率空间X, P(y/x) ,Y描述。当然,也可描述。当然,也可用下图来描述:用下图来描述: a1 b1 a2 b2 X . . Y . .ar bsP(bj/ai)例例1 二元对称信道,二元对称信道,BSC,Binary Symmetrical Channel解:解:此时,此时,X:0,1 ; Y:0
7、,1 ; r=s=2,a1=b1=0;a2=b2=1。传递概率传递概率:pPabPpPabPppPabPppPabP )0|1()|()1|0()|(1)1|1()|(1)0|0()|(12212211 p是单个符号是单个符号传输发生错误传输发生错误的概率。的概率。(1-p)表示是)表示是无错误传输无错误传输的概率。的概率。 转移矩阵转移矩阵: -1 pppp1 0 1011p a1=0 0=b11p a2=1 1=b2pp符号符号“2”表示接收到了表示接收到了“0”、“1”以外的特殊符以外的特殊符号号 qqpp1001 0 2 101p0 01p1 1q1q2例例2二元删除信道。二元删除信道
8、。BEC,Binary Eliminated Channel解:解:X:0,1 Y:0,1,2此时,此时,r 2,s 3,传递矩阵为:传递矩阵为: 一般离散单符号信道的传递概率可用矩阵形式表示,即一般离散单符号信道的传递概率可用矩阵形式表示,即 sjijijpp110 矩阵矩阵P完全描述了信道的特性,可用它作为离散单符号完全描述了信道的特性,可用它作为离散单符号信道的另一种数学模型信道的另一种数学模型的形式。的形式。 P中有些是信道干扰引起的错误概率,有些是信道正确中有些是信道干扰引起的错误概率,有些是信道正确传输的概率。所以该矩阵又称为传输的概率。所以该矩阵又称为信道矩阵信道矩阵(转移矩阵)
9、(转移矩阵) 。 rsrrsspppppppppP.:.212222111211 b1 b2 bsa1 P(b1|a1) P(b2|a1) P(bs|a1)a2 P(b1|a2) P(b2|a2) P(bs|a2) . ar P(b1|ar) P(b2|ar) P(bs|ar)3.2 信道疑义度与平均互信息 本节进一步研究离散单符号信道的数学模型下的信本节进一步研究离散单符号信道的数学模型下的信息传输问题。息传输问题。一、信道疑义度一、信道疑义度信道输入信源信道输入信源X的熵的熵 H(X)是在接收到输出是在接收到输出Y以前,关于输入变量以前,关于输入变量X的先验不的先验不确定性,称为先验熵。确
10、定性,称为先验熵。 )(log)()(1log)()(1xPxPaPaPXHXirii接受到接受到bj后,关于后,关于X的不确定性为的不确定性为 后验熵在输出符号集后验熵在输出符号集Y范围内是个随机量,对后验熵在符范围内是个随机量,对后验熵在符号集号集Y中求数学期望,得条件熵中求数学期望,得条件熵-信道疑义度信道疑义度:这是接收到输出符号这是接收到输出符号bj后关于后关于X的的后验熵后验熵。 后验熵是当信道接收端接收到输出符号后验熵是当信道接收端接收到输出符号bj后,关于输入后,关于输入符号的信息测度。符号的信息测度。)|(1log)|()|(jXjjbxPbxPbXH )/()()/()|(
11、1jsjjjbXHbPbXHEYXHrijijisjjbaPbaPbP11)|(1log)|()()|(1log)(,yxPxyPYX互信息量互信息量 I(xi ; yj):收到消息:收到消息yj 后获得关于后获得关于xi的信息量的信息量)()|(log)|(1log)(1log)/()();(ijijiijixpyxpyxpxpyxIxIyxI二、平均互信息二、平均互信息)()|(log)();()();(ijijijijijijixpyxpyxpyxIyxpYXI平均互信息平均互信息I(X; Y): I(xi ; yj)的的统计平均。统计平均。l它代表接收到符号集它代表接收到符号集Y后平均
12、每个符号获得的关于后平均每个符号获得的关于X的信的信息量,也表示了输入与输出两个随机变量之间的统计约息量,也表示了输入与输出两个随机变量之间的统计约束程度。束程度。平均互信息与各类熵的关系平均互信息与各类熵的关系)(1log)()(;)(1log)()(ypypYHxpxpXHYX)|(1log)()|(;)|(1log)()|(,xypxypXYHyxpxypYXHYXYX )(1log)()(,xypxypXYHYX H(X)H(Y)H(X/Y)H(Y/X)I(X;Y)I(X;Y)H(XY)H(XY) 两种特殊信道两种特殊信道)(0)(1)|(xfyjixfyjixypij)(0)(1)|
13、(xfyjixfyjiyxpjiYyXxyPxyp)()|(YyXxxPyxp)()|(3.2 3.2 平均互信息的性质平均互信息的性质平均互信息平均互信息 I(X;Y) 具有以下特性:具有以下特性:(1)非负性)非负性 即即 I(X;Y) = 0 当当X、Y统计独立时等式成立。统计独立时等式成立。(2)极值性)极值性 即即 I(X;Y) = H(X) 当当 H(X/Y)=0 时,即信道中传输信息无损时,等式时,即信道中传输信息无损时,等式成立。成立。(3)交互性(对称性)交互性(对称性) 即即 I(X;Y) = I(Y;X) 当当 X、Y统计独立时统计独立时 I(X;Y) = I(Y;X)=
14、0 当信道无干扰时当信道无干扰时(一一对应一一对应) I(X;Y) = I(Y;X)=H(X)=H(Y),(| )(| )(;)( ;)()log( ) (| )log( )( )( )( ) (| )X YX YXP y xP y xI X YI Y XP xyP x P y xP yP yP yP x P y x其中:l 平均互信息平均互信息I(X;Y)是输入信源的概率分布是输入信源的概率分布P(x)的的型凸函数。型凸函数。l 平均互信息平均互信息I(X;Y)是信道传递的概率是信道传递的概率P(y/x)的的型凸函数。型凸函数。 当当信源固定信源固定后,选择不同的信道来传输同一信源符后,选择
15、不同的信道来传输同一信源符号,在信道输出端获得关于信源的信息量是不同的。号,在信道输出端获得关于信源的信息量是不同的。 对每一种信源都存在一种最差的信道,此时干扰对每一种信源都存在一种最差的信道,此时干扰 (噪声噪声) 最大,而输出端获得的信息量最小。最大,而输出端获得的信息量最小。3.3.3 3 离散无记忆信道的扩展离散无记忆信道的扩展信道信道sjijijpp110)|().|.()|(12121ijNiNNxyPxxxyyyPxyP rsrrsspppppppppP.:.:.2122221112111 11111 111 12221 12(. )(. )(.)(. )(|): (.)(.
16、)NNNNkkrrrsssrsa aabbba aabbbpXYa aab bb NNNNNNsrrrss212222111211(|)khhkp1212(|)hhhNkkkNp b bba aa1(|)1,2,1,2,NNNhikiip bakirhis22222222pppppppppppppppppppppppp2112131241(/)(00/00)(0/0) (0/0)(/)(01/00)(0/0) (1/0)(/)(10/00)(1/0) (0/0)(/)(11/00)(1/0) (1/0)PPPPpPPPPppPPPPppPPPPp);();(NNYXIYXI)/()(NNNYX
17、HXH)/()(NNNXYHYHNiiixyPP1)/()/(xyNiiiYXIYXI1);();(),(),(1iiNiYXIIYX),(),(),(1YXNIYXIIiiNiYX 研究信道的研究信道的目的目的是要讨论信道中平均每个符号所是要讨论信道中平均每个符号所能传送的信息量能传送的信息量-信息传输率信息传输率R 平均互信息平均互信息I(X;Y)就是接收到符号就是接收到符号Y后平均每个后平均每个符号获得的关于符号获得的关于X的信息量。的信息量。 所以:所以: R = I(X;Y) = H(X) H(X|Y) (比特比特/符号符号)3.4 3.4 离散信道的信道容量离散信道的信道容量 信道
18、中每秒平均传输的信息量信道中每秒平均传输的信息量-信息传输速率信息传输速率RtRt R/t = I(X;Y)/t = H(X)/t H(X|Y)/t (比特(比特/秒)秒)一、一、 信道容量的定义信道容量的定义 由于平均互信息由于平均互信息I(X;Y)是输入随机变量的是输入随机变量的型凸函数型凸函数 ,所,所以对一固定的信道,总存在一种信源,使传输每个符号平均获以对一固定的信道,总存在一种信源,使传输每个符号平均获得的信息量最大。得的信息量最大。即存在一个最大的信息传输率即存在一个最大的信息传输率 -定义为定义为信道容量信道容量C);(max)(YXICXP tCCt例例4 信道容量的计算信道
19、容量的计算)(1);(maxpHYXImax(; )max()( )1( )CIX YHppH pH p ()( )HppH p当当12二、简单离散信道的信道容量二、简单离散信道的信道容量100010001)3 , 2 , 1,(10)/()/(jijijibaPabPjiij)/(loglog)(max)(max)()(symbolbitsrYHXHCyPxP1000000101103530000002121P”0“1)/(1)/(1)/(1)/(1)/(1)/(635242322111其他各项后验概率为baPbaPbaPbaPbaPbaPsymbolbitrXHCxP/log)(max)(
20、无噪有损信道无噪有损信道()max( )log(/)P yCH Ysbit symbol三、对称离散信道的信道容量三、对称离散信道的信道容量2161313121616131213131616161613131PP和7 . 01 . 02 . 01 . 02 . 07 . 03161316161613131PP和.11.11:.11ppprrpppPrrppprr1pp)/() ,., (log),., ()(max2121)(symbolbitpppHspppHYHCssxP YXxypxypxpXYH)|(1log)|()()|()/()(xXYHxpXYxypxypxXYH)|(1log)
21、|()|(),., ()/(21spppHxXYH3131616161613131P四、离散无记忆四、离散无记忆N次扩展信道的信道容量次扩展信道的信道容量),(),(1iiNiYXII YX即:即:CN = NC()()1()11max (; ) max(;) max (;) iNP XNiiP XiNiiP XiNiiCI X YI X YI X YC 35 连续信道的信道容量 一、连续单符号加性高斯噪声信道的信道容量一、连续单符号加性高斯噪声信道的信道容量22log)(enh2020log212log2logPeePC)1log(21)1log(212nssPPP二、多维无记忆高斯加性连续
22、信道二、多维无记忆高斯加性连续信道NiiNiiinpxypxypnp11)()/()/()(NiiiYXIYXI1);();(NinisiPP11log21NinisiPP11log21);(max)(YXICxpX1Y1=X1 +n1n1XNYN=XN +nNnNPnnsPPNC1log2NininiPPC11log210 00 )(xxxxnisiPPPPXENisiNii112nisiPPnisiPP)( 11WPNisi65. 00 . 1.2 . 01 . 011011011NiniPP517. 06 . 0.2 . 01 . 01616161iniPP5 . 05 . 0.2 .
23、01 . 01515151iniPP5 . 04 . 0.2 . 01 . 01414141iniPP35. 24 . 03 . 02 . 01 . 05 . 0log21log21log211log21443214141nnnniniinisiPPPPPPPC53. 48 . 0.2 . 01 . 0825. 0log21log21log2188765432181nnnnnnnniniPPPPPPPPPC85. 00 . 1.2 . 01 . 031011011NiniPP)(31WPNisi825. 08 . 0.2 . 01 . 0381三、限频限时限功率的加性高斯白噪声信道的信道容量三
24、、限频限时限功率的加性高斯白噪声信道的信道容量 12(,.,)Lxx xx12(,.,)Lyy yyyxn2LWT和,而在频带内的高斯噪声是彼此独立的,从而有按照采样定理,在0,T范围内要求。这是多维无记忆高斯加性信道,其信道容量为: 211log 12LiiiPC0 =log(1)sPWTN W -这是重要的这是重要的香农公式香农公式。当信道输入信号是平均功率受。当信道输入信号是平均功率受限的高斯白噪声信号时,信息传输率才达到此信道容量。限的高斯白噪声信号时,信息传输率才达到此信道容量。 WNPWTCCsTt01loglim比特秒比特秒3.6 信源与信道的匹配 在一般情况下,当信源与信道相连接时,其信息传输率并未达到最大。我们总希望能使信息传输率越大越好,能达到或尽可能接近于信道容量,由前面的分析可知,信息传输率接近
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2025光伏发电系统采购合同
- 2025混凝土工程施工合同范本
- 2025节能服务合同模板
- 2025高空建筑外墙清洁保养合同
- 2025授权印刷合同范本
- 2025冰箱销售正规合同范本
- 2025存量房屋租赁合同范本
- 2025维修仓库租赁合同范本
- 2025合同意向书合同意向书的法律效力
- 2025办公室装修水电施工合同范本 办公室水电施工合同格式
- GB/T 4008-2024锰硅合金
- 中国肺血栓栓塞诊治与预防指南解读专家讲座
- 2024急性脑梗死溶栓规范诊治指南(附缺血性脑卒中急诊急救专家共识总结归纳表格)
- 《鸿门宴》公开课一等奖创新教学设计 统编版高中语文必修下册
- DZ∕T 0202-2020 矿产地质勘查规范 铝土矿(正式版)
- 二年级三位数加减法竖式计算
- 安全生产投入台账(模板)
- 清华大学领军计划语文试题强基计划
- 医疗欠款欠条范本
- 母亲节健康科普知识
- 《奥尔夫音乐教学法》课程标准
评论
0/150
提交评论