分享
分享赚钱 收藏 举报 版权申诉 / 8

类型第六讲西电通院考研复试资料(试题+课件).ppt

  • 上传人:scg750829
  • 文档编号:9505139
  • 上传时间:2019-08-11
  • 格式:PPT
  • 页数:8
  • 大小:97KB
  • 配套讲稿:

    如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。

    特殊限制:

    部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。

    关 键  词:
    第六讲西电通院考研复试资料(试题+课件).ppt
    资源描述:

    1、2019/8/11,1,第二章:信息量和熵,2019/8/11,2,2.6 凸函数与(离散型随机变量的)平均互信息量的凸性,记离散型随机变量X的事件为1,2,K。 记X的概率分布为P(X=k)=qk,k=1K。 记离散型随机变量Y的事件为1,2,J。 记条件概率P(Y=j|X=k)=p(j|k)。则 rkj=P(X, Y)=(k,j)=qkp(j|k),(概率论中的乘法公式) wj=P(Y=j)=k qkp(j|k),(概率论中的全概率公式),2019/8/11,3,2.6 凸函数与(离散型随机变量的)平均互信息量的凸性,设条件概率p(j|k),k=1K,j=1J被确定。此时I(X, Y)是概

    2、率向量q=(q1, q2, , qK)的函数。我们希望找到这样的概率向量,使得对应的I(X, Y)达到最大。这就是说,记我们希望找到这样的K维概率向量a=(a1, a2, , aK),使得,2019/8/11,4,2.6 凸函数与(离散型随机变量的)平均互信息量的凸性,定理2.6.2的含义 K维概率向量a=(a1, a2, , aK)使得当且仅当:以a为X的概率向量的时候,I(X=k; Y)对所有ak0的k都取一个相同的值C; I(X=k; Y)对所有满足ak=0的k都取值不超过上述的相同值C 。,2019/8/11,5,2.6 凸函数与(离散型随机变量的)平均互信息量的凸性,I(X=k; Y)表示什么?表示事件X=k与随机变量Y之间的“半平均互信息量”。,2019/8/11,6,2.6 凸函数与(离散型随机变量的)平均互信息量的凸性,例 设X的事件有0、1; Y的事件有0、1; 已知 p(0|0)=1-u;p(1|0)=u;p(0|1)=u;p(1|1)=1-u。 当X服从等概分布(a0=P(X=0)=1/2;a1=P(X=1)=1/2)时,I(X;Y)达到最大。因为此时,2019/8/11,7,2.6 凸函数与(离散型随机变量的)平均互信息量的凸性,2019/8/11,8,小结,

    提示  道客多多所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    关于本文
    本文标题:第六讲西电通院考研复试资料(试题+课件).ppt
    链接地址:https://www.docduoduo.com/p-9505139.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

    道客多多用户QQ群:832276834  微博官方号:道客多多官方   知乎号:道客多多

    Copyright© 2025 道客多多 docduoduo.com 网站版权所有世界地图

    经营许可证编号:粤ICP备2021046453号    营业执照商标

    1.png 2.png 3.png 4.png 5.png 6.png 7.png 8.png 9.png 10.png



    收起
    展开