1、1多媒体技术基础及应用课程习题及解答-1第一章 多媒体计算机概述单项选择题 1-6:1、请根据多媒体的特性判断以下哪些属于多媒体的范畴?(1)交互式视频游戏 (2)有声图书 (3)彩色画报 (4)彩色电视(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(B)2、下列哪些不是多媒体核心软件?(1)AVSS (2)AVK (3)DOS (4 )Amiga Vision(A) (3) (B) (4) (C) (3) (4) (D) (1) (2)答:(A)3、要把一台普通的计算机变成多媒体计算机要解决的关键技术是:(1)视频音频信号的获取 (2)多媒体数据压编码
2、和解码技术(3)视频音频数据的实时处理和特技 (4)视频音频数据的输出技术(A) (1) (2) (3) (B ) (1) (2) (4) (C ) (1) (3) (4) (D)全部答:(D)4、Commodore 公司在 1985 年率先在世界上推出了第一个多媒体计算机系统 Amiga,其主要功能是:(1)用硬件显示移动数据,允许高速的动画制作;(2)显示同步协处理器;(3)控制 25 个通道的 DMA,使 CPU 以最小的开销处理盘、声音和视频信息;(4)从 28Hz 震荡器产生系统时钟;(5)为视频 RAM(VRAM )和扩展 RAM 卡提供所有的控制信号;(6)为 VRAM 和扩展
3、RAM 卡提供地址。(A) (1) (2) (3) (B ) (2) (3) (5) (C ) (4) (5) (6) (D)全部答:(D)5、国际标准 MPEG-II 采用了分层的编码体系,提供了四种技术,它们是:(1)空间可扩展性;信噪比可扩充性;框架技术;等级技术。(2)时间可扩充性;空间可扩展性;硬件扩展技术;软件扩展技术。(3)数据分块技术;空间可扩展性;信噪比可扩充性;框架技术。(4)空间可扩展性;时间可扩充性;信噪比可扩充性;数据分块技术。(A) (1) (B) (2) (C) (3) (D) (4)答:(D)6、多媒体技术未来发展的方向是:(1)高分辨率,提高显示质量; (2)
4、高速度化,缩短处理时间;(3)简单化,便于操作; (4)智能化,提高信息识别能力。(A) (1) (2) (3) (B(1) (2) (4) (C) (1) (3) (4) (D)全部答:(D)7、简述多媒体计算机的关键技术及其主要应用领域?答:多媒体计算机的关键技术是:(1)视频音频信号获取技术;(2)多媒体数据压缩2编码和解码技术;(3)视频音频数据的实时处理和特技;(4)视频音频数据的输出技术。多媒体技术促进了通信、娱乐和计算机的融合。多媒体计算机的主要应用领域有三个方面:(1)多媒体技术是解决常规电视数字化及高清晰度电视(HDTV)切实可行的方案。采用多媒体计算机技术制造 HDTV,它
5、可支持任意分辨率的输出,输入输出分辨率可以独立,输出分辨率可以任意变化,可以用任意窗口尺寸输出。与此同时,它还赋予 HDTV 很多新的功能,如图形功能,视频音频特技以及交互功能。多媒体计算机技术在常规电视和高清晰度电视的影视节目制作中的应用可分成两个层次:一是影视画面的制作:采用计算机软件生成二维、三维动画画面;摄象机在摄影真实的影视画面后采用数字图象处理技术制作影视特技画面,最后是采用计算机将生成和实时结合用图象处理技术制作影视特技画面。另一个层次是影视后期制作,如现在常用的数字式非线性编辑器,实质上是一台多媒体计算机,它需要有广播级质量的视频音频的获取和输出、压缩解压缩,实时处理和特技以及
6、编辑功能。 (2)用多媒体技术制作 V-CD 及影视音响卡拉 OK 机。多媒体数据压缩和解压缩技术是多媒体计算机系统中的关键技术, V-CD就是利用 MPEG-I 的音频编码技术将压缩到原来的六分之一。 (3)采用多媒体技术创造PIC(个人信息通信中心) ,即采用多媒体技术使一台个人计算机具有录音电话机、可视电话机、图文传真机、立体声音响设备、电视机和录像机等多种功能,即完成通信、娱乐和计算机的功能。如果计算机再配备丰富的软件连接上网,还可以完成许多功能进一步提高用户的工作效率。第二章 音频信息的获取与处理单项选择题 1-9:1、数字音频采样和量化过程所用的主要硬件是:(A)数字编码器 (B)
7、数字解码器 (C)模拟到数字的转换器(A/ D 转换器) (D)数字到模拟的转换器(D/ A 转换器)答:(C)2、音频卡是按( )分类的。(A)采样频率 (B)声道数 (C)采样量化位数 (D)压缩方式答:(C)3、两分钟双声道,16 位采样位数,22.05kHz 采样频率声音的不压缩的数据量是:(A)5.05MB (B )10.58MB (C )10.35MB (D )10.09MB答:(D)4、目前音频卡具备以下( )功能。(1)录制和回放数字音频文件 (2)混音(3)语音特征识别 (4)实时解/压缩数字单频文件(A) (1) (3) (4) (B ) (1) (2) (4) (C )
8、(2) (3) (4) (D)全部答:(B)5、以下的采样频率中哪个是目前音频卡所支持的。(A)20kHz (B )22.05 kHz (C )100 kHz (D)50 kHz答:(B)6、1984 年公布的音频编码标准 G.721,它采用的是( )编码。(A)均匀量化 (B)自适应量化 (C )自适应差分脉冲 (D)线性3预测答:(C)7、AC-3 数字音频编码提供了五个声道的频率范围是:(A)20Hz 到 2 kHz (B)100Hz 到 1 kHz (C)20Hz 到 20 kHz (D )20Hz 到 200 kHz答:(C) )8、MIDI 的音乐合成器有:(1)FM (2)波表
9、(3)复音 (4)音轨(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(B)9、下列采集的波形声音质量最好的是:(A) 单声道、8 位量化、22.05 kHz 采样频率(B) 双声道、8 位量化、44.1 kHz 采样频率(C) 单声道、16 位量化、22.05 kHz 采样频率(D) 双声道、16 位量化、44.1 kHz 采样频率答:(D)10、简述音频编码的分类及常用编码算法和标准。答:音频编码分为:(1) 基于音频数据的统计特性进行编码,其典型技术是波形编码。其目标是使重建语音波形保持原波形的形状,PCM(脉冲编码调制)是最简单的编码方法。还有差值
10、量化(DPCM) 、自适应量化(APCM )和自适应预测编码(ADPCM)等算法。(2) 基于音频声学参数进行参数编码,可进一步降低数据率。其目标是使重建音频保持原音频特性。常用的音频参数有共振峰、线性预测系数、滤波器组等。这种编码技术的优点是数据率低,但还原信号的质量较差,自然度低。(3) 基于人的听觉特性进行编码。从人的听觉系统出发,利用掩蔽效应设计心理学模型,从而实现更高效率的数字音频压缩。而最有代表性的是 MPEG 标准中的高频编码和 Dolby AC-3。国际电报电话咨询委员会(CCITT)和国际标准化组织(ISO)提出了一系列有关音频编码算法和国际标准。如 G.711 64Kbps
11、(A )律 PCM 编码标准、G7. 21 采用ADPCM 数据率为 32bps。还有 G.722、G.723 、G.727 和 G.728 等。第三章 视频信号的获取与处理单项选择题 1-10:1、国际上常用的视频制式有:(1)PAL 制 (2)NTSC 制 (3)SECAM 制 (4)MPEG(A) (1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(C)2、全电视信号主要由( )组成。(A)图象信号、同步信号、消隐信号 (B )图象信号、亮度信号、色度信号(C)图象信号、复合同步信号、复合消隐信号 (D)图象信号、复合同步信号、复合色度信号答:(C)3、视频卡
12、的种类很多,主要包括:4(1)视频捕获卡 (2)电影卡 (3)电视卡 (4)视频转换卡(A) (1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(D)4、在 YUV 彩色空间中数字化后 YUV 是:(A)422 (B)84 2 (C)8 24 (D)844答:(D)5、彩色全电视信号主要由( )组成。(A) 图象信号、亮度信号、色度信号、复合消隐信号(B) 亮度信号、色度信号、复合同步信号、复合消隐信号(C) 图象信号、复合同步信号、消隐信号、亮度信号(D) 亮度信号、同步信号、复合消隐信号、色度信号答:(B)6、数字视频编码的方式有哪些:(1)RGB 视频 (2)
13、YUV 视频 (3)Y/C(S )视频 (4)复合视频(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(D)7、在多媒体计算机中常用的图象输入设备是:(1)数码照相机 2)彩色扫描仪 (3)视频信号数字化仪 (4)彩色摄象机(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(D)8、视频采集卡能支持多种视频源输入,下列哪些是视频采集卡支持的视频源:(1)放像机 2)摄象机 (3)影碟机 (4)CD-ROM(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(C)9、下列数字视频中哪个质量
14、最好:(A) 240180 分辨率、24 位真彩色、15 帧/ 秒的帧率(B) 320240 分辨率、30 位真彩色、25 帧/ 秒的帧率(C) 320240 分辨率、30 位真彩色、30 帧/ 秒的帧率(D) 640480 分辨率、16 位真彩色、15 帧/ 秒的帧率答:(C)10、 视频采集卡中与 VGA 的数据连线有什么作用:(1)直接将视频信号送到 VGA 显示上显示(2)提供 Overlay(覆盖)功能(3)与 VGA 交换数据 (4)没有什么作用,可连可不连。(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)仅(4)答:(C)11、简述视频信息获取的流程
15、,并画出视频信息获取的流程框图。答:(1)视频信息获取的基本流程概述为:5彩色全电视信号经过采集设备分解成模拟的 R、G、B 信号或 Y、U、V 信号,然后进行各个分量的 A/D 变换、解码、将模拟的 R、G、B 信号或 Y、U、V 信号变换成数字信号的 R、G、B 信号或 Y、U、V 信号,存入帧存储器。主机可通过总线对帧存储器中的图象数据进行处理,帧存储器的数据 R、G、B 信号或 Y、U、V 信号经过 D/A变换转成模拟的 R、G、B 信号或 Y、U、V 信号,再经过编码器合成彩色电视信号,输出到显示器上。(2)视频信息获取流程框图如下:12、简述视频信号获取器的工作原理。答:视频信号获
16、取器的工作原理概述如下:从彩色摄象机、录象机或其他视频信号源得到的彩色全电视信号首先到视频模拟输入端口,首先需要解决行同步信号和场同步信号(包括奇数场同步信号和偶数场同步信号)的分离问题,即采用限幅的方法,将场同步和行同步信号与图象信号分开,然后用积分和微分的方法获得场同步信号和行同步信号,再根据奇数场同步信号在一行的开始和偶数场同步信号在一行的中间,得到奇数场同步信号和偶数场同步信号。然后送到具有钳位电路和自动增益的运算放大器,最后经过 A/D 变换器将彩色全电视信号转换成8 位数字信号,送给彩色多制式数字解码器。经过多制式数字解码器解码后得到Y、U、V 数据,然后由视频窗口控制器对其进行剪
17、裁,改变比例后存入帧存储器,帧存储器的内容在窗口控制器的控制下与 VGA 信号或视频编码器的同步信号同步,再送到 D/A 变换器,模拟彩空间变换矩阵,同时送到数字式视频编辑器进行视频编码,最后输出到 VGA 监视器及电视机或录象机。第四章 多媒体数据压缩编码技术单项选择题 1-7:1、下列哪些说法是正确的:(1)冗余压缩法不会减少信息量,可以原样恢复原始数据。(2)冗余压缩法减少冗余,不能原样恢复原始数据。(3)冗余压缩法是有损压缩法。 、(4)冗余压缩的压缩比一般都比较小。(A) (1) (3) (B) (1) (4) (C) (1) (3) (4) (D)仅(3)答:(B)2、图象序列中的
18、两幅相邻图象,后一幅图象与前一幅图象之间有较大的相关,这是:(A)空间冗余 (B)时间冗余 (C)信息熵冗余 (D)视觉冗余彩色全电视信号模拟RGB数字RGBYUV数字RGBYUV模拟RGBYUV采集设备A/D 变换与解码帧存储器D/A 变换与解码显示设备主机处理6答:(B)3、下列哪一种说法是不正确的:(A) 预测编码是一种只能针对空间冗余进行压缩的方法(B) 预测编码是根据某一种模型进行的(C) 预测编码需将预测的误差进行存储或传输(D) 预测编码中典型的压缩方法有 DPCM、ADPCM答:(A)4、下列哪一种说法是正确的:(A) 信息量等于数据量与冗余量之和(B) 信息量等于信息熵与数据
19、量之差(C) 信息量等于数据量与冗余量之差(D) 信息量等于信息熵与冗余量之和答:(C)5、P64K 是视频通信编码标准,要支持通用中间格式 CIF,要求 P 至少为:(A)1 (B)2 (C)4 (D)6答:(D)6、在 MPEG 中为了提高数据压缩比,采用了哪些方法:(A)运动补偿与运行估计 (B)减少时域冗余与空间冗余(C)帧内图象数据与帧间图象数据压缩 (D)向前预测与向后预测答:(C)7、在 JPEG 中使用了哪两种熵编码方法:(A)统计编码和算术编码 (B)PCM 编码和 DPCM 编码(C)预测编码和变换编码 (D )哈夫曼编码和自适应二进制算术编码答:(D)8、简述 MPEG
20、和 JPEG 的主要差别。答:MPEG 视频压缩技术是针对运动图象的数据压缩技术。为了提高压缩比,帧内图象数据和帧间图象数据压缩技术必须同时使用。MPEG 通过帧运动补偿有效地压缩了数据的比特数,它采用了三种图象,帧内图、预测图和双向预测图。有效地减少了冗余信息。对于 MPEG 来说,帧间数据压缩、运动补偿和双向预测,这是和 JPEG 主要不同的地方。而 JPEG 和 MPEG 相同的地方均采用了 DCT 帧内图象数据压缩编码。在 JPEG 压缩算法中,针对静态图象对 DCT 系数采用等宽量化,而是 MPEG 中视频信号包含有静止画面(帧内图)和运动信息(帧间预测图)等不同的内容,量化器的设计
21、不能采用等宽量化需要作特殊考虑。从两方面设计,一是量化器综合行程编码能使大部分数据得到压缩;另一方面是通过量化器、编码器使之输出一个与信道传输速率匹配的比特流。8、信源符号及其概率如下:a a1 a2 a3 a4 a5p(a) 0.5 0.25 0.125 0.0625 0.0625求其 Huffman 编码,信息熵及平均码长。解:a1 0.5-0- 07a2 0.25-0-0.5-1 10a3 0.125-0-0.25-1 110a4 0.625-0-0.125-1 1110a5 0.625-1 1111则:a1=0 a2=10 a3=110 a4=1110 a5=1111信息熵: 字 符/
22、875.141832 )1616()( 2222251 bitLogogLogLPHnii a1-a5 码长分别为 1,2,3,4,4则平均码长 51 /875.1468nij bitLPN 字 符10、详述 JPEG 静态图象压缩编码原理及实现技术。答:JPEG 是由国际电报咨询委员会(CCITT )和国际标准化协会(OSI)联合组成的一个图象专家小组开发研制的连续色调、多级灰度、静止图象的数字图象压缩编码方法。JPEG 适于静止图象的压缩,此外,电视图象序列的帧内图象的压缩编码也常采用 JPEG压缩标准。JPEG 数字图象压缩文件作为一种数据类型,如同文本和图形文件一样地存储和传输。基于离
23、散余弦变换(DCT)的编码方法是 JPEG 算法的核心内容。算法的编解码过程如教材 136 页图 4.25-4.26 所示。编码处理过程包括原图象数据输入、正向DCT 变换器、量化器、熵编码器和压缩图象数据的输出,除此之外还附有量化表和熵编码表(即哈夫曼表) ;接收端由信道收到压缩图象数据流后,经过熵解码器、逆量化器、逆变换(IDCT) ,恢复并重构出数字图象,量化表和熵编码表同发送端完全一致。编码原图象输入,可以是单色图象的灰度值,也可以是彩色图象的亮度分量或色差分量信号。DCT 的变换压缩是对一系列 8*8 采样数据作块变换压缩处理,可以对一幅像,从左到右、从上到下、一块一块(8*8/ 块
24、)地变换压缩,或者对多幅图轮流取 8*8 采样数据块压缩。解码输出数据,需按照编码时的分块顺序作重构处理,得到恢复数字图象。具体的实现技术如下:(1)首先把一幅图象分 8*8 的子块按图中的框图进行离散余弦正变换(FDCT)和离散余弦逆变换(IDCT) 。在编码器的输入端,原始图象被分成一系列 8*8 的块,作为离散余弦正变换(FDCT)的输入。在解码器的输出端,离散余弦逆变换(IDCT)输出许多 8*8 的数据块,用以重构图象。8*8 FDCT 和 8*8 IDCT 数学定义表达式如下:FDCT: v16)y2(cosu16)x2(cos)y,(f)v(Cu41)v,(F70x IDCT:8
25、v16)y2(cosu16)x2(cos)v,u(fC)(41)y,x(F70uv 两式中,C(u),C(v)= , 当 u=v=02C(u),C(v)=1 , 其它情况离散余弦正变换(FDCT)可看作为一个谐波分析仪,把离散余弦逆变换(IDCT)看作一个谐波合成器。每个 8*8 二维原图象采样数据块,实际上是 64 点离散信号,该信号是空间二维参数 x 和 y 的函数。FDCT 把这些信号作为输入,然后把它分解成 64个正交基信号,每个正交信号对应于 64 个二维(2D )空间频率中的一个,这些空间频率是由输入信号的频谱组成。FDCT 的输出是 64 个基信号的幅值(即 DCT 系数) ,每
26、个系数值由 64 点输入信号唯一地确定,即离散余弦变换的变换系数。在频域平面上变换系数二维频域变量 u 和 v 的函数。对应于 u=0,v=0 的系数,称做直流分量(DC 系数) ,其余 63 个系数称做交流分量(AC 系数) 。因为在一幅图象中像素之间的灰度或色差信号变化缓慢,在 8*8 子块中像素之间相关性很强,所以通过离散余弦正变换处理后,在空间频率低频范围内集中了数值大的系数,这样为数据压缩提供了可能。远离直流系数的高频交流系数大多为零或趋于零。如果 FDCT 和 IDCT 变换计算中计算精度足够高,并且 DCT 系数没有被量化,那么原始的 64 点信号就能精确地恢复。(2)量化为了达
27、到压缩数据的目的,对 DCT 系数 F(u,v)需作量化处理。量化处理是一个多到一的映射它是造成 DCT 编解码信息损失的根源。在 JPEG 标准中采用线性均匀量化器。量化定义为,对 64 个 DCT 变换系数 F(u,v)除以量化步长 Q(u,v)后四舍五入取整。即量化器步长是量化表的元素,量化表元素随 DCT 变换系数的位置而改变,同一像素的亮度量化表和色差量化表不同值,量化表的尺寸也是 64,与 64 个变换系数一一对应。量化表中的每一个元素值为 1 至 255 之间的任意整数,其值规定了对应位置变换系数的量化器步长。在接收端要进行逆量化,逆量化的计算公式为: ),(,),( vuQFv
28、uQ不同频率的余弦函数对视觉的影响不同,量化处理是在一定的主观保真度图像质量的前提下,可据不同频率的视觉阈值来选择量化表中的元素值的大小。根据心理视觉加权函数得到亮度化表和色度量化表。DCT 变换系数 F(u,v)除以量化表中对应位置的量化步长,其幅值下降,动态范围变窄,高频系数的零值数目增加。(3)熵编码为进一步达到压缩数据的目的,需对量化后的 DC 系数和行程编码后的 AC 系数进行基于统计特性的熵编码。64 个变换系数经量化后,坐标 u=v=0 的值是直流分量(即 DC系数) 。DC 系数是 64 个图像采样平均值。因为相邻的 88 块之间有强的相关性,所以相邻块的 DC 系数值很接近,
29、对量化后前后两块之间的 DC 系数差值进行编码,可以用较少的比特数。DC 系数包含了整个图像能量的主要部分。经量化后的 63 个 AC 系数编码时从左上方 AC(u=7,v=7)开始,沿箭头方向,以“Z”字形行程扫描,直到AC(u=7,v=7)扫描结束。量化后特编码的 AC 系数通常有许多零值,沿“Z”字形路径行进,可使零 AC 系数集中,便于使用行程编码方法。63 个 AC 系数行程编码和码字,可用两个字节表示。JPEG 建议使用两种熵编码方法:Huffman 编码和自适应二进制算术编码。熵编码可分成两步进行,首先把 DC 和 AC 系数转换成一个中间格式的符号序列,9第二步是给这些符号赋以
30、变长码字。多媒体技术基础及应用课程习题及解答-2第五章 多媒体计算机硬件及软件系统结构单项选择题 1-8:1、组成多媒体系统的途径有哪些:(1)直接设计和实现 (2)增加多媒体升级套件进行扩展(3)CPU 升级 (4)增加 CD-DA(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(B)2、下面硬件设备中哪些是多媒体硬件系统应包括的:(1)计算机最基本的硬件设备 (2)CD-ROM(3)音频输入、输出和处理设备 (4)多媒体通信传输设备(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(C)3、MPC-2 、MPC-3
31、标准制定的时间分别是:(1)1992 (2)1993 (3)1994 (4)1995(A) (1) (3) (B) (2) (4) (C) (1) (4) (D)都不是答:(B)4、下面哪些是 MPC 对音频处理能力的基本要求:(1)录入声波信号 (2)处理声波信号(3)重放声波信号 (4)用 MIDI 技术合成音乐(A) (1) (3) (4) (B) (2) (3) (4) (C) (1) (2) (3) (D)全部答:(D)5、下面哪些是 MPC 对视频处理能力的基本要求:(1)播放已压缩好的较低质量的视频图象(2)实时采集视频图象(3)实时压缩视频图象(4)播放已压缩好的高质量分辨率的
32、视频图象(A)仅(1) (B) (1) (2) (C) (1) (2) (3) (D)全部答:(A)6、下面哪些是 MMX 技术的特点:(1)打包的数据类型 (2)与 IA 结构安全兼容(3)64 位的 MMX 寄存储器组 (4)增强的指令系统(A) (1) (3) (4) (B) (2) (3) (4) (C) (1) (2) (3) (D)全部答:(D)7、下面哪些是称得上的多媒体操作系统:(1)Windows 98 (2)Quick Time(3)AVSS (4)Authorware(A) (1) (3) (B) (2) (4) (C) (1) (2) (3) (D)全部答:(C)108
33、、下面哪些是 MPC 的图形、图象处理能力的基本要求:(1)可产生丰富形象逼真的图形(2)实现三维动画(3)可以逼真、生动地显示彩色静止图象(4)实现一定程度的二维动画(A) (1) (3) (4) (B) (2) (3) (4) (C) (1) (2) (3) (D)全部答:(A)9、详述 Intel/IBM 公司研制的 DVI 多媒体计算机系统成功和失败的经验教训,理想的系统如何设计实现。答:DVI 系统能够用计算机综合处理声、文、图信息。从硬件方面看:(1)选用了 PLV(Product Leave Vedio )视频压缩编码算法,产生 AVI 文件。(2)为了实现 PLV 算法,DVI
34、 系统设计制造了两个专用芯片 82750PA(PB) (象素处理器)和 82750DA(DB) (显示处理器) 。(3)同时设计了三个专用的门阵电路,即 82750LH(主机接口门阵) 、82750LV(VRAM/SCSI/Capture 接口门阵)和 82750LA(视频子系统接口门阵) 。(4)设计实现了 AVE(视频音频引擎) 。从软件方面看:DVI 系统设计实现了 DOS 环境下的 AVSS(Audio Vedio SubSystem)和 Windows环境下的 AVK(Audio Vedio Kernel) ,DVI 系统中最成功的部分是 AVE(视频音频引擎) 。AVE 包括三个部
35、分,即视频子系统、音频子系统和 AVBUS(视频音频总线) 。1视频子系统视频子系统的作用是视频信号处理和显示引擎,它们由 82750PB(象素处理器) 、VRAM 以及 82750DB(显示处理器)组成。其中存储器阵列 VRAM 存放所有 DVI 系统数据,即:位映射的数据、压缩编解码数据、算法微码、控制执行算法的数据结构以及控制显示功能的寄存器集数据。象素处理器 82750PB 用微码执行及视频图象快速处理算法、视频特技以及数字式运动图象和静止图象的压缩编码算法以及解码算法。显示处理器 82750DB 有非常灵活的可编程功能,它能够将不同的位映射数据转换成在监视器上显示需要的模拟信号。82
36、750PB 象素处理器具有较宽的指令字长(48 位) ,直接连到 VRAM 的随机或并行通道,由于不同指令字的不同字段分别控制硬件机构,所以这些指令可以同时执行多种操作,它包括两个分开并对称的内插 16 位数据总线、为 8 位象素计算专门分开的ALU 操作;在解压缩时为运动补偿设计了象素插值器,解压缩编码数据流设计了统计解码器;以及为了同 DVI 的 VRAM 传输数据所设计的四个先进先出(FIFO)数据缓冲区。82750PB 象素处理器运行较小的微码译码器,它定时询问在 VRAM 中的命令表。由计算机建立主命令表,微码命令由主机直接引导加载到 82750PB 微码存储器中,当命令表指出某些操
37、作需要运行时,如解码操作,微码译码器从 VRAM 中将一个微码块加载到 82750PB 内部的微码存储器中,并且执行它。这些解码是由主计算机设计并加载到 VRAM 中的。82750DB 显示处理器连到 VRAM 的串行或顺序通道,显示处理器有几种不同的VRAM 的位映射格式,可直接解释成在监视器显示屏幕上所需要的模拟信号数据流,YUV 数据在 VRAM 中分别在三个门映射区存储, 82750DB 显示处理器把这三个位映射区取来并混合在一起,完成解压缩的最后一步。同时,通过计算水平面和垂直方向每个11U 和 V 的四个采集样点的平均值,完成色差信号的插值,然后 82750DB 要进行从 YUV到
38、 RGB 彩色空间的转换,把三个 8 位数字信号送到 D/A 变换器,最后输出模拟信号到彩色监视器。2音频子系统音频子系统由音频信号处理器、数字到模拟的转换硬件以及模拟滤波器组成。它与视频子系统并行操作、解决音频信号的压缩、编码和解码,还解决音频信号的A/D、D/A 转换以及音响声效的特技处理。音频子系统的核心器件是 AD(Analog Device)公司的 AD-2105 数字信号处理器(DSP) ,通过它完成所有音频信号的压缩和解压缩任务。DVI 系统采用自适应预测编码(ADPCM)算法将 16 位的采样数据压缩编码成 4 位码,最后将压缩的音频数据输出到 D/A 转换器,DSP 的垂直消
39、隐中断出现在每个显示帧的场逆程,以此来解决视频数据流和音频数据流的同步问题。数字到模拟量的转换器是由 Burr-Brown 公司生产的PCM66P 单片立体声 16 位串行接口组成。跟着 D/A 变换器是双通道的模拟滤波器,其截止频率近似固定在 17KHz,并且有 5 个极点。3AVBUS 视频音频总线为了支持视频音频子系统,大量的基本数据必须在 DVI 的 VRAM 和 DVI 的其余设备(包括外部设备、主机、获取子系统)之间传送。DVI 中数据的通信通道采用了VRAM 的具有多路开关功能的 32 位数据和地址总线,即 AVBUS。AVBUS 解决了视频音频流的问题。AVBUS 由 VRAM
40、 并行通道的数据信号组成,所有三个门阵、82750PB象素处理器以及 VRAM 都直接连到总线上,很多时间 AVBUS 作为 VRAM 和 82750PB之间单一的数据总线,因而它们是默认的 AVBUS 的主设备。为了在 AVBUS 上传输数据,首先必须把总线控制权从 82750PB 手中转让给申请控制权的 DVI 设备,主机接口门阵是各种请求的仲裁器,通常采用主从型。一旦一个请求信号被仲裁器承认了,总线控制权从 82750PB 转让给该设备,允许在 AVBUS 执行该设备的通信协议。AVSS 是在 DOS 环境下运行的 DVI 系统的支撑软件,AVK 是在 Windows 环境下运行的 DV
41、I 系统的支撑软件。(1) 最下层的 DVI 系统的硬件包括:视频版、音频板、多功能板以及 PC/AT的硬件。初始化时直接和硬件打交道的软件在引导程序作用下安装到系统 RAM 中常驻内存。一种多媒体硬件设备需要一个驱动程序模块,有为视频板设计的视频驱动程序、为音频板设计的音频驱动程序以及多功能板设计的多功能驱动程序。(2) 再上一层是驱动接口模块,驱动接口模块建立了为高层应用软件使用的虚拟设备。在 DVI 系统中共有四个驱动接口模块,即 a)微码接口模块 Mc:它是82750PA 的接口模块,负责微码的加载和执行,同时也负责主机系统对 VRAM 的存取。b)视频接口模块Vid:它是 82750
42、DA 的接口模块,负责 82750DA 的初始化。同时,它还包含了视频信号数字化器的接口软件。c)多功能接口模块Utl:它提供 CD-ROM和操纵杆的接口软件。d)音响接口模块:它是音响板和音响数字化器的接口软件。在同一层次上还有两个 IBMPC/DOS 的扩展模块:a )实时执行模块Rtx:它为DVI 应用软件提供实时多任务操作系统环境。b)Microsoft CD-ROM 模块MSCDEX :它是 DOS 扩展模块,能够使满足 ISO 9660 的 CD-ROM 用一般的方法在硬盘和软盘上自由存取。(3) 在第三层有两个高层次的软件包,即图形软件包Gr和音频视频支撑软件AVSSAv。a)图
43、形软件包Gr :它提供图象处理,图形绘图基元以及视频管理功能。b)音频视频支撑软件 AVSSAv:AVSS 软件可管理 AVSS 格式写的视频、音频文件。(4) 最上面是应用层,它可以提供大量的应用程序。在应用层下面还有两个高12层的 DVI 系统的接口,即 DVI 系统生产工具软件和多媒体编程工具语言。DVI 系统实现了 AVE 和 AVSS 或 AVK,因而比较成功地解决了声、文、图信息的综合处理问题。它是一个比较成熟的多媒体计算机系统,它获得了“Comdex 91”最佳媒体产品奖和最佳展示奖。DVI 系统失败的地方是:由于现行的视频压缩国际标准是 H.261、H.263、MPEG-1 、
44、MPEG-2,而 DVI 的视频压缩算法采用非国际标准(AVI 文件) ,这便是它的失败之处。理想系统设计和实现:(1)采用国际标准的设计原则标准化是产业活动成功的前提,为了使新型的计算机增加多媒体数据的获取、压缩和解压缩、实时处理和特技、输出和通信等功能,设计时必须采用国际标准。如视频的H.261、H.262、H.263、MPEG-1 、 MPEG-2,音频的国际标准有G.711、G.721、G.722、G.723、G.728 、G.729 。(2)多媒体和通信功能的单独解决变成集中解决计算机综合处理声、文、图信息和通信功能,过去的解决办法是设计专用接口卡分散单独解决,例如使用类似声霸卡解决
45、声音的输入输出和实时编码、解码及处理问题,使用视频压缩编码和解码卡解决视频信号压缩和解压缩问题等。现在希望采用微码引擎,设计制造适合的 DSP 或阵列处理器通过微码变成综合解决这些问题。(3)体系结构设计和算法相结合要想使计算机具有综合处理声、文、图信息和通信功能的最佳解决办法是把计算机体系结构设计和算法相结合。综合处理声、文、图信息和通信功能算法的核心是数字信号处理,数组向量运算,即以乘加运算为核心的矩阵运算。(4)把多媒体和通信技术做到 CPU 芯片中多媒体计算要必须使其与网络相结合,为了使计算机具有多媒体和通信功能,最早的解决办法是采用专用芯片设计制造专用接口卡;其次是把多媒体和通信功能
46、作到母板上,最佳的方案是将多媒体和通信功能融合到 CPU 芯片中。从目前的发展趋势看可以把融合方案分成两类:一类是以多媒体和通信功能为主,融合 CPU 芯片原有的计算功能,其设计目标是用在多媒体专用设备、家电和宽带通信设备上,可以取代这些设备中CPU 及大量的 ASIC 及其它芯片。另一类是以通用 CPU 计算功能为主,融合多媒体和通信功能,它们的设计目标与现有计算机系列兼容,融合多媒体和通信功能,主要用在多媒体计算机中。第六章 超文本和超媒体单项选择题 1-5:1、在超文本和超媒体中不同信息块之间的连接是通过( )连接。(A)节点 (B)字节 (C)链 (D)字答:(C)2、超文本的三个基本
47、要素是:(1)节点 (2)链 (3)网络 (4)多媒体信息(A) (1) (2) (4) (B ) (2) (3) (4) (C) (1) (3) (4) (D) (1)(2) (3)答:(D)3、超文本和超媒体体系结构的三层模型是哪一年提出的?(A)1985 (B)1988 (C)1989 (D)199013答: (B)4、下列的叙述哪些是正确的:(1)节点在超文本中是信息的基本单元(2)节点的内容可以是文本、图形、图象、动画、视频和音频(3)节点是信息块之间连接的桥梁(4)节点在超文本中必须经过严格的定义(A) (1) (3) (4) (B) (1) (2) (C) (3) (4) (D)全部答:(B)5、下列的叙述哪些是错误的:(2)链的结构分为三部分:链源、链缩及链的属性;(3)链是连接节点的桥梁(4)链在超文本中必须经过严格的定义(5)链在超文本和超媒体中是统一的(A) (1) (2)