考核目的：考核目的：考核学生对数字音频获取与处理的基本原考核学生对数字音频获取与处理的基本原理、采样量化的基本原理、音频卡的组理、采样量化的基本原理、音频卡的组成及工作原理、音频编码标准以及音乐成及工作原理、音频编码标准以及音乐合成原理的理解和掌握。合成原理的理解和掌握。考核的知识点：考核的知识点：什么是数字音频、数字音频采样和量化什么是数字音频、数字音频采样和量化的基本原理、音频卡的工作原理、音频的基本原理、音频卡的工作原理、音频编码标准和音乐合成的原理。编码标准和音乐合成的原理。考核要求：考核要求：掌握：数字音频信息的获取与处理的原掌握：数字音频信息的获取与处理的原理过程、音频卡的工作原理。理过程、音频卡的工作原理。理解：数字音频采样量化的原理过程、理解：数字音频采样量化的原理过程、音乐合成的原理。音乐合成的原理。了解：数字音频编码的标准。了解：数字音频编码的标准。2-1 2-1 数字音频：在计算机内，所有的信息数字音频：在计算机内，所有的信息均以数字表示。各种命令是不同的数字，均以数字表示。各种命令是不同的数字，各种幅度的物理量也是不同的数字。音各种幅度的物理量也是不同的数字。音频信号也用一系列数字表示，称之为数频信号也用一系列数字表示，称之为数字音频。数字音频的特点是保真度好，字音频。数字音频的特点是保真度好，动态范围大。（教材动态范围大。（教材P17P17）2-2 2-2 采样：模拟声音在时间上是连续的，采样：模拟声音在时间上是连续的，而数字音频是一个数字序列，在时间上而数字音频是一个数字序列，在时间上只能是断续的。因此当把模拟声音变成只能是断续的。因此当把模拟声音变成数字声音时，需要每隔一个时间间隔在数字声音时，需要每隔一个时间间隔在模拟声音波形上取一个幅度值，称之为模拟声音波形上取一个幅度值，称之为采样，采样的时间间隔称为采样周期。采样，采样的时间间隔称为采样周期。（教材（教材P18P18）2-3 2-3 量化：在数字音频技术中，把采样得量化：在数字音频技术中，把采样得到的表示声音强弱的模拟电压用数字表到的表示声音强弱的模拟电压用数字表示。模拟电压的幅值仍然是连续的，而示。模拟电压的幅值仍然是连续的，而用数字表示音频幅度时，只能把无穷多用数字表示音频幅度时，只能把无穷多个电压幅度用有限个数字表示，即把某个电压幅度用有限个数字表示，即把某一幅度范围内的电压用一个数字表示，一幅度范围内的电压用一个数字表示，这称之为量化。（教材这称之为量化。（教材P18P18）2-42-4常用的音频采样率有：常用的音频采样率有：8kHz8kHz、11.025kHz11.025kHz、22.05kHz22.05kHz、16kHz16kHz、37.8kHz37.8kHz、44.1kHz44.1kHz、48kHz48kHz。（教材。（教材P18P18）2-5 2-5 数字音频的文件格式（教材数字音频的文件格式（教材P21P21）.WAV Microsoft.WAV Microsoft公司的波形音频文件格式。公司的波形音频文件格式。.MID MIDI.MID MIDI文件格式。文件格式。.VOC Creative.VOC Creative公司的波形音频文件格式。公司的波形音频文件格式。.SND NeXT.SND NeXT计算机的波形音频文件格式。计算机的波形音频文件格式。.AIF Apple.AIF Apple计算机的波形音频文件格式。计算机的波形音频文件格式。.RMI Microsoft.RMI Microsoft公司的公司的MIDIMIDI文件格式。它文件格式。它可以包括图片、标记和文本。可以包括图片、标记和文本。2-6 WAV2-6 WAV文件储存容量计算（教材文件储存容量计算（教材P19P19）WAVWAV文件的字节数文件的字节数/每秒每秒=采样频率（采样频率（HzHz）量化位数（位）量化位数（位）声道数声道数/8/8)()(102410248)()(MBsHzS时间声道数位量化位数采样频率2-7 MIDI2-7 MIDI文件（教材文件（教材P20P20）由于由于MIDIMIDI文件记录的是一系列的计算指令文件记录的是一系列的计算指令而不是数据化后的波形数据，因此占用而不是数据化后的波形数据，因此占用的存储空间比的存储空间比WAVWAV文件要小很多。所以预文件要小很多。所以预装装MIDIMIDI文件比装入文件比装入WAVWAV文件要容易很多。文件要容易很多。这为设计多媒体应用系统和指何时播放这为设计多媒体应用系统和指何时播放音乐带来很大的灵活性。但是音乐带来很大的灵活性。但是MIDIMIDI文件文件的录制比较复杂，这要学习一些使用的录制比较复杂，这要学习一些使用MIDIMIDI创作并改编作品的专业知识，并且创作并改编作品的专业知识，并且还必须有专门工具，如键盘合成器等。还必须有专门工具，如键盘合成器等。2-8 2-8 音频信号处理的特点（教材音频信号处理的特点（教材P20-21P20-21）(1)(1)音频信号是时间依赖的连续媒体。音频信号是时间依赖的连续媒体。(2)(2)理想的合成声音应是立体声。理想的合成声音应是立体声。(3)(3)对语音信号的处理，要抽取语意等其对语音信号的处理，要抽取语意等其它信息，如可能会涉及到语言学、社会它信息，如可能会涉及到语言学、社会学、声学等。学、声学等。2-9 2-9 从人与计算机交互的角度来看音频信从人与计算机交互的角度来看音频信号相应的处理（教材号相应的处理（教材P21P21）(1)(1)人与计算机通信人与计算机通信 音频获取；语音识音频获取；语音识别与理解。别与理解。(2)(2)计算机与人通信计算机与人通信 音频合成；音频合成；声音声音定位；音频定位；音频/视频同步。视频同步。(3)(3)人人计算机计算机人通信人通信2-10 2-10 音频卡的主要功能（教材音频卡的主要功能（教材P21P21）音频的录制与播放、编辑与合成、音频的录制与播放、编辑与合成、MIDIMIDI接接口、文语转换、口、文语转换、CD-ROMCD-ROM接口及游戏接口接口及游戏接口等。等。2-11 2-11 音频卡的分类（教材音频卡的分类（教材P23P23）音频卡的分类主要根据数据采样量化的位音频卡的分类主要根据数据采样量化的位数来分，通常分为数来分，通常分为8 8位、位、1616位和位和3232位等几位等几类。位数越高，量化精度越高，音质就类。位数越高，量化精度越高，音质就越好。越好。2-12 2-12 音频卡的工作原理（教材音频卡的工作原理（教材P24-25P24-25）（1 1）声音的合成与处理：这部分是音频卡）声音的合成与处理：这部分是音频卡的核心，一般由数字声音处理器、的核心，一般由数字声音处理器、FMFM音音乐合成器及乐合成器及MIDIMIDI控制器组成。控制器组成。它的主要任务是完成声波信号的它的主要任务是完成声波信号的 模模/数、数、数数/模转换，利用调频技术控制声音的音模转换，利用调频技术控制声音的音调、音色、和幅度。调、音色、和幅度。（2 2）混合信号处理器及功率放大器：内置）混合信号处理器及功率放大器：内置数字数字/模拟混音器，混音器的声源可以是模拟混音器，混音器的声源可以是MIDIMIDI信号、信号、CDCD音频、线输入、话筒和音频、线输入、话筒和PCPC的扬声器等，可以选择输入一个声源或的扬声器等，可以选择输入一个声源或将几个不同的声源进行混合录音。将几个不同的声源进行混合录音。（3 3）计算机总线接口和控制器：总线接口）计算机总线接口和控制器：总线接口和控制器是由数据总线双向驱动器、总和控制器是由数据总线双向驱动器、总线接口控制逻辑、总线中断逻辑及线接口控制逻辑、总线中断逻辑及DMADMA（直接存储器存取）控制逻辑组成。（直接存储器存取）控制逻辑组成。2-132-13音频卡硬件的安装步骤（教材音频卡硬件的安装步骤（教材P26P26）（1 1）将电脑电源关闭，拔下供电电源和所有外接线）将电脑电源关闭，拔下供电电源和所有外接线插头；插头；（2 2）打开机箱外壳，选择一个空闲的）打开机箱外壳，选择一个空闲的1616位扩展槽并位扩展槽并将声卡插入扩展槽，声卡一般应尽可能远离显示卡，将声卡插入扩展槽，声卡一般应尽可能远离显示卡，以防两者互相干扰；以防两者互相干扰；（3 3）连接来自）连接来自CD-ROMCD-ROM驱动器的音频线及声卡的输入驱动器的音频线及声卡的输入/输出线和游戏棒等；输出线和游戏棒等；（4 4）如果需要，将）如果需要，将CD-ROMCD-ROM驱动器的接口电缆插在卡驱动器的接口电缆插在卡上相应的接口上，并将上相应的接口上，并将CD-ROMCD-ROM的音频输出线接到声的音频输出线接到声卡的针形输入线上；卡的针形输入线上；（5 5）连接诸如麦克风、外部音源和游戏棒等其它设）连接诸如麦克风、外部音源和游戏棒等其它设备；备；（6 6）盖上机箱外壳，并将电源插头插回，待全部调）盖上机箱外壳，并将电源插头插回，待全部调试通过后再将固定螺丝拧紧。试通过后再将固定螺丝拧紧。2-14 2-14 从信息保持的角度讲从信息保持的角度讲,只有当信源本只有当信源本身具有冗余度身具有冗余度,才能对其进行压缩。根据才能对其进行压缩。根据统计分析结果，语音信号存在着多种冗统计分析结果，语音信号存在着多种冗余度，其最主要部分可以分别从时域和余度，其最主要部分可以分别从时域和频域来考虑。另外由于语音主要是给人频域来考虑。另外由于语音主要是给人听的，所以考虑了人的听觉机理，也能听的，所以考虑了人的听觉机理，也能对语音信号实行压缩。对语音信号实行压缩。（教材（教材P28P28）2-15 2-15 音频编码的分类（教材音频编码的分类（教材P30P30）（1 1）基于音频数据的统计特性进行编码）基于音频数据的统计特性进行编码,其典型技术是波形编码。其典型技术是波形编码。（2 2）基于音频的声学参数，进行参数编码）基于音频的声学参数，进行参数编码,可进一步降低数据率。其目标是使重建可进一步降低数据率。其目标是使重建音频保持原音频的特性。音频保持原音频的特性。（3 3）基于人的听觉特性进行编码：从人的）基于人的听觉特性进行编码：从人的听觉系统出发，利用掩蔽效应，设计心听觉系统出发，利用掩蔽效应，设计心理声学模型，从而实现更高效率的数字理声学模型，从而实现更高效率的数字音频的压缩。其中以音频的压缩。其中以MPEGMPEG标准中的高频标准中的高频编码和编码和DoldyDoldy AC-3 AC-3最有影响。最有影响。音频编码的分类如下：音频编码的分类如下：1）基于音频数据的统计特性进行编码基于音频数据的统计特性进行编码典型技术是波形编码：典型技术是波形编码：PCM：DPCMADPCM2）基于音频的声学参数，进行参数编码）基于音频的声学参数，进行参数编码3）基于人的听觉特性进行编码）基于人的听觉特性进行编码2-16 2-16 音频编码算法和标准（教材音频编码算法和标准（教材P31-36P31-36）（1 1）G.711 G.711、G.721 G.721、G.722 G.722、G.728 G.728（2 2）5 5、MPEGMPEG中的音频编码中的音频编码 （3 3）AC-3AC-3编码和解码编码和解码2-17 AC-32-17 AC-3编码和解码（教材编码和解码（教材P36-39P36-39）AC-3可编程解码器可编程解码器（P37）AC-3编码器框图编码器框图（P37）AC-3编码流程图编码流程图（P38）同步帧结构图同步帧结构图（P39）AC-3解码器框图解码器框图（P40）2-18 2-18 一个乐音，包括必备的三要素：音高、一个乐音，包括必备的三要素：音高、音色和响度。若把一个乐音放在运动的音色和响度。若把一个乐音放在运动的旋律中，它还应具备时值旋律中，它还应具备时值持续时间。持续时间。这些要素的理想配合是产生优美动听的这些要素的理想配合是产生优美动听的旋律的必要条件。（教材旋律的必要条件。（教材P40P40）音高：音高指声波的基频。基频越低，给人音高：音高指声波的基频。基频越低，给人的的感觉越低沉。音阶与频率的对应关系感觉越低沉。音阶与频率的对应关系（P41）音色：声音的音质。由声音的频谱决定的：音色：声音的音质。由声音的频谱决定的：各阶谐波的比例不同，随时间衰减的程度不各阶谐波的比例不同，随时间衰减的程度不同，音色就不同。同，音色就不同。响度：响度是对声音强度的衡量，它是听响度：响度是对声音强度的衡量，它是听判乐音的基础。判乐音的基础。音乐合成技术的种类音乐合成技术的种类调频调频(FM)音乐合成技术音乐合成技术FM是使高频震荡波的频率按调制信号规律是使高频震荡波的频率按调制信号规律变化的一种调制方式。变化的一种调制方式。音乐系统框图音乐系统框图（P42）波形表波形表(Wavetable)(Wavetable)音乐合成技术音乐合成技术乐器发出的声音进行采样后，将数字音频乐器发出的声音进行采样后，将数字音频信号存储在信号存储在ROMROM芯片或硬盘中，进行合成芯片或硬盘中，进行合成时将再将相应乐器的波形记录播放出来，时将再将相应乐器的波形记录播放出来，即波形表音乐合成技术。即波形表音乐合成技术。什么时候使用什么时候使用MIDIMIDI？长时间高质量音乐长时间高质量音乐以音乐做背景音响效果，同时从以音乐做背景音响效果，同时从CDCDROMROM中装载其他数据中装载其他数据以音乐做背景音响效果，同时播放波以音乐做背景音响效果，同时播放波形音频或实现文语转换，以实现音乐和形音频或实现文语转换，以实现音乐和语音同时输出。语音同时输出。2-19 MIDI2-19 MIDI规范（教材规范（教材P42P42）MIDI(Musical Instrument Digital MIDI(Musical Instrument Digital Interface)Interface)是乐器数字接口的缩写，泛是乐器数字接口的缩写，泛指数字音乐的国际标准。指数字音乐的国际标准。MIDIMIDI标准规定标准规定了不同厂家的电子乐器与计算机连接的了不同厂家的电子乐器与计算机连接的电缆和硬件。它还指定从一个装置传送电缆和硬件。它还指定从一个装置传送数据到另一个装置的通信协议。这样，数据到另一个装置的通信协议。这样，任何电子乐器，只要有处理任何电子乐器，只要有处理MIDIMIDI信息的信息的处理器和适当的硬件接口都能变成处理器和适当的硬件接口都能变成MIDIMIDI装置。装置。MIDIMIDI间靠这个接口传递消息而进间靠这个接口传递消息而进行彼此通信。行彼此通信。