语音与音频编码.docx

1、语音与音频编码语音与音频编码课程论文 题目：MP3编码原理与实现 院（系） 信息科学与工程学院 班 级 学 号 姓 名 指导老师 目录MP3编码原理与实现 11、摘 要 32、MP3简介 32.1 MP3音频格式 32.2 MP3压缩编码原理 43、人体听觉心理学模型 53.1 最小听觉门槛判定 53.2 人耳的遮蔽效应 53.3 人耳的空间响应 54、VBR技术 65、编码器工作原理 65.1 滤波器段 65.2 人体听觉心理模型 75.3 量化与编码 86、总结与心得 97、参考文献 101、摘要：在目前的信息社会，需要应用和传输大量的语音信息，这些信息中存在着大量的冗余，如果不去除掉这些

2、冗余，在其传输和存储的过程中，将会占用大量的资源，因此，语音压缩技术受到了人们的普遍关注。在此基础上，对MP3编码器的基本原理和基本结构进行了研究，并对其中几个关键模块包括心理声学模型，VBR技术等进行了分析，结果表明MP3要具有良好的编码质量，需要对其算法进行改进和优化。关键词：MP3编码器、音频、算法 2、MP3简介 MP3是今天一种常见的音乐格式，但恐怕除了工作要求之外，有兴趣对此进行研究的人恐怕不多。所以，当我打算写MP3编码方面的论文时，在找资料时也颇费了一番周折，同时也觉得很有趣。 MP3是MPEG-1 Audio Layer 3的简称，是当今比较流行的一种数字音频编码和有损压缩格

3、式（有Layer 3，也必然有Layer1和Layer2，也就是MP1和MP2，但不在本文讨论范围之内）。MP3技术的应该可以用来大幅度的降低音频文件存储所需要的空间。它丢掉脉冲编码调制（PCM）音频数据中对人类听觉不重要得数据，从而达到了较高的压缩比（高达12：110：1）。简单地说，MP3在编码时先对音频文件进行频谱分析，然后用过滤器滤掉噪音电平，接着通过量化的方式将剩下的每一位打散排列，最后形成有较高压缩比的MP3文件，并使压缩后的文件在回放时也能够达到比较接近原音源的效果。 MP3的音频质量取决于它的Bitrate和Sampling frequency，以及编码器质量。MP3的典型速度

4、介于每秒128到320kb之间。采样频率也有44.1，48和32 kHz三种频率，比较常见的是采用CD采样频率44.1kHz。常用的编码器是LAME，它完全遵循LGPL的MP3编码器，有着良好的速度和音质。2.1 MP3音频格式 MP3(MPEG Audio Layer)音频格式诞生于20世纪80年代，是伴随着MPEG-1而开发的。在MPEG-1标准中，音频压缩标准按复杂性和压缩质量分为三个独立层次：(1)MPEG Audio Layer，它最为简单，码流为每通道384kb/s，主要用于数字卡座(Digital Compact Cassette，DCC)。(2)MPEG Audio Layer

5、 ，它具有中等复杂度，码流为每通道192kb/s，主要用于数字音频广播、数字演播室和VCD等方面数字音频的制作、交流、存储和传送。(3)MPEG Audio Layer ，它最为复杂，是综合了MPEG Audio Layer和ASPEC优点的一种混合压缩技术，其音频质量最好，主要用于MP3音频压缩，码流为每通道64kb/s。MP3编码虽不适用于实时传送，但能在低编码速率下提供较高的音质，所以成为网上音乐的宠儿。2.2 MP3压缩编码原理音频压缩由编码和解码两个部分组成。把波形文件里的数字音频数据转换为高度压缩的形式(称为比特流)即为编码；要解码则把比特流重建为波形文件。 在MPEG-1的音频压

6、缩中，采样频率可为32kHz、44.1kHz和48kHz，可支持单声道(Monophonic)、双单声道 (DualMonophonic)、立体声模式(Stereo Mode)、联合立体声(JointStereo)等。常见的MP3大多采用联合立体声模式。音频压缩可以分为无损(lossless)压缩和有损压缩。无损压缩就是尽量降低音频数据的冗余度，以减小其体积。音频信号经过编码和解码之后，必须要和原来的信号一致。无损压缩的压缩率是比较有限的；有损压缩就是用尽一切手段，包括无损压缩用到的方法，丢掉一切能丢掉的数据，以减小体积。而音频压缩后解码听起来起码是要跟原来差不多的，有损压缩的压缩比能大幅提高

7、，MP3就是属于有损压缩，压缩比是12:1(128kbps)。 实验表明，人类能听到的声音频率范围(音频)是20Hz20kHz，但人耳对整个音频频段声音的反应不是平直的，25kHz是人耳最灵敏的频段。依其特性将整个音频频段分成多个临界频带，因为人类听觉系统是依据频率来分辨声音能量的，任何频率的细小声音都会因掩蔽效应而被临界频带内音量较高的声音所覆盖。MP3对其不作量化处理，从而去掉那些人类听觉系统所无法察觉的声音，达到压缩的目的。MP3文件是由帧(frame)构成的，帧是MP3文件最小的组成单位。什么是帧?还记得最初的动画是怎么做的吗?不同的连续画面切换以达到动态效果，每幅画面就是一个“帧”，

8、不同的是MP3里面的帧记录的是音频数据而不是图形数据。MP3的帧速度大概是30帧/秒。每个帧又由帧头和帧数据组成，帧头记录着该帧的基本信息，包括位率索引和采样率索引(这对理解ABR和VBR编码方式很重要)。帧数据，顾名思义就是记录着主体音频数据。上面说的都是MP3编码的基础，但事实上，早期的编码器都非常不完善，压缩算法近于粗暴，音质很不理想。MP3的音质达到现在的水平有两次飞跃:人体听觉心理学模型(Perceptual Model)的导入和VBR技术的应用。3、人体听觉心理学模型下面将简要介绍一下几个重要原理:3.1 最小听觉门槛判定 (The minimal audition thresho

9、ld)人耳的听力范围是20Hz-20k Hz的频率范围，但是人耳对不同的频率声音的灵敏度是不同的，不同频率的声音要达到能被人耳听到的水平所需要的强度是不一样。那么通过计算，可以把音乐文件中存在但不能被人耳听到的声音去掉。 通过这原理，我们还可以建立模型，把大部分数据空间分配到人耳最灵敏的2kHz到5kHz范围，其余频率分配比较少的空间；3.2 人耳的遮蔽效应 (The Masking effect)蔽效应表现在强信号会遮蔽邻近频率的弱信号。用生活经验来说，在安静的房间中，一根针掉到地上都能听见，可到了大街上，就算手机音量调到最大，来电时也未必能听见，而手机的声音确确实实是存在的，原因就是被周围

10、更大的声音遮蔽了。有了对遮蔽效应的研究成果，编码器就能根据已建立的数学模型，计算强信号对附近弱信号的遮蔽，把能引起人们注意的声音才保留。人耳还有前遮蔽效应和后遮蔽效应:因为人需要一定的时间来处理声音信号，在强信号之前或之后的弱信号，会被遮蔽掉。前遮蔽效应的时间约只有2-5ms，而后遮蔽的时间比较长，大约有100ms。利用这，我们能减小强信号之前和之后的分辨率；3.3 人耳的空间响应: 人耳对某些高频的声音的空间感很差，辨别不了声源的方向。联合立体声(Joint Stereo)应运而生:在某些频率上采用“单声道”(事实上并非真正意义上的单声道)，以减小流量。4、VBR技术正如上面所说，MP3是由

11、帧构成的，MP3能象动画那样读到哪放到哪， 播放器不必预读整个文件的内容，即使部分数据损坏也不会对播放效果有太大影响(实际上这就是流媒体所具有的特性)。而每个帧的帧头里都包含这该帧的码率(bitrate，单位是kbps)等信息，所以，我们可以对每一段音乐甚至每一个帧定义独立的码率，这就是VBR（Variable bitrate，动态码率）技术。与VBR向对应的是CBR(Constant bitrate)。一支交响曲，合奏大动态部分的数据量显然大于引子部分，如果用128kbps的CBR编码方式来编码，在引子部分可能有多余的数据流量，而在合奏部分却又不够，VBR就是解决这个问题的。把在不影响音质的

12、情况下，对流量需求小的部分分配较小的码率，把冗余字节缓存起来留给有需要的部分，在短时间内提供更高的码率，以保证音乐的质量。所以说，VBR的作用是更合理的分配流量，在不增大文件体积的条件下提高声音的质量。不过VBR在应用初期带给过MP3随生听不少麻烦。因为早期大多数MP3播放器都是针对CBR设计的，其根据文件大小来获得时长的算法对VBR失效了，因为VBR MP3的bitrate可能每时每刻都在变化。不过现在这个问题基本上不用担心了，市场上的播放器基本上都解决这问题了。除了上面说的两方面，MP3编码还有很重要的一招:Huffman编码(Huffman是个科学家的名字)，Huffman编码广泛应用于

13、无损压缩领域，比如我们常用的WINZIP，WINRAR等压缩软件就是以此为基础的(只能说是基础，因为这些用到的编码方法不只是Huffman编码)。Huffman编码用途就是降低数据的冗余度，可节省大约20%的空间。用WINZIP来再压缩MP3文件每什么效果就因为MP3编码的时候已经应用到采用Huffman编码。5、编码器工作原理5.1 滤波器段 (filterbank)数字音频信号以脉冲的形式送进编码器，首先会经过一滤波器段(filterbank)，它由两个串联的滤波器段组成:一个多相分析滤波器段和一个MDCT(Modified Discrete Cosine Transform，经改良的离散

14、余弦转换)，前者也应用到layer-1和layer-2中，后者是MP3独有的。输入的音频信号在20Hz-20k Hz的频率范围内，通过第一个滤波器段后，把信号按频率分成32个小频带，称为子带(Subband)。20000Hz/32=625Hz，那么每个子带的宽度就是625Hz。人耳对不同频段的灵敏度是不同的，编码器可对不同的子带进行不同的量化分层。不过等宽的子带并没有准确反映人耳的听觉特性，这样进行等宽划分并没有考虑到不同信号的临界宽度，也就是该信号的影响范围，以及不同信号的相互影响，所以这样会产生大量的信号重叠。MDCT转换就是为了解决这问题，它能对子带进行细分，清楚重叠部分，得到更高的频谱

15、解析度。5.2 人体听觉心理学模型 (Perceptual Model)上面已经谈到过人体听觉心理学模型，心理学模型可以说是感受编码的重中之中，它决定着编码器的编码质量(后面谈到的LAME就拥有着大量优秀的人体精神听觉模型和数学模型)。下面将深入分析两个重要原理: 最小听觉门槛判定和遮蔽效应。最小听觉门槛判定声音其实是传播在介质中的能量波，人耳对声音能量强弱的直接感受就是听到音量的大小，也就是响度，单位是分贝(dB)。下面是人耳可听最小响度曲线:0dB是听觉灵敏度的极限，而120dB是痛苦灵敏度的极限。人耳在2000Hz到5000Hz范围内的灵敏度最高，两端就迅速下降。所以人耳对中频的灵敏度远

16、高于高低频。遮蔽效应不同频率的声音有不同的遮蔽宽度，这叫临界宽度。可以想象，弱信号越接近强信号的中心，遮蔽效应会越严重。临界宽度跟声音频率成正比。下面是临界宽度列表:频率(Hz)临界带宽(Hz)频率(Hz)临界带宽(Hz)50801850280150100215032035010025003804501103400550570120400070070014048009008401505800110010001607000130011701908500180013702101050025001600240135003500感受编码机制可以分为两个部分:知觉噪音成型(perceptual nois

17、e shaping)和知觉边带/变换编码(perceptual subband / transform coding)。编码器通过分析滤波器段(filterbank)分析音频信号的频谱组成并应用听觉心理学模型来估计仅仅可以注意得到的噪音电平。在后面的量化和编码阶段，编码器会提高强信号附近的噪音电平，也就是减少量化位数，这样就能达到节省流量，压缩数据的目的。如果所有量化噪音都能控制在屏蔽临界曲线以下，那么处理后人耳就区别不出哪个才是原音。5.3 量化和编码 (Quantization and Coding)当PCM讯号被分成好几个频段并经过一系列的处理后，最后经过MDCT，将波型转换为一连串的系

18、数。这些系数就由Huffman编码器会选择最合适的Huffman表来做最后的压缩。 Huffman编码一般是双路工作的，但是在某些需要精密编码的情况下，它会进行四路工作。编码器一般会有很多的Huffman编码表，很多时候为了更好的声音质量和更有效屏蔽量化噪音，编码器甚至能为每一个频段选择最合适的Huffman编码表。不过编码不是一次就能成功的，要采取Try and Error的方式循环进行。因为编码器一方面要削减量化噪音，让它在人耳遮蔽曲线以下；另一方面要保证bitrate满足要求。实际上这里就是要确定两个数值:一个是确定bitrate的步进值(gain value)，另一个是削减量化噪音的增

19、益因子(ScaleFactor)，这两个系数会在正式编码之前确定下来，确定过程由两个嵌套的迭代回路完成:失真控制回路(Distortion Control Loop)和量化速率控制回路(Nonuniform Quantization Rate Control Loop)内部迭代回路 (Rate Loop )量化以后的数据送进Huffman编码器，当发现比特数大于可用流量时，编码器会返回信息，让Rate Loop调整步进值以增大量化步长，从而让数据流量减小。循环会一直进行，尝试不同的量化步长，直到Huffman编码以后的数据流量足够小。因为这个回路是用来控制码率的，所以叫做Rate Loop。外

20、部迭代回路 (noise control loop)显然，这个回路的作用就是控制量化噪音(quantization noise)，让其保持在听觉心理学提供的屏蔽临界线(masking threshold)以下。每一个频段都会有一个增益因子，一开始编码器以1.0作为默认因子，如果量化噪音量超过允许的值，那么回路就会调整增益因子，来把量化噪音降下来。更少的量化噪音意味着流量增大，码率需要提高，所以增益因子每次改变以后，Rate Loop都要进行调整，让码率符合要求。所以两个回路是嵌套工作的，互相协调，中止条件是量化噪音降到屏蔽临界线以下而码率也足够小。良好的编码器会让两个回路有条不紊的工作，因为一

21、旦处理不好就很容易陷入死循环。6、总结与心得从老师布置论文撰写的一开始，我就一直在构思选题，搜索了许多关于“语音与音频编码”的论文，并且也找了图书馆里相关的书籍，但由自身水平有限，想要深刻理解一些前辈们撰写的论文以及相关教材中一些技术实属难事，若还想就此写一写自己的理解更是难上加难。最终，我选择自己比较感兴趣的MP3的编码原理与实现为课题，写了这篇论文。我经历了两周多的努力，顺利的完成了此次的论文撰写。在这个过程中，我学到了不少的知识，经历了很多，也体会到了很多，虽然结果很重要，可是并不能因此就忽略了中间的过程，因为这才是解决问题的关键。最后，感谢戴老师一学期以来在语音与音频编码这门课上深入浅出的讲课，以及平时在班级群里与同学的互动交流与分享，一起探讨，朝着未知领域前进的感觉很好。7、参考文献1 张雪英，贾海蓉.语音与音频编码M. 西安：西安电子科技大学出版社.20112 赵力.语音信号处理M. 北京：机械工业出版社.2003.3 胡航.语音信号处理M. 哈尔滨：哈尔滨工业大学出版社.2000.4 王颖.MP3编码原理概述.新浪博客.2008.9.9.