0
点赞
收藏
分享

微信扫一扫

【Audio音频开发】音频基础知识及PCM技术详解

img

个人主页:董哥聊技术
我是董哥,嵌入式领域新星创作者
创作理念:专注分享高质量嵌入式文章,让大家读有所得!

img

文章目录

1、前言

现实生活中,我们听到的声音都是时间连续的,我们称为这种信号叫模拟信号。模拟信号需要进行数字化以后才能在计算机中使用。

目前我们在计算机上进行音频播放都需要依赖于音频文件。那么音频文件如何生成的呢?

音频文件的生成过程是将声音信息采样、量化和编码产生的数字信号的过程,我们人耳所能听到的声音频率范围为(20Hz~20KHz),因此音频文件格式的最大带宽是20KHZ

根据奈奎斯特的理论,音频文件的采样率一般在40~50KHZ之间。

 

2、概念

声音的本质是一种能量波,由振动而产生的能量波,通过传输介质传输出去。

img

声音有三个属性

  • 音调:声音频率的高低,表示人的听觉分辨一个声音的调子高低的程度。音调主要由声音的频率决定,同时也与声音强度有关。
  • 音量:由“振幅”(amplitude)和人离声源的距离决定,振幅越大响度越大
  • 音色:又称声音的品质,波形决定了声音的音色。

 

3、 PCM介绍

PCM(Pulse Code Modulation),即脉冲编码调制技术。

由于我们人耳听到的声音均为模拟信号,那么我们如何将听到的信息存储起来呢?这就涉及到了PCM技术。

PCM技术就是把声音从模拟信号转化为数字信号的技术,即对声音进行采样、量化的过程,经过PCM处理后的数据,是最原始的音频数据,即未对音频数据进行任何的编码和压缩处理。

 

4、 PCM原理

简化来说:PCM脉冲编码调制,以一个固定的频率对模拟信号进行采样,并将采样的信号按照一定精度进行量化,最终量化后的值被输出,记录到存储介质中。

如下图所示

  • 原始模拟音频数据如下

image-20220801191024951

  • 按照固定频率进行采样,得到

image-20220801191056431

  • 最后,对采样后的数据选择合适精度进行量化

image-20220801191140538

 

5、PCM相关概念

5.1 采样频率

采样频率单位时间内对模拟信号的采样次数,它用赫兹(Hz)来表示。采样频率越高,声音的还原就越真实越自然,当然数据量就越大。采样频率一般共分为22.05KHz44.1KHz48KHz三个等级。

 

5.2 采样位数

采样位数(Sample Bits):又称为采样精度,量化级,也相当于每个采样点所能被表示的数据范围。

采样位数通常有8bits16bits两种,采样位数越大,所能记录声音的变化度就越细腻,相应的数据量就越大。

8bits为低品质,16bits为高品质,16bits最为常见。

 

5.3 声道数

声道数(Channels):又称为通道数,指的是:能支持不同发声的音响个数,它是衡量音响设备的重要指标之一。

 

5.4 音频数据大小计算

知道上面三个概念,我们就能够计算出来一个原始的音频文件所占用空间大小了。
空间大小 ( B y t e ) = 采样频率 ( h z ) ∗ 时长 ( s ) ∗ 采样位数 ( b i t ) ∗ 声道数 / 8 空间大小(Byte)=采样频率(hz) * 时长(s) * 采样位数(bit)*声道数/8 空间大小(Byte)=采样频率(hz)时长(s)采样位数(bit)声道数/8
 

5.5 量化

量化: 量化就是通过四舍五入的方法将采样后的模拟信号转换成一种数字信号的过程。

对于采样来说,就是在时间轴上对信号数字化

对于量化来说,就是在幅度轴上对信号数字化

img

 

5.6 其他参数相关

  • 帧(Frame):一个声音的基本数据单元,其长度为采样位数和通道数的乘积

  • 周期(Period Size)音频设备一次处理所需要的帧数,对于音频设备的数据访问以及音频数据的存储,都是以此为单位。硬件缓冲传输单位,即完成这么多采样帧的传输,就会回馈一个中断。

在这里插入图片描述

  • Buffer Bytes: 一个应用Buffer有多少个字节,DMA缓冲区大小。
  • Sign :表示样本数据是否是有符号位

  • Byte Ordering:字节序,表明数据是小端(little-endian)存储还是大端(big-endian)存储,通常均为little-endian

  • nteger Or Floating Point :整形或者浮点型,大多数格式的PCM样本数据使用整形表示。

  • **交错模式:**数字音频信号存储的方式。数据以连续帧的方式存放,即首先记录第一帧的左声道样本和右声道样本,再开始第2帧的记录…

  • 非交错模式: 首先记录的是一个周期内所有帧的左声道样本,再记录所有右声道样本。

 

6、PCM数据流

对于PCM数据都是一些文本化的描述,那么一段PCM格式的数据流怎么表示的呢?

以8-bit有符号为例,长得像这样:

+---------+-----------+-----------+----
 binary 	| 0010 0000 | 1010 0000 | ...
 decimal	| 32        | -96       | ...
+---------+-----------+-----------+----  

每个分割符"|"分割字节。因为是 8-bit 有符号表示的采样数据,所以采样的范围为-128~128

 

OK,对于PCM数据流的存储而言,上面仅仅只是单声道。对于多声道的PCM数据而言,通常会交错排列,就像这样:

+---------+-----------+-----------+-----------+-----------+----
     FL 	|     FR    |     FL 	  |     FR    |     FL 	  |    
+---------+-----------+-----------+-----------+-----------+----

对于8-bit有符号的PCM数据而言,上图表示第一个字节存放第一个左声道数据(FL),第二个字节放第一个右声道数据(FR),第三个字节放第二个左声道数据(FL)

 

7、编码

一个完整的音频,经过采样和量化后的信号,需要将它转化为数字编码脉冲,这一过程称为编码。

编码简单来说,就是按一定格式记录采样和量化后的数字数据

7.1 音频编码协议ACC

AAC(Advanced Audio Coding) 高级音频编码,是一种声音数据的文件压缩格式。AAC分为ADIFADTS两种文件格式。

  • ADIF(Audio Data Interchange Format): 音频数据交换格式。这种格式的特征是只有音频数据最前面具有头字节,音频数据流中间没有头字节。因此它的解码只能在头字节处开始进行。故这种格式常用在磁盘文件中。
  • ADTS(Audio Data Transport Stream): 音频数据传输流。这种格式的特征是它每一单元音频数据都有一个header字节,解码可以在这个流中任何位置开始。

 

7.2 压缩

PCM数据是最原始的音频数据,完全无损,所以PCM数据虽然音质优秀但体积庞大,为了解决这个问题先后诞生了一系列的音频格式,这些音频格式运用不同的方法对音频数据进行压缩,其中有无损压缩和有损压缩两种。

  • 无损压缩:将数据压缩之后,通过解码还能还原成与原始数据一模一样的数据为无损压缩。
    • ALAC、APE、FLAC
  • 有损压缩:消除冗余信息,如人耳能听到的声音为20Hz - 20000Hz 以内,所以可以将此范围外的声音去除掉。
    • MP3、AAC、OGG、WMA

 

7.3 其他概念

  • 码率:(也成位速、比特率) 是指在一个数据流中每秒钟能通过的信息量,代表了压缩质量。

码率 = 采样率 ∗ 采样位数 ∗ 声道数 码率 = 采样率 * 采样位数 * 声道数 码率=采样率采样位数声道数

  • 音频帧: 音频数据是流式的,本身没有明确的一帧帧的概念,在实际的应用中,为了音频算法处理/传输的方便,一般约定俗成取2.5ms~60ms为单位的数据量为一帧音频。

 

img

8、参考文章

[1]:https://blog.csdn.net/weixin_41910694/article/details/107644742

[2]:https://blog.csdn.net/qq_22310551/article/details/123905051

img

举报

相关推荐

0 条评论