音视频编解码小白入门


4、视频编码基础知识
4.1视频和图像和关系

    好了,刚才说了图像,现在,我们开始说视频。

    所谓视频,大家从小就看动画,都知道视频是怎么来的吧?

音视频编解码小白入门

    没错,大量的图片连续起来,就是视频。

    衡量视频,又是用的什么指标参数呢?

    最主要的一个,就是帧率(Frame Rate)

    在视频中,一个帧(Frame)就是指一幅静止的画面。

 

    帧率,就是指视频每秒钟包括的画面数量(FPS,Frame per second)。 

    帧率越高,视频就越逼真、越流畅。 

音视频编解码小白入门

好文章,来自【福优学苑@音视频+流媒体】

4.2未经编码的视频数据量会有多大?

有了视频之后,就涉及到两个问题:

  • 一个是存储;
  • 二个是传输。

音视频编解码小白入门

而之所以会有视频编码,

关键就在于此:一个视频,如果未经编码,它的体积是非常庞大的。

以一个分辨率1920×1280,帧率30的视频为例:

共:1920×1280=2,073,600(Pixels 像素),每个像素点是24bit(前面算过的哦);
也就是:每幅图片2073600×24=49766400 bit,8 bit(位)=1 byte(字节);
所以:49766400bit=6220800byte≈6.22MB。


这是一幅1920×1280图片的原始大小,再乘以帧率30。

也就是说:每秒视频的大小是186.6MB,每分钟大约是11GB,一部90分钟的电影,约是1000GB。。。

怎么样呢?

就算你现在电脑硬盘是4TB的(实际也就3600GB),也放不下几部大片呀!

不仅要存储,还要传输,不然视频从哪来呢?

如果按照100M的网速(12.5MB/s),下刚才那部电影,需要22个小时。。。

我的天哪,再次崩溃。。。

正因为如此,屌丝工程师们就提出了,必须对视频进行编码。

好文章,来自【福优学苑@音视频+流媒体】

4.3什么是编码?

编码:就是按指定的方法,将信息从一种形式(格式),转换成另一种形式(格式)。

视频编码:就是将一种视频格式,转换成另一种视频格式。

音视频编解码小白入门

编码的终极目的,说白了,就是为了压缩。

各种五花八门的视频编码方式,都是为了让视频变得体积更小,有利于存储和传输。

我们先来看看,视频从录制到播放的整个过程,如下:

音视频编解码小白入门

首先是视频采集。

通常我们会使用摄像机、摄像头进行视频采集。

好文章,来自【福优学苑@音视频+流媒体】

音视频编解码小白入门

采集了视频数据之后,就要进行模数转换,将模拟信号变成数字信号。

    其实现在很多都是摄像机(摄像头)直接输出数字信号。

    信号输出之后,还要进行预处理,将RGB信号变成YUV信号。

 

前面我们介绍了RGB信号,那什么是YUV信号呢?

    简单来说,YUV就是另外一种颜色数字化表示方式。

    视频通信系统之所以要采用YUV,而不是RGB,主要是因为RGB信号不利于压缩。

    在YUV这种方式里面,加入了亮度这一概念。

    在最近几十年中,视频工程师发现,眼睛对于亮和暗的分辨要比对颜色的分辨更精细一些,也就是说,人眼对色度的敏感程度要低于对亮度的敏感程度。

    所以,工程师认为,在我们的视频存储中,没有必要存储全部颜色信号。

    我们可以把更多带宽留给黑—白信号(被称作“亮度”),将稍少的带宽留给彩色信号(被称作“色度”)。

    于是,就有了YUV。

    YUV里面的“Y”,就是亮度(Luma),“U”和“V”则是色度(Chroma)。

    

    大家偶尔会见到的Y'CbCr,也称为YUV,是YUV的压缩版本,不同之处在于Y'CbCr用于数字图像领域,YUV用于模拟信号领域,MPEG、DVD、摄像机中常说的YUV其实就是Y'CbCr。

音视频编解码小白入门

▲ YUV(Y'CbCr)是如何形成图像的

    YUV码流的存储格式其实与其采样的方式密切相关。

    (采样,就是捕捉数据)

好文章,来自【福优学苑@音视频+流媒体】

主流的采样方式有三种:

1)YUV4:4:4;

2)YUV4:2:2;

3)YUV4:2:0。

这里我们简单介绍一下。好文章,来自【福优学苑@音视频+流媒体】

具体解释起来有点繁琐,大家只需记住,通常用的是YUV4:2:0的采样方式,能获得1/2的压缩率。

这些预处理做完之后,就是正式的编码了。