How LCEVC Works

了解更多有关新兴编解码器和标准的信息 Streaming Media West 2020.

阅读这段录音的完整文本:

Guido Meardi: Very often, when talking about LCEVC, 我听到有人说"好得令人难以置信", or "how is it possible," or "it cannot be possible." So, 我的目标是确保你理解它是如何工作的，以及它不是魔法的事实. It's actually pretty simple also; that's why it's "low complexity."

Essentially, 编解码器通过使用另一个较低分辨率的编解码器来工作, of course, 为了确保杠杆编解码器加增强的组合实体消耗更少的功率和更少的带宽，一个要求是在较低的分辨率下使用杠杆编解码器，以便它可以专注于更少的像素. 所以，更少的处理，它可以比旋转那些像素更有效. And then, the high frequency, 因此，额外的数据使用特殊的编码器进行编码, which is LCEVC, 它专门针对编码增强数据.

我稍后会展示什么是增强数据, but essentially, LCEVC所做的是编码低分辨率，然后是低分辨率和高分辨率之间的增量, top quality, 使用此特殊增强编解码器进行编码.

At the decoding side, 视频流是包含两个基本流的主流, a normal stream of the base codec, 增强流可以打包为单独的PID或SICI元数据, 或者甚至作为一个独立的流发送——有几个选项.

But at the decoding side, there is a standard decoder, 甚至可以解码基本编解码器的硬件, and then, 分别对增强信号进行解码，并与基集进行叠加和合并，以获得最终输出. 如果你想用更直观的方式看的话, 这有点像解码点的工作原理, 用传统编解码器编码的缩略视频或低分辨率视频在哪里, whether H.264, HEVC, AV1, whatever. 在上采样之前有第一层残差校正.

There can be also an upsampling pass here--it depends; it's parametric. 有一个校正层，在最重要的上采样之前进行校正, that brings to full resolution, and then, 有一个额外的残差子层，在最后添加细节. Also, leveraging a temporal buffer.

Importantly, as you can see, 一个LCVEC和代码的这些子层不是图片, they are residuals, and that's actually quite important, 因为它们是这样的:当你谈论细节时, 这是LCEVC用1080p编码的一个例子, in this case, 很明显是一级方程式赛车的视频. 你可以看到有很多细节，很多点，很多边，很多文字细节. 这种高频的东西，对于传统的编解码器来说是非常昂贵的.

如果您使用的是带有大块的DCT, 考虑HEVC 64x64编码单元与DCT, when you have a single dot, 需要几十个系数来编码. LCEVC就是用来编码这些东西的, so it has very small transforms, 针对高频，在压缩高细节方面非常有效.