关键词：
目录
视频编码流程
帧内预测
一张图像中相邻像素的亮度和色度信息是比较接近的，并且亮度和色度信息也是逐渐变化的，不会出现突变。
帧内预测是利用已经编码的像素值来预测待编码的像素值，达到减少空间冗余。已经编码的像素值变成码流，编码的像素会重建成重建像素，用来做之后待编码块的参考像素值。即，已经编码的块会解码成像素用来做参考像素。
块大小
不同块大小的帧内预测模式
H264 标准里，块分为宏块和子块，宏块的大小是 16x16(YUV 4:2:0 图像亮度块为 16x16 色度块为 8x8)
在帧内预测中，亮度宏块可以继续划分成16个 4X4的子块（因为图像中细节很多，需要划分更小的块来做预测会更精细）
1、宏块大小是 16x16，其中亮度块为 16x16，色度块为8x8
2、帧内预测中亮度块和色度块是分开独立进行预测
3、16x16 的亮度块可以继续划分为 16个4x4的子块
所以需要预测的有 4x4亮度块，16x16亮度块，8x8色度块的预测。
帧内预测模式
4x4 亮度块的帧内预测模式（9种）
1，Vertical模式：当前编码块的每一列的像素值，都是复制上边已经编码块最下面的行对应的值。
计算公式如下
| pred[x,y] = p[x,-1] 条件x,y = 0..3 |
垂直模式预测示意图如下
以下模式于此类似
2，Horizontal 模式：
当前编码块的每一列的像素值，都是复制左边已经编码块最右边的行对应的值。
3，DC模式：
当前编码亮度块的每一个像素值，是上边已经编码块的最下面那一行和左边已编码块右边最后一列的所有像素值的平均值。
4，Diagonal Down-Left 模式
上边块和右上块的像素通过插值得到
5、Diagonal Down-Right 模式
模式需要通过上边块、左边块和左上角对角的像素通过插值得到
6、Vertical-Right 模式
模式是需要通过上边块、左边块以及左上角对角的像素插值得到的
7、Horizontal-Down 模式
模式需要通过上边块、左边块以及左上角对角的像素插值得到
8、Vertical-Left模式
需要通过上边块和右上块最下面一行的像素通过插值得到
9，Horizontal-Up模式
通过左边块的像素通过插值得到
16x16亮度块的帧内预测模式
四种，Vertical模式，Honrizontal模式，DC模式和Plane模式
8x8色度块的帧内预测模式
DC模式,Vertical模式，Horizontal模式，Plane模式
帧内预测模式的选择
以亮度块为例。一个16x16的亮度块，直接使用4种16X16的帧内预测模式，也可以使用9种16个4x4的子块
对于每一个块或者子块，先得到预测块，再用实际待编码的块减去预测块就可以得到残差块。
三种模式得到最优预测模式
1、先对每一种预测的残差块的像素值求绝对值再求和，成为cost，然后取其中残差块绝对值之和最小的预测模式成为最优预测模式；
2、对残差块先进行Hadamard变换，变换到频域后再求绝对值求和，称为cost，然后取cost最小的预测模式为最优预测模式；
3、对残差块直接进行DCT变换 量化熵编码，计算得到失真大小和编码后的码流大小。然后通过率失真化的方法来选择最优预测模式；
率失真优化
预测后经过DCT变换再量化会丢失高频信息。一般来说QP越大，丢失的信息越多，失真就越大，但是码流大小也越小；反之，QP越小，丢失的信息越少，但是码流大小就越大。一般会在失真和码流大小之间平衡，找到在一定码率下，失真最小的模式作为最优的预测模式。
h.264/avc视频编解码技术详解二十三帧间预测编码：帧间预测编码的基本原理(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
h.264/avc视频编解码技术详解十二解析h.264码流的宏块结构（下）：h.264帧内编码宏块的预测结构(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
视频编解码—dct变换和量化
目录视频编码流程DCT变换Hadamard变换量化H264中的DCT变换和量化H264各模式的DCT变换和量化过程1、亮度16x16帧内预测块2，其它模式亮度块3，色度块小结视频编码流程DCT变换 离散余弦变换 它能将空域信... 查看详情
二、视频编解码基础知识
参考技术A图像信息经采集后生成的原始视频数据，数据量非常大，对于某些采集后直接本地播放的应用场合，不需要考虑压缩技术。但现实中更多的应用场合，涉及视频的传输与存储，传输网络与存储设备无法容忍原始视频数... 查看详情
视频编解码(代码片段)
视频编码==视频压缩视频解码==视频解压缩后播放视频压缩的情况对于物品没动，只有摄像头动的情况：全局运动预测存整体信息和镜头运动轨迹对于摄像头没动，镜头里只有局部物品运动的情况：存发生变化的（8x8）格子信息... 查看详情
视频编解码-帧间预测
...理亚像素差值亚像素精度运动搜索运动矢量预测SKIP模式视频编码流程 帧间预测 前后两帧图像变化比较小，视频的时间相关性。比较容易从前一帧中找到一个跟当前编码块差距很小的块作为预测 查看详情
视频编解码基本概念：gop
前言产品开发要求添加视频剪辑功能，翻阅有关的文档，查到了GOP(groupofpictures)这个概念。解析GOP说白了就是两个I帧之间的间隔.比较说GOP为120,如果是720p60的话,那就是2s一次I帧.?在视频编码序列中，主要有三种编码帧：I帧、P帧... 查看详情
h.264/avc视频编解码技术详解二十六帧间预测编码：宏块的帧间预测解码
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
音视频-h264结构
...压缩率就越高。 但GOP太大，点播场景进行视频的seek操作就会不方便。 RTC和直播场景中，网络丢包& 查看详情
h.264/avc视频编解码技术详解二十三帧间预测编码：帧间预测编码的基本原理(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
h.264/avc视频编解码技术详解二十四帧间预测编码：解码显示顺序与图像管理(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
h.264/avc视频编解码技术详解二十五帧间预测编码：参考帧列表(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
h.264/avc视频编解码技术详解二十四帧间预测编码：解码显示顺序与图像管理(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
h264编码原理之帧间预测与帧内预测
参考技术A视频的本质就是很多帧图片，在视频采集过程中其实就是图片采集，而h264编码就是对这些图片进行压缩，以便于存储和传输。针对一帧帧的图片，引申出以下的概念：·I帧：关键帧,采用帧内压缩技术举个例子，如果你... 查看详情
h264编码原理之帧间预测与帧内预测
...缩其他帧间预测压缩分析帧内预测压缩分析H264基本概念视频的本质就是很多帧图片，在视频采集过程中其实就是图片采集，而h264编码就是对这些图片进行压缩，以便于存储和传输。针对一帧帧的图片，引申出以... 查看详情
h.264/avc视频编解码技术详解二十五帧间预测编码：参考帧列表(代码片段)
《H.264/AVC视频编解码技术详解》视频教程已经在“CSDN学院”上线，视频中详述了H.264的背景、标准协议和实现，并通过一个实战工程的形式对H.264的标准进行解析和实现，欢迎观看！“纸上得来终觉浅，绝知此... 查看详情
音视频开发之旅（58)-h.264帧内预测
目录编码流程和数据格式回顾4×4亮度块的9中预测模式16×16亮度块的4种预测模式8×8色度块的4种预测模式JM代码资料收获一、编码流程和数据格式回顾我们先看下下图来回顾下编码流程一个编码图像通常划分一个或多个片，每... 查看详情
音视频开发之旅（58)-h.264帧内预测
目录编码流程和数据格式回顾4×4亮度块的9中预测模式16×16亮度块的4种预测模式8×8色度块的4种预测模式JM代码资料收获一、编码流程和数据格式回顾我们先看下下图来回顾下编码流程一个编码图像通常划分一个或多个片，每... 查看详情