【x264编码器】章节4——x264的帧内预测流程

定义 预测编码最基本的思想是不直接对信号进行编码，而是用前一信号对当前信号做出预测，对当前信号与预测值的差值进行编码传送。 为什么要用差值来编码呢？ 举个例子，假设图片是4x4，且没个像素点都是255，那么对255进行二进制编码至少需要8位，如果我们假设预测值是255，那么差值就是255-255=0，那么仅仅对0进行编码一位即可，这样就大大减少了码元的个数。 什么是帧内预测呢？ 帧内预测的目的就是使用比完整一帧少很多的数据来表示当前的一帧。 为什么可以进行帧内预测呢？ 一般的，相邻像素的亮度和色度值经常是非

        做了一段时间帧内，感觉对帧内预测的理解有加深了一些，今天来给帧内预测做个总结，也相当于巩固记忆啦。        相比起来，帧内预测真的是属于视频编码中最简单的模块了，内容也超级少，感觉最近帧内有点难做，性能提升都很少，第十次会议大部分的提案的性能都不高，而且大部分提案都集中于滤波，双向预测和多参考行预测这一块。       帧内预测的基本思想就是利用相邻像素的相关性去除空间冗...

I宏块使用帧内预测编码压缩数据，根据相邻宏块数据恢复当前宏块信息。值得注意的一点是，帧内预测所参考的相邻宏块数据是deblocking之前的像素值，因为上一宏块的deblocking依赖当前宏块像素值，但当前宏块数据还未重建。 1.帧内预测类型 帧内预测包含4种类型： 亮度4x4块Intra_4x4预测方式 亮度8x8块Intra_8x8预测方式 亮度16x16宏块Intra_16x16预测方式 色度8x8块预测方式。 帧内预测的输入为预测模式和相邻块像素值，输出为当前块的预测值。 2. 亮度Intr

H.264 帧内预测

X264_B_ADAPT_TRELLIS方案：会保留前面每次计算得到的最优帧结构方案，从而插入0到bframes逐次的B帧，求得当前长度最优方案，之后再这个基础上，计算长度+1的最优方案，不断迭代，直到处理完整个GOP，对应代码见slicetype_path_cost；宏块树比较简单的解释作用就是：帧与帧之间存在参考的关系，如果被参考的帧拥有更高的质量，那么通过调整一个帧，就可以改善一批帧质量，因此MB tree是根据帧被引用得程度，也可以认为是遗传给了其他帧多少信息，作为衡量该帧的重要性；

提供了一种方便的方式来根据指定的配置profile应用相应的设置到 x264 参数结构体上。不同的配置文件类型会对参数结构体进行不同的修改，以满足特定的编码需求。然后是编码器参数，包括帧参考数、最大关键帧间隔、最小关键帧间隔、B 帧数、场景切换阈值等。结构体的成员进行赋值，将其初始化为默认值。之后是一些编码器设置，如去块滤波、CABAC 编码、码率控制方法、参考帧压缩系数等。接下来是一系列与视频属性相关的参数，如色度格式、宽度、高度、宽高比等。然后是一些与日志输出、分析类型、量化矩阵等相关的参数。

3.遍历2Nx2N、2NxN、Nx2N、2NxnD、2NxnU、nRx2N、nLx2N、帧间的帧内预测模式，其中矩形和非对称划分，默认配置下，x265不需要遍历；中的merge模式流程，区别在于，x265默认配置下，只会获取3个候选项，而不是常规的5个候选项；1.先进行merge和skip模式的RD计算，如果不是skip模式最优，则继续往下执行；运动补偿主要是根据MV运动矢量指向的参考块，构建预测块的流程，对应代码分析如下；2.遍历进行运动补偿（仅做亮度），根据sa8d计算RD，选取最优的候选项；

本章对x265的帧内预测流程做了分析

对于16×16的亮度块，变换量化的过程包括两个部分：直流部分（DC）和交流部分（AC）。为了实现16×16亮度块的变换和量化，需要将其分为16个4×4的子块。与4×4模式不同的是，16×16模式首先从这16个4×4系数矩阵中提取出直流分量，并组成一个新的4×4矩阵。随后，对这个直流矩阵进行Hadamard变换，并进行量化处理。这段代码实现了对一个4x4块的DCT系数进行直流成分变换，并将结果存储在数组。这段代码实现了将两个4x4块的像素差值进行DCT变换，并将结果存储在。

x265搜索算法和对应的presetx265 preset配置搜索算法StarSearchmedium(默认)、fast、faster、veryfast、superfastHexSearchultrafastDiaSearch。

4.X264_AQ_AUTOVARIANCE_BIASED：会考虑所有宏块的qp调整的均值，公式=f_aq_strength * avg_adj * (qp_adj -(avg_adj - 0.5f * (avg_adj_pow2 - 14.f) / avg_adj)) + f_aq_strength * (1.f - 14.f / (qp_adj * qp_adj))B帧的QP不同于I/P帧的QP计算，而是由前后参考帧的QP经过偏移得到，详细过程可以查看rate_estimate_qscale；

hevc、h265、x265、编码器、x265API、基于x265的编码器、x265编码流程、x265demo、x265代码解析、x265流程解析

目录一、模块功能二、lookahead模块分析1.调用流程2.代码分析Lookahead::addPicture()Lookahead::checkLookaheadQueue()Lookahead::getDecidedPicture()Lookahead::findJob()Lookahead::slicetypeDecide()PreLookaheadGroup::processTasksLookaheadTLD::lowresIntraEstimate()Lookahead::slicetypeAn

1.useTransformSkip模式，此时会直接复制到量化内存中；4.如果开启了m_rdoqLevel，此时采用RDOQ的变换量化操作；2.4x4帧内模式，使用dst4x4进行4x4的dst变换；5.使用m_quantCoef进行常规量化操作；3.常规的dct变换；

lookahead是一种改善视频编码质量的技术，通过分析未来的视频帧，以在当前帧的编码过程中做出更好的决策。具体来讲，lookahead创建了一个队列，将输入的视频帧送入到这个队列当中，根据配置和视频内容来确定每一个视频帧的类型，从而提升编码质量。此外，在lookahead模块中还加入了mbtree和vbv技术，用于更加精确地调控。

该函数的作用是根据给定的SAO参数，生成亮度和色度分量的偏移量，并将偏移量应用于对应的CU。该函数的作用是为给定的CU选择最佳的SAO参数，包括合并模式和各个分量的偏移量。该函数的作用是根据当前CU的位置，在图像的边界处进行边界扩展操作。这样可以确保在进行滤波等后续处理时，边界像素的值是有效的，并且不会受到后续处理的影响。该函数的作用是对给定的CU进行去块滤波。它根据CU的层次结构递归地处理子CU，设置边界滤波的强度，并对每个块执行边界滤波操作。该函数的目的是对给定的CTU进行去块滤波。

x264编码器基于H.264标准的原理，该标准利用了时空预测、变换编码、熵编码等技术。为了优化编码过程，首先需要深入理解这些理论基础，如：时空预测：减少相邻帧之间的时间冗余和同一帧内像素间的空间冗余。变换编码：将空间域的信号转换到频率域，便于数据的压缩。熵编码：对信号进行压缩编码，以减少编码后的比特数。熵编码是一种无损数据压缩技术，它基于数据的统计特性将频繁出现的符号用较短的码表示，而不常见的符号使用较长的码表示。

对于CRF模式而言，右边这部分是是固定值m_rateFactorConstant，在初始化的时候确定，跟分辨率，qCompress这个参数是外部可设参数，默认值0.6，因此QP的选择只跟编码复杂度有关，跟码率无关，编码复杂度越高，QP值越高，因此可以一定程度上说CRF模式是恒定质量的编码模式。其中Complex表示当前帧的编码复杂度，x265中用lookahead模块计算的SATD作为衡量当前帧的复杂度，c为模型参数，qscale是率失真优化中的拉格朗日乘子，R为编码当前帧需要的比特数。