什么是"线大小对齐"?

what is 'linesize alignment' meaning?

本文关键字:对齐 什么      更新时间:2023-10-16

我正在 http://dranger.com/ffmpeg/tutorial01.html 遵循ffmpeg教程。

我刚刚发现avpicture_get_size函数已被弃用。

所以我检查了ffmpeg的文档(https://www.ffmpeg.org/doxygen/3.0/group__lavu__picture.html#ga24a67963c3ae0054a2a4bab35930e694)并找到了替代av_image_get_buffer_size

但我无法理解align参数的含义是"线大小对齐"......

这是什么意思?

FFmpeg的某些部分,特别是libavcodec,需要对齐的linesize[],这意味着它需要:

assert(linesize[0] % 32 == 0);
assert(linesize[1] % 32 == 0);
assert(linesize[2] % 32 == 0);

这允许它使用快速/对齐的 SIMD 例程(例如 SSE2/AVX2 movdqavmovdqa指令)进行数据访问,而不是较慢的未对齐对应项。

av_image_get_buffer_size函数的align参数是此行对齐,您需要它,因为缓冲区的大小受其影响。 例如,YUV 缓冲区中 Y 平面的大小实际上不是宽度 * 高度,而是线大小[0] * 高度。您将看到(特别是对于不是 16 或 32 的倍数的图像大小),当您将 align 增加到更高的 2 的幂时,返回值会慢慢增加。

实际上,如果您要将此图片用作调用的输出缓冲区,例如 avcodec_decode_video2,这应该是 32。对于 swscale/avfilter,我相信没有绝对的要求,但建议你仍然让它变成 32。

我的实践:

1.avpicture 已弃用的问题,我用 AVFrameimgutils 函数替换了 avpicture 函数。代码示例:

   //AVPicture           _picture;
   AVFrame             *_pictureFrame;
   uint8_t             *_pictureFrameData;

//_pictureValid = avpicture_alloc(&_picture,
//                                AV_PIX_FMT_RGB24,
//                               _videoCodecCtx->width,
//                               _videoCodecCtx->height) == 0;
_pictureFrame = av_frame_alloc();
_pictureFrame->width = _videoCodecCtx->width;
_pictureFrame->height = _videoCodecCtx->height;
_pictureFrame->format = AV_PIX_FMT_RGB24;
int size = av_image_get_buffer_size(_pictureFrame->format,
                                    _pictureFrame->width,
                                    _pictureFrame->height,
                                    1);
//dont forget to free _pictureFrameData at last                                    
_pictureFrameData = (uint8_t*)av_malloc(size);
 av_image_fill_arrays(_pictureFrame->data,
                      _pictureFrame->linesize,
                      _pictureFrameData,
                      _pictureFrame->format,
                      _pictureFrame->width,
                      _pictureFrame->height,
                      1);

if (_pictureFrame) {
    av_free(_pictureFrame);
    if (_pictureFrameData) {
        free(_pictureFrameData);
    }
}

2.对齐参数

首先,我将对齐设置为 32,但对于某些视频流,它不起作用,导致图像失真。然后我将其设置为 16我的环境:mac、Xcode、iPhone6),一些流运行良好。但是最后我将对齐设置为 1,因为我发现这个

Fill in the AVPicture fields, always assume a linesize alignment of 1. 

如果您查看版本 3.2 中 avpicture_get_size 的定义,您会看到以下代码:

int avpicture_get_size(enum AVPixelFormat pix_fmt, int width, int height)
{
    return av_image_get_buffer_size(pix_fmt, width, height, 1);
}

它只是调用建议的函数:av_image_get_buffer_sizealign参数设置为 1 。我没有进一步找出为什么1用于折旧功能的全部意义。与ffmpeg一样,人们可以通过阅读正确的代码和足够的代码(通过一些代码实验)来弄清楚。