FFMPEG之协议(文件)操作----AVIOContext, URLContext, URLProtocol

Posted 赢~

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了FFMPEG之协议(文件)操作----AVIOContext, URLContext, URLProtocol相关的知识,希望对你有一定的参考价值。

版权声明:本文为博主原创文章,未经博主允许不得转载。

协议操作对象结构:

 

 协议(文件)操作的顶层结构是AVIOContext,这个对象实现了带缓冲的读写操作;FFMPEG的输入对象AVFormat的pb字段指向一个AVIOContext。

AVIOContext的opaque实际指向一个URLContext对象,这个对象封装了协议对象及协议操作对象,其中prot指向具体的协议操作对象,priv_data指向具体的协议对象。

URLProtocol为协议操作对象,针对每种协议,会有一个这样的对象,每个协议操作对象和一个协议对象关联,比如,文件操作对象为ff_file_protocol,它关联的结构体是FileContext。


代码分析:

初始化AVIOFormat函数调用关系:

 

我们采用从底至上的方法分析源码。

URLProtocol是FFMPEG操作文件的结构(包括文件,网络数据流等等),包括open、close、read、write、seek等操作。

在在av_register_all()函数中,通过调用REGISTER_PROTOCOL()宏,所有的URLProtocol都保存在以first_protocol为链表头的链表中。

URLProtocol结构体的定义为(简化版,未完全列出所有成员):

  1. typedef struct URLProtocol {  
  2.    const char *name;   
  3.     int     (*url_open)( URLContext *h, const char *url, int flags);      
  4.     int     (*url_read)( URLContext *h, unsigned char *buf, int size);  
  5.     int     (*url_write)(URLContext *h, const unsigned char *buf, int size);  
  6.     int64_t (*url_seek)( URLContext *h, int64_t pos, int whence);  
  7.     int     (*url_close)(URLContext *h);  
  8.     int (*url_get_file_handle)(URLContext *h);  
  9.     struct URLProtocol *next;  // 指向下一个URLProtocol对象(所有URLProtocol以链表链接在一起)  
  10.     int priv_data_size;     // 和该URLProtocol对象关联的对象的大小  
  11.     const AVClass *priv_data_class; 
  12. } URLProtocol;

以文件协议为例,ff_file_protocol变量定义为:

  1. URLProtocol ff_file_protocol = {  
  2.     .name                = "file",  
  3.     .url_open            = file_open,  
  4.     .url_read            = file_read,  
  5.     .url_write           = file_write,  
  6.     .url_seek            = file_seek,  
  7.     .url_close           = file_close,  
  8.     .url_get_file_handle = file_get_handle,  
  9.     .url_check           = file_check,  
  10.     .priv_data_size      = sizeof(FileContext),  
  11.     .priv_data_class     = &file_class,  
  12. };

从中可以看出,.priv_data_size的值为sizeof(FileContext),即ff_file_protocol和FileContext想关联。


FileContext对象的定义为:

  1. typedef struct FileContext {  
  2.     const AVClass *class;  
  3.     int fd; <span style="white-space:pre">    </span>// 文件描述符  
  4.     int trunc;      // 截断属性  
  5.     int blocksize;  // 块大小,每次读写文件最大字节数  
  6. } FileContext;

返回去看ff_file_protocol里的函数指针,以url_read成员为例,它指向file_read()函数,该函数的定义为:

  1. static int file_read(URLContext *h, unsigned char *buf, int size)  
  2. {  
  3.     FileContext *c = h->priv_data;  
  4.     int r;  
  5.     size = FFMIN(size, c->blocksize);  
  6.     r = read(c->fd, buf, size);  
  7.     return (-1 == r)?AVERROR(errno):r;  
  8. }

从代码可以看出:

1. 调用此函数时,URLContext的priv_data指向一个FileContext对象;

2. 该函数每次最大只读取FileContext.blocksize大小的数据。

从上面的代码中,还可发现一个重要的对象:URLContext,根据代码推测,这个对象的priv_data指向一个FileContext,下面来看看这个对象的定义及初始化:

定义:

 

  1. typedef struct URLContext {  
  2.     const AVClass *av_class;    /**< information for av_log(). Set by url_open(). */  
  3.     struct URLProtocol *prot;  
  4.     void *priv_data;  
  5.     char *filename;             /**< specified URL */  
  6.     int flags;  
  7.     int max_packet_size;        /**< if non zero, the stream is packetized with this max packet size */  
  8.     int is_streamed;            /**< true if streamed (no seek possible), default = false */  
  9.     int is_connected;  
  10.     AVIOInterruptCB interrupt_callback;  
  11.     int64_t rw_timeout;         /**< maximum time to wait for (network) read/write operation completion, in mcs */  
  12. } URLContext; 

注释已经很明了,接下来看看这个结构体的初始化,在url.h(URLContext定义的地方)文件中很容易发现有一个ffurl_open()函数,猜测这应该是个初始化函数,从

该函数的内容可知,它首先调用了ffurl_alloc()申请空间,然后调用了ffurl_connect()建立连接。因此我们的目标转向这两个函数

先看ffurl_alloc()函数,该函数先调用url_find_protocol()查找和输入文件名称对应的协议对象,然后调用url_alloc_for_protocol()申请空间。

url_find_protocol()易知:filename和协议匹配的规则是finename的前缀名(本地文件被统一处理为file前缀)和协议的name字段所指向的字符串相等。

再看url_alloc_for_protocol()函数:

 

  1. static int url_alloc_for_protocol(URLContext **puc, struct URLProtocol *up,  
  2.                                   const char *filename, int flags,  
  3.                                   const AVIOInterruptCB *int_cb)  
  4. {  
  5.     URLContext *uc;  
  6.     int err;  
  7.   
  8.     // ...  
  9.       
  10.     uc = av_mallocz(sizeof(URLContext) + strlen(filename) + 1); // 注意申请的空间大小  
  11.     if (!uc) {  
  12.         err = AVERROR(ENOMEM);  
  13.         goto fail;  
  14.     }  
  15.     uc->av_class = &ffurl_context_class;  
  16.     uc->filename = (char *)&uc[1];   // 指向uc+sizeof(URLContext)的低昂  
  17.     strcpy(uc->filename, filename);  
  18.     uc->prot            = up;  
  19.     uc->flags           = flags;  
  20.     uc->is_streamed     = 0; /* default = not streamed */  
  21.     uc->max_packet_size = 0; /* default: stream file */  
  22.     if (up->priv_data_size) {  
  23.         uc->priv_data = av_mallocz(up->priv_data_size);  
  24.         if (!uc->priv_data) {  
  25.             err = AVERROR(ENOMEM);  
  26.             goto fail;  
  27.         }  
  28.         if (up->priv_data_class) {  
  29.             int proto_len= strlen(up->name);  
  30.             char *start = strchr(uc->filename, \',\');  
  31.             *(const AVClass **)uc->priv_data = up->priv_data_class;  
  32.             av_opt_set_defaults(uc->priv_data);  
  33.     // ...  
  34.     }  

 

由上代码可以看出,URLContext的filename保存了输入文件名,prot字段保存了查找到的协议操作对象指针,flags由入参指定,is_streamed及max_packet_size默认值为0,

priv_data指向了一个由协议操作对象的priv_data_size指定大小的空间(考虑ff_file_protocol,即指向了一个sizeof(FileContext)大小的空间),且该空间的被初始化为0。

至此,URLContext的大部分内容已初始化,ffurl_alloc()工作已经完成,接着看ffurl_connect(),从代码易知,它调用了prot->url_open()函数打开协议,并设置了URLContext的

is_connected和is_streamed为1。

注意,av_opt_set_defaults(uc->priv_data)为为priv_data所指向的结构也进行了默认赋值操作,针对ff_file_protocol,赋值字段及值可参考file_options[]的定义:

 

  1. static const AVOption file_options[] = {  
  2.     { "truncate", "truncate existing files on write", offsetof(FileContext, trunc), AV_OPT_TYPE_INT, { .i64 = 1 }, 0, 1, AV_OPT_FLAG_ENCODING_PARAM },  
  3.     { "blocksize", "set I/O operation maximum block size", offsetof(FileContext, blocksize), AV_OPT_TYPE_INT, { .i64 = INT_MAX }, 1, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM },  
  4.     { NULL }  
  5. };

 

即,truncate字段赋值为1,blocksize字段赋值为INT_MAX。

最后看看file_open()函数,从代码容易看出,该函数打开了文件,并将文件句柄保存在FileContext的fd字段。并且,该函数还根据文件属性设置了FileContext的is_streamed的值。

URLContext再往上一层是AVIOContext,该结构体的定义为:

  1. typedef struct AVIOContext {  
  2.     const AVClass *av_class;  
  3.     unsigned char *buffer;  /**< 读写缓冲buffer起始地址 */  
  4.     int buffer_size;        /**< buffer大小 */  
  5.     unsigned char *buf_ptr; /**< Current position in the buffer */  
  6.     unsigned char *buf_end; /**< End of the data */  
  7.     void *opaque;           /**< 指向URLContext */  
  8.     int (*read_packet)(void *opaque, uint8_t *buf, int buf_size);   /* 指向ffurl_read() */  
  9.     int (*write_packet)(void *opaque, uint8_t *buf, int buf_size);  /* 指向ffurl_write() */  
  10.     int64_t (*seek)(void *opaque, int64_t offset, int whence);      /* 指向ffurl_seek() */  
  11.     int64_t pos;            /**< 当前buffer对应的文件内容中的位置 */  
  12.     int must_flush;         /**< true if the next seek should flush */  
  13.     int eof_reached;        /**< true if eof reached */  
  14.     int write_flag;         /**< true if open for writing */  
  15.     int max_packet_size;  
  16.     unsigned long checksum;  
  17.     unsigned char *checksum_ptr;  
  18.     unsigned long (*update_checksum)(unsigned long checksum, const uint8_t *buf, unsigned int size);  
  19.     int error;              /**< contains the error code or 0 if no error happened */  
  20.     int (*read_pause)(void *opaque, int pause);/  
  21.     int64_t (*read_seek)(void *opaque, int stream_index,  
  22.                          int64_t timestamp, int flags);  
  23.       
  24.     int seekable;   // 是否可seek,0表示不可搜索  
  25.     int64_t maxsize;  
  26.     int direct;  
  27.     int64_t bytes_read;  
  28.     int seek_count;  
  29.     int writeout_count;  
  30.     int orig_buffer_size;  
  31. }AVIOContext;

avio_open2()负责初始化AVIOContext,从代码易知,该函数首先调用ffurl_open()申请了一个URLContext对象并打开了文件。然后调用ffio_fdopen()申请一个AVIOContext对象并赋初值。

ffio_fdopen()先申请了一个读写缓冲buffer(结合文件协议,buffer大小为IO_BUFFER_SIZE),然后调用avio_alloc_context()赋值,注意ffurl_read,ffurl_write,ffurl_seek的地址作为入参被传入。

最终调用的是ffio_init_context赋值,结合入参可知:

AVIOContext.buffer指向申请到的buffer, AVIOContext.orig_buffer_size和AVIOContext.buffer_size值为buffer_size(I_BUFFER_SIZE),buf_ptr字段初始化为buffer的开始地址,opaque指向URLContext对象。

再关注下avio_read()函数:

 

  1. int avio_read(AVIOContext *s, unsigned char *buf, int size)  
  2. {  
  3.     int len, size1;  
  4.   
  5.     size1 = size;  
  6.     while (size > 0) {  
  7.         len = s->buf_end - s->buf_ptr;  
  8.         if (len > size)  
  9.             len = size;  
  10.         if (len == 0 || s->write_flag) {  
  11.             if((s->direct || size > s->buffer_size) && !s->update_checksum){  
  12.                 if(s->read_packet)  
  13.                     len = s->read_packet(s->opaque, buf, size);  
  14.                 if (len <= 0) {  
  15.                     /* do not modify buffer if EOF reached so that a seek back can 
  16.                     be done without rereading data */  
  17.                     s->eof_reached = 1;  
  18.                     if(len<0)  
  19.                         s->error= len;  
  20.                     break;  
  21.                 } else {  
  22.                     s->pos += len;  
  23.                     s->bytes_read += len;  
  24.                     size -= len;  
  25.                     buf += len;  
  26.                     s->buf_ptr = s->buffer;  
  27.                     s->buf_end = s->buffer/* + len*/;  
  28.                 }  
  29.             } else {  
  30.                 fill_buffer(s);  
  31.                 len = s->buf_end - s->buf_ptr;  
  32.                 if (len == 0)  
  33.                     break;  
  34.             }  
  35.         } else {  
  36.             memcpy(buf, s->buf_ptr, len);  
  37.             buf += len;  
  38.             s->buf_ptr += len;  
  39.             size -= len;  
  40.         }  
  41.     }  
  42.     if (size1 == size) {  
  43.         if (s->error)      return s->error;  
  44.         if (url_feof(s))   return AVERROR_EOF;  
  45.     }  
  46.     return size1 - size;  
  47. }

 

从代码易知,该函数实现了缓冲读写功能,即调用者传递的size比buffer_size大,则buffer_size的倍数部分会直接读取到buf,余数部分会首先读取buffer_size大小的数据到buffer(fill_buffer()函数),然后再拷贝到入参buf指向的地址中。

AVIOContext再往上一层是AVFormatContext对象,也是ffmpeg的顶层对象,AVFormatContext的pb字段指向一个AVIOContext对象。

 

以上是关于FFMPEG之协议(文件)操作----AVIOContext, URLContext, URLProtocol的主要内容,如果未能解决你的问题,请参考以下文章

FFmpeg之ffplay源码简要分析

FFmpeg之ffplay源码简要分析

python 模块之-ffmpeg 中文参数对照表

FFmpeg入门详解之124:Qt5 FFmpeg单路网络摄像头采集预览

使用ffmpeg来探测GB28181的ps流

使用ffmpeg把mp4与m3u8相互转换的操作