libavcodec: factor out SEI generation for A53 captions
[ffmpeg.git] / libavcodec / utils.c
1 /*
2  * utils for libavcodec
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
5  *
6  * This file is part of FFmpeg.
7  *
8  * FFmpeg is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * FFmpeg is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with FFmpeg; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file
25  * utils.
26  */
27
28 #include "config.h"
29 #include "libavutil/atomic.h"
30 #include "libavutil/attributes.h"
31 #include "libavutil/avassert.h"
32 #include "libavutil/avstring.h"
33 #include "libavutil/bprint.h"
34 #include "libavutil/channel_layout.h"
35 #include "libavutil/crc.h"
36 #include "libavutil/frame.h"
37 #include "libavutil/hwcontext.h"
38 #include "libavutil/internal.h"
39 #include "libavutil/mathematics.h"
40 #include "libavutil/mem_internal.h"
41 #include "libavutil/pixdesc.h"
42 #include "libavutil/imgutils.h"
43 #include "libavutil/samplefmt.h"
44 #include "libavutil/dict.h"
45 #include "libavutil/thread.h"
46 #include "avcodec.h"
47 #include "libavutil/opt.h"
48 #include "me_cmp.h"
49 #include "mpegvideo.h"
50 #include "thread.h"
51 #include "frame_thread_encoder.h"
52 #include "internal.h"
53 #include "raw.h"
54 #include "bytestream.h"
55 #include "version.h"
56 #include <stdlib.h>
57 #include <stdarg.h>
58 #include <limits.h>
59 #include <float.h>
60 #if CONFIG_ICONV
61 # include <iconv.h>
62 #endif
63
64 #include "libavutil/ffversion.h"
65 const char av_codec_ffversion[] = "FFmpeg version " FFMPEG_VERSION;
66
67 #if HAVE_PTHREADS || HAVE_W32THREADS || HAVE_OS2THREADS
68 static int default_lockmgr_cb(void **arg, enum AVLockOp op)
69 {
70     void * volatile * mutex = arg;
71     int err;
72
73     switch (op) {
74     case AV_LOCK_CREATE:
75         return 0;
76     case AV_LOCK_OBTAIN:
77         if (!*mutex) {
78             pthread_mutex_t *tmp = av_malloc(sizeof(pthread_mutex_t));
79             if (!tmp)
80                 return AVERROR(ENOMEM);
81             if ((err = pthread_mutex_init(tmp, NULL))) {
82                 av_free(tmp);
83                 return AVERROR(err);
84             }
85             if (avpriv_atomic_ptr_cas(mutex, NULL, tmp)) {
86                 pthread_mutex_destroy(tmp);
87                 av_free(tmp);
88             }
89         }
90
91         if ((err = pthread_mutex_lock(*mutex)))
92             return AVERROR(err);
93
94         return 0;
95     case AV_LOCK_RELEASE:
96         if ((err = pthread_mutex_unlock(*mutex)))
97             return AVERROR(err);
98
99         return 0;
100     case AV_LOCK_DESTROY:
101         if (*mutex)
102             pthread_mutex_destroy(*mutex);
103         av_free(*mutex);
104         avpriv_atomic_ptr_cas(mutex, *mutex, NULL);
105         return 0;
106     }
107     return 1;
108 }
109 static int (*lockmgr_cb)(void **mutex, enum AVLockOp op) = default_lockmgr_cb;
110 #else
111 static int (*lockmgr_cb)(void **mutex, enum AVLockOp op) = NULL;
112 #endif
113
114
115 volatile int ff_avcodec_locked;
116 static int volatile entangled_thread_counter = 0;
117 static void *codec_mutex;
118 static void *avformat_mutex;
119
120 void av_fast_padded_malloc(void *ptr, unsigned int *size, size_t min_size)
121 {
122     uint8_t **p = ptr;
123     if (min_size > SIZE_MAX - AV_INPUT_BUFFER_PADDING_SIZE) {
124         av_freep(p);
125         *size = 0;
126         return;
127     }
128     if (!ff_fast_malloc(p, size, min_size + AV_INPUT_BUFFER_PADDING_SIZE, 1))
129         memset(*p + min_size, 0, AV_INPUT_BUFFER_PADDING_SIZE);
130 }
131
132 void av_fast_padded_mallocz(void *ptr, unsigned int *size, size_t min_size)
133 {
134     uint8_t **p = ptr;
135     if (min_size > SIZE_MAX - AV_INPUT_BUFFER_PADDING_SIZE) {
136         av_freep(p);
137         *size = 0;
138         return;
139     }
140     if (!ff_fast_malloc(p, size, min_size + AV_INPUT_BUFFER_PADDING_SIZE, 1))
141         memset(*p, 0, min_size + AV_INPUT_BUFFER_PADDING_SIZE);
142 }
143
144 /* encoder management */
145 static AVCodec *first_avcodec = NULL;
146 static AVCodec **last_avcodec = &first_avcodec;
147
148 AVCodec *av_codec_next(const AVCodec *c)
149 {
150     if (c)
151         return c->next;
152     else
153         return first_avcodec;
154 }
155
156 static av_cold void avcodec_init(void)
157 {
158     static int initialized = 0;
159
160     if (initialized != 0)
161         return;
162     initialized = 1;
163
164     if (CONFIG_ME_CMP)
165         ff_me_cmp_init_static();
166 }
167
168 int av_codec_is_encoder(const AVCodec *codec)
169 {
170     return codec && (codec->encode_sub || codec->encode2 ||codec->send_frame);
171 }
172
173 int av_codec_is_decoder(const AVCodec *codec)
174 {
175     return codec && (codec->decode || codec->send_packet);
176 }
177
178 av_cold void avcodec_register(AVCodec *codec)
179 {
180     AVCodec **p;
181     avcodec_init();
182     p = last_avcodec;
183     codec->next = NULL;
184
185     while(*p || avpriv_atomic_ptr_cas((void * volatile *)p, NULL, codec))
186         p = &(*p)->next;
187     last_avcodec = &codec->next;
188
189     if (codec->init_static_data)
190         codec->init_static_data(codec);
191 }
192
193 #if FF_API_EMU_EDGE
194 unsigned avcodec_get_edge_width(void)
195 {
196     return EDGE_WIDTH;
197 }
198 #endif
199
200 #if FF_API_SET_DIMENSIONS
201 void avcodec_set_dimensions(AVCodecContext *s, int width, int height)
202 {
203     int ret = ff_set_dimensions(s, width, height);
204     if (ret < 0) {
205         av_log(s, AV_LOG_WARNING, "Failed to set dimensions %d %d\n", width, height);
206     }
207 }
208 #endif
209
210 int ff_set_dimensions(AVCodecContext *s, int width, int height)
211 {
212     int ret = av_image_check_size(width, height, 0, s);
213
214     if (ret < 0)
215         width = height = 0;
216
217     s->coded_width  = width;
218     s->coded_height = height;
219     s->width        = AV_CEIL_RSHIFT(width,  s->lowres);
220     s->height       = AV_CEIL_RSHIFT(height, s->lowres);
221
222     return ret;
223 }
224
225 int ff_set_sar(AVCodecContext *avctx, AVRational sar)
226 {
227     int ret = av_image_check_sar(avctx->width, avctx->height, sar);
228
229     if (ret < 0) {
230         av_log(avctx, AV_LOG_WARNING, "ignoring invalid SAR: %d/%d\n",
231                sar.num, sar.den);
232         avctx->sample_aspect_ratio = (AVRational){ 0, 1 };
233         return ret;
234     } else {
235         avctx->sample_aspect_ratio = sar;
236     }
237     return 0;
238 }
239
240 int ff_side_data_update_matrix_encoding(AVFrame *frame,
241                                         enum AVMatrixEncoding matrix_encoding)
242 {
243     AVFrameSideData *side_data;
244     enum AVMatrixEncoding *data;
245
246     side_data = av_frame_get_side_data(frame, AV_FRAME_DATA_MATRIXENCODING);
247     if (!side_data)
248         side_data = av_frame_new_side_data(frame, AV_FRAME_DATA_MATRIXENCODING,
249                                            sizeof(enum AVMatrixEncoding));
250
251     if (!side_data)
252         return AVERROR(ENOMEM);
253
254     data  = (enum AVMatrixEncoding*)side_data->data;
255     *data = matrix_encoding;
256
257     return 0;
258 }
259
260 void avcodec_align_dimensions2(AVCodecContext *s, int *width, int *height,
261                                int linesize_align[AV_NUM_DATA_POINTERS])
262 {
263     int i;
264     int w_align = 1;
265     int h_align = 1;
266     AVPixFmtDescriptor const *desc = av_pix_fmt_desc_get(s->pix_fmt);
267
268     if (desc) {
269         w_align = 1 << desc->log2_chroma_w;
270         h_align = 1 << desc->log2_chroma_h;
271     }
272
273     switch (s->pix_fmt) {
274     case AV_PIX_FMT_YUV420P:
275     case AV_PIX_FMT_YUYV422:
276     case AV_PIX_FMT_YVYU422:
277     case AV_PIX_FMT_UYVY422:
278     case AV_PIX_FMT_YUV422P:
279     case AV_PIX_FMT_YUV440P:
280     case AV_PIX_FMT_YUV444P:
281     case AV_PIX_FMT_GBRP:
282     case AV_PIX_FMT_GBRAP:
283     case AV_PIX_FMT_GRAY8:
284     case AV_PIX_FMT_GRAY16BE:
285     case AV_PIX_FMT_GRAY16LE:
286     case AV_PIX_FMT_YUVJ420P:
287     case AV_PIX_FMT_YUVJ422P:
288     case AV_PIX_FMT_YUVJ440P:
289     case AV_PIX_FMT_YUVJ444P:
290     case AV_PIX_FMT_YUVA420P:
291     case AV_PIX_FMT_YUVA422P:
292     case AV_PIX_FMT_YUVA444P:
293     case AV_PIX_FMT_YUV420P9LE:
294     case AV_PIX_FMT_YUV420P9BE:
295     case AV_PIX_FMT_YUV420P10LE:
296     case AV_PIX_FMT_YUV420P10BE:
297     case AV_PIX_FMT_YUV420P12LE:
298     case AV_PIX_FMT_YUV420P12BE:
299     case AV_PIX_FMT_YUV420P14LE:
300     case AV_PIX_FMT_YUV420P14BE:
301     case AV_PIX_FMT_YUV420P16LE:
302     case AV_PIX_FMT_YUV420P16BE:
303     case AV_PIX_FMT_YUVA420P9LE:
304     case AV_PIX_FMT_YUVA420P9BE:
305     case AV_PIX_FMT_YUVA420P10LE:
306     case AV_PIX_FMT_YUVA420P10BE:
307     case AV_PIX_FMT_YUVA420P16LE:
308     case AV_PIX_FMT_YUVA420P16BE:
309     case AV_PIX_FMT_YUV422P9LE:
310     case AV_PIX_FMT_YUV422P9BE:
311     case AV_PIX_FMT_YUV422P10LE:
312     case AV_PIX_FMT_YUV422P10BE:
313     case AV_PIX_FMT_YUV422P12LE:
314     case AV_PIX_FMT_YUV422P12BE:
315     case AV_PIX_FMT_YUV422P14LE:
316     case AV_PIX_FMT_YUV422P14BE:
317     case AV_PIX_FMT_YUV422P16LE:
318     case AV_PIX_FMT_YUV422P16BE:
319     case AV_PIX_FMT_YUVA422P9LE:
320     case AV_PIX_FMT_YUVA422P9BE:
321     case AV_PIX_FMT_YUVA422P10LE:
322     case AV_PIX_FMT_YUVA422P10BE:
323     case AV_PIX_FMT_YUVA422P16LE:
324     case AV_PIX_FMT_YUVA422P16BE:
325     case AV_PIX_FMT_YUV440P10LE:
326     case AV_PIX_FMT_YUV440P10BE:
327     case AV_PIX_FMT_YUV440P12LE:
328     case AV_PIX_FMT_YUV440P12BE:
329     case AV_PIX_FMT_YUV444P9LE:
330     case AV_PIX_FMT_YUV444P9BE:
331     case AV_PIX_FMT_YUV444P10LE:
332     case AV_PIX_FMT_YUV444P10BE:
333     case AV_PIX_FMT_YUV444P12LE:
334     case AV_PIX_FMT_YUV444P12BE:
335     case AV_PIX_FMT_YUV444P14LE:
336     case AV_PIX_FMT_YUV444P14BE:
337     case AV_PIX_FMT_YUV444P16LE:
338     case AV_PIX_FMT_YUV444P16BE:
339     case AV_PIX_FMT_YUVA444P9LE:
340     case AV_PIX_FMT_YUVA444P9BE:
341     case AV_PIX_FMT_YUVA444P10LE:
342     case AV_PIX_FMT_YUVA444P10BE:
343     case AV_PIX_FMT_YUVA444P16LE:
344     case AV_PIX_FMT_YUVA444P16BE:
345     case AV_PIX_FMT_GBRP9LE:
346     case AV_PIX_FMT_GBRP9BE:
347     case AV_PIX_FMT_GBRP10LE:
348     case AV_PIX_FMT_GBRP10BE:
349     case AV_PIX_FMT_GBRP12LE:
350     case AV_PIX_FMT_GBRP12BE:
351     case AV_PIX_FMT_GBRP14LE:
352     case AV_PIX_FMT_GBRP14BE:
353     case AV_PIX_FMT_GBRP16LE:
354     case AV_PIX_FMT_GBRP16BE:
355     case AV_PIX_FMT_GBRAP12LE:
356     case AV_PIX_FMT_GBRAP12BE:
357     case AV_PIX_FMT_GBRAP16LE:
358     case AV_PIX_FMT_GBRAP16BE:
359         w_align = 16; //FIXME assume 16 pixel per macroblock
360         h_align = 16 * 2; // interlaced needs 2 macroblocks height
361         break;
362     case AV_PIX_FMT_YUV411P:
363     case AV_PIX_FMT_YUVJ411P:
364     case AV_PIX_FMT_UYYVYY411:
365         w_align = 32;
366         h_align = 16 * 2;
367         break;
368     case AV_PIX_FMT_YUV410P:
369         if (s->codec_id == AV_CODEC_ID_SVQ1) {
370             w_align = 64;
371             h_align = 64;
372         }
373         break;
374     case AV_PIX_FMT_RGB555:
375         if (s->codec_id == AV_CODEC_ID_RPZA) {
376             w_align = 4;
377             h_align = 4;
378         }
379         break;
380     case AV_PIX_FMT_PAL8:
381     case AV_PIX_FMT_BGR8:
382     case AV_PIX_FMT_RGB8:
383         if (s->codec_id == AV_CODEC_ID_SMC ||
384             s->codec_id == AV_CODEC_ID_CINEPAK) {
385             w_align = 4;
386             h_align = 4;
387         }
388         if (s->codec_id == AV_CODEC_ID_JV) {
389             w_align = 8;
390             h_align = 8;
391         }
392         break;
393     case AV_PIX_FMT_BGR24:
394         if ((s->codec_id == AV_CODEC_ID_MSZH) ||
395             (s->codec_id == AV_CODEC_ID_ZLIB)) {
396             w_align = 4;
397             h_align = 4;
398         }
399         break;
400     case AV_PIX_FMT_RGB24:
401         if (s->codec_id == AV_CODEC_ID_CINEPAK) {
402             w_align = 4;
403             h_align = 4;
404         }
405         break;
406     default:
407         break;
408     }
409
410     if (s->codec_id == AV_CODEC_ID_IFF_ILBM) {
411         w_align = FFMAX(w_align, 8);
412     }
413
414     *width  = FFALIGN(*width, w_align);
415     *height = FFALIGN(*height, h_align);
416     if (s->codec_id == AV_CODEC_ID_H264 || s->lowres) {
417         // some of the optimized chroma MC reads one line too much
418         // which is also done in mpeg decoders with lowres > 0
419         *height += 2;
420
421         // H.264 uses edge emulation for out of frame motion vectors, for this
422         // it requires a temporary area large enough to hold a 21x21 block,
423         // increasing witdth ensure that the temporary area is large enough,
424         // the next rounded up width is 32
425         *width = FFMAX(*width, 32);
426     }
427
428     for (i = 0; i < 4; i++)
429         linesize_align[i] = STRIDE_ALIGN;
430 }
431
432 void avcodec_align_dimensions(AVCodecContext *s, int *width, int *height)
433 {
434     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(s->pix_fmt);
435     int chroma_shift = desc->log2_chroma_w;
436     int linesize_align[AV_NUM_DATA_POINTERS];
437     int align;
438
439     avcodec_align_dimensions2(s, width, height, linesize_align);
440     align               = FFMAX(linesize_align[0], linesize_align[3]);
441     linesize_align[1] <<= chroma_shift;
442     linesize_align[2] <<= chroma_shift;
443     align               = FFMAX3(align, linesize_align[1], linesize_align[2]);
444     *width              = FFALIGN(*width, align);
445 }
446
447 int avcodec_enum_to_chroma_pos(int *xpos, int *ypos, enum AVChromaLocation pos)
448 {
449     if (pos <= AVCHROMA_LOC_UNSPECIFIED || pos >= AVCHROMA_LOC_NB)
450         return AVERROR(EINVAL);
451     pos--;
452
453     *xpos = (pos&1) * 128;
454     *ypos = ((pos>>1)^(pos<4)) * 128;
455
456     return 0;
457 }
458
459 enum AVChromaLocation avcodec_chroma_pos_to_enum(int xpos, int ypos)
460 {
461     int pos, xout, yout;
462
463     for (pos = AVCHROMA_LOC_UNSPECIFIED + 1; pos < AVCHROMA_LOC_NB; pos++) {
464         if (avcodec_enum_to_chroma_pos(&xout, &yout, pos) == 0 && xout == xpos && yout == ypos)
465             return pos;
466     }
467     return AVCHROMA_LOC_UNSPECIFIED;
468 }
469
470 int avcodec_fill_audio_frame(AVFrame *frame, int nb_channels,
471                              enum AVSampleFormat sample_fmt, const uint8_t *buf,
472                              int buf_size, int align)
473 {
474     int ch, planar, needed_size, ret = 0;
475
476     needed_size = av_samples_get_buffer_size(NULL, nb_channels,
477                                              frame->nb_samples, sample_fmt,
478                                              align);
479     if (buf_size < needed_size)
480         return AVERROR(EINVAL);
481
482     planar = av_sample_fmt_is_planar(sample_fmt);
483     if (planar && nb_channels > AV_NUM_DATA_POINTERS) {
484         if (!(frame->extended_data = av_mallocz_array(nb_channels,
485                                                 sizeof(*frame->extended_data))))
486             return AVERROR(ENOMEM);
487     } else {
488         frame->extended_data = frame->data;
489     }
490
491     if ((ret = av_samples_fill_arrays(frame->extended_data, &frame->linesize[0],
492                                       (uint8_t *)(intptr_t)buf, nb_channels, frame->nb_samples,
493                                       sample_fmt, align)) < 0) {
494         if (frame->extended_data != frame->data)
495             av_freep(&frame->extended_data);
496         return ret;
497     }
498     if (frame->extended_data != frame->data) {
499         for (ch = 0; ch < AV_NUM_DATA_POINTERS; ch++)
500             frame->data[ch] = frame->extended_data[ch];
501     }
502
503     return ret;
504 }
505
506 static int update_frame_pool(AVCodecContext *avctx, AVFrame *frame)
507 {
508     FramePool *pool = avctx->internal->pool;
509     int i, ret;
510
511     switch (avctx->codec_type) {
512     case AVMEDIA_TYPE_VIDEO: {
513         uint8_t *data[4];
514         int linesize[4];
515         int size[4] = { 0 };
516         int w = frame->width;
517         int h = frame->height;
518         int tmpsize, unaligned;
519
520         if (pool->format == frame->format &&
521             pool->width == frame->width && pool->height == frame->height)
522             return 0;
523
524         avcodec_align_dimensions2(avctx, &w, &h, pool->stride_align);
525
526         do {
527             // NOTE: do not align linesizes individually, this breaks e.g. assumptions
528             // that linesize[0] == 2*linesize[1] in the MPEG-encoder for 4:2:2
529             ret = av_image_fill_linesizes(linesize, avctx->pix_fmt, w);
530             if (ret < 0)
531                 return ret;
532             // increase alignment of w for next try (rhs gives the lowest bit set in w)
533             w += w & ~(w - 1);
534
535             unaligned = 0;
536             for (i = 0; i < 4; i++)
537                 unaligned |= linesize[i] % pool->stride_align[i];
538         } while (unaligned);
539
540         tmpsize = av_image_fill_pointers(data, avctx->pix_fmt, h,
541                                          NULL, linesize);
542         if (tmpsize < 0)
543             return -1;
544
545         for (i = 0; i < 3 && data[i + 1]; i++)
546             size[i] = data[i + 1] - data[i];
547         size[i] = tmpsize - (data[i] - data[0]);
548
549         for (i = 0; i < 4; i++) {
550             av_buffer_pool_uninit(&pool->pools[i]);
551             pool->linesize[i] = linesize[i];
552             if (size[i]) {
553                 pool->pools[i] = av_buffer_pool_init(size[i] + 16 + STRIDE_ALIGN - 1,
554                                                      CONFIG_MEMORY_POISONING ?
555                                                         NULL :
556                                                         av_buffer_allocz);
557                 if (!pool->pools[i]) {
558                     ret = AVERROR(ENOMEM);
559                     goto fail;
560                 }
561             }
562         }
563         pool->format = frame->format;
564         pool->width  = frame->width;
565         pool->height = frame->height;
566
567         break;
568         }
569     case AVMEDIA_TYPE_AUDIO: {
570         int ch     = av_frame_get_channels(frame); //av_get_channel_layout_nb_channels(frame->channel_layout);
571         int planar = av_sample_fmt_is_planar(frame->format);
572         int planes = planar ? ch : 1;
573
574         if (pool->format == frame->format && pool->planes == planes &&
575             pool->channels == ch && frame->nb_samples == pool->samples)
576             return 0;
577
578         av_buffer_pool_uninit(&pool->pools[0]);
579         ret = av_samples_get_buffer_size(&pool->linesize[0], ch,
580                                          frame->nb_samples, frame->format, 0);
581         if (ret < 0)
582             goto fail;
583
584         pool->pools[0] = av_buffer_pool_init(pool->linesize[0], NULL);
585         if (!pool->pools[0]) {
586             ret = AVERROR(ENOMEM);
587             goto fail;
588         }
589
590         pool->format     = frame->format;
591         pool->planes     = planes;
592         pool->channels   = ch;
593         pool->samples = frame->nb_samples;
594         break;
595         }
596     default: av_assert0(0);
597     }
598     return 0;
599 fail:
600     for (i = 0; i < 4; i++)
601         av_buffer_pool_uninit(&pool->pools[i]);
602     pool->format = -1;
603     pool->planes = pool->channels = pool->samples = 0;
604     pool->width  = pool->height = 0;
605     return ret;
606 }
607
608 static int audio_get_buffer(AVCodecContext *avctx, AVFrame *frame)
609 {
610     FramePool *pool = avctx->internal->pool;
611     int planes = pool->planes;
612     int i;
613
614     frame->linesize[0] = pool->linesize[0];
615
616     if (planes > AV_NUM_DATA_POINTERS) {
617         frame->extended_data = av_mallocz_array(planes, sizeof(*frame->extended_data));
618         frame->nb_extended_buf = planes - AV_NUM_DATA_POINTERS;
619         frame->extended_buf  = av_mallocz_array(frame->nb_extended_buf,
620                                           sizeof(*frame->extended_buf));
621         if (!frame->extended_data || !frame->extended_buf) {
622             av_freep(&frame->extended_data);
623             av_freep(&frame->extended_buf);
624             return AVERROR(ENOMEM);
625         }
626     } else {
627         frame->extended_data = frame->data;
628         av_assert0(frame->nb_extended_buf == 0);
629     }
630
631     for (i = 0; i < FFMIN(planes, AV_NUM_DATA_POINTERS); i++) {
632         frame->buf[i] = av_buffer_pool_get(pool->pools[0]);
633         if (!frame->buf[i])
634             goto fail;
635         frame->extended_data[i] = frame->data[i] = frame->buf[i]->data;
636     }
637     for (i = 0; i < frame->nb_extended_buf; i++) {
638         frame->extended_buf[i] = av_buffer_pool_get(pool->pools[0]);
639         if (!frame->extended_buf[i])
640             goto fail;
641         frame->extended_data[i + AV_NUM_DATA_POINTERS] = frame->extended_buf[i]->data;
642     }
643
644     if (avctx->debug & FF_DEBUG_BUFFERS)
645         av_log(avctx, AV_LOG_DEBUG, "default_get_buffer called on frame %p", frame);
646
647     return 0;
648 fail:
649     av_frame_unref(frame);
650     return AVERROR(ENOMEM);
651 }
652
653 static int video_get_buffer(AVCodecContext *s, AVFrame *pic)
654 {
655     FramePool *pool = s->internal->pool;
656     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(pic->format);
657     int i;
658
659     if (pic->data[0] || pic->data[1] || pic->data[2] || pic->data[3]) {
660         av_log(s, AV_LOG_ERROR, "pic->data[*]!=NULL in avcodec_default_get_buffer\n");
661         return -1;
662     }
663
664     if (!desc) {
665         av_log(s, AV_LOG_ERROR,
666             "Unable to get pixel format descriptor for format %s\n",
667             av_get_pix_fmt_name(pic->format));
668         return AVERROR(EINVAL);
669     }
670
671     memset(pic->data, 0, sizeof(pic->data));
672     pic->extended_data = pic->data;
673
674     for (i = 0; i < 4 && pool->pools[i]; i++) {
675         pic->linesize[i] = pool->linesize[i];
676
677         pic->buf[i] = av_buffer_pool_get(pool->pools[i]);
678         if (!pic->buf[i])
679             goto fail;
680
681         pic->data[i] = pic->buf[i]->data;
682     }
683     for (; i < AV_NUM_DATA_POINTERS; i++) {
684         pic->data[i] = NULL;
685         pic->linesize[i] = 0;
686     }
687     if (desc->flags & AV_PIX_FMT_FLAG_PAL ||
688         desc->flags & AV_PIX_FMT_FLAG_PSEUDOPAL)
689         avpriv_set_systematic_pal2((uint32_t *)pic->data[1], pic->format);
690
691     if (s->debug & FF_DEBUG_BUFFERS)
692         av_log(s, AV_LOG_DEBUG, "default_get_buffer called on pic %p\n", pic);
693
694     return 0;
695 fail:
696     av_frame_unref(pic);
697     return AVERROR(ENOMEM);
698 }
699
700 void ff_color_frame(AVFrame *frame, const int c[4])
701 {
702     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(frame->format);
703     int p, y, x;
704
705     av_assert0(desc->flags & AV_PIX_FMT_FLAG_PLANAR);
706
707     for (p = 0; p<desc->nb_components; p++) {
708         uint8_t *dst = frame->data[p];
709         int is_chroma = p == 1 || p == 2;
710         int bytes  = is_chroma ? AV_CEIL_RSHIFT(frame->width,  desc->log2_chroma_w) : frame->width;
711         int height = is_chroma ? AV_CEIL_RSHIFT(frame->height, desc->log2_chroma_h) : frame->height;
712         for (y = 0; y < height; y++) {
713             if (desc->comp[0].depth >= 9) {
714                 for (x = 0; x<bytes; x++)
715                     ((uint16_t*)dst)[x] = c[p];
716             }else
717                 memset(dst, c[p], bytes);
718             dst += frame->linesize[p];
719         }
720     }
721 }
722
723 int avcodec_default_get_buffer2(AVCodecContext *avctx, AVFrame *frame, int flags)
724 {
725     int ret;
726
727     if ((ret = update_frame_pool(avctx, frame)) < 0)
728         return ret;
729
730     switch (avctx->codec_type) {
731     case AVMEDIA_TYPE_VIDEO:
732         return video_get_buffer(avctx, frame);
733     case AVMEDIA_TYPE_AUDIO:
734         return audio_get_buffer(avctx, frame);
735     default:
736         return -1;
737     }
738 }
739
740 static int add_metadata_from_side_data(AVPacket *avpkt, AVFrame *frame)
741 {
742     int size;
743     const uint8_t *side_metadata;
744
745     AVDictionary **frame_md = avpriv_frame_get_metadatap(frame);
746
747     side_metadata = av_packet_get_side_data(avpkt,
748                                             AV_PKT_DATA_STRINGS_METADATA, &size);
749     return av_packet_unpack_dictionary(side_metadata, size, frame_md);
750 }
751
752 int ff_init_buffer_info(AVCodecContext *avctx, AVFrame *frame)
753 {
754     AVPacket *pkt = avctx->internal->pkt;
755     int i;
756     static const struct {
757         enum AVPacketSideDataType packet;
758         enum AVFrameSideDataType frame;
759     } sd[] = {
760         { AV_PKT_DATA_REPLAYGAIN ,                AV_FRAME_DATA_REPLAYGAIN },
761         { AV_PKT_DATA_DISPLAYMATRIX,              AV_FRAME_DATA_DISPLAYMATRIX },
762         { AV_PKT_DATA_STEREO3D,                   AV_FRAME_DATA_STEREO3D },
763         { AV_PKT_DATA_AUDIO_SERVICE_TYPE,         AV_FRAME_DATA_AUDIO_SERVICE_TYPE },
764         { AV_PKT_DATA_MASTERING_DISPLAY_METADATA, AV_FRAME_DATA_MASTERING_DISPLAY_METADATA },
765     };
766
767     if (pkt) {
768         frame->pkt_pts = pkt->pts;
769         av_frame_set_pkt_pos     (frame, pkt->pos);
770         av_frame_set_pkt_duration(frame, pkt->duration);
771         av_frame_set_pkt_size    (frame, pkt->size);
772
773         for (i = 0; i < FF_ARRAY_ELEMS(sd); i++) {
774             int size;
775             uint8_t *packet_sd = av_packet_get_side_data(pkt, sd[i].packet, &size);
776             if (packet_sd) {
777                 AVFrameSideData *frame_sd = av_frame_new_side_data(frame,
778                                                                    sd[i].frame,
779                                                                    size);
780                 if (!frame_sd)
781                     return AVERROR(ENOMEM);
782
783                 memcpy(frame_sd->data, packet_sd, size);
784             }
785         }
786         add_metadata_from_side_data(pkt, frame);
787     } else {
788         frame->pkt_pts = AV_NOPTS_VALUE;
789         av_frame_set_pkt_pos     (frame, -1);
790         av_frame_set_pkt_duration(frame, 0);
791         av_frame_set_pkt_size    (frame, -1);
792     }
793     frame->reordered_opaque = avctx->reordered_opaque;
794
795     if (frame->color_primaries == AVCOL_PRI_UNSPECIFIED)
796         frame->color_primaries = avctx->color_primaries;
797     if (frame->color_trc == AVCOL_TRC_UNSPECIFIED)
798         frame->color_trc = avctx->color_trc;
799     if (av_frame_get_colorspace(frame) == AVCOL_SPC_UNSPECIFIED)
800         av_frame_set_colorspace(frame, avctx->colorspace);
801     if (av_frame_get_color_range(frame) == AVCOL_RANGE_UNSPECIFIED)
802         av_frame_set_color_range(frame, avctx->color_range);
803     if (frame->chroma_location == AVCHROMA_LOC_UNSPECIFIED)
804         frame->chroma_location = avctx->chroma_sample_location;
805
806     switch (avctx->codec->type) {
807     case AVMEDIA_TYPE_VIDEO:
808         frame->format              = avctx->pix_fmt;
809         if (!frame->sample_aspect_ratio.num)
810             frame->sample_aspect_ratio = avctx->sample_aspect_ratio;
811
812         if (frame->width && frame->height &&
813             av_image_check_sar(frame->width, frame->height,
814                                frame->sample_aspect_ratio) < 0) {
815             av_log(avctx, AV_LOG_WARNING, "ignoring invalid SAR: %u/%u\n",
816                    frame->sample_aspect_ratio.num,
817                    frame->sample_aspect_ratio.den);
818             frame->sample_aspect_ratio = (AVRational){ 0, 1 };
819         }
820
821         break;
822     case AVMEDIA_TYPE_AUDIO:
823         if (!frame->sample_rate)
824             frame->sample_rate    = avctx->sample_rate;
825         if (frame->format < 0)
826             frame->format         = avctx->sample_fmt;
827         if (!frame->channel_layout) {
828             if (avctx->channel_layout) {
829                  if (av_get_channel_layout_nb_channels(avctx->channel_layout) !=
830                      avctx->channels) {
831                      av_log(avctx, AV_LOG_ERROR, "Inconsistent channel "
832                             "configuration.\n");
833                      return AVERROR(EINVAL);
834                  }
835
836                 frame->channel_layout = avctx->channel_layout;
837             } else {
838                 if (avctx->channels > FF_SANE_NB_CHANNELS) {
839                     av_log(avctx, AV_LOG_ERROR, "Too many channels: %d.\n",
840                            avctx->channels);
841                     return AVERROR(ENOSYS);
842                 }
843             }
844         }
845         av_frame_set_channels(frame, avctx->channels);
846         break;
847     }
848     return 0;
849 }
850
851 int ff_decode_frame_props(AVCodecContext *avctx, AVFrame *frame)
852 {
853     return ff_init_buffer_info(avctx, frame);
854 }
855
856 static void validate_avframe_allocation(AVCodecContext *avctx, AVFrame *frame)
857 {
858     if (avctx->codec_type == AVMEDIA_TYPE_VIDEO) {
859         int i;
860         int num_planes = av_pix_fmt_count_planes(frame->format);
861         const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(frame->format);
862         int flags = desc ? desc->flags : 0;
863         if (num_planes == 1 && (flags & AV_PIX_FMT_FLAG_PAL))
864             num_planes = 2;
865         for (i = 0; i < num_planes; i++) {
866             av_assert0(frame->data[i]);
867         }
868         // For now do not enforce anything for palette of pseudopal formats
869         if (num_planes == 1 && (flags & AV_PIX_FMT_FLAG_PSEUDOPAL))
870             num_planes = 2;
871         // For formats without data like hwaccel allow unused pointers to be non-NULL.
872         for (i = num_planes; num_planes > 0 && i < FF_ARRAY_ELEMS(frame->data); i++) {
873             if (frame->data[i])
874                 av_log(avctx, AV_LOG_ERROR, "Buffer returned by get_buffer2() did not zero unused plane pointers\n");
875             frame->data[i] = NULL;
876         }
877     }
878 }
879
880 static int get_buffer_internal(AVCodecContext *avctx, AVFrame *frame, int flags)
881 {
882     const AVHWAccel *hwaccel = avctx->hwaccel;
883     int override_dimensions = 1;
884     int ret;
885
886     if (avctx->codec_type == AVMEDIA_TYPE_VIDEO) {
887         if ((ret = av_image_check_size(avctx->width, avctx->height, 0, avctx)) < 0 || avctx->pix_fmt<0) {
888             av_log(avctx, AV_LOG_ERROR, "video_get_buffer: image parameters invalid\n");
889             return AVERROR(EINVAL);
890         }
891
892         if (frame->width <= 0 || frame->height <= 0) {
893             frame->width  = FFMAX(avctx->width,  AV_CEIL_RSHIFT(avctx->coded_width,  avctx->lowres));
894             frame->height = FFMAX(avctx->height, AV_CEIL_RSHIFT(avctx->coded_height, avctx->lowres));
895             override_dimensions = 0;
896         }
897
898         if (frame->data[0] || frame->data[1] || frame->data[2] || frame->data[3]) {
899             av_log(avctx, AV_LOG_ERROR, "pic->data[*]!=NULL in get_buffer_internal\n");
900             return AVERROR(EINVAL);
901         }
902     }
903     ret = ff_decode_frame_props(avctx, frame);
904     if (ret < 0)
905         return ret;
906
907     if (hwaccel) {
908         if (hwaccel->alloc_frame) {
909             ret = hwaccel->alloc_frame(avctx, frame);
910             goto end;
911         }
912     } else
913         avctx->sw_pix_fmt = avctx->pix_fmt;
914
915     ret = avctx->get_buffer2(avctx, frame, flags);
916     if (ret >= 0)
917         validate_avframe_allocation(avctx, frame);
918
919 end:
920     if (avctx->codec_type == AVMEDIA_TYPE_VIDEO && !override_dimensions) {
921         frame->width  = avctx->width;
922         frame->height = avctx->height;
923     }
924
925     return ret;
926 }
927
928 int ff_get_buffer(AVCodecContext *avctx, AVFrame *frame, int flags)
929 {
930     int ret = get_buffer_internal(avctx, frame, flags);
931     if (ret < 0) {
932         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
933         frame->width = frame->height = 0;
934     }
935     return ret;
936 }
937
938 static int reget_buffer_internal(AVCodecContext *avctx, AVFrame *frame)
939 {
940     AVFrame *tmp;
941     int ret;
942
943     av_assert0(avctx->codec_type == AVMEDIA_TYPE_VIDEO);
944
945     if (frame->data[0] && (frame->width != avctx->width || frame->height != avctx->height || frame->format != avctx->pix_fmt)) {
946         av_log(avctx, AV_LOG_WARNING, "Picture changed from size:%dx%d fmt:%s to size:%dx%d fmt:%s in reget buffer()\n",
947                frame->width, frame->height, av_get_pix_fmt_name(frame->format), avctx->width, avctx->height, av_get_pix_fmt_name(avctx->pix_fmt));
948         av_frame_unref(frame);
949     }
950
951     ff_init_buffer_info(avctx, frame);
952
953     if (!frame->data[0])
954         return ff_get_buffer(avctx, frame, AV_GET_BUFFER_FLAG_REF);
955
956     if (av_frame_is_writable(frame))
957         return ff_decode_frame_props(avctx, frame);
958
959     tmp = av_frame_alloc();
960     if (!tmp)
961         return AVERROR(ENOMEM);
962
963     av_frame_move_ref(tmp, frame);
964
965     ret = ff_get_buffer(avctx, frame, AV_GET_BUFFER_FLAG_REF);
966     if (ret < 0) {
967         av_frame_free(&tmp);
968         return ret;
969     }
970
971     av_frame_copy(frame, tmp);
972     av_frame_free(&tmp);
973
974     return 0;
975 }
976
977 int ff_reget_buffer(AVCodecContext *avctx, AVFrame *frame)
978 {
979     int ret = reget_buffer_internal(avctx, frame);
980     if (ret < 0)
981         av_log(avctx, AV_LOG_ERROR, "reget_buffer() failed\n");
982     return ret;
983 }
984
985 int avcodec_default_execute(AVCodecContext *c, int (*func)(AVCodecContext *c2, void *arg2), void *arg, int *ret, int count, int size)
986 {
987     int i;
988
989     for (i = 0; i < count; i++) {
990         int r = func(c, (char *)arg + i * size);
991         if (ret)
992             ret[i] = r;
993     }
994     return 0;
995 }
996
997 int avcodec_default_execute2(AVCodecContext *c, int (*func)(AVCodecContext *c2, void *arg2, int jobnr, int threadnr), void *arg, int *ret, int count)
998 {
999     int i;
1000
1001     for (i = 0; i < count; i++) {
1002         int r = func(c, arg, i, 0);
1003         if (ret)
1004             ret[i] = r;
1005     }
1006     return 0;
1007 }
1008
1009 enum AVPixelFormat avpriv_find_pix_fmt(const PixelFormatTag *tags,
1010                                        unsigned int fourcc)
1011 {
1012     while (tags->pix_fmt >= 0) {
1013         if (tags->fourcc == fourcc)
1014             return tags->pix_fmt;
1015         tags++;
1016     }
1017     return AV_PIX_FMT_NONE;
1018 }
1019
1020 static int is_hwaccel_pix_fmt(enum AVPixelFormat pix_fmt)
1021 {
1022     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(pix_fmt);
1023     return desc->flags & AV_PIX_FMT_FLAG_HWACCEL;
1024 }
1025
1026 enum AVPixelFormat avcodec_default_get_format(struct AVCodecContext *s, const enum AVPixelFormat *fmt)
1027 {
1028     while (*fmt != AV_PIX_FMT_NONE && is_hwaccel_pix_fmt(*fmt))
1029         ++fmt;
1030     return fmt[0];
1031 }
1032
1033 static AVHWAccel *find_hwaccel(enum AVCodecID codec_id,
1034                                enum AVPixelFormat pix_fmt)
1035 {
1036     AVHWAccel *hwaccel = NULL;
1037
1038     while ((hwaccel = av_hwaccel_next(hwaccel)))
1039         if (hwaccel->id == codec_id
1040             && hwaccel->pix_fmt == pix_fmt)
1041             return hwaccel;
1042     return NULL;
1043 }
1044
1045 static int setup_hwaccel(AVCodecContext *avctx,
1046                          const enum AVPixelFormat fmt,
1047                          const char *name)
1048 {
1049     AVHWAccel *hwa = find_hwaccel(avctx->codec_id, fmt);
1050     int ret        = 0;
1051
1052     if (avctx->active_thread_type & FF_THREAD_FRAME) {
1053         av_log(avctx, AV_LOG_WARNING,
1054                "Hardware accelerated decoding with frame threading is known to be unstable and its use is discouraged.\n");
1055     }
1056
1057     if (!hwa) {
1058         av_log(avctx, AV_LOG_ERROR,
1059                "Could not find an AVHWAccel for the pixel format: %s",
1060                name);
1061         return AVERROR(ENOENT);
1062     }
1063
1064     if (hwa->capabilities & HWACCEL_CODEC_CAP_EXPERIMENTAL &&
1065         avctx->strict_std_compliance > FF_COMPLIANCE_EXPERIMENTAL) {
1066         av_log(avctx, AV_LOG_WARNING, "Ignoring experimental hwaccel: %s\n",
1067                hwa->name);
1068         return AVERROR_PATCHWELCOME;
1069     }
1070
1071     if (hwa->priv_data_size) {
1072         avctx->internal->hwaccel_priv_data = av_mallocz(hwa->priv_data_size);
1073         if (!avctx->internal->hwaccel_priv_data)
1074             return AVERROR(ENOMEM);
1075     }
1076
1077     if (hwa->init) {
1078         ret = hwa->init(avctx);
1079         if (ret < 0) {
1080             av_freep(&avctx->internal->hwaccel_priv_data);
1081             return ret;
1082         }
1083     }
1084
1085     avctx->hwaccel = hwa;
1086
1087     return 0;
1088 }
1089
1090 int ff_get_format(AVCodecContext *avctx, const enum AVPixelFormat *fmt)
1091 {
1092     const AVPixFmtDescriptor *desc;
1093     enum AVPixelFormat *choices;
1094     enum AVPixelFormat ret;
1095     unsigned n = 0;
1096
1097     while (fmt[n] != AV_PIX_FMT_NONE)
1098         ++n;
1099
1100     av_assert0(n >= 1);
1101     avctx->sw_pix_fmt = fmt[n - 1];
1102     av_assert2(!is_hwaccel_pix_fmt(avctx->sw_pix_fmt));
1103
1104     choices = av_malloc_array(n + 1, sizeof(*choices));
1105     if (!choices)
1106         return AV_PIX_FMT_NONE;
1107
1108     memcpy(choices, fmt, (n + 1) * sizeof(*choices));
1109
1110     for (;;) {
1111         if (avctx->hwaccel && avctx->hwaccel->uninit)
1112             avctx->hwaccel->uninit(avctx);
1113         av_freep(&avctx->internal->hwaccel_priv_data);
1114         avctx->hwaccel = NULL;
1115
1116         ret = avctx->get_format(avctx, choices);
1117
1118         desc = av_pix_fmt_desc_get(ret);
1119         if (!desc) {
1120             ret = AV_PIX_FMT_NONE;
1121             break;
1122         }
1123
1124         if (!(desc->flags & AV_PIX_FMT_FLAG_HWACCEL))
1125             break;
1126 #if FF_API_CAP_VDPAU
1127         if (avctx->codec->capabilities&AV_CODEC_CAP_HWACCEL_VDPAU)
1128             break;
1129 #endif
1130
1131         if (!setup_hwaccel(avctx, ret, desc->name))
1132             break;
1133
1134         /* Remove failed hwaccel from choices */
1135         for (n = 0; choices[n] != ret; n++)
1136             av_assert0(choices[n] != AV_PIX_FMT_NONE);
1137
1138         do
1139             choices[n] = choices[n + 1];
1140         while (choices[n++] != AV_PIX_FMT_NONE);
1141     }
1142
1143     av_freep(&choices);
1144     return ret;
1145 }
1146
1147 MAKE_ACCESSORS(AVCodecContext, codec, AVRational, pkt_timebase)
1148 MAKE_ACCESSORS(AVCodecContext, codec, const AVCodecDescriptor *, codec_descriptor)
1149 MAKE_ACCESSORS(AVCodecContext, codec, int, lowres)
1150 MAKE_ACCESSORS(AVCodecContext, codec, int, seek_preroll)
1151 MAKE_ACCESSORS(AVCodecContext, codec, uint16_t*, chroma_intra_matrix)
1152
1153 unsigned av_codec_get_codec_properties(const AVCodecContext *codec)
1154 {
1155     return codec->properties;
1156 }
1157
1158 int av_codec_get_max_lowres(const AVCodec *codec)
1159 {
1160     return codec->max_lowres;
1161 }
1162
1163 int avpriv_codec_get_cap_skip_frame_fill_param(const AVCodec *codec){
1164     return !!(codec->caps_internal & FF_CODEC_CAP_SKIP_FRAME_FILL_PARAM);
1165 }
1166
1167 static void get_subtitle_defaults(AVSubtitle *sub)
1168 {
1169     memset(sub, 0, sizeof(*sub));
1170     sub->pts = AV_NOPTS_VALUE;
1171 }
1172
1173 static int64_t get_bit_rate(AVCodecContext *ctx)
1174 {
1175     int64_t bit_rate;
1176     int bits_per_sample;
1177
1178     switch (ctx->codec_type) {
1179     case AVMEDIA_TYPE_VIDEO:
1180     case AVMEDIA_TYPE_DATA:
1181     case AVMEDIA_TYPE_SUBTITLE:
1182     case AVMEDIA_TYPE_ATTACHMENT:
1183         bit_rate = ctx->bit_rate;
1184         break;
1185     case AVMEDIA_TYPE_AUDIO:
1186         bits_per_sample = av_get_bits_per_sample(ctx->codec_id);
1187         bit_rate = bits_per_sample ? ctx->sample_rate * (int64_t)ctx->channels * bits_per_sample : ctx->bit_rate;
1188         break;
1189     default:
1190         bit_rate = 0;
1191         break;
1192     }
1193     return bit_rate;
1194 }
1195
1196 int attribute_align_arg ff_codec_open2_recursive(AVCodecContext *avctx, const AVCodec *codec, AVDictionary **options)
1197 {
1198     int ret = 0;
1199
1200     ff_unlock_avcodec(codec);
1201
1202     ret = avcodec_open2(avctx, codec, options);
1203
1204     ff_lock_avcodec(avctx, codec);
1205     return ret;
1206 }
1207
1208 int attribute_align_arg avcodec_open2(AVCodecContext *avctx, const AVCodec *codec, AVDictionary **options)
1209 {
1210     int ret = 0;
1211     AVDictionary *tmp = NULL;
1212     const AVPixFmtDescriptor *pixdesc;
1213
1214     if (avcodec_is_open(avctx))
1215         return 0;
1216
1217     if ((!codec && !avctx->codec)) {
1218         av_log(avctx, AV_LOG_ERROR, "No codec provided to avcodec_open2()\n");
1219         return AVERROR(EINVAL);
1220     }
1221     if ((codec && avctx->codec && codec != avctx->codec)) {
1222         av_log(avctx, AV_LOG_ERROR, "This AVCodecContext was allocated for %s, "
1223                                     "but %s passed to avcodec_open2()\n", avctx->codec->name, codec->name);
1224         return AVERROR(EINVAL);
1225     }
1226     if (!codec)
1227         codec = avctx->codec;
1228
1229     if (avctx->extradata_size < 0 || avctx->extradata_size >= FF_MAX_EXTRADATA_SIZE)
1230         return AVERROR(EINVAL);
1231
1232     if (options)
1233         av_dict_copy(&tmp, *options, 0);
1234
1235     ret = ff_lock_avcodec(avctx, codec);
1236     if (ret < 0)
1237         return ret;
1238
1239     avctx->internal = av_mallocz(sizeof(AVCodecInternal));
1240     if (!avctx->internal) {
1241         ret = AVERROR(ENOMEM);
1242         goto end;
1243     }
1244
1245     avctx->internal->pool = av_mallocz(sizeof(*avctx->internal->pool));
1246     if (!avctx->internal->pool) {
1247         ret = AVERROR(ENOMEM);
1248         goto free_and_end;
1249     }
1250
1251     avctx->internal->to_free = av_frame_alloc();
1252     if (!avctx->internal->to_free) {
1253         ret = AVERROR(ENOMEM);
1254         goto free_and_end;
1255     }
1256
1257     avctx->internal->buffer_frame = av_frame_alloc();
1258     if (!avctx->internal->buffer_frame) {
1259         ret = AVERROR(ENOMEM);
1260         goto free_and_end;
1261     }
1262
1263     avctx->internal->buffer_pkt = av_packet_alloc();
1264     if (!avctx->internal->buffer_pkt) {
1265         ret = AVERROR(ENOMEM);
1266         goto free_and_end;
1267     }
1268
1269     if (codec->priv_data_size > 0) {
1270         if (!avctx->priv_data) {
1271             avctx->priv_data = av_mallocz(codec->priv_data_size);
1272             if (!avctx->priv_data) {
1273                 ret = AVERROR(ENOMEM);
1274                 goto end;
1275             }
1276             if (codec->priv_class) {
1277                 *(const AVClass **)avctx->priv_data = codec->priv_class;
1278                 av_opt_set_defaults(avctx->priv_data);
1279             }
1280         }
1281         if (codec->priv_class && (ret = av_opt_set_dict(avctx->priv_data, &tmp)) < 0)
1282             goto free_and_end;
1283     } else {
1284         avctx->priv_data = NULL;
1285     }
1286     if ((ret = av_opt_set_dict(avctx, &tmp)) < 0)
1287         goto free_and_end;
1288
1289     if (avctx->codec_whitelist && av_match_list(codec->name, avctx->codec_whitelist, ',') <= 0) {
1290         av_log(avctx, AV_LOG_ERROR, "Codec (%s) not on whitelist \'%s\'\n", codec->name, avctx->codec_whitelist);
1291         ret = AVERROR(EINVAL);
1292         goto free_and_end;
1293     }
1294
1295     // only call ff_set_dimensions() for non H.264/VP6F/DXV codecs so as not to overwrite previously setup dimensions
1296     if (!(avctx->coded_width && avctx->coded_height && avctx->width && avctx->height &&
1297           (avctx->codec_id == AV_CODEC_ID_H264 || avctx->codec_id == AV_CODEC_ID_VP6F || avctx->codec_id == AV_CODEC_ID_DXV))) {
1298     if (avctx->coded_width && avctx->coded_height)
1299         ret = ff_set_dimensions(avctx, avctx->coded_width, avctx->coded_height);
1300     else if (avctx->width && avctx->height)
1301         ret = ff_set_dimensions(avctx, avctx->width, avctx->height);
1302     if (ret < 0)
1303         goto free_and_end;
1304     }
1305
1306     if ((avctx->coded_width || avctx->coded_height || avctx->width || avctx->height)
1307         && (  av_image_check_size(avctx->coded_width, avctx->coded_height, 0, avctx) < 0
1308            || av_image_check_size(avctx->width,       avctx->height,       0, avctx) < 0)) {
1309         av_log(avctx, AV_LOG_WARNING, "Ignoring invalid width/height values\n");
1310         ff_set_dimensions(avctx, 0, 0);
1311     }
1312
1313     if (avctx->width > 0 && avctx->height > 0) {
1314         if (av_image_check_sar(avctx->width, avctx->height,
1315                                avctx->sample_aspect_ratio) < 0) {
1316             av_log(avctx, AV_LOG_WARNING, "ignoring invalid SAR: %u/%u\n",
1317                    avctx->sample_aspect_ratio.num,
1318                    avctx->sample_aspect_ratio.den);
1319             avctx->sample_aspect_ratio = (AVRational){ 0, 1 };
1320         }
1321     }
1322
1323     /* if the decoder init function was already called previously,
1324      * free the already allocated subtitle_header before overwriting it */
1325     if (av_codec_is_decoder(codec))
1326         av_freep(&avctx->subtitle_header);
1327
1328     if (avctx->channels > FF_SANE_NB_CHANNELS) {
1329         ret = AVERROR(EINVAL);
1330         goto free_and_end;
1331     }
1332
1333     avctx->codec = codec;
1334     if ((avctx->codec_type == AVMEDIA_TYPE_UNKNOWN || avctx->codec_type == codec->type) &&
1335         avctx->codec_id == AV_CODEC_ID_NONE) {
1336         avctx->codec_type = codec->type;
1337         avctx->codec_id   = codec->id;
1338     }
1339     if (avctx->codec_id != codec->id || (avctx->codec_type != codec->type
1340                                          && avctx->codec_type != AVMEDIA_TYPE_ATTACHMENT)) {
1341         av_log(avctx, AV_LOG_ERROR, "Codec type or id mismatches\n");
1342         ret = AVERROR(EINVAL);
1343         goto free_and_end;
1344     }
1345     avctx->frame_number = 0;
1346     avctx->codec_descriptor = avcodec_descriptor_get(avctx->codec_id);
1347
1348     if ((avctx->codec->capabilities & AV_CODEC_CAP_EXPERIMENTAL) &&
1349         avctx->strict_std_compliance > FF_COMPLIANCE_EXPERIMENTAL) {
1350         const char *codec_string = av_codec_is_encoder(codec) ? "encoder" : "decoder";
1351         AVCodec *codec2;
1352         av_log(avctx, AV_LOG_ERROR,
1353                "The %s '%s' is experimental but experimental codecs are not enabled, "
1354                "add '-strict %d' if you want to use it.\n",
1355                codec_string, codec->name, FF_COMPLIANCE_EXPERIMENTAL);
1356         codec2 = av_codec_is_encoder(codec) ? avcodec_find_encoder(codec->id) : avcodec_find_decoder(codec->id);
1357         if (!(codec2->capabilities & AV_CODEC_CAP_EXPERIMENTAL))
1358             av_log(avctx, AV_LOG_ERROR, "Alternatively use the non experimental %s '%s'.\n",
1359                 codec_string, codec2->name);
1360         ret = AVERROR_EXPERIMENTAL;
1361         goto free_and_end;
1362     }
1363
1364     if (avctx->codec_type == AVMEDIA_TYPE_AUDIO &&
1365         (!avctx->time_base.num || !avctx->time_base.den)) {
1366         avctx->time_base.num = 1;
1367         avctx->time_base.den = avctx->sample_rate;
1368     }
1369
1370     if (!HAVE_THREADS)
1371         av_log(avctx, AV_LOG_WARNING, "Warning: not compiled with thread support, using thread emulation\n");
1372
1373     if (CONFIG_FRAME_THREAD_ENCODER && av_codec_is_encoder(avctx->codec)) {
1374         ff_unlock_avcodec(codec); //we will instantiate a few encoders thus kick the counter to prevent false detection of a problem
1375         ret = ff_frame_thread_encoder_init(avctx, options ? *options : NULL);
1376         ff_lock_avcodec(avctx, codec);
1377         if (ret < 0)
1378             goto free_and_end;
1379     }
1380
1381     if (HAVE_THREADS
1382         && !(avctx->internal->frame_thread_encoder && (avctx->active_thread_type&FF_THREAD_FRAME))) {
1383         ret = ff_thread_init(avctx);
1384         if (ret < 0) {
1385             goto free_and_end;
1386         }
1387     }
1388     if (!HAVE_THREADS && !(codec->capabilities & AV_CODEC_CAP_AUTO_THREADS))
1389         avctx->thread_count = 1;
1390
1391     if (avctx->codec->max_lowres < avctx->lowres || avctx->lowres < 0) {
1392         av_log(avctx, AV_LOG_ERROR, "The maximum value for lowres supported by the decoder is %d\n",
1393                avctx->codec->max_lowres);
1394         ret = AVERROR(EINVAL);
1395         goto free_and_end;
1396     }
1397
1398 #if FF_API_VISMV
1399     if (avctx->debug_mv)
1400         av_log(avctx, AV_LOG_WARNING, "The 'vismv' option is deprecated, "
1401                "see the codecview filter instead.\n");
1402 #endif
1403
1404     if (av_codec_is_encoder(avctx->codec)) {
1405         int i;
1406 #if FF_API_CODED_FRAME
1407 FF_DISABLE_DEPRECATION_WARNINGS
1408         avctx->coded_frame = av_frame_alloc();
1409         if (!avctx->coded_frame) {
1410             ret = AVERROR(ENOMEM);
1411             goto free_and_end;
1412         }
1413 FF_ENABLE_DEPRECATION_WARNINGS
1414 #endif
1415         if (avctx->codec->sample_fmts) {
1416             for (i = 0; avctx->codec->sample_fmts[i] != AV_SAMPLE_FMT_NONE; i++) {
1417                 if (avctx->sample_fmt == avctx->codec->sample_fmts[i])
1418                     break;
1419                 if (avctx->channels == 1 &&
1420                     av_get_planar_sample_fmt(avctx->sample_fmt) ==
1421                     av_get_planar_sample_fmt(avctx->codec->sample_fmts[i])) {
1422                     avctx->sample_fmt = avctx->codec->sample_fmts[i];
1423                     break;
1424                 }
1425             }
1426             if (avctx->codec->sample_fmts[i] == AV_SAMPLE_FMT_NONE) {
1427                 char buf[128];
1428                 snprintf(buf, sizeof(buf), "%d", avctx->sample_fmt);
1429                 av_log(avctx, AV_LOG_ERROR, "Specified sample format %s is invalid or not supported\n",
1430                        (char *)av_x_if_null(av_get_sample_fmt_name(avctx->sample_fmt), buf));
1431                 ret = AVERROR(EINVAL);
1432                 goto free_and_end;
1433             }
1434         }
1435         if (avctx->codec->pix_fmts) {
1436             for (i = 0; avctx->codec->pix_fmts[i] != AV_PIX_FMT_NONE; i++)
1437                 if (avctx->pix_fmt == avctx->codec->pix_fmts[i])
1438                     break;
1439             if (avctx->codec->pix_fmts[i] == AV_PIX_FMT_NONE
1440                 && !((avctx->codec_id == AV_CODEC_ID_MJPEG || avctx->codec_id == AV_CODEC_ID_LJPEG)
1441                      && avctx->strict_std_compliance <= FF_COMPLIANCE_UNOFFICIAL)) {
1442                 char buf[128];
1443                 snprintf(buf, sizeof(buf), "%d", avctx->pix_fmt);
1444                 av_log(avctx, AV_LOG_ERROR, "Specified pixel format %s is invalid or not supported\n",
1445                        (char *)av_x_if_null(av_get_pix_fmt_name(avctx->pix_fmt), buf));
1446                 ret = AVERROR(EINVAL);
1447                 goto free_and_end;
1448             }
1449             if (avctx->codec->pix_fmts[i] == AV_PIX_FMT_YUVJ420P ||
1450                 avctx->codec->pix_fmts[i] == AV_PIX_FMT_YUVJ411P ||
1451                 avctx->codec->pix_fmts[i] == AV_PIX_FMT_YUVJ422P ||
1452                 avctx->codec->pix_fmts[i] == AV_PIX_FMT_YUVJ440P ||
1453                 avctx->codec->pix_fmts[i] == AV_PIX_FMT_YUVJ444P)
1454                 avctx->color_range = AVCOL_RANGE_JPEG;
1455         }
1456         if (avctx->codec->supported_samplerates) {
1457             for (i = 0; avctx->codec->supported_samplerates[i] != 0; i++)
1458                 if (avctx->sample_rate == avctx->codec->supported_samplerates[i])
1459                     break;
1460             if (avctx->codec->supported_samplerates[i] == 0) {
1461                 av_log(avctx, AV_LOG_ERROR, "Specified sample rate %d is not supported\n",
1462                        avctx->sample_rate);
1463                 ret = AVERROR(EINVAL);
1464                 goto free_and_end;
1465             }
1466         }
1467         if (avctx->sample_rate < 0) {
1468             av_log(avctx, AV_LOG_ERROR, "Specified sample rate %d is not supported\n",
1469                     avctx->sample_rate);
1470             ret = AVERROR(EINVAL);
1471             goto free_and_end;
1472         }
1473         if (avctx->codec->channel_layouts) {
1474             if (!avctx->channel_layout) {
1475                 av_log(avctx, AV_LOG_WARNING, "Channel layout not specified\n");
1476             } else {
1477                 for (i = 0; avctx->codec->channel_layouts[i] != 0; i++)
1478                     if (avctx->channel_layout == avctx->codec->channel_layouts[i])
1479                         break;
1480                 if (avctx->codec->channel_layouts[i] == 0) {
1481                     char buf[512];
1482                     av_get_channel_layout_string(buf, sizeof(buf), -1, avctx->channel_layout);
1483                     av_log(avctx, AV_LOG_ERROR, "Specified channel layout '%s' is not supported\n", buf);
1484                     ret = AVERROR(EINVAL);
1485                     goto free_and_end;
1486                 }
1487             }
1488         }
1489         if (avctx->channel_layout && avctx->channels) {
1490             int channels = av_get_channel_layout_nb_channels(avctx->channel_layout);
1491             if (channels != avctx->channels) {
1492                 char buf[512];
1493                 av_get_channel_layout_string(buf, sizeof(buf), -1, avctx->channel_layout);
1494                 av_log(avctx, AV_LOG_ERROR,
1495                        "Channel layout '%s' with %d channels does not match number of specified channels %d\n",
1496                        buf, channels, avctx->channels);
1497                 ret = AVERROR(EINVAL);
1498                 goto free_and_end;
1499             }
1500         } else if (avctx->channel_layout) {
1501             avctx->channels = av_get_channel_layout_nb_channels(avctx->channel_layout);
1502         }
1503         if (avctx->channels < 0) {
1504             av_log(avctx, AV_LOG_ERROR, "Specified number of channels %d is not supported\n",
1505                     avctx->channels);
1506             ret = AVERROR(EINVAL);
1507             goto free_and_end;
1508         }
1509         if(avctx->codec_type == AVMEDIA_TYPE_VIDEO) {
1510             pixdesc = av_pix_fmt_desc_get(avctx->pix_fmt);
1511             if (    avctx->bits_per_raw_sample < 0
1512                 || (avctx->bits_per_raw_sample > 8 && pixdesc->comp[0].depth <= 8)) {
1513                 av_log(avctx, AV_LOG_WARNING, "Specified bit depth %d not possible with the specified pixel formats depth %d\n",
1514                     avctx->bits_per_raw_sample, pixdesc->comp[0].depth);
1515                 avctx->bits_per_raw_sample = pixdesc->comp[0].depth;
1516             }
1517             if (avctx->width <= 0 || avctx->height <= 0) {
1518                 av_log(avctx, AV_LOG_ERROR, "dimensions not set\n");
1519                 ret = AVERROR(EINVAL);
1520                 goto free_and_end;
1521             }
1522         }
1523         if (   (avctx->codec_type == AVMEDIA_TYPE_VIDEO || avctx->codec_type == AVMEDIA_TYPE_AUDIO)
1524             && avctx->bit_rate>0 && avctx->bit_rate<1000) {
1525             av_log(avctx, AV_LOG_WARNING, "Bitrate %"PRId64" is extremely low, maybe you mean %"PRId64"k\n", (int64_t)avctx->bit_rate, (int64_t)avctx->bit_rate);
1526         }
1527
1528         if (!avctx->rc_initial_buffer_occupancy)
1529             avctx->rc_initial_buffer_occupancy = avctx->rc_buffer_size * 3 / 4;
1530
1531         if (avctx->ticks_per_frame && avctx->time_base.num &&
1532             avctx->ticks_per_frame > INT_MAX / avctx->time_base.num) {
1533             av_log(avctx, AV_LOG_ERROR,
1534                    "ticks_per_frame %d too large for the timebase %d/%d.",
1535                    avctx->ticks_per_frame,
1536                    avctx->time_base.num,
1537                    avctx->time_base.den);
1538             goto free_and_end;
1539         }
1540
1541         if (avctx->hw_frames_ctx) {
1542             AVHWFramesContext *frames_ctx = (AVHWFramesContext*)avctx->hw_frames_ctx->data;
1543             if (frames_ctx->format != avctx->pix_fmt) {
1544                 av_log(avctx, AV_LOG_ERROR,
1545                        "Mismatching AVCodecContext.pix_fmt and AVHWFramesContext.format\n");
1546                 ret = AVERROR(EINVAL);
1547                 goto free_and_end;
1548             }
1549         }
1550     }
1551
1552     avctx->pts_correction_num_faulty_pts =
1553     avctx->pts_correction_num_faulty_dts = 0;
1554     avctx->pts_correction_last_pts =
1555     avctx->pts_correction_last_dts = INT64_MIN;
1556
1557     if (   !CONFIG_GRAY && avctx->flags & AV_CODEC_FLAG_GRAY
1558         && avctx->codec_descriptor->type == AVMEDIA_TYPE_VIDEO)
1559         av_log(avctx, AV_LOG_WARNING,
1560                "gray decoding requested but not enabled at configuration time\n");
1561
1562     if (   avctx->codec->init && (!(avctx->active_thread_type&FF_THREAD_FRAME)
1563         || avctx->internal->frame_thread_encoder)) {
1564         ret = avctx->codec->init(avctx);
1565         if (ret < 0) {
1566             goto free_and_end;
1567         }
1568     }
1569
1570     ret=0;
1571
1572 #if FF_API_AUDIOENC_DELAY
1573     if (av_codec_is_encoder(avctx->codec))
1574         avctx->delay = avctx->initial_padding;
1575 #endif
1576
1577     if (av_codec_is_decoder(avctx->codec)) {
1578         if (!avctx->bit_rate)
1579             avctx->bit_rate = get_bit_rate(avctx);
1580         /* validate channel layout from the decoder */
1581         if (avctx->channel_layout) {
1582             int channels = av_get_channel_layout_nb_channels(avctx->channel_layout);
1583             if (!avctx->channels)
1584                 avctx->channels = channels;
1585             else if (channels != avctx->channels) {
1586                 char buf[512];
1587                 av_get_channel_layout_string(buf, sizeof(buf), -1, avctx->channel_layout);
1588                 av_log(avctx, AV_LOG_WARNING,
1589                        "Channel layout '%s' with %d channels does not match specified number of channels %d: "
1590                        "ignoring specified channel layout\n",
1591                        buf, channels, avctx->channels);
1592                 avctx->channel_layout = 0;
1593             }
1594         }
1595         if (avctx->channels && avctx->channels < 0 ||
1596             avctx->channels > FF_SANE_NB_CHANNELS) {
1597             ret = AVERROR(EINVAL);
1598             goto free_and_end;
1599         }
1600         if (avctx->sub_charenc) {
1601             if (avctx->codec_type != AVMEDIA_TYPE_SUBTITLE) {
1602                 av_log(avctx, AV_LOG_ERROR, "Character encoding is only "
1603                        "supported with subtitles codecs\n");
1604                 ret = AVERROR(EINVAL);
1605                 goto free_and_end;
1606             } else if (avctx->codec_descriptor->props & AV_CODEC_PROP_BITMAP_SUB) {
1607                 av_log(avctx, AV_LOG_WARNING, "Codec '%s' is bitmap-based, "
1608                        "subtitles character encoding will be ignored\n",
1609                        avctx->codec_descriptor->name);
1610                 avctx->sub_charenc_mode = FF_SUB_CHARENC_MODE_DO_NOTHING;
1611             } else {
1612                 /* input character encoding is set for a text based subtitle
1613                  * codec at this point */
1614                 if (avctx->sub_charenc_mode == FF_SUB_CHARENC_MODE_AUTOMATIC)
1615                     avctx->sub_charenc_mode = FF_SUB_CHARENC_MODE_PRE_DECODER;
1616
1617                 if (avctx->sub_charenc_mode == FF_SUB_CHARENC_MODE_PRE_DECODER) {
1618 #if CONFIG_ICONV
1619                     iconv_t cd = iconv_open("UTF-8", avctx->sub_charenc);
1620                     if (cd == (iconv_t)-1) {
1621                         ret = AVERROR(errno);
1622                         av_log(avctx, AV_LOG_ERROR, "Unable to open iconv context "
1623                                "with input character encoding \"%s\"\n", avctx->sub_charenc);
1624                         goto free_and_end;
1625                     }
1626                     iconv_close(cd);
1627 #else
1628                     av_log(avctx, AV_LOG_ERROR, "Character encoding subtitles "
1629                            "conversion needs a libavcodec built with iconv support "
1630                            "for this codec\n");
1631                     ret = AVERROR(ENOSYS);
1632                     goto free_and_end;
1633 #endif
1634                 }
1635             }
1636         }
1637
1638 #if FF_API_AVCTX_TIMEBASE
1639         if (avctx->framerate.num > 0 && avctx->framerate.den > 0)
1640             avctx->time_base = av_inv_q(av_mul_q(avctx->framerate, (AVRational){avctx->ticks_per_frame, 1}));
1641 #endif
1642     }
1643     if (codec->priv_data_size > 0 && avctx->priv_data && codec->priv_class) {
1644         av_assert0(*(const AVClass **)avctx->priv_data == codec->priv_class);
1645     }
1646
1647 end:
1648     ff_unlock_avcodec(codec);
1649     if (options) {
1650         av_dict_free(options);
1651         *options = tmp;
1652     }
1653
1654     return ret;
1655 free_and_end:
1656     if (avctx->codec &&
1657         (avctx->codec->caps_internal & FF_CODEC_CAP_INIT_CLEANUP))
1658         avctx->codec->close(avctx);
1659
1660     if (codec->priv_class && codec->priv_data_size)
1661         av_opt_free(avctx->priv_data);
1662     av_opt_free(avctx);
1663
1664 #if FF_API_CODED_FRAME
1665 FF_DISABLE_DEPRECATION_WARNINGS
1666     av_frame_free(&avctx->coded_frame);
1667 FF_ENABLE_DEPRECATION_WARNINGS
1668 #endif
1669
1670     av_dict_free(&tmp);
1671     av_freep(&avctx->priv_data);
1672     if (avctx->internal) {
1673         av_packet_free(&avctx->internal->buffer_pkt);
1674         av_frame_free(&avctx->internal->buffer_frame);
1675         av_frame_free(&avctx->internal->to_free);
1676         av_freep(&avctx->internal->pool);
1677     }
1678     av_freep(&avctx->internal);
1679     avctx->codec = NULL;
1680     goto end;
1681 }
1682
1683 int ff_alloc_packet2(AVCodecContext *avctx, AVPacket *avpkt, int64_t size, int64_t min_size)
1684 {
1685     if (avpkt->size < 0) {
1686         av_log(avctx, AV_LOG_ERROR, "Invalid negative user packet size %d\n", avpkt->size);
1687         return AVERROR(EINVAL);
1688     }
1689     if (size < 0 || size > INT_MAX - AV_INPUT_BUFFER_PADDING_SIZE) {
1690         av_log(avctx, AV_LOG_ERROR, "Invalid minimum required packet size %"PRId64" (max allowed is %d)\n",
1691                size, INT_MAX - AV_INPUT_BUFFER_PADDING_SIZE);
1692         return AVERROR(EINVAL);
1693     }
1694
1695     if (avctx && 2*min_size < size) { // FIXME The factor needs to be finetuned
1696         av_assert0(!avpkt->data || avpkt->data != avctx->internal->byte_buffer);
1697         if (!avpkt->data || avpkt->size < size) {
1698             av_fast_padded_malloc(&avctx->internal->byte_buffer, &avctx->internal->byte_buffer_size, size);
1699             avpkt->data = avctx->internal->byte_buffer;
1700             avpkt->size = avctx->internal->byte_buffer_size;
1701         }
1702     }
1703
1704     if (avpkt->data) {
1705         AVBufferRef *buf = avpkt->buf;
1706
1707         if (avpkt->size < size) {
1708             av_log(avctx, AV_LOG_ERROR, "User packet is too small (%d < %"PRId64")\n", avpkt->size, size);
1709             return AVERROR(EINVAL);
1710         }
1711
1712         av_init_packet(avpkt);
1713         avpkt->buf      = buf;
1714         avpkt->size     = size;
1715         return 0;
1716     } else {
1717         int ret = av_new_packet(avpkt, size);
1718         if (ret < 0)
1719             av_log(avctx, AV_LOG_ERROR, "Failed to allocate packet of size %"PRId64"\n", size);
1720         return ret;
1721     }
1722 }
1723
1724 int ff_alloc_packet(AVPacket *avpkt, int size)
1725 {
1726     return ff_alloc_packet2(NULL, avpkt, size, 0);
1727 }
1728
1729 /**
1730  * Pad last frame with silence.
1731  */
1732 static int pad_last_frame(AVCodecContext *s, AVFrame **dst, const AVFrame *src)
1733 {
1734     AVFrame *frame = NULL;
1735     int ret;
1736
1737     if (!(frame = av_frame_alloc()))
1738         return AVERROR(ENOMEM);
1739
1740     frame->format         = src->format;
1741     frame->channel_layout = src->channel_layout;
1742     av_frame_set_channels(frame, av_frame_get_channels(src));
1743     frame->nb_samples     = s->frame_size;
1744     ret = av_frame_get_buffer(frame, 32);
1745     if (ret < 0)
1746         goto fail;
1747
1748     ret = av_frame_copy_props(frame, src);
1749     if (ret < 0)
1750         goto fail;
1751
1752     if ((ret = av_samples_copy(frame->extended_data, src->extended_data, 0, 0,
1753                                src->nb_samples, s->channels, s->sample_fmt)) < 0)
1754         goto fail;
1755     if ((ret = av_samples_set_silence(frame->extended_data, src->nb_samples,
1756                                       frame->nb_samples - src->nb_samples,
1757                                       s->channels, s->sample_fmt)) < 0)
1758         goto fail;
1759
1760     *dst = frame;
1761
1762     return 0;
1763
1764 fail:
1765     av_frame_free(&frame);
1766     return ret;
1767 }
1768
1769 int attribute_align_arg avcodec_encode_audio2(AVCodecContext *avctx,
1770                                               AVPacket *avpkt,
1771                                               const AVFrame *frame,
1772                                               int *got_packet_ptr)
1773 {
1774     AVFrame *extended_frame = NULL;
1775     AVFrame *padded_frame = NULL;
1776     int ret;
1777     AVPacket user_pkt = *avpkt;
1778     int needs_realloc = !user_pkt.data;
1779
1780     *got_packet_ptr = 0;
1781
1782     if (!avctx->codec->encode2) {
1783         av_log(avctx, AV_LOG_ERROR, "This encoder requires using the avcodec_send_frame() API.\n");
1784         return AVERROR(ENOSYS);
1785     }
1786
1787     if (!(avctx->codec->capabilities & AV_CODEC_CAP_DELAY) && !frame) {
1788         av_packet_unref(avpkt);
1789         av_init_packet(avpkt);
1790         return 0;
1791     }
1792
1793     /* ensure that extended_data is properly set */
1794     if (frame && !frame->extended_data) {
1795         if (av_sample_fmt_is_planar(avctx->sample_fmt) &&
1796             avctx->channels > AV_NUM_DATA_POINTERS) {
1797             av_log(avctx, AV_LOG_ERROR, "Encoding to a planar sample format, "
1798                                         "with more than %d channels, but extended_data is not set.\n",
1799                    AV_NUM_DATA_POINTERS);
1800             return AVERROR(EINVAL);
1801         }
1802         av_log(avctx, AV_LOG_WARNING, "extended_data is not set.\n");
1803
1804         extended_frame = av_frame_alloc();
1805         if (!extended_frame)
1806             return AVERROR(ENOMEM);
1807
1808         memcpy(extended_frame, frame, sizeof(AVFrame));
1809         extended_frame->extended_data = extended_frame->data;
1810         frame = extended_frame;
1811     }
1812
1813     /* extract audio service type metadata */
1814     if (frame) {
1815         AVFrameSideData *sd = av_frame_get_side_data(frame, AV_FRAME_DATA_AUDIO_SERVICE_TYPE);
1816         if (sd && sd->size >= sizeof(enum AVAudioServiceType))
1817             avctx->audio_service_type = *(enum AVAudioServiceType*)sd->data;
1818     }
1819
1820     /* check for valid frame size */
1821     if (frame) {
1822         if (avctx->codec->capabilities & AV_CODEC_CAP_SMALL_LAST_FRAME) {
1823             if (frame->nb_samples > avctx->frame_size) {
1824                 av_log(avctx, AV_LOG_ERROR, "more samples than frame size (avcodec_encode_audio2)\n");
1825                 ret = AVERROR(EINVAL);
1826                 goto end;
1827             }
1828         } else if (!(avctx->codec->capabilities & AV_CODEC_CAP_VARIABLE_FRAME_SIZE)) {
1829             if (frame->nb_samples < avctx->frame_size &&
1830                 !avctx->internal->last_audio_frame) {
1831                 ret = pad_last_frame(avctx, &padded_frame, frame);
1832                 if (ret < 0)
1833                     goto end;
1834
1835                 frame = padded_frame;
1836                 avctx->internal->last_audio_frame = 1;
1837             }
1838
1839             if (frame->nb_samples != avctx->frame_size) {
1840                 av_log(avctx, AV_LOG_ERROR, "nb_samples (%d) != frame_size (%d) (avcodec_encode_audio2)\n", frame->nb_samples, avctx->frame_size);
1841                 ret = AVERROR(EINVAL);
1842                 goto end;
1843             }
1844         }
1845     }
1846
1847     av_assert0(avctx->codec->encode2);
1848
1849     ret = avctx->codec->encode2(avctx, avpkt, frame, got_packet_ptr);
1850     if (!ret) {
1851         if (*got_packet_ptr) {
1852             if (!(avctx->codec->capabilities & AV_CODEC_CAP_DELAY)) {
1853                 if (avpkt->pts == AV_NOPTS_VALUE)
1854                     avpkt->pts = frame->pts;
1855                 if (!avpkt->duration)
1856                     avpkt->duration = ff_samples_to_time_base(avctx,
1857                                                               frame->nb_samples);
1858             }
1859             avpkt->dts = avpkt->pts;
1860         } else {
1861             avpkt->size = 0;
1862         }
1863     }
1864     if (avpkt->data && avpkt->data == avctx->internal->byte_buffer) {
1865         needs_realloc = 0;
1866         if (user_pkt.data) {
1867             if (user_pkt.size >= avpkt->size) {
1868                 memcpy(user_pkt.data, avpkt->data, avpkt->size);
1869             } else {
1870                 av_log(avctx, AV_LOG_ERROR, "Provided packet is too small, needs to be %d\n", avpkt->size);
1871                 avpkt->size = user_pkt.size;
1872                 ret = -1;
1873             }
1874             avpkt->buf      = user_pkt.buf;
1875             avpkt->data     = user_pkt.data;
1876         } else {
1877             if (av_dup_packet(avpkt) < 0) {
1878                 ret = AVERROR(ENOMEM);
1879             }
1880         }
1881     }
1882
1883     if (!ret) {
1884         if (needs_realloc && avpkt->data) {
1885             ret = av_buffer_realloc(&avpkt->buf, avpkt->size + AV_INPUT_BUFFER_PADDING_SIZE);
1886             if (ret >= 0)
1887                 avpkt->data = avpkt->buf->data;
1888         }
1889
1890         avctx->frame_number++;
1891     }
1892
1893     if (ret < 0 || !*got_packet_ptr) {
1894         av_packet_unref(avpkt);
1895         av_init_packet(avpkt);
1896         goto end;
1897     }
1898
1899     /* NOTE: if we add any audio encoders which output non-keyframe packets,
1900      *       this needs to be moved to the encoders, but for now we can do it
1901      *       here to simplify things */
1902     avpkt->flags |= AV_PKT_FLAG_KEY;
1903
1904 end:
1905     av_frame_free(&padded_frame);
1906     av_free(extended_frame);
1907
1908 #if FF_API_AUDIOENC_DELAY
1909     avctx->delay = avctx->initial_padding;
1910 #endif
1911
1912     return ret;
1913 }
1914
1915 int attribute_align_arg avcodec_encode_video2(AVCodecContext *avctx,
1916                                               AVPacket *avpkt,
1917                                               const AVFrame *frame,
1918                                               int *got_packet_ptr)
1919 {
1920     int ret;
1921     AVPacket user_pkt = *avpkt;
1922     int needs_realloc = !user_pkt.data;
1923
1924     *got_packet_ptr = 0;
1925
1926     if (!avctx->codec->encode2) {
1927         av_log(avctx, AV_LOG_ERROR, "This encoder requires using the avcodec_send_frame() API.\n");
1928         return AVERROR(ENOSYS);
1929     }
1930
1931     if(CONFIG_FRAME_THREAD_ENCODER &&
1932        avctx->internal->frame_thread_encoder && (avctx->active_thread_type&FF_THREAD_FRAME))
1933         return ff_thread_video_encode_frame(avctx, avpkt, frame, got_packet_ptr);
1934
1935     if ((avctx->flags&AV_CODEC_FLAG_PASS1) && avctx->stats_out)
1936         avctx->stats_out[0] = '\0';
1937
1938     if (!(avctx->codec->capabilities & AV_CODEC_CAP_DELAY) && !frame) {
1939         av_packet_unref(avpkt);
1940         av_init_packet(avpkt);
1941         avpkt->size = 0;
1942         return 0;
1943     }
1944
1945     if (av_image_check_size(avctx->width, avctx->height, 0, avctx))
1946         return AVERROR(EINVAL);
1947
1948     if (frame && frame->format == AV_PIX_FMT_NONE)
1949         av_log(avctx, AV_LOG_WARNING, "AVFrame.format is not set\n");
1950     if (frame && (frame->width == 0 || frame->height == 0))
1951         av_log(avctx, AV_LOG_WARNING, "AVFrame.width or height is not set\n");
1952
1953     av_assert0(avctx->codec->encode2);
1954
1955     ret = avctx->codec->encode2(avctx, avpkt, frame, got_packet_ptr);
1956     av_assert0(ret <= 0);
1957
1958     if (avpkt->data && avpkt->data == avctx->internal->byte_buffer) {
1959         needs_realloc = 0;
1960         if (user_pkt.data) {
1961             if (user_pkt.size >= avpkt->size) {
1962                 memcpy(user_pkt.data, avpkt->data, avpkt->size);
1963             } else {
1964                 av_log(avctx, AV_LOG_ERROR, "Provided packet is too small, needs to be %d\n", avpkt->size);
1965                 avpkt->size = user_pkt.size;
1966                 ret = -1;
1967             }
1968             avpkt->buf      = user_pkt.buf;
1969             avpkt->data     = user_pkt.data;
1970         } else {
1971             if (av_dup_packet(avpkt) < 0) {
1972                 ret = AVERROR(ENOMEM);
1973             }
1974         }
1975     }
1976
1977     if (!ret) {
1978         if (!*got_packet_ptr)
1979             avpkt->size = 0;
1980         else if (!(avctx->codec->capabilities & AV_CODEC_CAP_DELAY))
1981             avpkt->pts = avpkt->dts = frame->pts;
1982
1983         if (needs_realloc && avpkt->data) {
1984             ret = av_buffer_realloc(&avpkt->buf, avpkt->size + AV_INPUT_BUFFER_PADDING_SIZE);
1985             if (ret >= 0)
1986                 avpkt->data = avpkt->buf->data;
1987         }
1988
1989         avctx->frame_number++;
1990     }
1991
1992     if (ret < 0 || !*got_packet_ptr)
1993         av_packet_unref(avpkt);
1994
1995     emms_c();
1996     return ret;
1997 }
1998
1999 int avcodec_encode_subtitle(AVCodecContext *avctx, uint8_t *buf, int buf_size,
2000                             const AVSubtitle *sub)
2001 {
2002     int ret;
2003     if (sub->start_display_time) {
2004         av_log(avctx, AV_LOG_ERROR, "start_display_time must be 0.\n");
2005         return -1;
2006     }
2007
2008     ret = avctx->codec->encode_sub(avctx, buf, buf_size, sub);
2009     avctx->frame_number++;
2010     return ret;
2011 }
2012
2013 /**
2014  * Attempt to guess proper monotonic timestamps for decoded video frames
2015  * which might have incorrect times. Input timestamps may wrap around, in
2016  * which case the output will as well.
2017  *
2018  * @param pts the pts field of the decoded AVPacket, as passed through
2019  * AVFrame.pkt_pts
2020  * @param dts the dts field of the decoded AVPacket
2021  * @return one of the input values, may be AV_NOPTS_VALUE
2022  */
2023 static int64_t guess_correct_pts(AVCodecContext *ctx,
2024                                  int64_t reordered_pts, int64_t dts)
2025 {
2026     int64_t pts = AV_NOPTS_VALUE;
2027
2028     if (dts != AV_NOPTS_VALUE) {
2029         ctx->pts_correction_num_faulty_dts += dts <= ctx->pts_correction_last_dts;
2030         ctx->pts_correction_last_dts = dts;
2031     } else if (reordered_pts != AV_NOPTS_VALUE)
2032         ctx->pts_correction_last_dts = reordered_pts;
2033
2034     if (reordered_pts != AV_NOPTS_VALUE) {
2035         ctx->pts_correction_num_faulty_pts += reordered_pts <= ctx->pts_correction_last_pts;
2036         ctx->pts_correction_last_pts = reordered_pts;
2037     } else if(dts != AV_NOPTS_VALUE)
2038         ctx->pts_correction_last_pts = dts;
2039
2040     if ((ctx->pts_correction_num_faulty_pts<=ctx->pts_correction_num_faulty_dts || dts == AV_NOPTS_VALUE)
2041        && reordered_pts != AV_NOPTS_VALUE)
2042         pts = reordered_pts;
2043     else
2044         pts = dts;
2045
2046     return pts;
2047 }
2048
2049 static int apply_param_change(AVCodecContext *avctx, AVPacket *avpkt)
2050 {
2051     int size = 0, ret;
2052     const uint8_t *data;
2053     uint32_t flags;
2054     int64_t val;
2055
2056     data = av_packet_get_side_data(avpkt, AV_PKT_DATA_PARAM_CHANGE, &size);
2057     if (!data)
2058         return 0;
2059
2060     if (!(avctx->codec->capabilities & AV_CODEC_CAP_PARAM_CHANGE)) {
2061         av_log(avctx, AV_LOG_ERROR, "This decoder does not support parameter "
2062                "changes, but PARAM_CHANGE side data was sent to it.\n");
2063         ret = AVERROR(EINVAL);
2064         goto fail2;
2065     }
2066
2067     if (size < 4)
2068         goto fail;
2069
2070     flags = bytestream_get_le32(&data);
2071     size -= 4;
2072
2073     if (flags & AV_SIDE_DATA_PARAM_CHANGE_CHANNEL_COUNT) {
2074         if (size < 4)
2075             goto fail;
2076         val = bytestream_get_le32(&data);
2077         if (val <= 0 || val > INT_MAX) {
2078             av_log(avctx, AV_LOG_ERROR, "Invalid channel count");
2079             ret = AVERROR_INVALIDDATA;
2080             goto fail2;
2081         }
2082         avctx->channels = val;
2083         size -= 4;
2084     }
2085     if (flags & AV_SIDE_DATA_PARAM_CHANGE_CHANNEL_LAYOUT) {
2086         if (size < 8)
2087             goto fail;
2088         avctx->channel_layout = bytestream_get_le64(&data);
2089         size -= 8;
2090     }
2091     if (flags & AV_SIDE_DATA_PARAM_CHANGE_SAMPLE_RATE) {
2092         if (size < 4)
2093             goto fail;
2094         val = bytestream_get_le32(&data);
2095         if (val <= 0 || val > INT_MAX) {
2096             av_log(avctx, AV_LOG_ERROR, "Invalid sample rate");
2097             ret = AVERROR_INVALIDDATA;
2098             goto fail2;
2099         }
2100         avctx->sample_rate = val;
2101         size -= 4;
2102     }
2103     if (flags & AV_SIDE_DATA_PARAM_CHANGE_DIMENSIONS) {
2104         if (size < 8)
2105             goto fail;
2106         avctx->width  = bytestream_get_le32(&data);
2107         avctx->height = bytestream_get_le32(&data);
2108         size -= 8;
2109         ret = ff_set_dimensions(avctx, avctx->width, avctx->height);
2110         if (ret < 0)
2111             goto fail2;
2112     }
2113
2114     return 0;
2115 fail:
2116     av_log(avctx, AV_LOG_ERROR, "PARAM_CHANGE side data too small.\n");
2117     ret = AVERROR_INVALIDDATA;
2118 fail2:
2119     if (ret < 0) {
2120         av_log(avctx, AV_LOG_ERROR, "Error applying parameter changes.\n");
2121         if (avctx->err_recognition & AV_EF_EXPLODE)
2122             return ret;
2123     }
2124     return 0;
2125 }
2126
2127 static int unrefcount_frame(AVCodecInternal *avci, AVFrame *frame)
2128 {
2129     int ret;
2130
2131     /* move the original frame to our backup */
2132     av_frame_unref(avci->to_free);
2133     av_frame_move_ref(avci->to_free, frame);
2134
2135     /* now copy everything except the AVBufferRefs back
2136      * note that we make a COPY of the side data, so calling av_frame_free() on
2137      * the caller's frame will work properly */
2138     ret = av_frame_copy_props(frame, avci->to_free);
2139     if (ret < 0)
2140         return ret;
2141
2142     memcpy(frame->data,     avci->to_free->data,     sizeof(frame->data));
2143     memcpy(frame->linesize, avci->to_free->linesize, sizeof(frame->linesize));
2144     if (avci->to_free->extended_data != avci->to_free->data) {
2145         int planes = av_frame_get_channels(avci->to_free);
2146         int size   = planes * sizeof(*frame->extended_data);
2147
2148         if (!size) {
2149             av_frame_unref(frame);
2150             return AVERROR_BUG;
2151         }
2152
2153         frame->extended_data = av_malloc(size);
2154         if (!frame->extended_data) {
2155             av_frame_unref(frame);
2156             return AVERROR(ENOMEM);
2157         }
2158         memcpy(frame->extended_data, avci->to_free->extended_data,
2159                size);
2160     } else
2161         frame->extended_data = frame->data;
2162
2163     frame->format         = avci->to_free->format;
2164     frame->width          = avci->to_free->width;
2165     frame->height         = avci->to_free->height;
2166     frame->channel_layout = avci->to_free->channel_layout;
2167     frame->nb_samples     = avci->to_free->nb_samples;
2168     av_frame_set_channels(frame, av_frame_get_channels(avci->to_free));
2169
2170     return 0;
2171 }
2172
2173 int attribute_align_arg avcodec_decode_video2(AVCodecContext *avctx, AVFrame *picture,
2174                                               int *got_picture_ptr,
2175                                               const AVPacket *avpkt)
2176 {
2177     AVCodecInternal *avci = avctx->internal;
2178     int ret;
2179     // copy to ensure we do not change avpkt
2180     AVPacket tmp = *avpkt;
2181
2182     if (!avctx->codec)
2183         return AVERROR(EINVAL);
2184     if (avctx->codec->type != AVMEDIA_TYPE_VIDEO) {
2185         av_log(avctx, AV_LOG_ERROR, "Invalid media type for video\n");
2186         return AVERROR(EINVAL);
2187     }
2188
2189     if (!avctx->codec->decode) {
2190         av_log(avctx, AV_LOG_ERROR, "This decoder requires using the avcodec_send_packet() API.\n");
2191         return AVERROR(ENOSYS);
2192     }
2193
2194     *got_picture_ptr = 0;
2195     if ((avctx->coded_width || avctx->coded_height) && av_image_check_size(avctx->coded_width, avctx->coded_height, 0, avctx))
2196         return AVERROR(EINVAL);
2197
2198     avctx->internal->pkt = avpkt;
2199     ret = apply_param_change(avctx, avpkt);
2200     if (ret < 0)
2201         return ret;
2202
2203     av_frame_unref(picture);
2204
2205     if ((avctx->codec->capabilities & AV_CODEC_CAP_DELAY) || avpkt->size ||
2206         (avctx->active_thread_type & FF_THREAD_FRAME)) {
2207         int did_split = av_packet_split_side_data(&tmp);
2208         ret = apply_param_change(avctx, &tmp);
2209         if (ret < 0)
2210             goto fail;
2211
2212         avctx->internal->pkt = &tmp;
2213         if (HAVE_THREADS && avctx->active_thread_type & FF_THREAD_FRAME)
2214             ret = ff_thread_decode_frame(avctx, picture, got_picture_ptr,
2215                                          &tmp);
2216         else {
2217             ret = avctx->codec->decode(avctx, picture, got_picture_ptr,
2218                                        &tmp);
2219             if (!(avctx->codec->caps_internal & FF_CODEC_CAP_SETS_PKT_DTS))
2220                 picture->pkt_dts = avpkt->dts;
2221
2222             if(!avctx->has_b_frames){
2223                 av_frame_set_pkt_pos(picture, avpkt->pos);
2224             }
2225             //FIXME these should be under if(!avctx->has_b_frames)
2226             /* get_buffer is supposed to set frame parameters */
2227             if (!(avctx->codec->capabilities & AV_CODEC_CAP_DR1)) {
2228                 if (!picture->sample_aspect_ratio.num)    picture->sample_aspect_ratio = avctx->sample_aspect_ratio;
2229                 if (!picture->width)                      picture->width               = avctx->width;
2230                 if (!picture->height)                     picture->height              = avctx->height;
2231                 if (picture->format == AV_PIX_FMT_NONE)   picture->format              = avctx->pix_fmt;
2232             }
2233         }
2234
2235 fail:
2236         emms_c(); //needed to avoid an emms_c() call before every return;
2237
2238         avctx->internal->pkt = NULL;
2239         if (did_split) {
2240             av_packet_free_side_data(&tmp);
2241             if(ret == tmp.size)
2242                 ret = avpkt->size;
2243         }
2244
2245         if (*got_picture_ptr) {
2246             if (!avctx->refcounted_frames) {
2247                 int err = unrefcount_frame(avci, picture);
2248                 if (err < 0)
2249                     return err;
2250             }
2251
2252             avctx->frame_number++;
2253             av_frame_set_best_effort_timestamp(picture,
2254                                                guess_correct_pts(avctx,
2255                                                                  picture->pkt_pts,
2256                                                                  picture->pkt_dts));
2257         } else
2258             av_frame_unref(picture);
2259     } else
2260         ret = 0;
2261
2262     /* many decoders assign whole AVFrames, thus overwriting extended_data;
2263      * make sure it's set correctly */
2264     av_assert0(!picture->extended_data || picture->extended_data == picture->data);
2265
2266 #if FF_API_AVCTX_TIMEBASE
2267     if (avctx->framerate.num > 0 && avctx->framerate.den > 0)
2268         avctx->time_base = av_inv_q(av_mul_q(avctx->framerate, (AVRational){avctx->ticks_per_frame, 1}));
2269 #endif
2270
2271     return ret;
2272 }
2273
2274 int attribute_align_arg avcodec_decode_audio4(AVCodecContext *avctx,
2275                                               AVFrame *frame,
2276                                               int *got_frame_ptr,
2277                                               const AVPacket *avpkt)
2278 {
2279     AVCodecInternal *avci = avctx->internal;
2280     int ret = 0;
2281
2282     *got_frame_ptr = 0;
2283
2284     if (!avctx->codec)
2285         return AVERROR(EINVAL);
2286
2287     if (!avctx->codec->decode) {
2288         av_log(avctx, AV_LOG_ERROR, "This decoder requires using the avcodec_send_packet() API.\n");
2289         return AVERROR(ENOSYS);
2290     }
2291
2292     if (!avpkt->data && avpkt->size) {
2293         av_log(avctx, AV_LOG_ERROR, "invalid packet: NULL data, size != 0\n");
2294         return AVERROR(EINVAL);
2295     }
2296     if (avctx->codec->type != AVMEDIA_TYPE_AUDIO) {
2297         av_log(avctx, AV_LOG_ERROR, "Invalid media type for audio\n");
2298         return AVERROR(EINVAL);
2299     }
2300
2301     av_frame_unref(frame);
2302
2303     if ((avctx->codec->capabilities & AV_CODEC_CAP_DELAY) || avpkt->size || (avctx->active_thread_type & FF_THREAD_FRAME)) {
2304         uint8_t *side;
2305         int side_size;
2306         uint32_t discard_padding = 0;
2307         uint8_t skip_reason = 0;
2308         uint8_t discard_reason = 0;
2309         // copy to ensure we do not change avpkt
2310         AVPacket tmp = *avpkt;
2311         int did_split = av_packet_split_side_data(&tmp);
2312         ret = apply_param_change(avctx, &tmp);
2313         if (ret < 0)
2314             goto fail;
2315
2316         avctx->internal->pkt = &tmp;
2317         if (HAVE_THREADS && avctx->active_thread_type & FF_THREAD_FRAME)
2318             ret = ff_thread_decode_frame(avctx, frame, got_frame_ptr, &tmp);
2319         else {
2320             ret = avctx->codec->decode(avctx, frame, got_frame_ptr, &tmp);
2321             av_assert0(ret <= tmp.size);
2322             frame->pkt_dts = avpkt->dts;
2323         }
2324         if (ret >= 0 && *got_frame_ptr) {
2325             avctx->frame_number++;
2326             av_frame_set_best_effort_timestamp(frame,
2327                                                guess_correct_pts(avctx,
2328                                                                  frame->pkt_pts,
2329                                                                  frame->pkt_dts));
2330             if (frame->format == AV_SAMPLE_FMT_NONE)
2331                 frame->format = avctx->sample_fmt;
2332             if (!frame->channel_layout)
2333                 frame->channel_layout = avctx->channel_layout;
2334             if (!av_frame_get_channels(frame))
2335                 av_frame_set_channels(frame, avctx->channels);
2336             if (!frame->sample_rate)
2337                 frame->sample_rate = avctx->sample_rate;
2338         }
2339
2340         side= av_packet_get_side_data(avctx->internal->pkt, AV_PKT_DATA_SKIP_SAMPLES, &side_size);
2341         if(side && side_size>=10) {
2342             avctx->internal->skip_samples = AV_RL32(side);
2343             discard_padding = AV_RL32(side + 4);
2344             av_log(avctx, AV_LOG_DEBUG, "skip %d / discard %d samples due to side data\n",
2345                    avctx->internal->skip_samples, (int)discard_padding);
2346             skip_reason = AV_RL8(side + 8);
2347             discard_reason = AV_RL8(side + 9);
2348         }
2349         if (avctx->internal->skip_samples > 0 && *got_frame_ptr &&
2350             !(avctx->flags2 & AV_CODEC_FLAG2_SKIP_MANUAL)) {
2351             if(frame->nb_samples <= avctx->internal->skip_samples){
2352                 *got_frame_ptr = 0;
2353                 avctx->internal->skip_samples -= frame->nb_samples;
2354                 av_log(avctx, AV_LOG_DEBUG, "skip whole frame, skip left: %d\n",
2355                        avctx->internal->skip_samples);
2356             } else {
2357                 av_samples_copy(frame->extended_data, frame->extended_data, 0, avctx->internal->skip_samples,
2358                                 frame->nb_samples - avctx->internal->skip_samples, avctx->channels, frame->format);
2359                 if(avctx->pkt_timebase.num && avctx->sample_rate) {
2360                     int64_t diff_ts = av_rescale_q(avctx->internal->skip_samples,
2361                                                    (AVRational){1, avctx->sample_rate},
2362                                                    avctx->pkt_timebase);
2363                     if(frame->pkt_pts!=AV_NOPTS_VALUE)
2364                         frame->pkt_pts += diff_ts;
2365                     if(frame->pkt_dts!=AV_NOPTS_VALUE)
2366                         frame->pkt_dts += diff_ts;
2367                     if (av_frame_get_pkt_duration(frame) >= diff_ts)
2368                         av_frame_set_pkt_duration(frame, av_frame_get_pkt_duration(frame) - diff_ts);
2369                 } else {
2370                     av_log(avctx, AV_LOG_WARNING, "Could not update timestamps for skipped samples.\n");
2371                 }
2372                 av_log(avctx, AV_LOG_DEBUG, "skip %d/%d samples\n",
2373                        avctx->internal->skip_samples, frame->nb_samples);
2374                 frame->nb_samples -= avctx->internal->skip_samples;
2375                 avctx->internal->skip_samples = 0;
2376             }
2377         }
2378
2379         if (discard_padding > 0 && discard_padding <= frame->nb_samples && *got_frame_ptr &&
2380             !(avctx->flags2 & AV_CODEC_FLAG2_SKIP_MANUAL)) {
2381             if (discard_padding == frame->nb_samples) {
2382                 *got_frame_ptr = 0;
2383             } else {
2384                 if(avctx->pkt_timebase.num && avctx->sample_rate) {
2385                     int64_t diff_ts = av_rescale_q(frame->nb_samples - discard_padding,
2386                                                    (AVRational){1, avctx->sample_rate},
2387                                                    avctx->pkt_timebase);
2388                     av_frame_set_pkt_duration(frame, diff_ts);
2389                 } else {
2390                     av_log(avctx, AV_LOG_WARNING, "Could not update timestamps for discarded samples.\n");
2391                 }
2392                 av_log(avctx, AV_LOG_DEBUG, "discard %d/%d samples\n",
2393                        (int)discard_padding, frame->nb_samples);
2394                 frame->nb_samples -= discard_padding;
2395             }
2396         }
2397
2398         if ((avctx->flags2 & AV_CODEC_FLAG2_SKIP_MANUAL) && *got_frame_ptr) {
2399             AVFrameSideData *fside = av_frame_new_side_data(frame, AV_FRAME_DATA_SKIP_SAMPLES, 10);
2400             if (fside) {
2401                 AV_WL32(fside->data, avctx->internal->skip_samples);
2402                 AV_WL32(fside->data + 4, discard_padding);
2403                 AV_WL8(fside->data + 8, skip_reason);
2404                 AV_WL8(fside->data + 9, discard_reason);
2405                 avctx->internal->skip_samples = 0;
2406             }
2407         }
2408 fail:
2409         avctx->internal->pkt = NULL;
2410         if (did_split) {
2411             av_packet_free_side_data(&tmp);
2412             if(ret == tmp.size)
2413                 ret = avpkt->size;
2414         }
2415
2416         if (ret >= 0 && *got_frame_ptr) {
2417             if (!avctx->refcounted_frames) {
2418                 int err = unrefcount_frame(avci, frame);
2419                 if (err < 0)
2420                     return err;
2421             }
2422         } else
2423             av_frame_unref(frame);
2424     }
2425
2426     av_assert0(ret <= avpkt->size);
2427
2428     return ret;
2429 }
2430
2431 #define UTF8_MAX_BYTES 4 /* 5 and 6 bytes sequences should not be used */
2432 static int recode_subtitle(AVCodecContext *avctx,
2433                            AVPacket *outpkt, const AVPacket *inpkt)
2434 {
2435 #if CONFIG_ICONV
2436     iconv_t cd = (iconv_t)-1;
2437     int ret = 0;
2438     char *inb, *outb;
2439     size_t inl, outl;
2440     AVPacket tmp;
2441 #endif
2442
2443     if (avctx->sub_charenc_mode != FF_SUB_CHARENC_MODE_PRE_DECODER || inpkt->size == 0)
2444         return 0;
2445
2446 #if CONFIG_ICONV
2447     cd = iconv_open("UTF-8", avctx->sub_charenc);
2448     av_assert0(cd != (iconv_t)-1);
2449
2450     inb = inpkt->data;
2451     inl = inpkt->size;
2452
2453     if (inl >= INT_MAX / UTF8_MAX_BYTES - AV_INPUT_BUFFER_PADDING_SIZE) {
2454         av_log(avctx, AV_LOG_ERROR, "Subtitles packet is too big for recoding\n");
2455         ret = AVERROR(ENOMEM);
2456         goto end;
2457     }
2458
2459     ret = av_new_packet(&tmp, inl * UTF8_MAX_BYTES);
2460     if (ret < 0)
2461         goto end;
2462     outpkt->buf  = tmp.buf;
2463     outpkt->data = tmp.data;
2464     outpkt->size = tmp.size;
2465     outb = outpkt->data;
2466     outl = outpkt->size;
2467
2468     if (iconv(cd, &inb, &inl, &outb, &outl) == (size_t)-1 ||
2469         iconv(cd, NULL, NULL, &outb, &outl) == (size_t)-1 ||
2470         outl >= outpkt->size || inl != 0) {
2471         ret = FFMIN(AVERROR(errno), -1);
2472         av_log(avctx, AV_LOG_ERROR, "Unable to recode subtitle event \"%s\" "
2473                "from %s to UTF-8\n", inpkt->data, avctx->sub_charenc);
2474         av_packet_unref(&tmp);
2475         goto end;
2476     }
2477     outpkt->size -= outl;
2478     memset(outpkt->data + outpkt->size, 0, outl);
2479
2480 end:
2481     if (cd != (iconv_t)-1)
2482         iconv_close(cd);
2483     return ret;
2484 #else
2485     av_log(avctx, AV_LOG_ERROR, "requesting subtitles recoding without iconv");
2486     return AVERROR(EINVAL);
2487 #endif
2488 }
2489
2490 static int utf8_check(const uint8_t *str)
2491 {
2492     const uint8_t *byte;
2493     uint32_t codepoint, min;
2494
2495     while (*str) {
2496         byte = str;
2497         GET_UTF8(codepoint, *(byte++), return 0;);
2498         min = byte - str == 1 ? 0 : byte - str == 2 ? 0x80 :
2499               1 << (5 * (byte - str) - 4);
2500         if (codepoint < min || codepoint >= 0x110000 ||
2501             codepoint == 0xFFFE /* BOM */ ||
2502             codepoint >= 0xD800 && codepoint <= 0xDFFF /* surrogates */)
2503             return 0;
2504         str = byte;
2505     }
2506     return 1;
2507 }
2508
2509 #if FF_API_ASS_TIMING
2510 static void insert_ts(AVBPrint *buf, int ts)
2511 {
2512     if (ts == -1) {
2513         av_bprintf(buf, "9:59:59.99,");
2514     } else {
2515         int h, m, s;
2516
2517         h = ts/360000;  ts -= 360000*h;
2518         m = ts/  6000;  ts -=   6000*m;
2519         s = ts/   100;  ts -=    100*s;
2520         av_bprintf(buf, "%d:%02d:%02d.%02d,", h, m, s, ts);
2521     }
2522 }
2523
2524 static int convert_sub_to_old_ass_form(AVSubtitle *sub, const AVPacket *pkt, AVRational tb)
2525 {
2526     int i;
2527     AVBPrint buf;
2528
2529     av_bprint_init(&buf, 0, AV_BPRINT_SIZE_UNLIMITED);
2530
2531     for (i = 0; i < sub->num_rects; i++) {
2532         char *final_dialog;
2533         const char *dialog;
2534         AVSubtitleRect *rect = sub->rects[i];
2535         int ts_start, ts_duration = -1;
2536         long int layer;
2537
2538         if (rect->type != SUBTITLE_ASS || !strncmp(rect->ass, "Dialogue: ", 10))
2539             continue;
2540
2541         av_bprint_clear(&buf);
2542
2543         /* skip ReadOrder */
2544         dialog = strchr(rect->ass, ',');
2545         if (!dialog)
2546             continue;
2547         dialog++;
2548
2549         /* extract Layer or Marked */
2550         layer = strtol(dialog, (char**)&dialog, 10);
2551         if (*dialog != ',')
2552             continue;
2553         dialog++;
2554
2555         /* rescale timing to ASS time base (ms) */
2556         ts_start = av_rescale_q(pkt->pts, tb, av_make_q(1, 100));
2557         if (pkt->duration != -1)
2558             ts_duration = av_rescale_q(pkt->duration, tb, av_make_q(1, 100));
2559         sub->end_display_time = FFMAX(sub->end_display_time, 10 * ts_duration);
2560
2561         /* construct ASS (standalone file form with timestamps) string */
2562         av_bprintf(&buf, "Dialogue: %ld,", layer);
2563         insert_ts(&buf, ts_start);
2564         insert_ts(&buf, ts_duration == -1 ? -1 : ts_start + ts_duration);
2565         av_bprintf(&buf, "%s\r\n", dialog);
2566
2567         final_dialog = av_strdup(buf.str);
2568         if (!av_bprint_is_complete(&buf) || !final_dialog) {
2569             av_freep(&final_dialog);
2570             av_bprint_finalize(&buf, NULL);
2571             return AVERROR(ENOMEM);
2572         }
2573         av_freep(&rect->ass);
2574         rect->ass = final_dialog;
2575     }
2576
2577     av_bprint_finalize(&buf, NULL);
2578     return 0;
2579 }
2580 #endif
2581
2582 int avcodec_decode_subtitle2(AVCodecContext *avctx, AVSubtitle *sub,
2583                              int *got_sub_ptr,
2584                              AVPacket *avpkt)
2585 {
2586     int i, ret = 0;
2587
2588     if (!avpkt->data && avpkt->size) {
2589         av_log(avctx, AV_LOG_ERROR, "invalid packet: NULL data, size != 0\n");
2590         return AVERROR(EINVAL);
2591     }
2592     if (!avctx->codec)
2593         return AVERROR(EINVAL);
2594     if (avctx->codec->type != AVMEDIA_TYPE_SUBTITLE) {
2595         av_log(avctx, AV_LOG_ERROR, "Invalid media type for subtitles\n");
2596         return AVERROR(EINVAL);
2597     }
2598
2599     *got_sub_ptr = 0;
2600     get_subtitle_defaults(sub);
2601
2602     if ((avctx->codec->capabilities & AV_CODEC_CAP_DELAY) || avpkt->size) {
2603         AVPacket pkt_recoded;
2604         AVPacket tmp = *avpkt;
2605         int did_split = av_packet_split_side_data(&tmp);
2606         //apply_param_change(avctx, &tmp);
2607
2608         if (did_split) {
2609             /* FFMIN() prevents overflow in case the packet wasn't allocated with
2610              * proper padding.
2611              * If the side data is smaller than the buffer padding size, the
2612              * remaining bytes should have already been filled with zeros by the
2613              * original packet allocation anyway. */
2614             memset(tmp.data + tmp.size, 0,
2615                    FFMIN(avpkt->size - tmp.size, AV_INPUT_BUFFER_PADDING_SIZE));
2616         }
2617
2618         pkt_recoded = tmp;
2619         ret = recode_subtitle(avctx, &pkt_recoded, &tmp);
2620         if (ret < 0) {
2621             *got_sub_ptr = 0;
2622         } else {
2623             avctx->internal->pkt = &pkt_recoded;
2624
2625             if (avctx->pkt_timebase.num && avpkt->pts != AV_NOPTS_VALUE)
2626                 sub->pts = av_rescale_q(avpkt->pts,
2627                                         avctx->pkt_timebase, AV_TIME_BASE_Q);
2628             ret = avctx->codec->decode(avctx, sub, got_sub_ptr, &pkt_recoded);
2629             av_assert1((ret >= 0) >= !!*got_sub_ptr &&
2630                        !!*got_sub_ptr >= !!sub->num_rects);
2631
2632 #if FF_API_ASS_TIMING
2633             if (avctx->sub_text_format == FF_SUB_TEXT_FMT_ASS_WITH_TIMINGS
2634                 && *got_sub_ptr && sub->num_rects) {
2635                 const AVRational tb = avctx->pkt_timebase.num ? avctx->pkt_timebase
2636                                                               : avctx->time_base;
2637                 int err = convert_sub_to_old_ass_form(sub, avpkt, tb);
2638                 if (err < 0)
2639                     ret = err;
2640             }
2641 #endif
2642
2643             if (sub->num_rects && !sub->end_display_time && avpkt->duration &&
2644                 avctx->pkt_timebase.num) {
2645                 AVRational ms = { 1, 1000 };
2646                 sub->end_display_time = av_rescale_q(avpkt->duration,
2647                                                      avctx->pkt_timebase, ms);
2648             }
2649
2650             for (i = 0; i < sub->num_rects; i++) {
2651                 if (sub->rects[i]->ass && !utf8_check(sub->rects[i]->ass)) {
2652                     av_log(avctx, AV_LOG_ERROR,
2653                            "Invalid UTF-8 in decoded subtitles text; "
2654                            "maybe missing -sub_charenc option\n");
2655                     avsubtitle_free(sub);
2656                     return AVERROR_INVALIDDATA;
2657                 }
2658             }
2659
2660             if (tmp.data != pkt_recoded.data) { // did we recode?
2661                 /* prevent from destroying side data from original packet */
2662                 pkt_recoded.side_data = NULL;
2663                 pkt_recoded.side_data_elems = 0;
2664
2665                 av_packet_unref(&pkt_recoded);
2666             }
2667             if (avctx->codec_descriptor->props & AV_CODEC_PROP_BITMAP_SUB)
2668                 sub->format = 0;
2669             else if (avctx->codec_descriptor->props & AV_CODEC_PROP_TEXT_SUB)
2670                 sub->format = 1;
2671             avctx->internal->pkt = NULL;
2672         }
2673
2674         if (did_split) {
2675             av_packet_free_side_data(&tmp);
2676             if(ret == tmp.size)
2677                 ret = avpkt->size;
2678         }
2679
2680         if (*got_sub_ptr)
2681             avctx->frame_number++;
2682     }
2683
2684     return ret;
2685 }
2686
2687 void avsubtitle_free(AVSubtitle *sub)
2688 {
2689     int i;
2690
2691     for (i = 0; i < sub->num_rects; i++) {
2692         av_freep(&sub->rects[i]->data[0]);
2693         av_freep(&sub->rects[i]->data[1]);
2694         av_freep(&sub->rects[i]->data[2]);
2695         av_freep(&sub->rects[i]->data[3]);
2696         av_freep(&sub->rects[i]->text);
2697         av_freep(&sub->rects[i]->ass);
2698         av_freep(&sub->rects[i]);
2699     }
2700
2701     av_freep(&sub->rects);
2702
2703     memset(sub, 0, sizeof(AVSubtitle));
2704 }
2705
2706 static int do_decode(AVCodecContext *avctx, AVPacket *pkt)
2707 {
2708     int got_frame;
2709     int ret;
2710
2711     av_assert0(!avctx->internal->buffer_frame->buf[0]);
2712
2713     if (!pkt)
2714         pkt = avctx->internal->buffer_pkt;
2715
2716     // This is the lesser evil. The field is for compatibility with legacy users
2717     // of the legacy API, and users using the new API should not be forced to
2718     // even know about this field.
2719     avctx->refcounted_frames = 1;
2720
2721     // Some codecs (at least wma lossless) will crash when feeding drain packets
2722     // after EOF was signaled.
2723     if (avctx->internal->draining_done)
2724         return AVERROR_EOF;
2725
2726     if (avctx->codec_type == AVMEDIA_TYPE_VIDEO) {
2727         ret = avcodec_decode_video2(avctx, avctx->internal->buffer_frame,
2728                                     &got_frame, pkt);
2729         if (ret >= 0)
2730             ret = pkt->size;
2731     } else if (avctx->codec_type == AVMEDIA_TYPE_AUDIO) {
2732         ret = avcodec_decode_audio4(avctx, avctx->internal->buffer_frame,
2733                                     &got_frame, pkt);
2734     } else {
2735         ret = AVERROR(EINVAL);
2736     }
2737
2738     if (ret == AVERROR(EAGAIN))
2739         ret = pkt->size;
2740
2741     if (ret < 0)
2742         return ret;
2743
2744     if (avctx->internal->draining && !got_frame)
2745         avctx->internal->draining_done = 1;
2746
2747     if (ret >= pkt->size) {
2748         av_packet_unref(avctx->internal->buffer_pkt);
2749     } else {
2750         int consumed = ret;
2751
2752         if (pkt != avctx->internal->buffer_pkt) {
2753             av_packet_unref(avctx->internal->buffer_pkt);
2754             if ((ret = av_packet_ref(avctx->internal->buffer_pkt, pkt)) < 0)
2755                 return ret;
2756         }
2757
2758         avctx->internal->buffer_pkt->data += consumed;
2759         avctx->internal->buffer_pkt->size -= consumed;
2760         avctx->internal->buffer_pkt->pts   = AV_NOPTS_VALUE;
2761         avctx->internal->buffer_pkt->dts   = AV_NOPTS_VALUE;
2762     }
2763
2764     if (got_frame)
2765         av_assert0(avctx->internal->buffer_frame->buf[0]);
2766
2767     return 0;
2768 }
2769
2770 int attribute_align_arg avcodec_send_packet(AVCodecContext *avctx, const AVPacket *avpkt)
2771 {
2772     int ret;
2773
2774     if (!avcodec_is_open(avctx) || !av_codec_is_decoder(avctx->codec))
2775         return AVERROR(EINVAL);
2776
2777     if (avctx->internal->draining)
2778         return AVERROR_EOF;
2779
2780     if (!avpkt || !avpkt->size) {
2781         avctx->internal->draining = 1;
2782         avpkt = NULL;
2783
2784         if (!(avctx->codec->capabilities & AV_CODEC_CAP_DELAY))
2785             return 0;
2786     }
2787
2788     if (avctx->codec->send_packet) {
2789         if (avpkt) {
2790             AVPacket tmp = *avpkt;
2791             int did_split = av_packet_split_side_data(&tmp);
2792             ret = apply_param_change(avctx, &tmp);
2793             if (ret >= 0)
2794                 ret = avctx->codec->send_packet(avctx, &tmp);
2795             if (did_split)
2796                 av_packet_free_side_data(&tmp);
2797             return ret;
2798         } else {
2799             return avctx->codec->send_packet(avctx, NULL);
2800         }
2801     }
2802
2803     // Emulation via old API. Assume avpkt is likely not refcounted, while
2804     // decoder output is always refcounted, and avoid copying.
2805
2806     if (avctx->internal->buffer_pkt->size || avctx->internal->buffer_frame->buf[0])
2807         return AVERROR(EAGAIN);
2808
2809     // The goal is decoding the first frame of the packet without using memcpy,
2810     // because the common case is having only 1 frame per packet (especially
2811     // with video, but audio too). In other cases, it can't be avoided, unless
2812     // the user is feeding refcounted packets.
2813     return do_decode(avctx, (AVPacket *)avpkt);
2814 }
2815
2816 int attribute_align_arg avcodec_receive_frame(AVCodecContext *avctx, AVFrame *frame)
2817 {
2818     int ret;
2819
2820     av_frame_unref(frame);
2821
2822     if (!avcodec_is_open(avctx) || !av_codec_is_decoder(avctx->codec))
2823         return AVERROR(EINVAL);
2824
2825     if (avctx->codec->receive_frame) {
2826         if (avctx->internal->draining && !(avctx->codec->capabilities & AV_CODEC_CAP_DELAY))
2827             return AVERROR_EOF;
2828         return avctx->codec->receive_frame(avctx, frame);
2829     }
2830
2831     // Emulation via old API.
2832
2833     if (!avctx->internal->buffer_frame->buf[0]) {
2834         if (!avctx->internal->buffer_pkt->size && !avctx->internal->draining)
2835             return AVERROR(EAGAIN);
2836
2837         while (1) {
2838             if ((ret = do_decode(avctx, avctx->internal->buffer_pkt)) < 0) {
2839                 av_packet_unref(avctx->internal->buffer_pkt);
2840                 return ret;
2841             }
2842             // Some audio decoders may consume partial data without returning
2843             // a frame (fate-wmapro-2ch). There is no way to make the caller
2844             // call avcodec_receive_frame() again without returning a frame,
2845             // so try to decode more in these cases.
2846             if (avctx->internal->buffer_frame->buf[0] ||
2847                 !avctx->internal->buffer_pkt->size)
2848                 break;
2849         }
2850     }
2851
2852     if (!avctx->internal->buffer_frame->buf[0])
2853         return avctx->internal->draining ? AVERROR_EOF : AVERROR(EAGAIN);
2854
2855     av_frame_move_ref(frame, avctx->internal->buffer_frame);
2856     return 0;
2857 }
2858
2859 static int do_encode(AVCodecContext *avctx, const AVFrame *frame, int *got_packet)
2860 {
2861     int ret;
2862     *got_packet = 0;
2863
2864     av_packet_unref(avctx->internal->buffer_pkt);
2865     avctx->internal->buffer_pkt_valid = 0;
2866
2867     if (avctx->codec_type == AVMEDIA_TYPE_VIDEO) {
2868         ret = avcodec_encode_video2(avctx, avctx->internal->buffer_pkt,
2869                                     frame, got_packet);
2870     } else if (avctx->codec_type == AVMEDIA_TYPE_AUDIO) {
2871         ret = avcodec_encode_audio2(avctx, avctx->internal->buffer_pkt,
2872                                     frame, got_packet);
2873     } else {
2874         ret = AVERROR(EINVAL);
2875     }
2876
2877     if (ret >= 0 && *got_packet) {
2878         // Encoders must always return ref-counted buffers.
2879         // Side-data only packets have no data and can be not ref-counted.
2880         av_assert0(!avctx->internal->buffer_pkt->data || avctx->internal->buffer_pkt->buf);
2881         avctx->internal->buffer_pkt_valid = 1;
2882         ret = 0;
2883     } else {
2884         av_packet_unref(avctx->internal->buffer_pkt);
2885     }
2886
2887     return ret;
2888 }
2889
2890 int attribute_align_arg avcodec_send_frame(AVCodecContext *avctx, const AVFrame *frame)
2891 {
2892     if (!avcodec_is_open(avctx) || !av_codec_is_encoder(avctx->codec))
2893         return AVERROR(EINVAL);
2894
2895     if (avctx->internal->draining)
2896         return AVERROR_EOF;
2897
2898     if (!frame) {
2899         avctx->internal->draining = 1;
2900
2901         if (!(avctx->codec->capabilities & AV_CODEC_CAP_DELAY))
2902             return 0;
2903     }
2904
2905     if (avctx->codec->send_frame)
2906         return avctx->codec->send_frame(avctx, frame);
2907
2908     // Emulation via old API. Do it here instead of avcodec_receive_packet, because:
2909     // 1. if the AVFrame is not refcounted, the copying will be much more
2910     //    expensive than copying the packet data
2911     // 2. assume few users use non-refcounted AVPackets, so usually no copy is
2912     //    needed
2913
2914     if (avctx->internal->buffer_pkt_valid)
2915         return AVERROR(EAGAIN);
2916
2917     return do_encode(avctx, frame, &(int){0});
2918 }
2919
2920 int attribute_align_arg avcodec_receive_packet(AVCodecContext *avctx, AVPacket *avpkt)
2921 {
2922     av_packet_unref(avpkt);
2923
2924     if (!avcodec_is_open(avctx) || !av_codec_is_encoder(avctx->codec))
2925         return AVERROR(EINVAL);
2926
2927     if (avctx->codec->receive_packet) {
2928         if (avctx->internal->draining && !(avctx->codec->capabilities & AV_CODEC_CAP_DELAY))
2929             return AVERROR_EOF;
2930         return avctx->codec->receive_packet(avctx, avpkt);
2931     }
2932
2933     // Emulation via old API.
2934
2935     if (!avctx->internal->buffer_pkt_valid) {
2936         int got_packet;
2937         int ret;
2938         if (!avctx->internal->draining)
2939             return AVERROR(EAGAIN);
2940         ret = do_encode(avctx, NULL, &got_packet);
2941         if (ret < 0)
2942             return ret;
2943         if (ret >= 0 && !got_packet)
2944             return AVERROR_EOF;
2945     }
2946
2947     av_packet_move_ref(avpkt, avctx->internal->buffer_pkt);
2948     avctx->internal->buffer_pkt_valid = 0;
2949     return 0;
2950 }
2951
2952 av_cold int avcodec_close(AVCodecContext *avctx)
2953 {
2954     int i;
2955
2956     if (!avctx)
2957         return 0;
2958
2959     if (avcodec_is_open(avctx)) {
2960         FramePool *pool = avctx->internal->pool;
2961         if (CONFIG_FRAME_THREAD_ENCODER &&
2962             avctx->internal->frame_thread_encoder && avctx->thread_count > 1) {
2963             ff_frame_thread_encoder_free(avctx);
2964         }
2965         if (HAVE_THREADS && avctx->internal->thread_ctx)
2966             ff_thread_free(avctx);
2967         if (avctx->codec && avctx->codec->close)
2968             avctx->codec->close(avctx);
2969         avctx->internal->byte_buffer_size = 0;
2970         av_freep(&avctx->internal->byte_buffer);
2971         av_frame_free(&avctx->internal->to_free);
2972         av_frame_free(&avctx->internal->buffer_frame);
2973         av_packet_free(&avctx->internal->buffer_pkt);
2974         for (i = 0; i < FF_ARRAY_ELEMS(pool->pools); i++)
2975             av_buffer_pool_uninit(&pool->pools[i]);
2976         av_freep(&avctx->internal->pool);
2977
2978         if (avctx->hwaccel && avctx->hwaccel->uninit)
2979             avctx->hwaccel->uninit(avctx);
2980         av_freep(&avctx->internal->hwaccel_priv_data);
2981
2982         av_freep(&avctx->internal);
2983     }
2984
2985     for (i = 0; i < avctx->nb_coded_side_data; i++)
2986         av_freep(&avctx->coded_side_data[i].data);
2987     av_freep(&avctx->coded_side_data);
2988     avctx->nb_coded_side_data = 0;
2989
2990     av_buffer_unref(&avctx->hw_frames_ctx);
2991
2992     if (avctx->priv_data && avctx->codec && avctx->codec->priv_class)
2993         av_opt_free(avctx->priv_data);
2994     av_opt_free(avctx);
2995     av_freep(&avctx->priv_data);
2996     if (av_codec_is_encoder(avctx->codec)) {
2997         av_freep(&avctx->extradata);
2998 #if FF_API_CODED_FRAME
2999 FF_DISABLE_DEPRECATION_WARNINGS
3000         av_frame_free(&avctx->coded_frame);
3001 FF_ENABLE_DEPRECATION_WARNINGS
3002 #endif
3003     }
3004     avctx->codec = NULL;
3005     avctx->active_thread_type = 0;
3006
3007     return 0;
3008 }
3009
3010 static enum AVCodecID remap_deprecated_codec_id(enum AVCodecID id)
3011 {
3012     switch(id){
3013         //This is for future deprecatec codec ids, its empty since
3014         //last major bump but will fill up again over time, please don't remove it
3015         default                                         : return id;
3016     }
3017 }
3018
3019 static AVCodec *find_encdec(enum AVCodecID id, int encoder)
3020 {
3021     AVCodec *p, *experimental = NULL;
3022     p = first_avcodec;
3023     id= remap_deprecated_codec_id(id);
3024     while (p) {
3025         if ((encoder ? av_codec_is_encoder(p) : av_codec_is_decoder(p)) &&
3026             p->id == id) {
3027             if (p->capabilities & AV_CODEC_CAP_EXPERIMENTAL && !experimental) {
3028                 experimental = p;
3029             } else
3030                 return p;
3031         }
3032         p = p->next;
3033     }
3034     return experimental;
3035 }
3036
3037 AVCodec *avcodec_find_encoder(enum AVCodecID id)
3038 {
3039     return find_encdec(id, 1);
3040 }
3041
3042 AVCodec *avcodec_find_encoder_by_name(const char *name)
3043 {
3044     AVCodec *p;
3045     if (!name)
3046         return NULL;
3047     p = first_avcodec;
3048     while (p) {
3049         if (av_codec_is_encoder(p) && strcmp(name, p->name) == 0)
3050             return p;
3051         p = p->next;
3052     }
3053     return NULL;
3054 }
3055
3056 AVCodec *avcodec_find_decoder(enum AVCodecID id)
3057 {
3058     return find_encdec(id, 0);
3059 }
3060
3061 AVCodec *avcodec_find_decoder_by_name(const char *name)
3062 {
3063     AVCodec *p;
3064     if (!name)
3065         return NULL;
3066     p = first_avcodec;
3067     while (p) {
3068         if (av_codec_is_decoder(p) && strcmp(name, p->name) == 0)
3069             return p;
3070         p = p->next;
3071     }
3072     return NULL;
3073 }
3074
3075 const char *avcodec_get_name(enum AVCodecID id)
3076 {
3077     const AVCodecDescriptor *cd;
3078     AVCodec *codec;
3079
3080     if (id == AV_CODEC_ID_NONE)
3081         return "none";
3082     cd = avcodec_descriptor_get(id);
3083     if (cd)
3084         return cd->name;
3085     av_log(NULL, AV_LOG_WARNING, "Codec 0x%x is not in the full list.\n", id);
3086     codec = avcodec_find_decoder(id);
3087     if (codec)
3088         return codec->name;
3089     codec = avcodec_find_encoder(id);
3090     if (codec)
3091         return codec->name;
3092     return "unknown_codec";
3093 }
3094
3095 size_t av_get_codec_tag_string(char *buf, size_t buf_size, unsigned int codec_tag)
3096 {
3097     int i, len, ret = 0;
3098
3099 #define TAG_PRINT(x)                                              \
3100     (((x) >= '0' && (x) <= '9') ||                                \
3101      ((x) >= 'a' && (x) <= 'z') || ((x) >= 'A' && (x) <= 'Z') ||  \
3102      ((x) == '.' || (x) == ' ' || (x) == '-' || (x) == '_'))
3103
3104     for (i = 0; i < 4; i++) {
3105         len = snprintf(buf, buf_size,
3106                        TAG_PRINT(codec_tag & 0xFF) ? "%c" : "[%d]", codec_tag & 0xFF);
3107         buf        += len;
3108         buf_size    = buf_size > len ? buf_size - len : 0;
3109         ret        += len;
3110         codec_tag >>= 8;
3111     }
3112     return ret;
3113 }
3114
3115 void avcodec_string(char *buf, int buf_size, AVCodecContext *enc, int encode)
3116 {
3117     const char *codec_type;
3118     const char *codec_name;
3119     const char *profile = NULL;
3120     int64_t bitrate;
3121     int new_line = 0;
3122     AVRational display_aspect_ratio;
3123     const char *separator = enc->dump_separator ? (const char *)enc->dump_separator : ", ";
3124
3125     if (!buf || buf_size <= 0)
3126         return;
3127     codec_type = av_get_media_type_string(enc->codec_type);
3128     codec_name = avcodec_get_name(enc->codec_id);
3129     profile = avcodec_profile_name(enc->codec_id, enc->profile);
3130
3131     snprintf(buf, buf_size, "%s: %s", codec_type ? codec_type : "unknown",
3132              codec_name);
3133     buf[0] ^= 'a' ^ 'A'; /* first letter in uppercase */
3134
3135     if (enc->codec && strcmp(enc->codec->name, codec_name))
3136         snprintf(buf + strlen(buf), buf_size - strlen(buf), " (%s)", enc->codec->name);
3137
3138     if (profile)
3139         snprintf(buf + strlen(buf), buf_size - strlen(buf), " (%s)", profile);
3140     if (   enc->codec_type == AVMEDIA_TYPE_VIDEO
3141         && av_log_get_level() >= AV_LOG_VERBOSE
3142         && enc->refs)
3143         snprintf(buf + strlen(buf), buf_size - strlen(buf),
3144                  ", %d reference frame%s",
3145                  enc->refs, enc->refs > 1 ? "s" : "");
3146
3147     if (enc->codec_tag) {
3148         char tag_buf[32];
3149         av_get_codec_tag_string(tag_buf, sizeof(tag_buf), enc->codec_tag);
3150         snprintf(buf + strlen(buf), buf_size - strlen(buf),
3151                  " (%s / 0x%04X)", tag_buf, enc->codec_tag);
3152     }
3153
3154     switch (enc->codec_type) {
3155     case AVMEDIA_TYPE_VIDEO:
3156         {
3157             char detail[256] = "(";
3158
3159             av_strlcat(buf, separator, buf_size);
3160
3161             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3162                  "%s", enc->pix_fmt == AV_PIX_FMT_NONE ? "none" :
3163                      av_get_pix_fmt_name(enc->pix_fmt));
3164             if (enc->bits_per_raw_sample && enc->pix_fmt != AV_PIX_FMT_NONE &&
3165                 enc->bits_per_raw_sample < av_pix_fmt_desc_get(enc->pix_fmt)->comp[0].depth)
3166                 av_strlcatf(detail, sizeof(detail), "%d bpc, ", enc->bits_per_raw_sample);
3167             if (enc->color_range != AVCOL_RANGE_UNSPECIFIED)
3168                 av_strlcatf(detail, sizeof(detail), "%s, ",
3169                             av_color_range_name(enc->color_range));
3170
3171             if (enc->colorspace != AVCOL_SPC_UNSPECIFIED ||
3172                 enc->color_primaries != AVCOL_PRI_UNSPECIFIED ||
3173                 enc->color_trc != AVCOL_TRC_UNSPECIFIED) {
3174                 if (enc->colorspace != (int)enc->color_primaries ||
3175                     enc->colorspace != (int)enc->color_trc) {
3176                     new_line = 1;
3177                     av_strlcatf(detail, sizeof(detail), "%s/%s/%s, ",
3178                                 av_color_space_name(enc->colorspace),
3179                                 av_color_primaries_name(enc->color_primaries),
3180                                 av_color_transfer_name(enc->color_trc));
3181                 } else
3182                     av_strlcatf(detail, sizeof(detail), "%s, ",
3183                                 av_get_colorspace_name(enc->colorspace));
3184             }
3185
3186             if (av_log_get_level() >= AV_LOG_DEBUG &&
3187                 enc->chroma_sample_location != AVCHROMA_LOC_UNSPECIFIED)
3188                 av_strlcatf(detail, sizeof(detail), "%s, ",
3189                             av_chroma_location_name(enc->chroma_sample_location));
3190
3191             if (strlen(detail) > 1) {
3192                 detail[strlen(detail) - 2] = 0;
3193                 av_strlcatf(buf, buf_size, "%s)", detail);
3194             }
3195         }
3196
3197         if (enc->width) {
3198             av_strlcat(buf, new_line ? separator : ", ", buf_size);
3199
3200             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3201                      "%dx%d",
3202                      enc->width, enc->height);
3203
3204             if (av_log_get_level() >= AV_LOG_VERBOSE &&
3205                 (enc->width != enc->coded_width ||
3206                  enc->height != enc->coded_height))
3207                 snprintf(buf + strlen(buf), buf_size - strlen(buf),
3208                          " (%dx%d)", enc->coded_width, enc->coded_height);
3209
3210             if (enc->sample_aspect_ratio.num) {
3211                 av_reduce(&display_aspect_ratio.num, &display_aspect_ratio.den,
3212                           enc->width * (int64_t)enc->sample_aspect_ratio.num,
3213                           enc->height * (int64_t)enc->sample_aspect_ratio.den,
3214                           1024 * 1024);
3215                 snprintf(buf + strlen(buf), buf_size - strlen(buf),
3216                          " [SAR %d:%d DAR %d:%d]",
3217                          enc->sample_aspect_ratio.num, enc->sample_aspect_ratio.den,
3218                          display_aspect_ratio.num, display_aspect_ratio.den);
3219             }
3220             if (av_log_get_level() >= AV_LOG_DEBUG) {
3221                 int g = av_gcd(enc->time_base.num, enc->time_base.den);
3222                 snprintf(buf + strlen(buf), buf_size - strlen(buf),
3223                          ", %d/%d",
3224                          enc->time_base.num / g, enc->time_base.den / g);
3225             }
3226         }
3227         if (encode) {
3228             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3229                      ", q=%d-%d", enc->qmin, enc->qmax);
3230         } else {
3231             if (enc->properties & FF_CODEC_PROPERTY_CLOSED_CAPTIONS)
3232                 snprintf(buf + strlen(buf), buf_size - strlen(buf),
3233                          ", Closed Captions");
3234             if (enc->properties & FF_CODEC_PROPERTY_LOSSLESS)
3235                 snprintf(buf + strlen(buf), buf_size - strlen(buf),
3236                          ", lossless");
3237         }
3238         break;
3239     case AVMEDIA_TYPE_AUDIO:
3240         av_strlcat(buf, separator, buf_size);
3241
3242         if (enc->sample_rate) {
3243             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3244                      "%d Hz, ", enc->sample_rate);
3245         }
3246         av_get_channel_layout_string(buf + strlen(buf), buf_size - strlen(buf), enc->channels, enc->channel_layout);
3247         if (enc->sample_fmt != AV_SAMPLE_FMT_NONE) {
3248             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3249                      ", %s", av_get_sample_fmt_name(enc->sample_fmt));
3250         }
3251         if (   enc->bits_per_raw_sample > 0
3252             && enc->bits_per_raw_sample != av_get_bytes_per_sample(enc->sample_fmt) * 8)
3253             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3254                      " (%d bit)", enc->bits_per_raw_sample);
3255         break;
3256     case AVMEDIA_TYPE_DATA:
3257         if (av_log_get_level() >= AV_LOG_DEBUG) {
3258             int g = av_gcd(enc->time_base.num, enc->time_base.den);
3259             if (g)
3260                 snprintf(buf + strlen(buf), buf_size - strlen(buf),
3261                          ", %d/%d",
3262                          enc->time_base.num / g, enc->time_base.den / g);
3263         }
3264         break;
3265     case AVMEDIA_TYPE_SUBTITLE:
3266         if (enc->width)
3267             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3268                      ", %dx%d", enc->width, enc->height);
3269         break;
3270     default:
3271         return;
3272     }
3273     if (encode) {
3274         if (enc->flags & AV_CODEC_FLAG_PASS1)
3275             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3276                      ", pass 1");
3277         if (enc->flags & AV_CODEC_FLAG_PASS2)
3278             snprintf(buf + strlen(buf), buf_size - strlen(buf),
3279                      ", pass 2");
3280     }
3281     bitrate = get_bit_rate(enc);
3282     if (bitrate != 0) {
3283         snprintf(buf + strlen(buf), buf_size - strlen(buf),
3284                  ", %"PRId64" kb/s", bitrate / 1000);
3285     } else if (enc->rc_max_rate > 0) {
3286         snprintf(buf + strlen(buf), buf_size - strlen(buf),
3287                  ", max. %"PRId64" kb/s", (int64_t)enc->rc_max_rate / 1000);
3288     }
3289 }
3290
3291 const char *av_get_profile_name(const AVCodec *codec, int profile)
3292 {
3293     const AVProfile *p;
3294     if (profile == FF_PROFILE_UNKNOWN || !codec->profiles)
3295         return NULL;
3296
3297     for (p = codec->profiles; p->profile != FF_PROFILE_UNKNOWN; p++)
3298         if (p->profile == profile)
3299             return p->name;
3300
3301     return NULL;
3302 }
3303
3304 const char *avcodec_profile_name(enum AVCodecID codec_id, int profile)
3305 {
3306     const AVCodecDescriptor *desc = avcodec_descriptor_get(codec_id);
3307     const AVProfile *p;
3308
3309     if (profile == FF_PROFILE_UNKNOWN || !desc || !desc->profiles)
3310         return NULL;
3311
3312     for (p = desc->profiles; p->profile != FF_PROFILE_UNKNOWN; p++)
3313         if (p->profile == profile)
3314             return p->name;
3315
3316     return NULL;
3317 }
3318
3319 unsigned avcodec_version(void)
3320 {
3321 //    av_assert0(AV_CODEC_ID_V410==164);
3322     av_assert0(AV_CODEC_ID_PCM_S8_PLANAR==65563);
3323     av_assert0(AV_CODEC_ID_ADPCM_G722==69660);
3324 //     av_assert0(AV_CODEC_ID_BMV_AUDIO==86071);
3325     av_assert0(AV_CODEC_ID_SRT==94216);
3326     av_assert0(LIBAVCODEC_VERSION_MICRO >= 100);
3327
3328     return LIBAVCODEC_VERSION_INT;
3329 }
3330
3331 const char *avcodec_configuration(void)
3332 {
3333     return FFMPEG_CONFIGURATION;
3334 }
3335
3336 const char *avcodec_license(void)
3337 {
3338 #define LICENSE_PREFIX "libavcodec license: "
3339     return LICENSE_PREFIX FFMPEG_LICENSE + sizeof(LICENSE_PREFIX) - 1;
3340 }
3341
3342 void avcodec_flush_buffers(AVCodecContext *avctx)
3343 {
3344     avctx->internal->draining      = 0;
3345     avctx->internal->draining_done = 0;
3346     av_frame_unref(avctx->internal->buffer_frame);
3347     av_packet_unref(avctx->internal->buffer_pkt);
3348     avctx->internal->buffer_pkt_valid = 0;
3349
3350     if (HAVE_THREADS && avctx->active_thread_type & FF_THREAD_FRAME)
3351         ff_thread_flush(avctx);
3352     else if (avctx->codec->flush)
3353         avctx->codec->flush(avctx);
3354
3355     avctx->pts_correction_last_pts =
3356     avctx->pts_correction_last_dts = INT64_MIN;
3357
3358     if (!avctx->refcounted_frames)
3359         av_frame_unref(avctx->internal->to_free);
3360 }
3361
3362 int av_get_exact_bits_per_sample(enum AVCodecID codec_id)
3363 {
3364     switch (codec_id) {
3365     case AV_CODEC_ID_8SVX_EXP:
3366     case AV_CODEC_ID_8SVX_FIB:
3367     case AV_CODEC_ID_ADPCM_CT:
3368     case AV_CODEC_ID_ADPCM_IMA_APC:
3369     case AV_CODEC_ID_ADPCM_IMA_EA_SEAD:
3370     case AV_CODEC_ID_ADPCM_IMA_OKI:
3371     case AV_CODEC_ID_ADPCM_IMA_WS:
3372     case AV_CODEC_ID_ADPCM_G722:
3373     case AV_CODEC_ID_ADPCM_YAMAHA:
3374     case AV_CODEC_ID_ADPCM_AICA:
3375         return 4;
3376     case AV_CODEC_ID_DSD_LSBF:
3377     case AV_CODEC_ID_DSD_MSBF:
3378     case AV_CODEC_ID_DSD_LSBF_PLANAR:
3379     case AV_CODEC_ID_DSD_MSBF_PLANAR:
3380     case AV_CODEC_ID_PCM_ALAW:
3381     case AV_CODEC_ID_PCM_MULAW:
3382     case AV_CODEC_ID_PCM_S8:
3383     case AV_CODEC_ID_PCM_S8_PLANAR:
3384     case AV_CODEC_ID_PCM_U8:
3385     case AV_CODEC_ID_PCM_ZORK:
3386     case AV_CODEC_ID_SDX2_DPCM:
3387         return 8;
3388     case AV_CODEC_ID_PCM_S16BE:
3389     case AV_CODEC_ID_PCM_S16BE_PLANAR:
3390     case AV_CODEC_ID_PCM_S16LE:
3391     case AV_CODEC_ID_PCM_S16LE_PLANAR:
3392     case AV_CODEC_ID_PCM_U16BE:
3393     case AV_CODEC_ID_PCM_U16LE:
3394         return 16;
3395     case AV_CODEC_ID_PCM_S24DAUD:
3396     case AV_CODEC_ID_PCM_S24BE:
3397     case AV_CODEC_ID_PCM_S24LE:
3398     case AV_CODEC_ID_PCM_S24LE_PLANAR:
3399     case AV_CODEC_ID_PCM_U24BE:
3400     case AV_CODEC_ID_PCM_U24LE:
3401         return 24;
3402     case AV_CODEC_ID_PCM_S32BE:
3403     case AV_CODEC_ID_PCM_S32LE:
3404     case AV_CODEC_ID_PCM_S32LE_PLANAR:
3405     case AV_CODEC_ID_PCM_U32BE:
3406     case AV_CODEC_ID_PCM_U32LE:
3407     case AV_CODEC_ID_PCM_F32BE:
3408     case AV_CODEC_ID_PCM_F32LE:
3409         return 32;
3410     case AV_CODEC_ID_PCM_F64BE:
3411     case AV_CODEC_ID_PCM_F64LE:
3412         return 64;
3413     default:
3414         return 0;
3415     }
3416 }
3417
3418 enum AVCodecID av_get_pcm_codec(enum AVSampleFormat fmt, int be)
3419 {
3420     static const enum AVCodecID map[AV_SAMPLE_FMT_NB][2] = {
3421         [AV_SAMPLE_FMT_U8  ] = { AV_CODEC_ID_PCM_U8,    AV_CODEC_ID_PCM_U8    },
3422         [AV_SAMPLE_FMT_S16 ] = { AV_CODEC_ID_PCM_S16LE, AV_CODEC_ID_PCM_S16BE },
3423         [AV_SAMPLE_FMT_S32 ] = { AV_CODEC_ID_PCM_S32LE, AV_CODEC_ID_PCM_S32BE },
3424         [AV_SAMPLE_FMT_FLT ] = { AV_CODEC_ID_PCM_F32LE, AV_CODEC_ID_PCM_F32BE },
3425         [AV_SAMPLE_FMT_DBL ] = { AV_CODEC_ID_PCM_F64LE, AV_CODEC_ID_PCM_F64BE },
3426         [AV_SAMPLE_FMT_U8P ] = { AV_CODEC_ID_PCM_U8,    AV_CODEC_ID_PCM_U8    },
3427         [AV_SAMPLE_FMT_S16P] = { AV_CODEC_ID_PCM_S16LE, AV_CODEC_ID_PCM_S16BE },
3428         [AV_SAMPLE_FMT_S32P] = { AV_CODEC_ID_PCM_S32LE, AV_CODEC_ID_PCM_S32BE },
3429         [AV_SAMPLE_FMT_FLTP] = { AV_CODEC_ID_PCM_F32LE, AV_CODEC_ID_PCM_F32BE },
3430         [AV_SAMPLE_FMT_DBLP] = { AV_CODEC_ID_PCM_F64LE, AV_CODEC_ID_PCM_F64BE },
3431     };
3432     if (fmt < 0 || fmt >= AV_SAMPLE_FMT_NB)
3433         return AV_CODEC_ID_NONE;
3434     if (be < 0 || be > 1)
3435         be = AV_NE(1, 0);
3436     return map[fmt][be];
3437 }
3438
3439 int av_get_bits_per_sample(enum AVCodecID codec_id)
3440 {
3441     switch (codec_id) {
3442     case AV_CODEC_ID_ADPCM_SBPRO_2:
3443         return 2;
3444     case AV_CODEC_ID_ADPCM_SBPRO_3:
3445         return 3;
3446     case AV_CODEC_ID_ADPCM_SBPRO_4:
3447     case AV_CODEC_ID_ADPCM_IMA_WAV:
3448     case AV_CODEC_ID_ADPCM_IMA_QT:
3449     case AV_CODEC_ID_ADPCM_SWF:
3450     case AV_CODEC_ID_ADPCM_MS:
3451         return 4;
3452     default:
3453         return av_get_exact_bits_per_sample(codec_id);
3454     }
3455 }
3456
3457 static int get_audio_frame_duration(enum AVCodecID id, int sr, int ch, int ba,
3458                                     uint32_t tag, int bits_per_coded_sample, int64_t bitrate,
3459                                     uint8_t * extradata, int frame_size, int frame_bytes)
3460 {
3461     int bps = av_get_exact_bits_per_sample(id);
3462     int framecount = (ba > 0 && frame_bytes / ba > 0) ? frame_bytes / ba : 1;
3463
3464     /* codecs with an exact constant bits per sample */
3465     if (bps > 0 && ch > 0 && frame_bytes > 0 && ch < 32768 && bps < 32768)
3466         return (frame_bytes * 8LL) / (bps * ch);
3467     bps = bits_per_coded_sample;
3468
3469     /* codecs with a fixed packet duration */
3470     switch (id) {
3471     case AV_CODEC_ID_ADPCM_ADX:    return   32;
3472     case AV_CODEC_ID_ADPCM_IMA_QT: return   64;
3473     case AV_CODEC_ID_ADPCM_EA_XAS: return  128;
3474     case AV_CODEC_ID_AMR_NB:
3475     case AV_CODEC_ID_EVRC:
3476     case AV_CODEC_ID_GSM:
3477     case AV_CODEC_ID_QCELP:
3478     case AV_CODEC_ID_RA_288:       return  160;
3479     case AV_CODEC_ID_AMR_WB:
3480     case AV_CODEC_ID_GSM_MS:       return  320;
3481     case AV_CODEC_ID_MP1:          return  384;
3482     case AV_CODEC_ID_ATRAC1:       return  512;
3483     case AV_CODEC_ID_ATRAC3:       return 1024 * framecount;
3484     case AV_CODEC_ID_ATRAC3P:      return 2048;
3485     case AV_CODEC_ID_MP2:
3486     case AV_CODEC_ID_MUSEPACK7:    return 1152;
3487     case AV_CODEC_ID_AC3:          return 1536;
3488     }
3489
3490     if (sr > 0) {
3491         /* calc from sample rate */
3492         if (id == AV_CODEC_ID_TTA)
3493             return 256 * sr / 245;
3494         else if (id == AV_CODEC_ID_DST)
3495             return 588 * sr / 44100;
3496
3497         if (ch > 0) {
3498             /* calc from sample rate and channels */
3499             if (id == AV_CODEC_ID_BINKAUDIO_DCT)
3500                 return (480 << (sr / 22050)) / ch;
3501         }
3502     }
3503
3504     if (ba > 0) {
3505         /* calc from block_align */
3506         if (id == AV_CODEC_ID_SIPR) {
3507             switch (ba) {
3508             case 20: return 160;
3509             case 19: return 144;
3510             case 29: return 288;
3511             case 37: return 480;
3512             }
3513         } else if (id == AV_CODEC_ID_ILBC) {
3514             switch (ba) {
3515             case 38: return 160;
3516             case 50: return 240;
3517             }
3518         }
3519     }
3520
3521     if (frame_bytes > 0) {
3522         /* calc from frame_bytes only */
3523         if (id == AV_CODEC_ID_TRUESPEECH)
3524             return 240 * (frame_bytes / 32);
3525         if (id == AV_CODEC_ID_NELLYMOSER)
3526             return 256 * (frame_bytes / 64);
3527         if (id == AV_CODEC_ID_RA_144)
3528             return 160 * (frame_bytes / 20);
3529         if (id == AV_CODEC_ID_G723_1)
3530             return 240 * (frame_bytes / 24);
3531
3532         if (bps > 0) {
3533             /* calc from frame_bytes and bits_per_coded_sample */
3534             if (id == AV_CODEC_ID_ADPCM_G726)
3535                 return frame_bytes * 8 / bps;
3536         }
3537
3538         if (ch > 0 && ch < INT_MAX/16) {
3539             /* calc from frame_bytes and channels */
3540             switch (id) {
3541             case AV_CODEC_ID_ADPCM_AFC:
3542                 return frame_bytes / (9 * ch) * 16;
3543             case AV_CODEC_ID_ADPCM_PSX:
3544             case AV_CODEC_ID_ADPCM_DTK:
3545                 return frame_bytes / (16 * ch) * 28;
3546             case AV_CODEC_ID_ADPCM_4XM:
3547             case AV_CODEC_ID_ADPCM_IMA_DAT4:
3548             case AV_CODEC_ID_ADPCM_IMA_ISS:
3549                 return (frame_bytes - 4 * ch) * 2 / ch;
3550             case AV_CODEC_ID_ADPCM_IMA_SMJPEG:
3551                 return (frame_bytes - 4) * 2 / ch;
3552             case AV_CODEC_ID_ADPCM_IMA_AMV:
3553                 return (frame_bytes - 8) * 2 / ch;
3554             case AV_CODEC_ID_ADPCM_THP:
3555             case AV_CODEC_ID_ADPCM_THP_LE:
3556                 if (extradata)
3557                     return frame_bytes * 14 / (8 * ch);
3558                 break;
3559             case AV_CODEC_ID_ADPCM_XA:
3560                 return (frame_bytes / 128) * 224 / ch;
3561             case AV_CODEC_ID_INTERPLAY_DPCM:
3562                 return (frame_bytes - 6 - ch) / ch;
3563             case AV_CODEC_ID_ROQ_DPCM:
3564                 return (frame_bytes - 8) / ch;
3565             case AV_CODEC_ID_XAN_DPCM:
3566                 return (frame_bytes - 2 * ch) / ch;
3567             case AV_CODEC_ID_MACE3:
3568                 return 3 * frame_bytes / ch;
3569             case AV_CODEC_ID_MACE6:
3570                 return 6 * frame_bytes / ch;
3571             case AV_CODEC_ID_PCM_LXF:
3572                 return 2 * (frame_bytes / (5 * ch));
3573             case AV_CODEC_ID_IAC:
3574             case AV_CODEC_ID_IMC:
3575                 return 4 * frame_bytes / ch;
3576             }
3577
3578             if (tag) {
3579                 /* calc from frame_bytes, channels, and codec_tag */
3580                 if (id == AV_CODEC_ID_SOL_DPCM) {
3581                     if (tag == 3)
3582                         return frame_bytes / ch;
3583                     else
3584                         return frame_bytes * 2 / ch;
3585                 }
3586             }
3587
3588             if (ba > 0) {
3589                 /* calc from frame_bytes, channels, and block_align */
3590                 int blocks = frame_bytes / ba;
3591                 switch (id) {
3592                 case AV_CODEC_ID_ADPCM_IMA_WAV:
3593                     if (bps < 2 || bps > 5)
3594                         return 0;
3595                     return blocks * (1 + (ba - 4 * ch) / (bps * ch) * 8);
3596                 case AV_CODEC_ID_ADPCM_IMA_DK3:
3597                     return blocks * (((ba - 16) * 2 / 3 * 4) / ch);
3598                 case AV_CODEC_ID_ADPCM_IMA_DK4:
3599                     return blocks * (1 + (ba - 4 * ch) * 2 / ch);
3600                 case AV_CODEC_ID_ADPCM_IMA_RAD:
3601                     return blocks * ((ba - 4 * ch) * 2 / ch);
3602                 case AV_CODEC_ID_ADPCM_MS:
3603                     return blocks * (2 + (ba - 7 * ch) * 2 / ch);
3604                 case AV_CODEC_ID_ADPCM_MTAF:
3605                     return blocks * (ba - 16) * 2 / ch;
3606                 }
3607             }
3608
3609             if (bps > 0) {
3610                 /* calc from frame_bytes, channels, and bits_per_coded_sample */
3611                 switch (id) {
3612                 case AV_CODEC_ID_PCM_DVD:
3613                     if(bps<4)
3614                         return 0;
3615                     return 2 * (frame_bytes / ((bps * 2 / 8) * ch));
3616                 case AV_CODEC_ID_PCM_BLURAY:
3617                     if(bps<4)
3618                         return 0;
3619                     return frame_bytes / ((FFALIGN(ch, 2) * bps) / 8);
3620                 case AV_CODEC_ID_S302M:
3621                     return 2 * (frame_bytes / ((bps + 4) / 4)) / ch;
3622                 }
3623             }
3624         }
3625     }
3626
3627     /* Fall back on using frame_size */
3628     if (frame_size > 1 && frame_bytes)
3629