mpegvideo: wmv2: Move function declarations
[ffmpeg.git] / libavcodec / h263dec.c
1 /*
2  * H.263 decoder
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
5  *
6  * This file is part of Libav.
7  *
8  * Libav is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * Libav is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with Libav; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file
25  * H.263 decoder.
26  */
27
28 #include "libavutil/cpu.h"
29 #include "avcodec.h"
30 #include "error_resilience.h"
31 #include "flv.h"
32 #include "h263.h"
33 #include "h263_parser.h"
34 #include "internal.h"
35 #include "mpeg_er.h"
36 #include "mpeg4video.h"
37 #include "mpeg4video_parser.h"
38 #include "mpegvideo.h"
39 #include "msmpeg4.h"
40 #include "qpeldsp.h"
41 #include "thread.h"
42 #include "wmv2.h"
43
44 static enum AVPixelFormat h263_get_format(AVCodecContext *avctx)
45 {
46     if (avctx->codec->id == AV_CODEC_ID_MSS2)
47         return AV_PIX_FMT_YUV420P;
48
49     return avctx->pix_fmt = ff_get_format(avctx, avctx->codec->pix_fmts);
50 }
51
52 av_cold int ff_h263_decode_init(AVCodecContext *avctx)
53 {
54     MpegEncContext *s = avctx->priv_data;
55     int ret;
56
57     s->avctx           = avctx;
58     s->out_format      = FMT_H263;
59     s->width           = avctx->coded_width;
60     s->height          = avctx->coded_height;
61     s->workaround_bugs = avctx->workaround_bugs;
62
63     // set defaults
64     ff_mpv_decode_defaults(s);
65     s->quant_precision = 5;
66     s->decode_mb       = ff_h263_decode_mb;
67     s->low_delay       = 1;
68     s->unrestricted_mv = 1;
69
70     /* select sub codec */
71     switch (avctx->codec->id) {
72     case AV_CODEC_ID_H263:
73         s->unrestricted_mv = 0;
74         avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
75         break;
76     case AV_CODEC_ID_MPEG4:
77         break;
78     case AV_CODEC_ID_MSMPEG4V1:
79         s->h263_pred       = 1;
80         s->msmpeg4_version = 1;
81         break;
82     case AV_CODEC_ID_MSMPEG4V2:
83         s->h263_pred       = 1;
84         s->msmpeg4_version = 2;
85         break;
86     case AV_CODEC_ID_MSMPEG4V3:
87         s->h263_pred       = 1;
88         s->msmpeg4_version = 3;
89         break;
90     case AV_CODEC_ID_WMV1:
91         s->h263_pred       = 1;
92         s->msmpeg4_version = 4;
93         break;
94     case AV_CODEC_ID_WMV2:
95         s->h263_pred       = 1;
96         s->msmpeg4_version = 5;
97         break;
98     case AV_CODEC_ID_VC1:
99     case AV_CODEC_ID_WMV3:
100     case AV_CODEC_ID_VC1IMAGE:
101     case AV_CODEC_ID_WMV3IMAGE:
102     case AV_CODEC_ID_MSS2:
103         s->h263_pred       = 1;
104         s->msmpeg4_version = 6;
105         avctx->chroma_sample_location = AVCHROMA_LOC_LEFT;
106         break;
107     case AV_CODEC_ID_H263I:
108         break;
109     case AV_CODEC_ID_FLV1:
110         s->h263_flv = 1;
111         break;
112     default:
113         av_log(avctx, AV_LOG_ERROR, "Unsupported codec %d\n",
114                avctx->codec->id);
115         return AVERROR(ENOSYS);
116     }
117     s->codec_id    = avctx->codec->id;
118
119     /* for h263, we allocate the images after having read the header */
120     if (avctx->codec->id != AV_CODEC_ID_H263 &&
121         avctx->codec->id != AV_CODEC_ID_MPEG4) {
122         avctx->pix_fmt = h263_get_format(avctx);
123         ff_mpv_idct_init(s);
124         if ((ret = ff_mpv_common_init(s)) < 0)
125             return ret;
126     }
127
128     ff_h263dsp_init(&s->h263dsp);
129     ff_qpeldsp_init(&s->qdsp);
130     ff_h263_decode_init_vlc();
131
132     return 0;
133 }
134
135 av_cold int ff_h263_decode_end(AVCodecContext *avctx)
136 {
137     MpegEncContext *s = avctx->priv_data;
138
139     ff_mpv_common_end(s);
140     return 0;
141 }
142
143 /**
144  * Return the number of bytes consumed for building the current frame.
145  */
146 static int get_consumed_bytes(MpegEncContext *s, int buf_size)
147 {
148     int pos = (get_bits_count(&s->gb) + 7) >> 3;
149
150     if (s->divx_packed || s->avctx->hwaccel) {
151         /* We would have to scan through the whole buf to handle the weird
152          * reordering ... */
153         return buf_size;
154     } else if (s->avctx->flags & CODEC_FLAG_TRUNCATED) {
155         pos -= s->parse_context.last_index;
156         // padding is not really read so this might be -1
157         if (pos < 0)
158             pos = 0;
159         return pos;
160     } else {
161         // avoid infinite loops (maybe not needed...)
162         if (pos == 0)
163             pos = 1;
164         // oops ;)
165         if (pos + 10 > buf_size)
166             pos = buf_size;
167
168         return pos;
169     }
170 }
171
172 static int decode_slice(MpegEncContext *s)
173 {
174     const int part_mask = s->partitioned_frame
175                           ? (ER_AC_END | ER_AC_ERROR) : 0x7F;
176     const int mb_size = 16;
177     int ret;
178
179     s->last_resync_gb   = s->gb;
180     s->first_slice_line = 1;
181     s->resync_mb_x      = s->mb_x;
182     s->resync_mb_y      = s->mb_y;
183
184     ff_set_qscale(s, s->qscale);
185
186     if (s->avctx->hwaccel) {
187         const uint8_t *start = s->gb.buffer + get_bits_count(&s->gb) / 8;
188         const uint8_t *end   = ff_h263_find_resync_marker(start + 1,
189                                                           s->gb.buffer_end);
190         skip_bits_long(&s->gb, 8 * (end - start));
191         return s->avctx->hwaccel->decode_slice(s->avctx, start, end - start);
192     }
193
194     if (s->partitioned_frame) {
195         const int qscale = s->qscale;
196
197         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4)
198             if ((ret = ff_mpeg4_decode_partitions(s->avctx->priv_data)) < 0)
199                 return ret;
200
201         /* restore variables which were modified */
202         s->first_slice_line = 1;
203         s->mb_x             = s->resync_mb_x;
204         s->mb_y             = s->resync_mb_y;
205         ff_set_qscale(s, qscale);
206     }
207
208     for (; s->mb_y < s->mb_height; s->mb_y++) {
209         /* per-row end of slice checks */
210         if (s->msmpeg4_version) {
211             if (s->resync_mb_y + s->slice_height == s->mb_y) {
212                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
213                                 s->mb_x - 1, s->mb_y, ER_MB_END);
214
215                 return 0;
216             }
217         }
218
219         if (s->msmpeg4_version == 1) {
220             s->last_dc[0] =
221             s->last_dc[1] =
222             s->last_dc[2] = 128;
223         }
224
225         ff_init_block_index(s);
226         for (; s->mb_x < s->mb_width; s->mb_x++) {
227             int ret;
228
229             ff_update_block_index(s);
230
231             if (s->resync_mb_x == s->mb_x && s->resync_mb_y + 1 == s->mb_y)
232                 s->first_slice_line = 0;
233
234             /* DCT & quantize */
235
236             s->mv_dir  = MV_DIR_FORWARD;
237             s->mv_type = MV_TYPE_16X16;
238             ff_dlog(s, "%d %d %06X\n",
239                     ret, get_bits_count(&s->gb), show_bits(&s->gb, 24));
240             ret = s->decode_mb(s, s->block);
241
242             if (s->pict_type != AV_PICTURE_TYPE_B)
243                 ff_h263_update_motion_val(s);
244
245             if (ret < 0) {
246                 const int xy = s->mb_x + s->mb_y * s->mb_stride;
247                 if (ret == SLICE_END) {
248                     ff_mpv_decode_mb(s, s->block);
249                     if (s->loop_filter)
250                         ff_h263_loop_filter(s);
251
252                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
253                                     s->mb_x, s->mb_y, ER_MB_END & part_mask);
254
255                     s->padding_bug_score--;
256
257                     if (++s->mb_x >= s->mb_width) {
258                         s->mb_x = 0;
259                         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
260                         ff_mpv_report_decode_progress(s);
261                         s->mb_y++;
262                     }
263                     return 0;
264                 } else if (ret == SLICE_NOEND) {
265                     av_log(s->avctx, AV_LOG_ERROR,
266                            "Slice mismatch at MB: %d\n", xy);
267                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
268                                     s->mb_x + 1, s->mb_y,
269                                     ER_MB_END & part_mask);
270                     return AVERROR_INVALIDDATA;
271                 }
272                 av_log(s->avctx, AV_LOG_ERROR, "Error at MB: %d\n", xy);
273                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
274                                 s->mb_x, s->mb_y, ER_MB_ERROR & part_mask);
275
276                 return AVERROR_INVALIDDATA;
277             }
278
279             ff_mpv_decode_mb(s, s->block);
280             if (s->loop_filter)
281                 ff_h263_loop_filter(s);
282         }
283
284         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
285         ff_mpv_report_decode_progress(s);
286
287         s->mb_x = 0;
288     }
289
290     assert(s->mb_x == 0 && s->mb_y == s->mb_height);
291
292     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
293         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
294         get_bits_left(&s->gb) >= 48              &&
295         show_bits(&s->gb, 24) == 0x4010          &&
296         !s->data_partitioning)
297         s->padding_bug_score += 32;
298
299     /* try to detect the padding bug */
300     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
301         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
302         get_bits_left(&s->gb) >= 0               &&
303         get_bits_left(&s->gb) < 48               &&
304         !s->data_partitioning) {
305         const int bits_count = get_bits_count(&s->gb);
306         const int bits_left  = s->gb.size_in_bits - bits_count;
307
308         if (bits_left == 0) {
309             s->padding_bug_score += 16;
310         } else if (bits_left != 1) {
311             int v = show_bits(&s->gb, 8);
312             v |= 0x7F >> (7 - (bits_count & 7));
313
314             if (v == 0x7F && bits_left <= 8)
315                 s->padding_bug_score--;
316             else if (v == 0x7F && ((get_bits_count(&s->gb) + 8) & 8) &&
317                      bits_left <= 16)
318                 s->padding_bug_score += 4;
319             else
320                 s->padding_bug_score++;
321         }
322     }
323
324     if (s->workaround_bugs & FF_BUG_AUTODETECT) {
325         if (s->codec_id == AV_CODEC_ID_H263 ||
326             (s->padding_bug_score > -2 && !s->data_partitioning))
327             s->workaround_bugs |= FF_BUG_NO_PADDING;
328         else
329             s->workaround_bugs &= ~FF_BUG_NO_PADDING;
330     }
331
332     // handle formats which don't have unique end markers
333     if (s->msmpeg4_version || (s->workaround_bugs & FF_BUG_NO_PADDING)) { // FIXME perhaps solve this more cleanly
334         int left      = get_bits_left(&s->gb);
335         int max_extra = 7;
336
337         /* no markers in M$ crap */
338         if (s->msmpeg4_version && s->pict_type == AV_PICTURE_TYPE_I)
339             max_extra += 17;
340
341         /* buggy padding but the frame should still end approximately at
342          * the bitstream end */
343         if ((s->workaround_bugs & FF_BUG_NO_PADDING) &&
344             (s->avctx->err_recognition & AV_EF_BUFFER))
345             max_extra += 48;
346         else if ((s->workaround_bugs & FF_BUG_NO_PADDING))
347             max_extra += 256 * 256 * 256 * 64;
348
349         if (left > max_extra)
350             av_log(s->avctx, AV_LOG_ERROR,
351                    "discarding %d junk bits at end, next would be %X\n",
352                    left, show_bits(&s->gb, 24));
353         else if (left < 0)
354             av_log(s->avctx, AV_LOG_ERROR, "overreading %d bits\n", -left);
355         else
356             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
357                             s->mb_x - 1, s->mb_y, ER_MB_END);
358
359         return 0;
360     }
361
362     av_log(s->avctx, AV_LOG_ERROR,
363            "slice end not reached but screenspace end (%d left %06X, score= %d)\n",
364            get_bits_left(&s->gb), show_bits(&s->gb, 24), s->padding_bug_score);
365
366     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
367                     ER_MB_END & part_mask);
368
369     return AVERROR_INVALIDDATA;
370 }
371
372 int ff_h263_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
373                          AVPacket *avpkt)
374 {
375     const uint8_t *buf = avpkt->data;
376     int buf_size       = avpkt->size;
377     MpegEncContext *s  = avctx->priv_data;
378     int ret;
379     AVFrame *pict = data;
380
381     /* no supplementary picture */
382     if (buf_size == 0) {
383         /* special case for last picture */
384         if (s->low_delay == 0 && s->next_picture_ptr) {
385             if ((ret = av_frame_ref(pict, s->next_picture_ptr->f)) < 0)
386                 return ret;
387             s->next_picture_ptr = NULL;
388
389             *got_frame = 1;
390         }
391
392         return 0;
393     }
394
395     if (s->avctx->flags & CODEC_FLAG_TRUNCATED) {
396         int next;
397
398         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4) {
399             next = ff_mpeg4_find_frame_end(&s->parse_context, buf, buf_size);
400         } else if (CONFIG_H263_DECODER && s->codec_id == AV_CODEC_ID_H263) {
401             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
402         } else {
403             av_log(s->avctx, AV_LOG_ERROR,
404                    "this codec does not support truncated bitstreams\n");
405             return AVERROR(ENOSYS);
406         }
407
408         if (ff_combine_frame(&s->parse_context, next, (const uint8_t **)&buf,
409                              &buf_size) < 0)
410             return buf_size;
411     }
412
413     if (s->bitstream_buffer_size && (s->divx_packed || buf_size < 20)) // divx 5.01+/xvid frame reorder
414         ret = init_get_bits8(&s->gb, s->bitstream_buffer,
415                              s->bitstream_buffer_size);
416     else
417         ret = init_get_bits8(&s->gb, buf, buf_size);
418     s->bitstream_buffer_size = 0;
419
420     if (ret < 0)
421         return ret;
422
423     if (!s->context_initialized)
424         // we need the idct permutaton for reading a custom matrix
425         ff_mpv_idct_init(s);
426
427     /* let's go :-) */
428     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
429         ret = ff_wmv2_decode_picture_header(s);
430     } else if (CONFIG_MSMPEG4_DECODER && s->msmpeg4_version) {
431         ret = ff_msmpeg4_decode_picture_header(s);
432     } else if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
433         if (s->avctx->extradata_size && s->picture_number == 0) {
434             GetBitContext gb;
435
436             ret = init_get_bits8(&gb, s->avctx->extradata,
437                                  s->avctx->extradata_size);
438             if (ret < 0)
439                 return ret;
440             ff_mpeg4_decode_picture_header(avctx->priv_data, &gb);
441         }
442         ret = ff_mpeg4_decode_picture_header(avctx->priv_data, &s->gb);
443     } else if (CONFIG_H263I_DECODER && s->codec_id == AV_CODEC_ID_H263I) {
444         ret = ff_intel_h263_decode_picture_header(s);
445     } else if (CONFIG_FLV_DECODER && s->h263_flv) {
446         ret = ff_flv_decode_picture_header(s);
447     } else {
448         ret = ff_h263_decode_picture_header(s);
449     }
450
451     if (ret == FRAME_SKIPPED)
452         return get_consumed_bytes(s, buf_size);
453
454     /* skip if the header was thrashed */
455     if (ret < 0) {
456         av_log(s->avctx, AV_LOG_ERROR, "header damaged\n");
457         return ret;
458     }
459
460     if (!s->context_initialized) {
461         avctx->pix_fmt = h263_get_format(avctx);
462         if ((ret = ff_mpv_common_init(s)) < 0)
463             return ret;
464     }
465
466     if (!s->current_picture_ptr || s->current_picture_ptr->f->data[0]) {
467         int i = ff_find_unused_picture(s->avctx, s->picture, 0);
468         if (i < 0)
469             return i;
470         s->current_picture_ptr = &s->picture[i];
471     }
472
473     avctx->has_b_frames = !s->low_delay;
474
475 #define SET_QPEL_FUNC(postfix1, postfix2)                           \
476     s->qdsp.put_        ## postfix1 = ff_put_        ## postfix2;   \
477     s->qdsp.put_no_rnd_ ## postfix1 = ff_put_no_rnd_ ## postfix2;   \
478     s->qdsp.avg_        ## postfix1 = ff_avg_        ## postfix2;
479
480     if (s->workaround_bugs & FF_BUG_STD_QPEL) {
481         SET_QPEL_FUNC(qpel_pixels_tab[0][5], qpel16_mc11_old_c)
482         SET_QPEL_FUNC(qpel_pixels_tab[0][7], qpel16_mc31_old_c)
483         SET_QPEL_FUNC(qpel_pixels_tab[0][9], qpel16_mc12_old_c)
484         SET_QPEL_FUNC(qpel_pixels_tab[0][11], qpel16_mc32_old_c)
485         SET_QPEL_FUNC(qpel_pixels_tab[0][13], qpel16_mc13_old_c)
486         SET_QPEL_FUNC(qpel_pixels_tab[0][15], qpel16_mc33_old_c)
487
488         SET_QPEL_FUNC(qpel_pixels_tab[1][5], qpel8_mc11_old_c)
489         SET_QPEL_FUNC(qpel_pixels_tab[1][7], qpel8_mc31_old_c)
490         SET_QPEL_FUNC(qpel_pixels_tab[1][9], qpel8_mc12_old_c)
491         SET_QPEL_FUNC(qpel_pixels_tab[1][11], qpel8_mc32_old_c)
492         SET_QPEL_FUNC(qpel_pixels_tab[1][13], qpel8_mc13_old_c)
493         SET_QPEL_FUNC(qpel_pixels_tab[1][15], qpel8_mc33_old_c)
494     }
495
496     /* After H263 & mpeg4 header decode we have the height, width,
497      * and other parameters. So then we could init the picture.
498      * FIXME: By the way H263 decoder is evolving it should have
499      * an H263EncContext */
500     if (s->width  != avctx->coded_width  ||
501         s->height != avctx->coded_height ||
502         s->context_reinit) {
503         /* H.263 could change picture size any time */
504         s->context_reinit = 0;
505
506         ret = ff_set_dimensions(avctx, s->width, s->height);
507         if (ret < 0)
508             return ret;
509
510         ff_set_sar(avctx, avctx->sample_aspect_ratio);
511
512         if ((ret = ff_mpv_common_frame_size_change(s)))
513             return ret;
514
515         if (avctx->pix_fmt != h263_get_format(avctx)) {
516             av_log(avctx, AV_LOG_ERROR, "format change not supported\n");
517             avctx->pix_fmt = AV_PIX_FMT_NONE;
518             return AVERROR_UNKNOWN;
519         }
520     }
521
522     if (s->codec_id == AV_CODEC_ID_H263  ||
523         s->codec_id == AV_CODEC_ID_H263P ||
524         s->codec_id == AV_CODEC_ID_H263I)
525         s->gob_index = H263_GOB_HEIGHT(s->height);
526
527     // for skipping the frame
528     s->current_picture.f->pict_type = s->pict_type;
529     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
530
531     /* skip B-frames if we don't have reference frames */
532     if (!s->last_picture_ptr &&
533         (s->pict_type == AV_PICTURE_TYPE_B || s->droppable))
534         return get_consumed_bytes(s, buf_size);
535     if ((avctx->skip_frame >= AVDISCARD_NONREF &&
536          s->pict_type == AV_PICTURE_TYPE_B)    ||
537         (avctx->skip_frame >= AVDISCARD_NONKEY &&
538          s->pict_type != AV_PICTURE_TYPE_I)    ||
539         avctx->skip_frame >= AVDISCARD_ALL)
540         return get_consumed_bytes(s, buf_size);
541
542     if (s->next_p_frame_damaged) {
543         if (s->pict_type == AV_PICTURE_TYPE_B)
544             return get_consumed_bytes(s, buf_size);
545         else
546             s->next_p_frame_damaged = 0;
547     }
548
549     if ((!s->no_rounding) || s->pict_type == AV_PICTURE_TYPE_B) {
550         s->me.qpel_put = s->qdsp.put_qpel_pixels_tab;
551         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
552     } else {
553         s->me.qpel_put = s->qdsp.put_no_rnd_qpel_pixels_tab;
554         s->me.qpel_avg = s->qdsp.avg_qpel_pixels_tab;
555     }
556
557     if ((ret = ff_mpv_frame_start(s, avctx)) < 0)
558         return ret;
559
560     if (!s->divx_packed && !avctx->hwaccel)
561         ff_thread_finish_setup(avctx);
562
563     if (avctx->hwaccel) {
564         ret = avctx->hwaccel->start_frame(avctx, s->gb.buffer,
565                                           s->gb.buffer_end - s->gb.buffer);
566         if (ret < 0 )
567             return ret;
568     }
569
570     ff_mpeg_er_frame_start(s);
571
572     /* the second part of the wmv2 header contains the MB skip bits which
573      * are stored in current_picture->mb_type which is not available before
574      * ff_mpv_frame_start() */
575     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
576         ret = ff_wmv2_decode_secondary_picture_header(s);
577         if (ret < 0)
578             return ret;
579         if (ret == 1)
580             goto intrax8_decoded;
581     }
582
583     /* decode each macroblock */
584     s->mb_x = 0;
585     s->mb_y = 0;
586
587     ret = decode_slice(s);
588     while (s->mb_y < s->mb_height) {
589         if (s->msmpeg4_version) {
590             if (s->slice_height == 0 || s->mb_x != 0 ||
591                 (s->mb_y % s->slice_height) != 0 || get_bits_left(&s->gb) < 0)
592                 break;
593         } else {
594             int prev_x = s->mb_x, prev_y = s->mb_y;
595             if (ff_h263_resync(s) < 0)
596                 break;
597             if (prev_y * s->mb_width + prev_x < s->mb_y * s->mb_width + s->mb_x)
598                 s->er.error_occurred = 1;
599         }
600
601         if (s->msmpeg4_version < 4 && s->h263_pred)
602             ff_mpeg4_clean_buffers(s);
603
604         if (decode_slice(s) < 0)
605             ret = AVERROR_INVALIDDATA;
606     }
607
608     if (s->msmpeg4_version && s->msmpeg4_version < 4 &&
609         s->pict_type == AV_PICTURE_TYPE_I)
610         if (!CONFIG_MSMPEG4_DECODER ||
611             ff_msmpeg4_decode_ext_header(s, buf_size) < 0)
612             s->er.error_status_table[s->mb_num - 1] = ER_MB_ERROR;
613
614     assert(s->bitstream_buffer_size == 0);
615
616     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4)
617         ff_mpeg4_frame_end(avctx, buf, buf_size);
618
619 intrax8_decoded:
620     ff_er_frame_end(&s->er);
621
622     if (avctx->hwaccel) {
623         ret = avctx->hwaccel->end_frame(avctx);
624         if (ret < 0)
625             return ret;
626     }
627
628     ff_mpv_frame_end(s);
629
630     if (!s->divx_packed && avctx->hwaccel)
631         ff_thread_finish_setup(avctx);
632
633     assert(s->current_picture.f->pict_type ==
634            s->current_picture_ptr->f->pict_type);
635     assert(s->current_picture.f->pict_type == s->pict_type);
636     if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
637         if ((ret = av_frame_ref(pict, s->current_picture_ptr->f)) < 0)
638             return ret;
639         ff_print_debug_info(s, s->current_picture_ptr);
640     } else if (s->last_picture_ptr) {
641         if ((ret = av_frame_ref(pict, s->last_picture_ptr->f)) < 0)
642             return ret;
643         ff_print_debug_info(s, s->last_picture_ptr);
644     }
645
646     if (s->last_picture_ptr || s->low_delay)
647         *got_frame = 1;
648
649     if (ret && (avctx->err_recognition & AV_EF_EXPLODE))
650         return ret;
651     else
652         return get_consumed_bytes(s, buf_size);
653 }
654
655 const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[] = {
656 #if CONFIG_H263_VAAPI_HWACCEL || CONFIG_MPEG4_VAAPI_HWACCEL
657     AV_PIX_FMT_VAAPI_VLD,
658 #endif
659 #if CONFIG_H263_VDPAU_HWACCEL || CONFIG_MPEG4_VDPAU_HWACCEL
660     AV_PIX_FMT_VDPAU,
661 #endif
662     AV_PIX_FMT_YUV420P,
663     AV_PIX_FMT_NONE
664 };
665
666 AVCodec ff_h263_decoder = {
667     .name           = "h263",
668     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
669     .type           = AVMEDIA_TYPE_VIDEO,
670     .id             = AV_CODEC_ID_H263,
671     .priv_data_size = sizeof(MpegEncContext),
672     .init           = ff_h263_decode_init,
673     .close          = ff_h263_decode_end,
674     .decode         = ff_h263_decode_frame,
675     .capabilities   = CODEC_CAP_DRAW_HORIZ_BAND | CODEC_CAP_DR1 |
676                       CODEC_CAP_TRUNCATED | CODEC_CAP_DELAY,
677     .flush          = ff_mpeg_flush,
678     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
679 };