792c3ed36543baf7149705c6c27a1d3ecd4be8a9
[ffmpeg.git] / libavcodec / h263dec.c
1 /*
2  * H.263 decoder
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
5  *
6  * This file is part of FFmpeg.
7  *
8  * FFmpeg is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * FFmpeg is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with FFmpeg; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file
25  * H.263 decoder.
26  */
27
28 #define UNCHECKED_BITSTREAM_READER 1
29
30 #include "libavutil/cpu.h"
31 #include "avcodec.h"
32 #include "error_resilience.h"
33 #include "flv.h"
34 #include "h263.h"
35 #include "h263_parser.h"
36 #include "internal.h"
37 #include "mpeg4video.h"
38 #include "mpeg4video_parser.h"
39 #include "mpegvideo.h"
40 #include "msmpeg4.h"
41 #include "vdpau_internal.h"
42 #include "thread.h"
43
44 av_cold int ff_h263_decode_init(AVCodecContext *avctx)
45 {
46     MpegEncContext *s = avctx->priv_data;
47     int ret;
48
49     s->avctx           = avctx;
50     s->out_format      = FMT_H263;
51     s->width           = avctx->coded_width;
52     s->height          = avctx->coded_height;
53     s->workaround_bugs = avctx->workaround_bugs;
54
55     // set defaults
56     ff_MPV_decode_defaults(s);
57     s->quant_precision = 5;
58     s->decode_mb       = ff_h263_decode_mb;
59     s->low_delay       = 1;
60     if (avctx->codec->id == AV_CODEC_ID_MSS2)
61         avctx->pix_fmt = AV_PIX_FMT_YUV420P;
62     else
63         avctx->pix_fmt = ff_get_format(avctx, avctx->codec->pix_fmts);
64     s->unrestricted_mv = 1;
65
66     /* select sub codec */
67     switch (avctx->codec->id) {
68     case AV_CODEC_ID_H263:
69     case AV_CODEC_ID_H263P:
70         s->unrestricted_mv = 0;
71         avctx->chroma_sample_location = AVCHROMA_LOC_CENTER;
72         break;
73     case AV_CODEC_ID_MPEG4:
74         break;
75     case AV_CODEC_ID_MSMPEG4V1:
76         s->h263_pred       = 1;
77         s->msmpeg4_version = 1;
78         break;
79     case AV_CODEC_ID_MSMPEG4V2:
80         s->h263_pred       = 1;
81         s->msmpeg4_version = 2;
82         break;
83     case AV_CODEC_ID_MSMPEG4V3:
84         s->h263_pred       = 1;
85         s->msmpeg4_version = 3;
86         break;
87     case AV_CODEC_ID_WMV1:
88         s->h263_pred       = 1;
89         s->msmpeg4_version = 4;
90         break;
91     case AV_CODEC_ID_WMV2:
92         s->h263_pred       = 1;
93         s->msmpeg4_version = 5;
94         break;
95     case AV_CODEC_ID_VC1:
96     case AV_CODEC_ID_WMV3:
97     case AV_CODEC_ID_VC1IMAGE:
98     case AV_CODEC_ID_WMV3IMAGE:
99     case AV_CODEC_ID_MSS2:
100         s->h263_pred       = 1;
101         s->msmpeg4_version = 6;
102         avctx->chroma_sample_location = AVCHROMA_LOC_LEFT;
103         break;
104     case AV_CODEC_ID_H263I:
105         break;
106     case AV_CODEC_ID_FLV1:
107         s->h263_flv = 1;
108         break;
109     default:
110         av_log(avctx, AV_LOG_ERROR, "Unsupported codec %d\n",
111                avctx->codec->id);
112         return AVERROR(ENOSYS);
113     }
114     s->codec_id    = avctx->codec->id;
115
116     if (avctx->stream_codec_tag == AV_RL32("l263") && avctx->extradata_size == 56 && avctx->extradata[0] == 1)
117         s->ehc_mode = 1;
118
119     /* for h263, we allocate the images after having read the header */
120     if (avctx->codec->id != AV_CODEC_ID_H263 &&
121         avctx->codec->id != AV_CODEC_ID_H263P &&
122         avctx->codec->id != AV_CODEC_ID_MPEG4)
123         if ((ret = ff_MPV_common_init(s)) < 0)
124             return ret;
125
126     ff_h263dsp_init(&s->h263dsp);
127     ff_h263_decode_init_vlc();
128
129     return 0;
130 }
131
132 av_cold int ff_h263_decode_end(AVCodecContext *avctx)
133 {
134     MpegEncContext *s = avctx->priv_data;
135
136     ff_MPV_common_end(s);
137     return 0;
138 }
139
140 /**
141  * Return the number of bytes consumed for building the current frame.
142  */
143 static int get_consumed_bytes(MpegEncContext *s, int buf_size)
144 {
145     int pos = (get_bits_count(&s->gb) + 7) >> 3;
146
147     if (s->divx_packed || s->avctx->hwaccel) {
148         /* We would have to scan through the whole buf to handle the weird
149          * reordering ... */
150         return buf_size;
151     } else if (s->flags & CODEC_FLAG_TRUNCATED) {
152         pos -= s->parse_context.last_index;
153         // padding is not really read so this might be -1
154         if (pos < 0)
155             pos = 0;
156         return pos;
157     } else {
158         // avoid infinite loops (maybe not needed...)
159         if (pos == 0)
160             pos = 1;
161         // oops ;)
162         if (pos + 10 > buf_size)
163             pos = buf_size;
164
165         return pos;
166     }
167 }
168
169 static int decode_slice(MpegEncContext *s)
170 {
171     const int part_mask = s->partitioned_frame
172                           ? (ER_AC_END | ER_AC_ERROR) : 0x7F;
173     const int mb_size   = 16 >> s->avctx->lowres;
174     int ret;
175
176     s->last_resync_gb   = s->gb;
177     s->first_slice_line = 1;
178     s->resync_mb_x      = s->mb_x;
179     s->resync_mb_y      = s->mb_y;
180
181     ff_set_qscale(s, s->qscale);
182
183     if (s->avctx->hwaccel) {
184         const uint8_t *start = s->gb.buffer + get_bits_count(&s->gb) / 8;
185         ret = s->avctx->hwaccel->decode_slice(s->avctx, start, s->gb.buffer_end - start);
186         // ensure we exit decode loop
187         s->mb_y = s->mb_height;
188         return ret;
189     }
190
191     if (s->partitioned_frame) {
192         const int qscale = s->qscale;
193
194         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4)
195             if ((ret = ff_mpeg4_decode_partitions(s->avctx->priv_data)) < 0)
196                 return ret;
197
198         /* restore variables which were modified */
199         s->first_slice_line = 1;
200         s->mb_x             = s->resync_mb_x;
201         s->mb_y             = s->resync_mb_y;
202         ff_set_qscale(s, qscale);
203     }
204
205     for (; s->mb_y < s->mb_height; s->mb_y++) {
206         /* per-row end of slice checks */
207         if (s->msmpeg4_version) {
208             if (s->resync_mb_y + s->slice_height == s->mb_y) {
209                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
210                                 s->mb_x - 1, s->mb_y, ER_MB_END);
211
212                 return 0;
213             }
214         }
215
216         if (s->msmpeg4_version == 1) {
217             s->last_dc[0] =
218             s->last_dc[1] =
219             s->last_dc[2] = 128;
220         }
221
222         ff_init_block_index(s);
223         for (; s->mb_x < s->mb_width; s->mb_x++) {
224             int ret;
225
226             ff_update_block_index(s);
227
228             if (s->resync_mb_x == s->mb_x && s->resync_mb_y + 1 == s->mb_y)
229                 s->first_slice_line = 0;
230
231             /* DCT & quantize */
232
233             s->mv_dir  = MV_DIR_FORWARD;
234             s->mv_type = MV_TYPE_16X16;
235             av_dlog(s, "%d %d %06X\n",
236                     ret, get_bits_count(&s->gb), show_bits(&s->gb, 24));
237
238             tprintf(NULL, "Decoding MB at %dx%d\n", s->mb_x, s->mb_y);
239             ret = s->decode_mb(s, s->block);
240
241             if (s->pict_type != AV_PICTURE_TYPE_B)
242                 ff_h263_update_motion_val(s);
243
244             if (ret < 0) {
245                 const int xy = s->mb_x + s->mb_y * s->mb_stride;
246                 if (ret == SLICE_END) {
247                     ff_MPV_decode_mb(s, s->block);
248                     if (s->loop_filter)
249                         ff_h263_loop_filter(s);
250
251                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
252                                     s->mb_x, s->mb_y, ER_MB_END & part_mask);
253
254                     s->padding_bug_score--;
255
256                     if (++s->mb_x >= s->mb_width) {
257                         s->mb_x = 0;
258                         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
259                         ff_MPV_report_decode_progress(s);
260                         s->mb_y++;
261                     }
262                     return 0;
263                 } else if (ret == SLICE_NOEND) {
264                     av_log(s->avctx, AV_LOG_ERROR,
265                            "Slice mismatch at MB: %d\n", xy);
266                     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
267                                     s->mb_x + 1, s->mb_y,
268                                     ER_MB_END & part_mask);
269                     return AVERROR_INVALIDDATA;
270                 }
271                 av_log(s->avctx, AV_LOG_ERROR, "Error at MB: %d\n", xy);
272                 ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
273                                 s->mb_x, s->mb_y, ER_MB_ERROR & part_mask);
274
275                 if (s->err_recognition & AV_EF_IGNORE_ERR)
276                     continue;
277                 return AVERROR_INVALIDDATA;
278             }
279
280             ff_MPV_decode_mb(s, s->block);
281             if (s->loop_filter)
282                 ff_h263_loop_filter(s);
283         }
284
285         ff_mpeg_draw_horiz_band(s, s->mb_y * mb_size, mb_size);
286         ff_MPV_report_decode_progress(s);
287
288         s->mb_x = 0;
289     }
290
291     av_assert1(s->mb_x == 0 && s->mb_y == s->mb_height);
292
293     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
294         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
295         get_bits_left(&s->gb) >= 48              &&
296         show_bits(&s->gb, 24) == 0x4010          &&
297         !s->data_partitioning)
298         s->padding_bug_score += 32;
299
300     /* try to detect the padding bug */
301     if (s->codec_id == AV_CODEC_ID_MPEG4         &&
302         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
303         get_bits_left(&s->gb) >= 0               &&
304         get_bits_left(&s->gb) < 137              &&
305         !s->data_partitioning) {
306         const int bits_count = get_bits_count(&s->gb);
307         const int bits_left  = s->gb.size_in_bits - bits_count;
308
309         if (bits_left == 0) {
310             s->padding_bug_score += 16;
311         } else if (bits_left != 1) {
312             int v = show_bits(&s->gb, 8);
313             v |= 0x7F >> (7 - (bits_count & 7));
314
315             if (v == 0x7F && bits_left <= 8)
316                 s->padding_bug_score--;
317             else if (v == 0x7F && ((get_bits_count(&s->gb) + 8) & 8) &&
318                      bits_left <= 16)
319                 s->padding_bug_score += 4;
320             else
321                 s->padding_bug_score++;
322         }
323     }
324
325     if (s->codec_id == AV_CODEC_ID_H263          &&
326         (s->workaround_bugs & FF_BUG_AUTODETECT) &&
327         get_bits_left(&s->gb) >= 8               &&
328         get_bits_left(&s->gb) < 300              &&
329         s->pict_type == AV_PICTURE_TYPE_I        &&
330         show_bits(&s->gb, 8) == 0                &&
331         !s->data_partitioning) {
332
333         s->padding_bug_score += 32;
334     }
335
336     if (s->workaround_bugs & FF_BUG_AUTODETECT) {
337         if (s->padding_bug_score > -2 && !s->data_partitioning)
338             s->workaround_bugs |= FF_BUG_NO_PADDING;
339         else
340             s->workaround_bugs &= ~FF_BUG_NO_PADDING;
341     }
342
343     // handle formats which don't have unique end markers
344     if (s->msmpeg4_version || (s->workaround_bugs & FF_BUG_NO_PADDING)) { // FIXME perhaps solve this more cleanly
345         int left      = get_bits_left(&s->gb);
346         int max_extra = 7;
347
348         /* no markers in M$ crap */
349         if (s->msmpeg4_version && s->pict_type == AV_PICTURE_TYPE_I)
350             max_extra += 17;
351
352         /* buggy padding but the frame should still end approximately at
353          * the bitstream end */
354         if ((s->workaround_bugs & FF_BUG_NO_PADDING) &&
355             (s->err_recognition & (AV_EF_BUFFER|AV_EF_AGGRESSIVE)))
356             max_extra += 48;
357         else if ((s->workaround_bugs & FF_BUG_NO_PADDING))
358             max_extra += 256 * 256 * 256 * 64;
359
360         if (left > max_extra)
361             av_log(s->avctx, AV_LOG_ERROR,
362                    "discarding %d junk bits at end, next would be %X\n",
363                    left, show_bits(&s->gb, 24));
364         else if (left < 0)
365             av_log(s->avctx, AV_LOG_ERROR, "overreading %d bits\n", -left);
366         else
367             ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y,
368                             s->mb_x - 1, s->mb_y, ER_MB_END);
369
370         return 0;
371     }
372
373     av_log(s->avctx, AV_LOG_ERROR,
374            "slice end not reached but screenspace end (%d left %06X, score= %d)\n",
375            get_bits_left(&s->gb), show_bits(&s->gb, 24), s->padding_bug_score);
376
377     ff_er_add_slice(&s->er, s->resync_mb_x, s->resync_mb_y, s->mb_x, s->mb_y,
378                     ER_MB_END & part_mask);
379
380     return AVERROR_INVALIDDATA;
381 }
382
383 int ff_h263_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
384                          AVPacket *avpkt)
385 {
386     const uint8_t *buf = avpkt->data;
387     int buf_size       = avpkt->size;
388     MpegEncContext *s  = avctx->priv_data;
389     int ret;
390     int slice_ret = 0;
391     AVFrame *pict = data;
392
393     s->flags  = avctx->flags;
394     s->flags2 = avctx->flags2;
395
396     /* no supplementary picture */
397     if (buf_size == 0) {
398         /* special case for last picture */
399         if (s->low_delay == 0 && s->next_picture_ptr) {
400             if ((ret = av_frame_ref(pict, s->next_picture_ptr->f)) < 0)
401                 return ret;
402             s->next_picture_ptr = NULL;
403
404             *got_frame = 1;
405         }
406
407         return 0;
408     }
409
410     if (s->flags & CODEC_FLAG_TRUNCATED) {
411         int next;
412
413         if (CONFIG_MPEG4_DECODER && s->codec_id == AV_CODEC_ID_MPEG4) {
414             next = ff_mpeg4_find_frame_end(&s->parse_context, buf, buf_size);
415         } else if (CONFIG_H263_DECODER && s->codec_id == AV_CODEC_ID_H263) {
416             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
417         } else if (CONFIG_H263P_DECODER && s->codec_id == AV_CODEC_ID_H263P) {
418             next = ff_h263_find_frame_end(&s->parse_context, buf, buf_size);
419         } else {
420             av_log(s->avctx, AV_LOG_ERROR,
421                    "this codec does not support truncated bitstreams\n");
422             return AVERROR(ENOSYS);
423         }
424
425         if (ff_combine_frame(&s->parse_context, next, (const uint8_t **)&buf,
426                              &buf_size) < 0)
427             return buf_size;
428     }
429
430 retry:
431     if (s->divx_packed && s->bitstream_buffer_size) {
432         int i;
433         for(i=0; i < buf_size-3; i++) {
434             if (buf[i]==0 && buf[i+1]==0 && buf[i+2]==1) {
435                 if (buf[i+3]==0xB0) {
436                     av_log(s->avctx, AV_LOG_WARNING, "Discarding excessive bitstream in packed xvid\n");
437                     s->bitstream_buffer_size = 0;
438                 }
439                 break;
440             }
441         }
442     }
443
444     if (s->bitstream_buffer_size && (s->divx_packed || buf_size < 20)) // divx 5.01+/xvid frame reorder
445         ret = init_get_bits8(&s->gb, s->bitstream_buffer,
446                              s->bitstream_buffer_size);
447     else
448         ret = init_get_bits8(&s->gb, buf, buf_size);
449
450     s->bitstream_buffer_size = 0;
451     if (ret < 0)
452         return ret;
453
454     if (!s->context_initialized)
455         // we need the idct permutaton for reading a custom matrix
456         if ((ret = ff_MPV_common_init(s)) < 0)
457             return ret;
458
459     /* We need to set current_picture_ptr before reading the header,
460      * otherwise we cannot store anyting in there */
461     if (s->current_picture_ptr == NULL || s->current_picture_ptr->f->data[0]) {
462         int i = ff_find_unused_picture(s, 0);
463         if (i < 0)
464             return i;
465         s->current_picture_ptr = &s->picture[i];
466     }
467
468     /* let's go :-) */
469     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
470         ret = ff_wmv2_decode_picture_header(s);
471     } else if (CONFIG_MSMPEG4_DECODER && s->msmpeg4_version) {
472         ret = ff_msmpeg4_decode_picture_header(s);
473     } else if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
474         if (s->avctx->extradata_size && s->picture_number == 0) {
475             GetBitContext gb;
476
477             if (init_get_bits8(&gb, s->avctx->extradata, s->avctx->extradata_size) >= 0 )
478                 ff_mpeg4_decode_picture_header(avctx->priv_data, &gb);
479         }
480         ret = ff_mpeg4_decode_picture_header(avctx->priv_data, &s->gb);
481     } else if (CONFIG_H263I_DECODER && s->codec_id == AV_CODEC_ID_H263I) {
482         ret = ff_intel_h263_decode_picture_header(s);
483     } else if (CONFIG_FLV_DECODER && s->h263_flv) {
484         ret = ff_flv_decode_picture_header(s);
485     } else {
486         ret = ff_h263_decode_picture_header(s);
487     }
488
489     if (ret < 0 || ret == FRAME_SKIPPED) {
490         if (   s->width  != avctx->coded_width
491             || s->height != avctx->coded_height) {
492                 av_log(s->avctx, AV_LOG_WARNING, "Reverting picture dimensions change due to header decoding failure\n");
493                 s->width = avctx->coded_width;
494                 s->height= avctx->coded_height;
495         }
496     }
497     if (ret == FRAME_SKIPPED)
498         return get_consumed_bytes(s, buf_size);
499
500     /* skip if the header was thrashed */
501     if (ret < 0) {
502         av_log(s->avctx, AV_LOG_ERROR, "header damaged\n");
503         return ret;
504     }
505
506     avctx->has_b_frames = !s->low_delay;
507
508     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4) {
509         if (ff_mpeg4_workaround_bugs(avctx) == 1)
510             goto retry;
511     }
512
513     /* After H263 & mpeg4 header decode we have the height, width,
514      * and other parameters. So then we could init the picture.
515      * FIXME: By the way H263 decoder is evolving it should have
516      * an H263EncContext */
517     if (s->width  != avctx->coded_width  ||
518         s->height != avctx->coded_height ||
519         s->context_reinit) {
520         /* H.263 could change picture size any time */
521         s->context_reinit = 0;
522
523         ret = ff_set_dimensions(avctx, s->width, s->height);
524         if (ret < 0)
525             return ret;
526
527         if ((ret = ff_MPV_common_frame_size_change(s)))
528             return ret;
529     }
530
531     if (s->codec_id == AV_CODEC_ID_H263  ||
532         s->codec_id == AV_CODEC_ID_H263P ||
533         s->codec_id == AV_CODEC_ID_H263I)
534         s->gob_index = ff_h263_get_gob_height(s);
535
536     // for skipping the frame
537     s->current_picture.f->pict_type = s->pict_type;
538     s->current_picture.f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
539
540     /* skip B-frames if we don't have reference frames */
541     if (s->last_picture_ptr == NULL &&
542         (s->pict_type == AV_PICTURE_TYPE_B || s->droppable))
543         return get_consumed_bytes(s, buf_size);
544     if ((avctx->skip_frame >= AVDISCARD_NONREF &&
545          s->pict_type == AV_PICTURE_TYPE_B)    ||
546         (avctx->skip_frame >= AVDISCARD_NONKEY &&
547          s->pict_type != AV_PICTURE_TYPE_I)    ||
548         avctx->skip_frame >= AVDISCARD_ALL)
549         return get_consumed_bytes(s, buf_size);
550
551     if (s->next_p_frame_damaged) {
552         if (s->pict_type == AV_PICTURE_TYPE_B)
553             return get_consumed_bytes(s, buf_size);
554         else
555             s->next_p_frame_damaged = 0;
556     }
557
558     if ((!s->no_rounding) || s->pict_type == AV_PICTURE_TYPE_B) {
559         s->me.qpel_put = s->dsp.put_qpel_pixels_tab;
560         s->me.qpel_avg = s->dsp.avg_qpel_pixels_tab;
561     } else {
562         s->me.qpel_put = s->dsp.put_no_rnd_qpel_pixels_tab;
563         s->me.qpel_avg = s->dsp.avg_qpel_pixels_tab;
564     }
565
566     if ((ret = ff_MPV_frame_start(s, avctx)) < 0)
567         return ret;
568
569     if (!s->divx_packed && !avctx->hwaccel)
570         ff_thread_finish_setup(avctx);
571
572     if (CONFIG_MPEG4_VDPAU_DECODER && (s->avctx->codec->capabilities & CODEC_CAP_HWACCEL_VDPAU)) {
573         ff_vdpau_mpeg4_decode_picture(avctx->priv_data, s->gb.buffer, s->gb.buffer_end - s->gb.buffer);
574         goto frame_end;
575     }
576
577     if (avctx->hwaccel) {
578         ret = avctx->hwaccel->start_frame(avctx, s->gb.buffer,
579                                           s->gb.buffer_end - s->gb.buffer);
580         if (ret < 0 )
581             return ret;
582     }
583
584     ff_mpeg_er_frame_start(s);
585
586     /* the second part of the wmv2 header contains the MB skip bits which
587      * are stored in current_picture->mb_type which is not available before
588      * ff_MPV_frame_start() */
589     if (CONFIG_WMV2_DECODER && s->msmpeg4_version == 5) {
590         ret = ff_wmv2_decode_secondary_picture_header(s);
591         if (ret < 0)
592             return ret;
593         if (ret == 1)
594             goto frame_end;
595     }
596
597     /* decode each macroblock */
598     s->mb_x = 0;
599     s->mb_y = 0;
600
601     slice_ret = decode_slice(s);
602     while (s->mb_y < s->mb_height) {
603         if (s->msmpeg4_version) {
604             if (s->slice_height == 0 || s->mb_x != 0 ||
605                 (s->mb_y % s->slice_height) != 0 || get_bits_left(&s->gb) < 0)
606                 break;
607         } else {
608             int prev_x = s->mb_x, prev_y = s->mb_y;
609             if (ff_h263_resync(s) < 0)
610                 break;
611             if (prev_y * s->mb_width + prev_x < s->mb_y * s->mb_width + s->mb_x)
612                 s->er.error_occurred = 1;
613         }
614
615         if (s->msmpeg4_version < 4 && s->h263_pred)
616             ff_mpeg4_clean_buffers(s);
617
618         if (decode_slice(s) < 0)
619             slice_ret = AVERROR_INVALIDDATA;
620     }
621
622     if (s->msmpeg4_version && s->msmpeg4_version < 4 &&
623         s->pict_type == AV_PICTURE_TYPE_I)
624         if (!CONFIG_MSMPEG4_DECODER ||
625             ff_msmpeg4_decode_ext_header(s, buf_size) < 0)
626             s->er.error_status_table[s->mb_num - 1] = ER_MB_ERROR;
627
628     av_assert1(s->bitstream_buffer_size == 0);
629 frame_end:
630     ff_er_frame_end(&s->er);
631
632     if (avctx->hwaccel) {
633         ret = avctx->hwaccel->end_frame(avctx);
634         if (ret < 0)
635             return ret;
636     }
637
638     ff_MPV_frame_end(s);
639
640     if (CONFIG_MPEG4_DECODER && avctx->codec_id == AV_CODEC_ID_MPEG4)
641         ff_mpeg4_frame_end(avctx, buf, buf_size);
642
643     if (!s->divx_packed && avctx->hwaccel)
644         ff_thread_finish_setup(avctx);
645
646     av_assert1(s->current_picture.f->pict_type == s->current_picture_ptr->f->pict_type);
647     av_assert1(s->current_picture.f->pict_type == s->pict_type);
648     if (s->pict_type == AV_PICTURE_TYPE_B || s->low_delay) {
649         if ((ret = av_frame_ref(pict, s->current_picture_ptr->f)) < 0)
650             return ret;
651         ff_print_debug_info(s, s->current_picture_ptr, pict);
652         ff_mpv_export_qp_table(s, pict, s->current_picture_ptr, FF_QSCALE_TYPE_MPEG1);
653     } else if (s->last_picture_ptr != NULL) {
654         if ((ret = av_frame_ref(pict, s->last_picture_ptr->f)) < 0)
655             return ret;
656         ff_print_debug_info(s, s->last_picture_ptr, pict);
657         ff_mpv_export_qp_table(s, pict, s->last_picture_ptr, FF_QSCALE_TYPE_MPEG1);
658     }
659
660     if (s->last_picture_ptr || s->low_delay) {
661         if (   pict->format == AV_PIX_FMT_YUV420P
662             && (s->codec_tag == AV_RL32("GEOV") || s->codec_tag == AV_RL32("GEOX"))) {
663             int x, y, p;
664             av_frame_make_writable(pict);
665             for (p=0; p<3; p++) {
666                 int w = FF_CEIL_RSHIFT(pict-> width, !!p);
667                 int h = FF_CEIL_RSHIFT(pict->height, !!p);
668                 int linesize = pict->linesize[p];
669                 for (y=0; y<(h>>1); y++)
670                     for (x=0; x<w; x++)
671                         FFSWAP(int,
672                                pict->data[p][x + y*linesize],
673                                pict->data[p][x + (h-1-y)*linesize]);
674             }
675         }
676         *got_frame = 1;
677     }
678
679     if (slice_ret < 0 && (avctx->err_recognition & AV_EF_EXPLODE))
680         return ret;
681     else
682         return get_consumed_bytes(s, buf_size);
683 }
684
685 const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[] = {
686 #if CONFIG_H263_VAAPI_HWACCEL || CONFIG_MPEG4_VAAPI_HWACCEL
687     AV_PIX_FMT_VAAPI_VLD,
688 #endif
689 #if CONFIG_H263_VDPAU_HWACCEL || CONFIG_MPEG4_VDPAU_HWACCEL
690     AV_PIX_FMT_VDPAU,
691 #endif
692     AV_PIX_FMT_YUV420P,
693     AV_PIX_FMT_NONE
694 };
695
696 AVCodec ff_h263_decoder = {
697     .name           = "h263",
698     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
699     .type           = AVMEDIA_TYPE_VIDEO,
700     .id             = AV_CODEC_ID_H263,
701     .priv_data_size = sizeof(MpegEncContext),
702     .init           = ff_h263_decode_init,
703     .close          = ff_h263_decode_end,
704     .decode         = ff_h263_decode_frame,
705     .capabilities   = CODEC_CAP_DRAW_HORIZ_BAND | CODEC_CAP_DR1 |
706                       CODEC_CAP_TRUNCATED | CODEC_CAP_DELAY,
707     .flush          = ff_mpeg_flush,
708     .max_lowres     = 3,
709     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
710 };
711
712 AVCodec ff_h263p_decoder = {
713     .name           = "h263p",
714     .long_name      = NULL_IF_CONFIG_SMALL("H.263 / H.263-1996, H.263+ / H.263-1998 / H.263 version 2"),
715     .type           = AVMEDIA_TYPE_VIDEO,
716     .id             = AV_CODEC_ID_H263P,
717     .priv_data_size = sizeof(MpegEncContext),
718     .init           = ff_h263_decode_init,
719     .close          = ff_h263_decode_end,
720     .decode         = ff_h263_decode_frame,
721     .capabilities   = CODEC_CAP_DRAW_HORIZ_BAND | CODEC_CAP_DR1 |
722                       CODEC_CAP_TRUNCATED | CODEC_CAP_DELAY,
723     .flush          = ff_mpeg_flush,
724     .max_lowres     = 3,
725     .pix_fmts       = ff_h263_hwaccel_pixfmt_list_420,
726 };