indeo4: better mv check
[ffmpeg.git] / libavcodec / indeo4.c
1 /*
2  * Indeo Video Interactive v4 compatible decoder
3  * Copyright (c) 2009-2011 Maxim Poliakovski
4  *
5  * This file is part of Libav.
6  *
7  * Libav is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * Libav is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with Libav; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * Indeo Video Interactive version 4 decoder
25  *
26  * Indeo 4 data is usually transported within .avi or .mov files.
27  * Known FOURCCs: 'IV41'
28  */
29
30 #define BITSTREAM_READER_LE
31 #include "avcodec.h"
32 #include "get_bits.h"
33 #include "dsputil.h"
34 #include "ivi_dsp.h"
35 #include "ivi_common.h"
36 #include "indeo4data.h"
37
38 #define IVI4_STREAM_ANALYSER    0
39 #define IVI4_DEBUG_CHECKSUM     0
40
41 /**
42  *  Indeo 4 frame types.
43  */
44 enum {
45     FRAMETYPE_INTRA       = 0,
46     FRAMETYPE_BIDIR1      = 1,  ///< bidirectional frame
47     FRAMETYPE_INTER       = 2,  ///< non-droppable P-frame
48     FRAMETYPE_BIDIR       = 3,  ///< bidirectional frame
49     FRAMETYPE_INTER_NOREF = 4,  ///< droppable P-frame
50     FRAMETYPE_NULL_FIRST  = 5,  ///< empty frame with no data
51     FRAMETYPE_NULL_LAST   = 6   ///< empty frame with no data
52 };
53
54 #define IVI4_PIC_SIZE_ESC   7
55
56
57 typedef struct {
58     GetBitContext   gb;
59     AVFrame         frame;
60     RVMapDesc       rvmap_tabs[9];   ///< local corrected copy of the static rvmap tables
61
62     uint32_t        frame_num;
63     int             frame_type;
64     int             prev_frame_type; ///< frame type of the previous frame
65     uint32_t        data_size;       ///< size of the frame data in bytes from picture header
66     int             is_scalable;
67     int             transp_status;   ///< transparency mode status: 1 - enabled
68
69     IVIPicConfig    pic_conf;
70     IVIPlaneDesc    planes[3];       ///< color planes
71
72     int             buf_switch;      ///< used to switch between three buffers
73     int             dst_buf;         ///< buffer index for the currently decoded frame
74     int             ref_buf;         ///< inter frame reference buffer index
75
76     IVIHuffTab      mb_vlc;          ///< current macroblock table descriptor
77     IVIHuffTab      blk_vlc;         ///< current block table descriptor
78
79     uint16_t        checksum;        ///< frame checksum
80
81     uint8_t         rvmap_sel;
82     uint8_t         in_imf;
83     uint8_t         in_q;            ///< flag for explicitly stored quantiser delta
84     uint8_t         pic_glob_quant;
85     uint8_t         unknown1;
86
87 #if IVI4_STREAM_ANALYSER
88     uint8_t         has_b_frames;
89     uint8_t         has_transp;
90     uint8_t         uses_tiling;
91     uint8_t         uses_haar;
92     uint8_t         uses_fullpel;
93 #endif
94 } IVI4DecContext;
95
96
97 static const struct {
98     InvTransformPtr *inv_trans;
99     DCTransformPtr  *dc_trans;
100     int             is_2d_trans;
101 } transforms[18] = {
102     { ff_ivi_inverse_haar_8x8,  ff_ivi_dc_haar_2d,       1 },
103     { NULL, NULL, 0 }, /* inverse Haar 8x1 */
104     { NULL, NULL, 0 }, /* inverse Haar 1x8 */
105     { ff_ivi_put_pixels_8x8,    ff_ivi_put_dc_pixel_8x8, 1 },
106     { ff_ivi_inverse_slant_8x8, ff_ivi_dc_slant_2d,      1 },
107     { ff_ivi_row_slant8,        ff_ivi_dc_row_slant,     1 },
108     { ff_ivi_col_slant8,        ff_ivi_dc_col_slant,     1 },
109     { NULL, NULL, 0 }, /* inverse DCT 8x8 */
110     { NULL, NULL, 0 }, /* inverse DCT 8x1 */
111     { NULL, NULL, 0 }, /* inverse DCT 1x8 */
112     { NULL, NULL, 0 }, /* inverse Haar 4x4 */
113     { ff_ivi_inverse_slant_4x4, ff_ivi_dc_slant_2d,      1 },
114     { NULL, NULL, 0 }, /* no transform 4x4 */
115     { NULL, NULL, 0 }, /* inverse Haar 1x4 */
116     { NULL, NULL, 0 }, /* inverse Haar 4x1 */
117     { NULL, NULL, 0 }, /* inverse slant 1x4 */
118     { NULL, NULL, 0 }, /* inverse slant 4x1 */
119     { NULL, NULL, 0 }, /* inverse DCT 4x4 */
120 };
121
122 /**
123  *  Decode subdivision of a plane.
124  *  This is a simplified version that checks for two supported subdivisions:
125  *  - 1 wavelet band  per plane, size factor 1:1, code pattern: 3
126  *  - 4 wavelet bands per plane, size factor 1:4, code pattern: 2,3,3,3,3
127  *  Anything else is either unsupported or corrupt.
128  *
129  *  @param[in,out] gb    the GetBit context
130  *  @return        number of wavelet bands or 0 on error
131  */
132 static int decode_plane_subdivision(GetBitContext *gb)
133 {
134     int i;
135
136     switch (get_bits(gb, 2)) {
137     case 3:
138         return 1;
139     case 2:
140         for (i = 0; i < 4; i++)
141             if (get_bits(gb, 2) != 3)
142                 return 0;
143         return 4;
144     default:
145         return 0;
146     }
147 }
148
149 static inline int scale_tile_size(int def_size, int size_factor)
150 {
151     return size_factor == 15 ? def_size : (size_factor + 1) << 5;
152 }
153
154 /**
155  *  Decode Indeo 4 picture header.
156  *
157  *  @param[in,out] ctx       pointer to the decoder context
158  *  @param[in]     avctx     pointer to the AVCodecContext
159  *  @return        result code: 0 = OK, negative number = error
160  */
161 static int decode_pic_hdr(IVI4DecContext *ctx, AVCodecContext *avctx)
162 {
163     int             pic_size_indx, i, p;
164     IVIPicConfig    pic_conf;
165
166     if (get_bits(&ctx->gb, 18) != 0x3FFF8) {
167         av_log(avctx, AV_LOG_ERROR, "Invalid picture start code!\n");
168         return AVERROR_INVALIDDATA;
169     }
170
171     ctx->prev_frame_type = ctx->frame_type;
172     ctx->frame_type      = get_bits(&ctx->gb, 3);
173     if (ctx->frame_type == 7) {
174         av_log(avctx, AV_LOG_ERROR, "Invalid frame type: %d\n", ctx->frame_type);
175         return AVERROR_INVALIDDATA;
176     }
177
178 #if IVI4_STREAM_ANALYSER
179     if (   ctx->frame_type == FRAMETYPE_BIDIR1
180         || ctx->frame_type == FRAMETYPE_BIDIR)
181         ctx->has_b_frames = 1;
182 #endif
183
184     ctx->transp_status = get_bits1(&ctx->gb);
185 #if IVI4_STREAM_ANALYSER
186     if (ctx->transp_status) {
187         ctx->has_transp = 1;
188     }
189 #endif
190
191     /* unknown bit: Mac decoder ignores this bit, XANIM returns error */
192     if (get_bits1(&ctx->gb)) {
193         av_log(avctx, AV_LOG_ERROR, "Sync bit is set!\n");
194         return AVERROR_INVALIDDATA;
195     }
196
197     ctx->data_size = get_bits1(&ctx->gb) ? get_bits(&ctx->gb, 24) : 0;
198
199     /* null frames don't contain anything else so we just return */
200     if (ctx->frame_type >= FRAMETYPE_NULL_FIRST) {
201         av_dlog(avctx, "Null frame encountered!\n");
202         return 0;
203     }
204
205     /* Check key lock status. If enabled - ignore lock word.         */
206     /* Usually we have to prompt the user for the password, but      */
207     /* we don't do that because Indeo 4 videos can be decoded anyway */
208     if (get_bits1(&ctx->gb)) {
209         skip_bits_long(&ctx->gb, 32);
210         av_dlog(avctx, "Password-protected clip!\n");
211     }
212
213     pic_size_indx = get_bits(&ctx->gb, 3);
214     if (pic_size_indx == IVI4_PIC_SIZE_ESC) {
215         pic_conf.pic_height = get_bits(&ctx->gb, 16);
216         pic_conf.pic_width  = get_bits(&ctx->gb, 16);
217     } else {
218         pic_conf.pic_height = ivi4_common_pic_sizes[pic_size_indx * 2 + 1];
219         pic_conf.pic_width  = ivi4_common_pic_sizes[pic_size_indx * 2    ];
220     }
221
222     /* Decode tile dimensions. */
223     if (get_bits1(&ctx->gb)) {
224         pic_conf.tile_height = scale_tile_size(pic_conf.pic_height, get_bits(&ctx->gb, 4));
225         pic_conf.tile_width  = scale_tile_size(pic_conf.pic_width,  get_bits(&ctx->gb, 4));
226 #if IVI4_STREAM_ANALYSER
227         ctx->uses_tiling = 1;
228 #endif
229     } else {
230         pic_conf.tile_height = pic_conf.pic_height;
231         pic_conf.tile_width  = pic_conf.pic_width;
232     }
233
234     /* Decode chroma subsampling. We support only 4:4 aka YVU9. */
235     if (get_bits(&ctx->gb, 2)) {
236         av_log(avctx, AV_LOG_ERROR, "Only YVU9 picture format is supported!\n");
237         return AVERROR_INVALIDDATA;
238     }
239     pic_conf.chroma_height = (pic_conf.pic_height + 3) >> 2;
240     pic_conf.chroma_width  = (pic_conf.pic_width  + 3) >> 2;
241
242     /* decode subdivision of the planes */
243     pic_conf.luma_bands = decode_plane_subdivision(&ctx->gb);
244     if (pic_conf.luma_bands)
245         pic_conf.chroma_bands = decode_plane_subdivision(&ctx->gb);
246     ctx->is_scalable = pic_conf.luma_bands != 1 || pic_conf.chroma_bands != 1;
247     if (ctx->is_scalable && (pic_conf.luma_bands != 4 || pic_conf.chroma_bands != 1)) {
248         av_log(avctx, AV_LOG_ERROR, "Scalability: unsupported subdivision! Luma bands: %d, chroma bands: %d\n",
249                pic_conf.luma_bands, pic_conf.chroma_bands);
250         return AVERROR_INVALIDDATA;
251     }
252
253     /* check if picture layout was changed and reallocate buffers */
254     if (ivi_pic_config_cmp(&pic_conf, &ctx->pic_conf)) {
255         if (ff_ivi_init_planes(ctx->planes, &pic_conf)) {
256             av_log(avctx, AV_LOG_ERROR, "Couldn't reallocate color planes!\n");
257             return AVERROR(ENOMEM);
258         }
259
260         ctx->pic_conf = pic_conf;
261
262         /* set default macroblock/block dimensions */
263         for (p = 0; p <= 2; p++) {
264             for (i = 0; i < (!p ? pic_conf.luma_bands : pic_conf.chroma_bands); i++) {
265                 ctx->planes[p].bands[i].mb_size  = !p ? (!ctx->is_scalable ? 16 : 8) : 4;
266                 ctx->planes[p].bands[i].blk_size = !p ? 8 : 4;
267             }
268         }
269
270         if (ff_ivi_init_tiles(ctx->planes, ctx->pic_conf.tile_width,
271                               ctx->pic_conf.tile_height)) {
272             av_log(avctx, AV_LOG_ERROR,
273                    "Couldn't reallocate internal structures!\n");
274             return AVERROR(ENOMEM);
275         }
276     }
277
278     ctx->frame_num = get_bits1(&ctx->gb) ? get_bits(&ctx->gb, 20) : 0;
279
280     /* skip decTimeEst field if present */
281     if (get_bits1(&ctx->gb))
282         skip_bits(&ctx->gb, 8);
283
284     /* decode macroblock and block huffman codebooks */
285     if (ff_ivi_dec_huff_desc(&ctx->gb, get_bits1(&ctx->gb), IVI_MB_HUFF,  &ctx->mb_vlc,  avctx) ||
286         ff_ivi_dec_huff_desc(&ctx->gb, get_bits1(&ctx->gb), IVI_BLK_HUFF, &ctx->blk_vlc, avctx))
287         return AVERROR_INVALIDDATA;
288
289     ctx->rvmap_sel = get_bits1(&ctx->gb) ? get_bits(&ctx->gb, 3) : 8;
290
291     ctx->in_imf = get_bits1(&ctx->gb);
292     ctx->in_q   = get_bits1(&ctx->gb);
293
294     ctx->pic_glob_quant = get_bits(&ctx->gb, 5);
295
296     /* TODO: ignore this parameter if unused */
297     ctx->unknown1 = get_bits1(&ctx->gb) ? get_bits(&ctx->gb, 3) : 0;
298
299     ctx->checksum = get_bits1(&ctx->gb) ? get_bits(&ctx->gb, 16) : 0;
300
301     /* skip picture header extension if any */
302     while (get_bits1(&ctx->gb)) {
303         av_dlog(avctx, "Pic hdr extension encountered!\n");
304         skip_bits(&ctx->gb, 8);
305     }
306
307     if (get_bits1(&ctx->gb)) {
308         av_log(avctx, AV_LOG_ERROR, "Bad blocks bits encountered!\n");
309     }
310
311     align_get_bits(&ctx->gb);
312
313     return 0;
314 }
315
316
317 /**
318  *  Decode Indeo 4 band header.
319  *
320  *  @param[in,out] ctx       pointer to the decoder context
321  *  @param[in,out] band      pointer to the band descriptor
322  *  @param[in]     avctx     pointer to the AVCodecContext
323  *  @return        result code: 0 = OK, negative number = error
324  */
325 static int decode_band_hdr(IVI4DecContext *ctx, IVIBandDesc *band,
326                            AVCodecContext *avctx)
327 {
328     int plane, band_num, indx, transform_id, scan_indx;
329     int i;
330
331     plane    = get_bits(&ctx->gb, 2);
332     band_num = get_bits(&ctx->gb, 4);
333     if (band->plane != plane || band->band_num != band_num) {
334         av_log(avctx, AV_LOG_ERROR, "Invalid band header sequence!\n");
335         return AVERROR_INVALIDDATA;
336     }
337
338     band->is_empty = get_bits1(&ctx->gb);
339     if (!band->is_empty) {
340         /* skip header size
341          * If header size is not given, header size is 4 bytes. */
342         if (get_bits1(&ctx->gb))
343             skip_bits(&ctx->gb, 16);
344
345         band->is_halfpel = get_bits(&ctx->gb, 2);
346         if (band->is_halfpel >= 2) {
347             av_log(avctx, AV_LOG_ERROR, "Invalid/unsupported mv resolution: %d!\n",
348                    band->is_halfpel);
349             return AVERROR_INVALIDDATA;
350         }
351 #if IVI4_STREAM_ANALYSER
352         if (!band->is_halfpel)
353             ctx->uses_fullpel = 1;
354 #endif
355
356         band->checksum_present = get_bits1(&ctx->gb);
357         if (band->checksum_present)
358             band->checksum = get_bits(&ctx->gb, 16);
359
360         indx = get_bits(&ctx->gb, 2);
361         if (indx == 3) {
362             av_log(avctx, AV_LOG_ERROR, "Invalid block size!\n");
363             return AVERROR_INVALIDDATA;
364         }
365         band->mb_size  = 16 >> indx;
366         band->blk_size = 8 >> (indx >> 1);
367
368         band->inherit_mv     = get_bits1(&ctx->gb);
369         band->inherit_qdelta = get_bits1(&ctx->gb);
370
371         band->glob_quant = get_bits(&ctx->gb, 5);
372
373         if (!get_bits1(&ctx->gb) || ctx->frame_type == FRAMETYPE_INTRA) {
374             transform_id = get_bits(&ctx->gb, 5);
375             if (transform_id >= FF_ARRAY_ELEMS(transforms) ||
376                 !transforms[transform_id].inv_trans) {
377                 av_log_ask_for_sample(avctx, "Unimplemented transform: %d!\n", transform_id);
378                 return AVERROR_PATCHWELCOME;
379             }
380             if ((transform_id >= 7 && transform_id <= 9) ||
381                  transform_id == 17) {
382                 av_log_ask_for_sample(avctx, "DCT transform not supported yet!\n");
383                 return AVERROR_PATCHWELCOME;
384             }
385
386 #if IVI4_STREAM_ANALYSER
387             if ((transform_id >= 0 && transform_id <= 2) || transform_id == 10)
388                 ctx->uses_haar = 1;
389 #endif
390
391             band->inv_transform = transforms[transform_id].inv_trans;
392             band->dc_transform  = transforms[transform_id].dc_trans;
393             band->is_2d_trans   = transforms[transform_id].is_2d_trans;
394
395             scan_indx = get_bits(&ctx->gb, 4);
396             if (scan_indx == 15) {
397                 av_log(avctx, AV_LOG_ERROR, "Custom scan pattern encountered!\n");
398                 return AVERROR_INVALIDDATA;
399             }
400             band->scan = scan_index_to_tab[scan_indx];
401
402             band->quant_mat = get_bits(&ctx->gb, 5);
403             if (band->quant_mat == 31) {
404                 av_log(avctx, AV_LOG_ERROR, "Custom quant matrix encountered!\n");
405                 return AVERROR_INVALIDDATA;
406             }
407             if (band->quant_mat > 21) {
408                 av_log(avctx, AV_LOG_ERROR, "Invalid quant matrix encountered!\n");
409                 return AVERROR_INVALIDDATA;
410             }
411         }
412
413         /* decode block huffman codebook */
414         if (ff_ivi_dec_huff_desc(&ctx->gb, get_bits1(&ctx->gb), IVI_BLK_HUFF,
415                                  &band->blk_vlc, avctx))
416             return AVERROR_INVALIDDATA;
417
418         /* select appropriate rvmap table for this band */
419         band->rvmap_sel = get_bits1(&ctx->gb) ? get_bits(&ctx->gb, 3) : 8;
420
421         /* decode rvmap probability corrections if any */
422         band->num_corr = 0; /* there is no corrections */
423         if (get_bits1(&ctx->gb)) {
424             band->num_corr = get_bits(&ctx->gb, 8); /* get number of correction pairs */
425             if (band->num_corr > 61) {
426                 av_log(avctx, AV_LOG_ERROR, "Too many corrections: %d\n",
427                        band->num_corr);
428                 return AVERROR_INVALIDDATA;
429             }
430
431             /* read correction pairs */
432             for (i = 0; i < band->num_corr * 2; i++)
433                 band->corr[i] = get_bits(&ctx->gb, 8);
434         }
435     }
436
437     if (band->blk_size == 8) {
438         band->intra_base = &ivi4_quant_8x8_intra[quant_index_to_tab[band->quant_mat]][0];
439         band->inter_base = &ivi4_quant_8x8_inter[quant_index_to_tab[band->quant_mat]][0];
440     } else {
441         band->intra_base = &ivi4_quant_4x4_intra[quant_index_to_tab[band->quant_mat]][0];
442         band->inter_base = &ivi4_quant_4x4_inter[quant_index_to_tab[band->quant_mat]][0];
443     }
444
445     /* Indeo 4 doesn't use scale tables */
446     band->intra_scale = NULL;
447     band->inter_scale = NULL;
448
449     align_get_bits(&ctx->gb);
450
451     if (!band->scan) {
452         av_log(avctx, AV_LOG_ERROR, "band->scan not set\n");
453         return AVERROR_INVALIDDATA;
454     }
455
456     return 0;
457 }
458
459
460 /**
461  *  Decode information (block type, cbp, quant delta, motion vector)
462  *  for all macroblocks in the current tile.
463  *
464  *  @param[in,out] ctx       pointer to the decoder context
465  *  @param[in,out] band      pointer to the band descriptor
466  *  @param[in,out] tile      pointer to the tile descriptor
467  *  @param[in]     avctx     pointer to the AVCodecContext
468  *  @return        result code: 0 = OK, negative number = error
469  */
470 static int decode_mb_info(IVI4DecContext *ctx, IVIBandDesc *band,
471                           IVITile *tile, AVCodecContext *avctx)
472 {
473     int         x, y, mv_x, mv_y, mv_delta, offs, mb_offset, blks_per_mb,
474                 mv_scale, mb_type_bits, s;
475     IVIMbInfo   *mb, *ref_mb;
476     int         row_offset = band->mb_size * band->pitch;
477
478     mb     = tile->mbs;
479     ref_mb = tile->ref_mbs;
480     offs   = tile->ypos * band->pitch + tile->xpos;
481
482     blks_per_mb  = band->mb_size   != band->blk_size  ? 4 : 1;
483     mb_type_bits = ctx->frame_type == FRAMETYPE_BIDIR ? 2 : 1;
484
485     /* scale factor for motion vectors */
486     mv_scale = (ctx->planes[0].bands[0].mb_size >> 3) - (band->mb_size >> 3);
487     mv_x = mv_y = 0;
488
489     for (y = tile->ypos; y < tile->ypos + tile->height; y += band->mb_size) {
490         mb_offset = offs;
491
492         for (x = tile->xpos; x < tile->xpos + tile->width; x += band->mb_size) {
493             mb->xpos     = x;
494             mb->ypos     = y;
495             mb->buf_offs = mb_offset;
496
497             if (get_bits1(&ctx->gb)) {
498                 if (ctx->frame_type == FRAMETYPE_INTRA) {
499                     av_log(avctx, AV_LOG_ERROR, "Empty macroblock in an INTRA picture!\n");
500                     return AVERROR_INVALIDDATA;
501                 }
502                 mb->type = 1; /* empty macroblocks are always INTER */
503                 mb->cbp  = 0; /* all blocks are empty */
504
505                 mb->q_delta = 0;
506                 if (!band->plane && !band->band_num && ctx->in_q) {
507                     mb->q_delta = get_vlc2(&ctx->gb, ctx->mb_vlc.tab->table,
508                                            IVI_VLC_BITS, 1);
509                     mb->q_delta = IVI_TOSIGNED(mb->q_delta);
510                 }
511
512                 mb->mv_x = mb->mv_y = 0; /* no motion vector coded */
513                 if (band->inherit_mv) {
514                     /* motion vector inheritance */
515                     if (mv_scale) {
516                         mb->mv_x = ivi_scale_mv(ref_mb->mv_x, mv_scale);
517                         mb->mv_y = ivi_scale_mv(ref_mb->mv_y, mv_scale);
518                     } else {
519                         mb->mv_x = ref_mb->mv_x;
520                         mb->mv_y = ref_mb->mv_y;
521                     }
522                 }
523             } else {
524                 if (band->inherit_mv && ref_mb) {
525                     mb->type = ref_mb->type; /* copy mb_type from corresponding reference mb */
526                 } else if (ctx->frame_type == FRAMETYPE_INTRA) {
527                     mb->type = 0; /* mb_type is always INTRA for intra-frames */
528                 } else {
529                     mb->type = get_bits(&ctx->gb, mb_type_bits);
530                 }
531
532                 mb->cbp = get_bits(&ctx->gb, blks_per_mb);
533
534                 mb->q_delta = 0;
535                 if (band->inherit_qdelta) {
536                     if (ref_mb) mb->q_delta = ref_mb->q_delta;
537                 } else if (mb->cbp || (!band->plane && !band->band_num &&
538                            ctx->in_q)) {
539                     mb->q_delta = get_vlc2(&ctx->gb, ctx->mb_vlc.tab->table,
540                                            IVI_VLC_BITS, 1);
541                     mb->q_delta = IVI_TOSIGNED(mb->q_delta);
542                 }
543
544                 if (!mb->type) {
545                     mb->mv_x = mb->mv_y = 0; /* there is no motion vector in intra-macroblocks */
546                 } else {
547                     if (band->inherit_mv) {
548                         /* motion vector inheritance */
549                         if (mv_scale) {
550                             mb->mv_x = ivi_scale_mv(ref_mb->mv_x, mv_scale);
551                             mb->mv_y = ivi_scale_mv(ref_mb->mv_y, mv_scale);
552                         } else {
553                             mb->mv_x = ref_mb->mv_x;
554                             mb->mv_y = ref_mb->mv_y;
555                         }
556                     } else {
557                         /* decode motion vector deltas */
558                         mv_delta = get_vlc2(&ctx->gb, ctx->mb_vlc.tab->table,
559                                             IVI_VLC_BITS, 1);
560                         mv_y += IVI_TOSIGNED(mv_delta);
561                         mv_delta = get_vlc2(&ctx->gb, ctx->mb_vlc.tab->table,
562                                             IVI_VLC_BITS, 1);
563                         mv_x += IVI_TOSIGNED(mv_delta);
564                         mb->mv_x = mv_x;
565                         mb->mv_y = mv_y;
566                     }
567                 }
568             }
569
570             s= band->is_halfpel;
571             if (mb->type)
572             if ( x +  (mb->mv_x   >>s) +                 (y+               (mb->mv_y   >>s))*band->pitch < 0 ||
573                  x + ((mb->mv_x+s)>>s) + band->mb_size - 1
574                    + (y+band->mb_size - 1 +((mb->mv_y+s)>>s))*band->pitch > band->bufsize -1) {
575                 av_log(avctx, AV_LOG_ERROR, "motion vector %d %d outside reference\n", x*s + mb->mv_x, y*s + mb->mv_y);
576                 return AVERROR_INVALIDDATA;
577             }
578
579             mb++;
580             if (ref_mb)
581                 ref_mb++;
582             mb_offset += band->mb_size;
583         }
584
585         offs += row_offset;
586     }
587
588     align_get_bits(&ctx->gb);
589
590     return 0;
591 }
592
593
594 /**
595  *  Decode an Indeo 4 band.
596  *
597  *  @param[in,out] ctx       pointer to the decoder context
598  *  @param[in,out] band      pointer to the band descriptor
599  *  @param[in]     avctx     pointer to the AVCodecContext
600  *  @return        result code: 0 = OK, negative number = error
601  */
602 static int decode_band(IVI4DecContext *ctx, int plane_num,
603                        IVIBandDesc *band, AVCodecContext *avctx)
604 {
605     int         result, i, t, pos, idx1, idx2;
606     IVITile     *tile;
607
608     band->buf     = band->bufs[ctx->dst_buf];
609     band->ref_buf = band->bufs[ctx->ref_buf];
610
611     result = decode_band_hdr(ctx, band, avctx);
612     if (result) {
613         av_log(avctx, AV_LOG_ERROR, "Error decoding band header\n");
614         return result;
615     }
616
617     if (band->is_empty) {
618         av_log(avctx, AV_LOG_ERROR, "Empty band encountered!\n");
619         return AVERROR_INVALIDDATA;
620     }
621
622     band->rv_map = &ctx->rvmap_tabs[band->rvmap_sel];
623
624     /* apply corrections to the selected rvmap table if present */
625     for (i = 0; i < band->num_corr; i++) {
626         idx1 = band->corr[i * 2];
627         idx2 = band->corr[i * 2 + 1];
628         FFSWAP(uint8_t, band->rv_map->runtab[idx1], band->rv_map->runtab[idx2]);
629         FFSWAP(int16_t, band->rv_map->valtab[idx1], band->rv_map->valtab[idx2]);
630     }
631
632     pos = get_bits_count(&ctx->gb);
633
634     for (t = 0; t < band->num_tiles; t++) {
635         tile = &band->tiles[t];
636
637         tile->is_empty = get_bits1(&ctx->gb);
638         if (tile->is_empty) {
639             ff_ivi_process_empty_tile(avctx, band, tile,
640                                       (ctx->planes[0].bands[0].mb_size >> 3) - (band->mb_size >> 3));
641             av_dlog(avctx, "Empty tile encountered!\n");
642         } else {
643             tile->data_size = ff_ivi_dec_tile_data_size(&ctx->gb);
644             if (!tile->data_size) {
645                 av_log(avctx, AV_LOG_ERROR, "Tile data size is zero!\n");
646                 return AVERROR_INVALIDDATA;
647             }
648
649             result = decode_mb_info(ctx, band, tile, avctx);
650             if (result < 0)
651                 break;
652
653             result = ff_ivi_decode_blocks(&ctx->gb, band, tile);
654             if (result < 0 || ((get_bits_count(&ctx->gb) - pos) >> 3) != tile->data_size) {
655                 av_log(avctx, AV_LOG_ERROR, "Corrupted tile data encountered!\n");
656                 break;
657             }
658
659             pos += tile->data_size << 3; // skip to next tile
660         }
661     }
662
663     /* restore the selected rvmap table by applying its corrections in reverse order */
664     for (i = band->num_corr - 1; i >= 0; i--) {
665         idx1 = band->corr[i * 2];
666         idx2 = band->corr[i * 2 + 1];
667         FFSWAP(uint8_t, band->rv_map->runtab[idx1], band->rv_map->runtab[idx2]);
668         FFSWAP(int16_t, band->rv_map->valtab[idx1], band->rv_map->valtab[idx2]);
669     }
670
671 #if defined(DEBUG) && IVI4_DEBUG_CHECKSUM
672     if (band->checksum_present) {
673         uint16_t chksum = ivi_calc_band_checksum(band);
674         if (chksum != band->checksum) {
675             av_log(avctx, AV_LOG_ERROR,
676                    "Band checksum mismatch! Plane %d, band %d, received: %x, calculated: %x\n",
677                    band->plane, band->band_num, band->checksum, chksum);
678         }
679     }
680 #endif
681
682     align_get_bits(&ctx->gb);
683
684     return 0;
685 }
686
687
688 static av_cold int decode_init(AVCodecContext *avctx)
689 {
690     IVI4DecContext *ctx = avctx->priv_data;
691
692     ff_ivi_init_static_vlc();
693
694     /* copy rvmap tables in our context so we can apply changes to them */
695     memcpy(ctx->rvmap_tabs, ff_ivi_rvmap_tabs, sizeof(ff_ivi_rvmap_tabs));
696
697     /* Force allocation of the internal buffers */
698     /* during picture header decoding.          */
699     ctx->pic_conf.pic_width  = 0;
700     ctx->pic_conf.pic_height = 0;
701
702     avctx->pix_fmt = PIX_FMT_YUV410P;
703
704     return 0;
705 }
706
707
708 /**
709  *  Rearrange decoding and reference buffers.
710  *
711  *  @param[in,out] ctx       pointer to the decoder context
712  */
713 static void switch_buffers(IVI4DecContext *ctx)
714 {
715     switch (ctx->prev_frame_type) {
716     case FRAMETYPE_INTRA:
717     case FRAMETYPE_INTER:
718         ctx->buf_switch ^= 1;
719         ctx->dst_buf     = ctx->buf_switch;
720         ctx->ref_buf     = ctx->buf_switch ^ 1;
721         break;
722     case FRAMETYPE_INTER_NOREF:
723         break;
724     }
725
726     switch (ctx->frame_type) {
727     case FRAMETYPE_INTRA:
728         ctx->buf_switch = 0;
729         /* FALLTHROUGH */
730     case FRAMETYPE_INTER:
731         ctx->dst_buf = ctx->buf_switch;
732         ctx->ref_buf = ctx->buf_switch ^ 1;
733         break;
734     case FRAMETYPE_INTER_NOREF:
735     case FRAMETYPE_NULL_FIRST:
736     case FRAMETYPE_NULL_LAST:
737         break;
738     }
739 }
740
741
742 static int decode_frame(AVCodecContext *avctx, void *data, int *data_size,
743                         AVPacket *avpkt)
744 {
745     IVI4DecContext  *ctx = avctx->priv_data;
746     const uint8_t   *buf = avpkt->data;
747     int             buf_size = avpkt->size;
748     int             result, p, b;
749
750     init_get_bits(&ctx->gb, buf, buf_size * 8);
751
752     result = decode_pic_hdr(ctx, avctx);
753     if (result) {
754         av_log(avctx, AV_LOG_ERROR, "Error decoding picture header\n");
755         return result;
756     }
757
758     switch_buffers(ctx);
759
760     if (ctx->frame_type < FRAMETYPE_NULL_FIRST) {
761         for (p = 0; p < 3; p++) {
762             for (b = 0; b < ctx->planes[p].num_bands; b++) {
763                 result = decode_band(ctx, p, &ctx->planes[p].bands[b], avctx);
764                 if (result) {
765                     av_log(avctx, AV_LOG_ERROR,
766                            "Error decoding band: %d, plane: %d\n", b, p);
767                     return result;
768                 }
769             }
770         }
771     }
772
773     /* If the bidirectional mode is enabled, next I and the following P frame will */
774     /* be sent together. Unfortunately the approach below seems to be the only way */
775     /* to handle the B-frames mode. That's exactly the same Intel decoders do.     */
776     if (ctx->frame_type == FRAMETYPE_INTRA) {
777         while (get_bits(&ctx->gb, 8)); // skip version string
778         skip_bits_long(&ctx->gb, 64);  // skip padding, TODO: implement correct 8-bytes alignment
779         if (get_bits_left(&ctx->gb) > 18 && show_bits(&ctx->gb, 18) == 0x3FFF8)
780             av_log(avctx, AV_LOG_ERROR, "Buffer contains IP frames!\n");
781     }
782
783     if (ctx->frame_type >= FRAMETYPE_NULL_FIRST)
784         return buf_size;
785
786     if (ctx->frame.data[0])
787         avctx->release_buffer(avctx, &ctx->frame);
788
789     ctx->frame.reference = 0;
790     if ((result = avctx->get_buffer(avctx, &ctx->frame)) < 0) {
791         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
792         return result;
793     }
794
795     if (ctx->is_scalable) {
796         ff_ivi_recompose_haar(&ctx->planes[0], ctx->frame.data[0], ctx->frame.linesize[0], 4);
797     } else {
798         ff_ivi_output_plane(&ctx->planes[0], ctx->frame.data[0], ctx->frame.linesize[0]);
799     }
800
801     ff_ivi_output_plane(&ctx->planes[2], ctx->frame.data[1], ctx->frame.linesize[1]);
802     ff_ivi_output_plane(&ctx->planes[1], ctx->frame.data[2], ctx->frame.linesize[2]);
803
804     *data_size = sizeof(AVFrame);
805     *(AVFrame*)data = ctx->frame;
806
807     return buf_size;
808 }
809
810
811 static av_cold int decode_close(AVCodecContext *avctx)
812 {
813     IVI4DecContext *ctx = avctx->priv_data;
814
815     ff_ivi_free_buffers(&ctx->planes[0]);
816
817     if (ctx->frame.data[0])
818         avctx->release_buffer(avctx, &ctx->frame);
819
820 #if IVI4_STREAM_ANALYSER
821     if (ctx->is_scalable)
822         av_log(avctx, AV_LOG_ERROR, "This video uses scalability mode!\n");
823     if (ctx->uses_tiling)
824         av_log(avctx, AV_LOG_ERROR, "This video uses local decoding!\n");
825     if (ctx->has_b_frames)
826         av_log(avctx, AV_LOG_ERROR, "This video contains B-frames!\n");
827     if (ctx->has_transp)
828         av_log(avctx, AV_LOG_ERROR, "Transparency mode is enabled!\n");
829     if (ctx->uses_haar)
830         av_log(avctx, AV_LOG_ERROR, "This video uses Haar transform!\n");
831     if (ctx->uses_fullpel)
832         av_log(avctx, AV_LOG_ERROR, "This video uses fullpel motion vectors!\n");
833 #endif
834
835     return 0;
836 }
837
838
839 AVCodec ff_indeo4_decoder = {
840     .name           = "indeo4",
841     .type           = AVMEDIA_TYPE_VIDEO,
842     .id             = CODEC_ID_INDEO4,
843     .priv_data_size = sizeof(IVI4DecContext),
844     .init           = decode_init,
845     .close          = decode_close,
846     .decode         = decode_frame,
847     .long_name      = NULL_IF_CONFIG_SMALL("Intel Indeo Video Interactive 4"),
848 };