vc1 and wmv3 decoders use MPV_frame_start which uses get_buffer, set CODEC_CAP_DR1
[ffmpeg.git] / libavcodec / vc1.c
1 /*
2  * VC-1 and WMV3 decoder
3  * Copyright (c) 2006-2007 Konstantin Shishkov
4  * Partly based on vc9.c (c) 2005 Anonymous, Alex Beregszaszi, Michael Niedermayer
5  *
6  * This file is part of FFmpeg.
7  *
8  * FFmpeg is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * FFmpeg is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with FFmpeg; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file libavcodec/vc1.c
25  * VC-1 and WMV3 decoder
26  *
27  */
28 #include "internal.h"
29 #include "dsputil.h"
30 #include "avcodec.h"
31 #include "mpegvideo.h"
32 #include "vc1.h"
33 #include "vc1data.h"
34 #include "vc1acdata.h"
35 #include "msmpeg4data.h"
36 #include "unary.h"
37 #include "simple_idct.h"
38 #include "mathops.h"
39 #include "vdpau_internal.h"
40
41 #undef NDEBUG
42 #include <assert.h>
43
44 #define MB_INTRA_VLC_BITS 9
45 #define DC_VLC_BITS 9
46 #define AC_VLC_BITS 9
47 static const uint16_t table_mb_intra[64][2];
48
49
50 static const uint16_t vlc_offs[] = {
51        0,   520,   552,   616,  1128,  1160, 1224, 1740, 1772, 1836, 1900, 2436,
52     2986,  3050,  3610,  4154,  4218,  4746, 5326, 5390, 5902, 6554, 7658, 8620,
53     9262, 10202, 10756, 11310, 12228, 15078
54 };
55
56 /**
57  * Init VC-1 specific tables and VC1Context members
58  * @param v The VC1Context to initialize
59  * @return Status
60  */
61 static int vc1_init_common(VC1Context *v)
62 {
63     static int done = 0;
64     int i = 0;
65     static VLC_TYPE vlc_table[15078][2];
66
67     v->hrd_rate = v->hrd_buffer = NULL;
68
69     /* VLC tables */
70     if(!done)
71     {
72         INIT_VLC_STATIC(&ff_vc1_bfraction_vlc, VC1_BFRACTION_VLC_BITS, 23,
73                  ff_vc1_bfraction_bits, 1, 1,
74                  ff_vc1_bfraction_codes, 1, 1, 1 << VC1_BFRACTION_VLC_BITS);
75         INIT_VLC_STATIC(&ff_vc1_norm2_vlc, VC1_NORM2_VLC_BITS, 4,
76                  ff_vc1_norm2_bits, 1, 1,
77                  ff_vc1_norm2_codes, 1, 1, 1 << VC1_NORM2_VLC_BITS);
78         INIT_VLC_STATIC(&ff_vc1_norm6_vlc, VC1_NORM6_VLC_BITS, 64,
79                  ff_vc1_norm6_bits, 1, 1,
80                  ff_vc1_norm6_codes, 2, 2, 556);
81         INIT_VLC_STATIC(&ff_vc1_imode_vlc, VC1_IMODE_VLC_BITS, 7,
82                  ff_vc1_imode_bits, 1, 1,
83                  ff_vc1_imode_codes, 1, 1, 1 << VC1_IMODE_VLC_BITS);
84         for (i=0; i<3; i++)
85         {
86             ff_vc1_ttmb_vlc[i].table = &vlc_table[vlc_offs[i*3+0]];
87             ff_vc1_ttmb_vlc[i].table_allocated = vlc_offs[i*3+1] - vlc_offs[i*3+0];
88             init_vlc(&ff_vc1_ttmb_vlc[i], VC1_TTMB_VLC_BITS, 16,
89                      ff_vc1_ttmb_bits[i], 1, 1,
90                      ff_vc1_ttmb_codes[i], 2, 2, INIT_VLC_USE_NEW_STATIC);
91             ff_vc1_ttblk_vlc[i].table = &vlc_table[vlc_offs[i*3+1]];
92             ff_vc1_ttblk_vlc[i].table_allocated = vlc_offs[i*3+2] - vlc_offs[i*3+1];
93             init_vlc(&ff_vc1_ttblk_vlc[i], VC1_TTBLK_VLC_BITS, 8,
94                      ff_vc1_ttblk_bits[i], 1, 1,
95                      ff_vc1_ttblk_codes[i], 1, 1, INIT_VLC_USE_NEW_STATIC);
96             ff_vc1_subblkpat_vlc[i].table = &vlc_table[vlc_offs[i*3+2]];
97             ff_vc1_subblkpat_vlc[i].table_allocated = vlc_offs[i*3+3] - vlc_offs[i*3+2];
98             init_vlc(&ff_vc1_subblkpat_vlc[i], VC1_SUBBLKPAT_VLC_BITS, 15,
99                      ff_vc1_subblkpat_bits[i], 1, 1,
100                      ff_vc1_subblkpat_codes[i], 1, 1, INIT_VLC_USE_NEW_STATIC);
101         }
102         for(i=0; i<4; i++)
103         {
104             ff_vc1_4mv_block_pattern_vlc[i].table = &vlc_table[vlc_offs[i*3+9]];
105             ff_vc1_4mv_block_pattern_vlc[i].table_allocated = vlc_offs[i*3+10] - vlc_offs[i*3+9];
106             init_vlc(&ff_vc1_4mv_block_pattern_vlc[i], VC1_4MV_BLOCK_PATTERN_VLC_BITS, 16,
107                      ff_vc1_4mv_block_pattern_bits[i], 1, 1,
108                      ff_vc1_4mv_block_pattern_codes[i], 1, 1, INIT_VLC_USE_NEW_STATIC);
109             ff_vc1_cbpcy_p_vlc[i].table = &vlc_table[vlc_offs[i*3+10]];
110             ff_vc1_cbpcy_p_vlc[i].table_allocated = vlc_offs[i*3+11] - vlc_offs[i*3+10];
111             init_vlc(&ff_vc1_cbpcy_p_vlc[i], VC1_CBPCY_P_VLC_BITS, 64,
112                      ff_vc1_cbpcy_p_bits[i], 1, 1,
113                      ff_vc1_cbpcy_p_codes[i], 2, 2, INIT_VLC_USE_NEW_STATIC);
114             ff_vc1_mv_diff_vlc[i].table = &vlc_table[vlc_offs[i*3+11]];
115             ff_vc1_mv_diff_vlc[i].table_allocated = vlc_offs[i*3+12] - vlc_offs[i*3+11];
116             init_vlc(&ff_vc1_mv_diff_vlc[i], VC1_MV_DIFF_VLC_BITS, 73,
117                      ff_vc1_mv_diff_bits[i], 1, 1,
118                      ff_vc1_mv_diff_codes[i], 2, 2, INIT_VLC_USE_NEW_STATIC);
119         }
120         for(i=0; i<8; i++){
121             ff_vc1_ac_coeff_table[i].table = &vlc_table[vlc_offs[i+21]];
122             ff_vc1_ac_coeff_table[i].table_allocated = vlc_offs[i+22] - vlc_offs[i+21];
123             init_vlc(&ff_vc1_ac_coeff_table[i], AC_VLC_BITS, vc1_ac_sizes[i],
124                      &vc1_ac_tables[i][0][1], 8, 4,
125                      &vc1_ac_tables[i][0][0], 8, 4, INIT_VLC_USE_NEW_STATIC);
126         }
127         //FIXME: switching to INIT_VLC_STATIC() results in incorrect decoding
128         init_vlc(&ff_msmp4_mb_i_vlc, MB_INTRA_VLC_BITS, 64,
129                  &ff_msmp4_mb_i_table[0][1], 4, 2,
130                  &ff_msmp4_mb_i_table[0][0], 4, 2, INIT_VLC_USE_STATIC);
131         done = 1;
132     }
133
134     /* Other defaults */
135     v->pq = -1;
136     v->mvrange = 0; /* 7.1.1.18, p80 */
137
138     return 0;
139 }
140
141 /***********************************************************************/
142 /**
143  * @defgroup vc1bitplane VC-1 Bitplane decoding
144  * @see 8.7, p56
145  * @{
146  */
147
148 /**
149  * Imode types
150  * @{
151  */
152 enum Imode {
153     IMODE_RAW,
154     IMODE_NORM2,
155     IMODE_DIFF2,
156     IMODE_NORM6,
157     IMODE_DIFF6,
158     IMODE_ROWSKIP,
159     IMODE_COLSKIP
160 };
161 /** @} */ //imode defines
162
163 /** Decode rows by checking if they are skipped
164  * @param plane Buffer to store decoded bits
165  * @param[in] width Width of this buffer
166  * @param[in] height Height of this buffer
167  * @param[in] stride of this buffer
168  */
169 static void decode_rowskip(uint8_t* plane, int width, int height, int stride, GetBitContext *gb){
170     int x, y;
171
172     for (y=0; y<height; y++){
173         if (!get_bits1(gb)) //rowskip
174             memset(plane, 0, width);
175         else
176             for (x=0; x<width; x++)
177                 plane[x] = get_bits1(gb);
178         plane += stride;
179     }
180 }
181
182 /** Decode columns by checking if they are skipped
183  * @param plane Buffer to store decoded bits
184  * @param[in] width Width of this buffer
185  * @param[in] height Height of this buffer
186  * @param[in] stride of this buffer
187  * @todo FIXME: Optimize
188  */
189 static void decode_colskip(uint8_t* plane, int width, int height, int stride, GetBitContext *gb){
190     int x, y;
191
192     for (x=0; x<width; x++){
193         if (!get_bits1(gb)) //colskip
194             for (y=0; y<height; y++)
195                 plane[y*stride] = 0;
196         else
197             for (y=0; y<height; y++)
198                 plane[y*stride] = get_bits1(gb);
199         plane ++;
200     }
201 }
202
203 /** Decode a bitplane's bits
204  * @param data bitplane where to store the decode bits
205  * @param[out] raw_flag pointer to the flag indicating that this bitplane is not coded explicitly
206  * @param v VC-1 context for bit reading and logging
207  * @return Status
208  * @todo FIXME: Optimize
209  */
210 static int bitplane_decoding(uint8_t* data, int *raw_flag, VC1Context *v)
211 {
212     GetBitContext *gb = &v->s.gb;
213
214     int imode, x, y, code, offset;
215     uint8_t invert, *planep = data;
216     int width, height, stride;
217
218     width = v->s.mb_width;
219     height = v->s.mb_height;
220     stride = v->s.mb_stride;
221     invert = get_bits1(gb);
222     imode = get_vlc2(gb, ff_vc1_imode_vlc.table, VC1_IMODE_VLC_BITS, 1);
223
224     *raw_flag = 0;
225     switch (imode)
226     {
227     case IMODE_RAW:
228         //Data is actually read in the MB layer (same for all tests == "raw")
229         *raw_flag = 1; //invert ignored
230         return invert;
231     case IMODE_DIFF2:
232     case IMODE_NORM2:
233         if ((height * width) & 1)
234         {
235             *planep++ = get_bits1(gb);
236             offset = 1;
237         }
238         else offset = 0;
239         // decode bitplane as one long line
240         for (y = offset; y < height * width; y += 2) {
241             code = get_vlc2(gb, ff_vc1_norm2_vlc.table, VC1_NORM2_VLC_BITS, 1);
242             *planep++ = code & 1;
243             offset++;
244             if(offset == width) {
245                 offset = 0;
246                 planep += stride - width;
247             }
248             *planep++ = code >> 1;
249             offset++;
250             if(offset == width) {
251                 offset = 0;
252                 planep += stride - width;
253             }
254         }
255         break;
256     case IMODE_DIFF6:
257     case IMODE_NORM6:
258         if(!(height % 3) && (width % 3)) { // use 2x3 decoding
259             for(y = 0; y < height; y+= 3) {
260                 for(x = width & 1; x < width; x += 2) {
261                     code = get_vlc2(gb, ff_vc1_norm6_vlc.table, VC1_NORM6_VLC_BITS, 2);
262                     if(code < 0){
263                         av_log(v->s.avctx, AV_LOG_DEBUG, "invalid NORM-6 VLC\n");
264                         return -1;
265                     }
266                     planep[x + 0] = (code >> 0) & 1;
267                     planep[x + 1] = (code >> 1) & 1;
268                     planep[x + 0 + stride] = (code >> 2) & 1;
269                     planep[x + 1 + stride] = (code >> 3) & 1;
270                     planep[x + 0 + stride * 2] = (code >> 4) & 1;
271                     planep[x + 1 + stride * 2] = (code >> 5) & 1;
272                 }
273                 planep += stride * 3;
274             }
275             if(width & 1) decode_colskip(data, 1, height, stride, &v->s.gb);
276         } else { // 3x2
277             planep += (height & 1) * stride;
278             for(y = height & 1; y < height; y += 2) {
279                 for(x = width % 3; x < width; x += 3) {
280                     code = get_vlc2(gb, ff_vc1_norm6_vlc.table, VC1_NORM6_VLC_BITS, 2);
281                     if(code < 0){
282                         av_log(v->s.avctx, AV_LOG_DEBUG, "invalid NORM-6 VLC\n");
283                         return -1;
284                     }
285                     planep[x + 0] = (code >> 0) & 1;
286                     planep[x + 1] = (code >> 1) & 1;
287                     planep[x + 2] = (code >> 2) & 1;
288                     planep[x + 0 + stride] = (code >> 3) & 1;
289                     planep[x + 1 + stride] = (code >> 4) & 1;
290                     planep[x + 2 + stride] = (code >> 5) & 1;
291                 }
292                 planep += stride * 2;
293             }
294             x = width % 3;
295             if(x) decode_colskip(data  ,             x, height    , stride, &v->s.gb);
296             if(height & 1) decode_rowskip(data+x, width - x, 1, stride, &v->s.gb);
297         }
298         break;
299     case IMODE_ROWSKIP:
300         decode_rowskip(data, width, height, stride, &v->s.gb);
301         break;
302     case IMODE_COLSKIP:
303         decode_colskip(data, width, height, stride, &v->s.gb);
304         break;
305     default: break;
306     }
307
308     /* Applying diff operator */
309     if (imode == IMODE_DIFF2 || imode == IMODE_DIFF6)
310     {
311         planep = data;
312         planep[0] ^= invert;
313         for (x=1; x<width; x++)
314             planep[x] ^= planep[x-1];
315         for (y=1; y<height; y++)
316         {
317             planep += stride;
318             planep[0] ^= planep[-stride];
319             for (x=1; x<width; x++)
320             {
321                 if (planep[x-1] != planep[x-stride]) planep[x] ^= invert;
322                 else                                 planep[x] ^= planep[x-1];
323             }
324         }
325     }
326     else if (invert)
327     {
328         planep = data;
329         for (x=0; x<stride*height; x++) planep[x] = !planep[x]; //FIXME stride
330     }
331     return (imode<<1) + invert;
332 }
333
334 /** @} */ //Bitplane group
335
336 static void vc1_loop_filter_iblk(MpegEncContext *s, int pq)
337 {
338     int i, j;
339     if(!s->first_slice_line)
340         s->dsp.vc1_v_loop_filter16(s->dest[0], s->linesize, pq);
341     s->dsp.vc1_v_loop_filter16(s->dest[0] + 8*s->linesize, s->linesize, pq);
342     for(i = !s->mb_x*8; i < 16; i += 8)
343         s->dsp.vc1_h_loop_filter16(s->dest[0] + i, s->linesize, pq);
344     for(j = 0; j < 2; j++){
345         if(!s->first_slice_line)
346             s->dsp.vc1_v_loop_filter8(s->dest[j+1], s->uvlinesize, pq);
347         if(s->mb_x)
348             s->dsp.vc1_h_loop_filter8(s->dest[j+1], s->uvlinesize, pq);
349     }
350 }
351
352 /***********************************************************************/
353 /** VOP Dquant decoding
354  * @param v VC-1 Context
355  */
356 static int vop_dquant_decoding(VC1Context *v)
357 {
358     GetBitContext *gb = &v->s.gb;
359     int pqdiff;
360
361     //variable size
362     if (v->dquant == 2)
363     {
364         pqdiff = get_bits(gb, 3);
365         if (pqdiff == 7) v->altpq = get_bits(gb, 5);
366         else v->altpq = v->pq + pqdiff + 1;
367     }
368     else
369     {
370         v->dquantfrm = get_bits1(gb);
371         if ( v->dquantfrm )
372         {
373             v->dqprofile = get_bits(gb, 2);
374             switch (v->dqprofile)
375             {
376             case DQPROFILE_SINGLE_EDGE:
377             case DQPROFILE_DOUBLE_EDGES:
378                 v->dqsbedge = get_bits(gb, 2);
379                 break;
380             case DQPROFILE_ALL_MBS:
381                 v->dqbilevel = get_bits1(gb);
382                 if(!v->dqbilevel)
383                     v->halfpq = 0;
384             default: break; //Forbidden ?
385             }
386             if (v->dqbilevel || v->dqprofile != DQPROFILE_ALL_MBS)
387             {
388                 pqdiff = get_bits(gb, 3);
389                 if (pqdiff == 7) v->altpq = get_bits(gb, 5);
390                 else v->altpq = v->pq + pqdiff + 1;
391             }
392         }
393     }
394     return 0;
395 }
396
397 /** Put block onto picture
398  */
399 static void vc1_put_block(VC1Context *v, DCTELEM block[6][64])
400 {
401     uint8_t *Y;
402     int ys, us, vs;
403     DSPContext *dsp = &v->s.dsp;
404
405     if(v->rangeredfrm) {
406         int i, j, k;
407         for(k = 0; k < 6; k++)
408             for(j = 0; j < 8; j++)
409                 for(i = 0; i < 8; i++)
410                     block[k][i + j*8] = ((block[k][i + j*8] - 128) << 1) + 128;
411
412     }
413     ys = v->s.current_picture.linesize[0];
414     us = v->s.current_picture.linesize[1];
415     vs = v->s.current_picture.linesize[2];
416     Y = v->s.dest[0];
417
418     dsp->put_pixels_clamped(block[0], Y, ys);
419     dsp->put_pixels_clamped(block[1], Y + 8, ys);
420     Y += ys * 8;
421     dsp->put_pixels_clamped(block[2], Y, ys);
422     dsp->put_pixels_clamped(block[3], Y + 8, ys);
423
424     if(!(v->s.flags & CODEC_FLAG_GRAY)) {
425         dsp->put_pixels_clamped(block[4], v->s.dest[1], us);
426         dsp->put_pixels_clamped(block[5], v->s.dest[2], vs);
427     }
428 }
429
430 /** Do motion compensation over 1 macroblock
431  * Mostly adapted hpel_motion and qpel_motion from mpegvideo.c
432  */
433 static void vc1_mc_1mv(VC1Context *v, int dir)
434 {
435     MpegEncContext *s = &v->s;
436     DSPContext *dsp = &v->s.dsp;
437     uint8_t *srcY, *srcU, *srcV;
438     int dxy, mx, my, uvmx, uvmy, src_x, src_y, uvsrc_x, uvsrc_y;
439
440     if(!v->s.last_picture.data[0])return;
441
442     mx = s->mv[dir][0][0];
443     my = s->mv[dir][0][1];
444
445     // store motion vectors for further use in B frames
446     if(s->pict_type == FF_P_TYPE) {
447         s->current_picture.motion_val[1][s->block_index[0]][0] = mx;
448         s->current_picture.motion_val[1][s->block_index[0]][1] = my;
449     }
450     uvmx = (mx + ((mx & 3) == 3)) >> 1;
451     uvmy = (my + ((my & 3) == 3)) >> 1;
452     if(v->fastuvmc) {
453         uvmx = uvmx + ((uvmx<0)?(uvmx&1):-(uvmx&1));
454         uvmy = uvmy + ((uvmy<0)?(uvmy&1):-(uvmy&1));
455     }
456     if(!dir) {
457         srcY = s->last_picture.data[0];
458         srcU = s->last_picture.data[1];
459         srcV = s->last_picture.data[2];
460     } else {
461         srcY = s->next_picture.data[0];
462         srcU = s->next_picture.data[1];
463         srcV = s->next_picture.data[2];
464     }
465
466     src_x = s->mb_x * 16 + (mx >> 2);
467     src_y = s->mb_y * 16 + (my >> 2);
468     uvsrc_x = s->mb_x * 8 + (uvmx >> 2);
469     uvsrc_y = s->mb_y * 8 + (uvmy >> 2);
470
471     if(v->profile != PROFILE_ADVANCED){
472         src_x   = av_clip(  src_x, -16, s->mb_width  * 16);
473         src_y   = av_clip(  src_y, -16, s->mb_height * 16);
474         uvsrc_x = av_clip(uvsrc_x,  -8, s->mb_width  *  8);
475         uvsrc_y = av_clip(uvsrc_y,  -8, s->mb_height *  8);
476     }else{
477         src_x   = av_clip(  src_x, -17, s->avctx->coded_width);
478         src_y   = av_clip(  src_y, -18, s->avctx->coded_height + 1);
479         uvsrc_x = av_clip(uvsrc_x,  -8, s->avctx->coded_width  >> 1);
480         uvsrc_y = av_clip(uvsrc_y,  -8, s->avctx->coded_height >> 1);
481     }
482
483     srcY += src_y * s->linesize + src_x;
484     srcU += uvsrc_y * s->uvlinesize + uvsrc_x;
485     srcV += uvsrc_y * s->uvlinesize + uvsrc_x;
486
487     /* for grayscale we should not try to read from unknown area */
488     if(s->flags & CODEC_FLAG_GRAY) {
489         srcU = s->edge_emu_buffer + 18 * s->linesize;
490         srcV = s->edge_emu_buffer + 18 * s->linesize;
491     }
492
493     if(v->rangeredfrm || (v->mv_mode == MV_PMODE_INTENSITY_COMP)
494        || (unsigned)(src_x - s->mspel) > s->h_edge_pos - (mx&3) - 16 - s->mspel*3
495        || (unsigned)(src_y - s->mspel) > s->v_edge_pos - (my&3) - 16 - s->mspel*3){
496         uint8_t *uvbuf= s->edge_emu_buffer + 19 * s->linesize;
497
498         srcY -= s->mspel * (1 + s->linesize);
499         ff_emulated_edge_mc(s->edge_emu_buffer, srcY, s->linesize, 17+s->mspel*2, 17+s->mspel*2,
500                             src_x - s->mspel, src_y - s->mspel, s->h_edge_pos, s->v_edge_pos);
501         srcY = s->edge_emu_buffer;
502         ff_emulated_edge_mc(uvbuf     , srcU, s->uvlinesize, 8+1, 8+1,
503                             uvsrc_x, uvsrc_y, s->h_edge_pos >> 1, s->v_edge_pos >> 1);
504         ff_emulated_edge_mc(uvbuf + 16, srcV, s->uvlinesize, 8+1, 8+1,
505                             uvsrc_x, uvsrc_y, s->h_edge_pos >> 1, s->v_edge_pos >> 1);
506         srcU = uvbuf;
507         srcV = uvbuf + 16;
508         /* if we deal with range reduction we need to scale source blocks */
509         if(v->rangeredfrm) {
510             int i, j;
511             uint8_t *src, *src2;
512
513             src = srcY;
514             for(j = 0; j < 17 + s->mspel*2; j++) {
515                 for(i = 0; i < 17 + s->mspel*2; i++) src[i] = ((src[i] - 128) >> 1) + 128;
516                 src += s->linesize;
517             }
518             src = srcU; src2 = srcV;
519             for(j = 0; j < 9; j++) {
520                 for(i = 0; i < 9; i++) {
521                     src[i] = ((src[i] - 128) >> 1) + 128;
522                     src2[i] = ((src2[i] - 128) >> 1) + 128;
523                 }
524                 src += s->uvlinesize;
525                 src2 += s->uvlinesize;
526             }
527         }
528         /* if we deal with intensity compensation we need to scale source blocks */
529         if(v->mv_mode == MV_PMODE_INTENSITY_COMP) {
530             int i, j;
531             uint8_t *src, *src2;
532
533             src = srcY;
534             for(j = 0; j < 17 + s->mspel*2; j++) {
535                 for(i = 0; i < 17 + s->mspel*2; i++) src[i] = v->luty[src[i]];
536                 src += s->linesize;
537             }
538             src = srcU; src2 = srcV;
539             for(j = 0; j < 9; j++) {
540                 for(i = 0; i < 9; i++) {
541                     src[i] = v->lutuv[src[i]];
542                     src2[i] = v->lutuv[src2[i]];
543                 }
544                 src += s->uvlinesize;
545                 src2 += s->uvlinesize;
546             }
547         }
548         srcY += s->mspel * (1 + s->linesize);
549     }
550
551     if(s->mspel) {
552         dxy = ((my & 3) << 2) | (mx & 3);
553         dsp->put_vc1_mspel_pixels_tab[dxy](s->dest[0]    , srcY    , s->linesize, v->rnd);
554         dsp->put_vc1_mspel_pixels_tab[dxy](s->dest[0] + 8, srcY + 8, s->linesize, v->rnd);
555         srcY += s->linesize * 8;
556         dsp->put_vc1_mspel_pixels_tab[dxy](s->dest[0] + 8 * s->linesize    , srcY    , s->linesize, v->rnd);
557         dsp->put_vc1_mspel_pixels_tab[dxy](s->dest[0] + 8 * s->linesize + 8, srcY + 8, s->linesize, v->rnd);
558     } else { // hpel mc - always used for luma
559         dxy = (my & 2) | ((mx & 2) >> 1);
560
561         if(!v->rnd)
562             dsp->put_pixels_tab[0][dxy](s->dest[0], srcY, s->linesize, 16);
563         else
564             dsp->put_no_rnd_pixels_tab[0][dxy](s->dest[0], srcY, s->linesize, 16);
565     }
566
567     if(s->flags & CODEC_FLAG_GRAY) return;
568     /* Chroma MC always uses qpel bilinear */
569     uvmx = (uvmx&3)<<1;
570     uvmy = (uvmy&3)<<1;
571     if(!v->rnd){
572         dsp->put_h264_chroma_pixels_tab[0](s->dest[1], srcU, s->uvlinesize, 8, uvmx, uvmy);
573         dsp->put_h264_chroma_pixels_tab[0](s->dest[2], srcV, s->uvlinesize, 8, uvmx, uvmy);
574     }else{
575         dsp->put_no_rnd_vc1_chroma_pixels_tab[0](s->dest[1], srcU, s->uvlinesize, 8, uvmx, uvmy);
576         dsp->put_no_rnd_vc1_chroma_pixels_tab[0](s->dest[2], srcV, s->uvlinesize, 8, uvmx, uvmy);
577     }
578 }
579
580 /** Do motion compensation for 4-MV macroblock - luminance block
581  */
582 static void vc1_mc_4mv_luma(VC1Context *v, int n)
583 {
584     MpegEncContext *s = &v->s;
585     DSPContext *dsp = &v->s.dsp;
586     uint8_t *srcY;
587     int dxy, mx, my, src_x, src_y;
588     int off;
589
590     if(!v->s.last_picture.data[0])return;
591     mx = s->mv[0][n][0];
592     my = s->mv[0][n][1];
593     srcY = s->last_picture.data[0];
594
595     off = s->linesize * 4 * (n&2) + (n&1) * 8;
596
597     src_x = s->mb_x * 16 + (n&1) * 8 + (mx >> 2);
598     src_y = s->mb_y * 16 + (n&2) * 4 + (my >> 2);
599
600     if(v->profile != PROFILE_ADVANCED){
601         src_x   = av_clip(  src_x, -16, s->mb_width  * 16);
602         src_y   = av_clip(  src_y, -16, s->mb_height * 16);
603     }else{
604         src_x   = av_clip(  src_x, -17, s->avctx->coded_width);
605         src_y   = av_clip(  src_y, -18, s->avctx->coded_height + 1);
606     }
607
608     srcY += src_y * s->linesize + src_x;
609
610     if(v->rangeredfrm || (v->mv_mode == MV_PMODE_INTENSITY_COMP)
611        || (unsigned)(src_x - s->mspel) > s->h_edge_pos - (mx&3) - 8 - s->mspel*2
612        || (unsigned)(src_y - s->mspel) > s->v_edge_pos - (my&3) - 8 - s->mspel*2){
613         srcY -= s->mspel * (1 + s->linesize);
614         ff_emulated_edge_mc(s->edge_emu_buffer, srcY, s->linesize, 9+s->mspel*2, 9+s->mspel*2,
615                             src_x - s->mspel, src_y - s->mspel, s->h_edge_pos, s->v_edge_pos);
616         srcY = s->edge_emu_buffer;
617         /* if we deal with range reduction we need to scale source blocks */
618         if(v->rangeredfrm) {
619             int i, j;
620             uint8_t *src;
621
622             src = srcY;
623             for(j = 0; j < 9 + s->mspel*2; j++) {
624                 for(i = 0; i < 9 + s->mspel*2; i++) src[i] = ((src[i] - 128) >> 1) + 128;
625                 src += s->linesize;
626             }
627         }
628         /* if we deal with intensity compensation we need to scale source blocks */
629         if(v->mv_mode == MV_PMODE_INTENSITY_COMP) {
630             int i, j;
631             uint8_t *src;
632
633             src = srcY;
634             for(j = 0; j < 9 + s->mspel*2; j++) {
635                 for(i = 0; i < 9 + s->mspel*2; i++) src[i] = v->luty[src[i]];
636                 src += s->linesize;
637             }
638         }
639         srcY += s->mspel * (1 + s->linesize);
640     }
641
642     if(s->mspel) {
643         dxy = ((my & 3) << 2) | (mx & 3);
644         dsp->put_vc1_mspel_pixels_tab[dxy](s->dest[0] + off, srcY, s->linesize, v->rnd);
645     } else { // hpel mc - always used for luma
646         dxy = (my & 2) | ((mx & 2) >> 1);
647         if(!v->rnd)
648             dsp->put_pixels_tab[1][dxy](s->dest[0] + off, srcY, s->linesize, 8);
649         else
650             dsp->put_no_rnd_pixels_tab[1][dxy](s->dest[0] + off, srcY, s->linesize, 8);
651     }
652 }
653
654 static inline int median4(int a, int b, int c, int d)
655 {
656     if(a < b) {
657         if(c < d) return (FFMIN(b, d) + FFMAX(a, c)) / 2;
658         else      return (FFMIN(b, c) + FFMAX(a, d)) / 2;
659     } else {
660         if(c < d) return (FFMIN(a, d) + FFMAX(b, c)) / 2;
661         else      return (FFMIN(a, c) + FFMAX(b, d)) / 2;
662     }
663 }
664
665
666 /** Do motion compensation for 4-MV macroblock - both chroma blocks
667  */
668 static void vc1_mc_4mv_chroma(VC1Context *v)
669 {
670     MpegEncContext *s = &v->s;
671     DSPContext *dsp = &v->s.dsp;
672     uint8_t *srcU, *srcV;
673     int uvmx, uvmy, uvsrc_x, uvsrc_y;
674     int i, idx, tx = 0, ty = 0;
675     int mvx[4], mvy[4], intra[4];
676     static const int count[16] = { 0, 1, 1, 2, 1, 2, 2, 3, 1, 2, 2, 3, 2, 3, 3, 4};
677
678     if(!v->s.last_picture.data[0])return;
679     if(s->flags & CODEC_FLAG_GRAY) return;
680
681     for(i = 0; i < 4; i++) {
682         mvx[i] = s->mv[0][i][0];
683         mvy[i] = s->mv[0][i][1];
684         intra[i] = v->mb_type[0][s->block_index[i]];
685     }
686
687     /* calculate chroma MV vector from four luma MVs */
688     idx = (intra[3] << 3) | (intra[2] << 2) | (intra[1] << 1) | intra[0];
689     if(!idx) { // all blocks are inter
690         tx = median4(mvx[0], mvx[1], mvx[2], mvx[3]);
691         ty = median4(mvy[0], mvy[1], mvy[2], mvy[3]);
692     } else if(count[idx] == 1) { // 3 inter blocks
693         switch(idx) {
694         case 0x1:
695             tx = mid_pred(mvx[1], mvx[2], mvx[3]);
696             ty = mid_pred(mvy[1], mvy[2], mvy[3]);
697             break;
698         case 0x2:
699             tx = mid_pred(mvx[0], mvx[2], mvx[3]);
700             ty = mid_pred(mvy[0], mvy[2], mvy[3]);
701             break;
702         case 0x4:
703             tx = mid_pred(mvx[0], mvx[1], mvx[3]);
704             ty = mid_pred(mvy[0], mvy[1], mvy[3]);
705             break;
706         case 0x8:
707             tx = mid_pred(mvx[0], mvx[1], mvx[2]);
708             ty = mid_pred(mvy[0], mvy[1], mvy[2]);
709             break;
710         }
711     } else if(count[idx] == 2) {
712         int t1 = 0, t2 = 0;
713         for(i=0; i<3;i++) if(!intra[i]) {t1 = i; break;}
714         for(i= t1+1; i<4; i++)if(!intra[i]) {t2 = i; break;}
715         tx = (mvx[t1] + mvx[t2]) / 2;
716         ty = (mvy[t1] + mvy[t2]) / 2;
717     } else {
718         s->current_picture.motion_val[1][s->block_index[0]][0] = 0;
719         s->current_picture.motion_val[1][s->block_index[0]][1] = 0;
720         return; //no need to do MC for inter blocks
721     }
722
723     s->current_picture.motion_val[1][s->block_index[0]][0] = tx;
724     s->current_picture.motion_val[1][s->block_index[0]][1] = ty;
725     uvmx = (tx + ((tx&3) == 3)) >> 1;
726     uvmy = (ty + ((ty&3) == 3)) >> 1;
727     if(v->fastuvmc) {
728         uvmx = uvmx + ((uvmx<0)?(uvmx&1):-(uvmx&1));
729         uvmy = uvmy + ((uvmy<0)?(uvmy&1):-(uvmy&1));
730     }
731
732     uvsrc_x = s->mb_x * 8 + (uvmx >> 2);
733     uvsrc_y = s->mb_y * 8 + (uvmy >> 2);
734
735     if(v->profile != PROFILE_ADVANCED){
736         uvsrc_x = av_clip(uvsrc_x,  -8, s->mb_width  *  8);
737         uvsrc_y = av_clip(uvsrc_y,  -8, s->mb_height *  8);
738     }else{
739         uvsrc_x = av_clip(uvsrc_x,  -8, s->avctx->coded_width  >> 1);
740         uvsrc_y = av_clip(uvsrc_y,  -8, s->avctx->coded_height >> 1);
741     }
742
743     srcU = s->last_picture.data[1] + uvsrc_y * s->uvlinesize + uvsrc_x;
744     srcV = s->last_picture.data[2] + uvsrc_y * s->uvlinesize + uvsrc_x;
745     if(v->rangeredfrm || (v->mv_mode == MV_PMODE_INTENSITY_COMP)
746        || (unsigned)uvsrc_x > (s->h_edge_pos >> 1) - 9
747        || (unsigned)uvsrc_y > (s->v_edge_pos >> 1) - 9){
748         ff_emulated_edge_mc(s->edge_emu_buffer     , srcU, s->uvlinesize, 8+1, 8+1,
749                             uvsrc_x, uvsrc_y, s->h_edge_pos >> 1, s->v_edge_pos >> 1);
750         ff_emulated_edge_mc(s->edge_emu_buffer + 16, srcV, s->uvlinesize, 8+1, 8+1,
751                             uvsrc_x, uvsrc_y, s->h_edge_pos >> 1, s->v_edge_pos >> 1);
752         srcU = s->edge_emu_buffer;
753         srcV = s->edge_emu_buffer + 16;
754
755         /* if we deal with range reduction we need to scale source blocks */
756         if(v->rangeredfrm) {
757             int i, j;
758             uint8_t *src, *src2;
759
760             src = srcU; src2 = srcV;
761             for(j = 0; j < 9; j++) {
762                 for(i = 0; i < 9; i++) {
763                     src[i] = ((src[i] - 128) >> 1) + 128;
764                     src2[i] = ((src2[i] - 128) >> 1) + 128;
765                 }
766                 src += s->uvlinesize;
767                 src2 += s->uvlinesize;
768             }
769         }
770         /* if we deal with intensity compensation we need to scale source blocks */
771         if(v->mv_mode == MV_PMODE_INTENSITY_COMP) {
772             int i, j;
773             uint8_t *src, *src2;
774
775             src = srcU; src2 = srcV;
776             for(j = 0; j < 9; j++) {
777                 for(i = 0; i < 9; i++) {
778                     src[i] = v->lutuv[src[i]];
779                     src2[i] = v->lutuv[src2[i]];
780                 }
781                 src += s->uvlinesize;
782                 src2 += s->uvlinesize;
783             }
784         }
785     }
786
787     /* Chroma MC always uses qpel bilinear */
788     uvmx = (uvmx&3)<<1;
789     uvmy = (uvmy&3)<<1;
790     if(!v->rnd){
791         dsp->put_h264_chroma_pixels_tab[0](s->dest[1], srcU, s->uvlinesize, 8, uvmx, uvmy);
792         dsp->put_h264_chroma_pixels_tab[0](s->dest[2], srcV, s->uvlinesize, 8, uvmx, uvmy);
793     }else{
794         dsp->put_no_rnd_vc1_chroma_pixels_tab[0](s->dest[1], srcU, s->uvlinesize, 8, uvmx, uvmy);
795         dsp->put_no_rnd_vc1_chroma_pixels_tab[0](s->dest[2], srcV, s->uvlinesize, 8, uvmx, uvmy);
796     }
797 }
798
799 static int decode_sequence_header_adv(VC1Context *v, GetBitContext *gb);
800
801 /**
802  * Decode Simple/Main Profiles sequence header
803  * @see Figure 7-8, p16-17
804  * @param avctx Codec context
805  * @param gb GetBit context initialized from Codec context extra_data
806  * @return Status
807  */
808 int vc1_decode_sequence_header(AVCodecContext *avctx, VC1Context *v, GetBitContext *gb)
809 {
810     av_log(avctx, AV_LOG_DEBUG, "Header: %0X\n", show_bits(gb, 32));
811     v->profile = get_bits(gb, 2);
812     if (v->profile == PROFILE_COMPLEX)
813     {
814         av_log(avctx, AV_LOG_ERROR, "WMV3 Complex Profile is not fully supported\n");
815     }
816
817     if (v->profile == PROFILE_ADVANCED)
818     {
819         v->zz_8x4 = ff_vc1_adv_progressive_8x4_zz;
820         v->zz_4x8 = ff_vc1_adv_progressive_4x8_zz;
821         return decode_sequence_header_adv(v, gb);
822     }
823     else
824     {
825         v->zz_8x4 = wmv2_scantableA;
826         v->zz_4x8 = wmv2_scantableB;
827         v->res_sm = get_bits(gb, 2); //reserved
828         if (v->res_sm)
829         {
830             av_log(avctx, AV_LOG_ERROR,
831                    "Reserved RES_SM=%i is forbidden\n", v->res_sm);
832             return -1;
833         }
834     }
835
836     // (fps-2)/4 (->30)
837     v->frmrtq_postproc = get_bits(gb, 3); //common
838     // (bitrate-32kbps)/64kbps
839     v->bitrtq_postproc = get_bits(gb, 5); //common
840     v->s.loop_filter = get_bits1(gb); //common
841     if(v->s.loop_filter == 1 && v->profile == PROFILE_SIMPLE)
842     {
843         av_log(avctx, AV_LOG_ERROR,
844                "LOOPFILTER shell not be enabled in simple profile\n");
845     }
846     if(v->s.avctx->skip_loop_filter >= AVDISCARD_ALL)
847         v->s.loop_filter = 0;
848
849     v->res_x8 = get_bits1(gb); //reserved
850     v->multires = get_bits1(gb);
851     v->res_fasttx = get_bits1(gb);
852     if (!v->res_fasttx)
853     {
854         v->s.dsp.vc1_inv_trans_8x8 = ff_simple_idct;
855         v->s.dsp.vc1_inv_trans_8x4 = ff_simple_idct84_add;
856         v->s.dsp.vc1_inv_trans_4x8 = ff_simple_idct48_add;
857         v->s.dsp.vc1_inv_trans_4x4 = ff_simple_idct44_add;
858     }
859
860     v->fastuvmc =  get_bits1(gb); //common
861     if (!v->profile && !v->fastuvmc)
862     {
863         av_log(avctx, AV_LOG_ERROR,
864                "FASTUVMC unavailable in Simple Profile\n");
865         return -1;
866     }
867     v->extended_mv =  get_bits1(gb); //common
868     if (!v->profile && v->extended_mv)
869     {
870         av_log(avctx, AV_LOG_ERROR,
871                "Extended MVs unavailable in Simple Profile\n");
872         return -1;
873     }
874     v->dquant =  get_bits(gb, 2); //common
875     v->vstransform =  get_bits1(gb); //common
876
877     v->res_transtab = get_bits1(gb);
878     if (v->res_transtab)
879     {
880         av_log(avctx, AV_LOG_ERROR,
881                "1 for reserved RES_TRANSTAB is forbidden\n");
882         return -1;
883     }
884
885     v->overlap = get_bits1(gb); //common
886
887     v->s.resync_marker = get_bits1(gb);
888     v->rangered = get_bits1(gb);
889     if (v->rangered && v->profile == PROFILE_SIMPLE)
890     {
891         av_log(avctx, AV_LOG_INFO,
892                "RANGERED should be set to 0 in simple profile\n");
893     }
894
895     v->s.max_b_frames = avctx->max_b_frames = get_bits(gb, 3); //common
896     v->quantizer_mode = get_bits(gb, 2); //common
897
898     v->finterpflag = get_bits1(gb); //common
899     v->res_rtm_flag = get_bits1(gb); //reserved
900     if (!v->res_rtm_flag)
901     {
902 //            av_log(avctx, AV_LOG_ERROR,
903 //                   "0 for reserved RES_RTM_FLAG is forbidden\n");
904         av_log(avctx, AV_LOG_ERROR,
905                "Old WMV3 version detected, only I-frames will be decoded\n");
906         //return -1;
907     }
908     //TODO: figure out what they mean (always 0x402F)
909     if(!v->res_fasttx) skip_bits(gb, 16);
910     av_log(avctx, AV_LOG_DEBUG,
911                "Profile %i:\nfrmrtq_postproc=%i, bitrtq_postproc=%i\n"
912                "LoopFilter=%i, MultiRes=%i, FastUVMC=%i, Extended MV=%i\n"
913                "Rangered=%i, VSTransform=%i, Overlap=%i, SyncMarker=%i\n"
914                "DQuant=%i, Quantizer mode=%i, Max B frames=%i\n",
915                v->profile, v->frmrtq_postproc, v->bitrtq_postproc,
916                v->s.loop_filter, v->multires, v->fastuvmc, v->extended_mv,
917                v->rangered, v->vstransform, v->overlap, v->s.resync_marker,
918                v->dquant, v->quantizer_mode, avctx->max_b_frames
919                );
920     return 0;
921 }
922
923 static int decode_sequence_header_adv(VC1Context *v, GetBitContext *gb)
924 {
925     v->res_rtm_flag = 1;
926     v->level = get_bits(gb, 3);
927     if(v->level >= 5)
928     {
929         av_log(v->s.avctx, AV_LOG_ERROR, "Reserved LEVEL %i\n",v->level);
930     }
931     v->chromaformat = get_bits(gb, 2);
932     if (v->chromaformat != 1)
933     {
934         av_log(v->s.avctx, AV_LOG_ERROR,
935                "Only 4:2:0 chroma format supported\n");
936         return -1;
937     }
938
939     // (fps-2)/4 (->30)
940     v->frmrtq_postproc = get_bits(gb, 3); //common
941     // (bitrate-32kbps)/64kbps
942     v->bitrtq_postproc = get_bits(gb, 5); //common
943     v->postprocflag = get_bits1(gb); //common
944
945     v->s.avctx->coded_width = (get_bits(gb, 12) + 1) << 1;
946     v->s.avctx->coded_height = (get_bits(gb, 12) + 1) << 1;
947     v->s.avctx->width = v->s.avctx->coded_width;
948     v->s.avctx->height = v->s.avctx->coded_height;
949     v->broadcast = get_bits1(gb);
950     v->interlace = get_bits1(gb);
951     v->tfcntrflag = get_bits1(gb);
952     v->finterpflag = get_bits1(gb);
953     skip_bits1(gb); // reserved
954
955     v->s.h_edge_pos = v->s.avctx->coded_width;
956     v->s.v_edge_pos = v->s.avctx->coded_height;
957
958     av_log(v->s.avctx, AV_LOG_DEBUG,
959                "Advanced Profile level %i:\nfrmrtq_postproc=%i, bitrtq_postproc=%i\n"
960                "LoopFilter=%i, ChromaFormat=%i, Pulldown=%i, Interlace: %i\n"
961                "TFCTRflag=%i, FINTERPflag=%i\n",
962                v->level, v->frmrtq_postproc, v->bitrtq_postproc,
963                v->s.loop_filter, v->chromaformat, v->broadcast, v->interlace,
964                v->tfcntrflag, v->finterpflag
965                );
966
967     v->psf = get_bits1(gb);
968     if(v->psf) { //PsF, 6.1.13
969         av_log(v->s.avctx, AV_LOG_ERROR, "Progressive Segmented Frame mode: not supported (yet)\n");
970         return -1;
971     }
972     v->s.max_b_frames = v->s.avctx->max_b_frames = 7;
973     if(get_bits1(gb)) { //Display Info - decoding is not affected by it
974         int w, h, ar = 0;
975         av_log(v->s.avctx, AV_LOG_DEBUG, "Display extended info:\n");
976         v->s.avctx->width  = w = get_bits(gb, 14) + 1;
977         v->s.avctx->height = h = get_bits(gb, 14) + 1;
978         av_log(v->s.avctx, AV_LOG_DEBUG, "Display dimensions: %ix%i\n", w, h);
979         if(get_bits1(gb))
980             ar = get_bits(gb, 4);
981         if(ar && ar < 14){
982             v->s.avctx->sample_aspect_ratio = ff_vc1_pixel_aspect[ar];
983         }else if(ar == 15){
984             w = get_bits(gb, 8);
985             h = get_bits(gb, 8);
986             v->s.avctx->sample_aspect_ratio = (AVRational){w, h};
987         }
988         av_log(v->s.avctx, AV_LOG_DEBUG, "Aspect: %i:%i\n", v->s.avctx->sample_aspect_ratio.num, v->s.avctx->sample_aspect_ratio.den);
989
990         if(get_bits1(gb)){ //framerate stuff
991             if(get_bits1(gb)) {
992                 v->s.avctx->time_base.num = 32;
993                 v->s.avctx->time_base.den = get_bits(gb, 16) + 1;
994             } else {
995                 int nr, dr;
996                 nr = get_bits(gb, 8);
997                 dr = get_bits(gb, 4);
998                 if(nr && nr < 8 && dr && dr < 3){
999                     v->s.avctx->time_base.num = ff_vc1_fps_dr[dr - 1];
1000                     v->s.avctx->time_base.den = ff_vc1_fps_nr[nr - 1] * 1000;
1001                 }
1002             }
1003         }
1004
1005         if(get_bits1(gb)){
1006             v->color_prim = get_bits(gb, 8);
1007             v->transfer_char = get_bits(gb, 8);
1008             v->matrix_coef = get_bits(gb, 8);
1009         }
1010     }
1011
1012     v->hrd_param_flag = get_bits1(gb);
1013     if(v->hrd_param_flag) {
1014         int i;
1015         v->hrd_num_leaky_buckets = get_bits(gb, 5);
1016         skip_bits(gb, 4); //bitrate exponent
1017         skip_bits(gb, 4); //buffer size exponent
1018         for(i = 0; i < v->hrd_num_leaky_buckets; i++) {
1019             skip_bits(gb, 16); //hrd_rate[n]
1020             skip_bits(gb, 16); //hrd_buffer[n]
1021         }
1022     }
1023     return 0;
1024 }
1025
1026 int vc1_decode_entry_point(AVCodecContext *avctx, VC1Context *v, GetBitContext *gb)
1027 {
1028     int i;
1029
1030     av_log(avctx, AV_LOG_DEBUG, "Entry point: %08X\n", show_bits_long(gb, 32));
1031     v->broken_link = get_bits1(gb);
1032     v->closed_entry = get_bits1(gb);
1033     v->panscanflag = get_bits1(gb);
1034     v->refdist_flag = get_bits1(gb);
1035     v->s.loop_filter = get_bits1(gb);
1036     v->fastuvmc = get_bits1(gb);
1037     v->extended_mv = get_bits1(gb);
1038     v->dquant = get_bits(gb, 2);
1039     v->vstransform = get_bits1(gb);
1040     v->overlap = get_bits1(gb);
1041     v->quantizer_mode = get_bits(gb, 2);
1042
1043     if(v->hrd_param_flag){
1044         for(i = 0; i < v->hrd_num_leaky_buckets; i++) {
1045             skip_bits(gb, 8); //hrd_full[n]
1046         }
1047     }
1048
1049     if(get_bits1(gb)){
1050         avctx->coded_width = (get_bits(gb, 12)+1)<<1;
1051         avctx->coded_height = (get_bits(gb, 12)+1)<<1;
1052     }
1053     if(v->extended_mv)
1054         v->extended_dmv = get_bits1(gb);
1055     if((v->range_mapy_flag = get_bits1(gb))) {
1056         av_log(avctx, AV_LOG_ERROR, "Luma scaling is not supported, expect wrong picture\n");
1057         v->range_mapy = get_bits(gb, 3);
1058     }
1059     if((v->range_mapuv_flag = get_bits1(gb))) {
1060         av_log(avctx, AV_LOG_ERROR, "Chroma scaling is not supported, expect wrong picture\n");
1061         v->range_mapuv = get_bits(gb, 3);
1062     }
1063
1064     av_log(avctx, AV_LOG_DEBUG, "Entry point info:\n"
1065         "BrokenLink=%i, ClosedEntry=%i, PanscanFlag=%i\n"
1066         "RefDist=%i, Postproc=%i, FastUVMC=%i, ExtMV=%i\n"
1067         "DQuant=%i, VSTransform=%i, Overlap=%i, Qmode=%i\n",
1068         v->broken_link, v->closed_entry, v->panscanflag, v->refdist_flag, v->s.loop_filter,
1069         v->fastuvmc, v->extended_mv, v->dquant, v->vstransform, v->overlap, v->quantizer_mode);
1070
1071     return 0;
1072 }
1073
1074 int vc1_parse_frame_header(VC1Context *v, GetBitContext* gb)
1075 {
1076     int pqindex, lowquant, status;
1077
1078     if(v->finterpflag) v->interpfrm = get_bits1(gb);
1079     skip_bits(gb, 2); //framecnt unused
1080     v->rangeredfrm = 0;
1081     if (v->rangered) v->rangeredfrm = get_bits1(gb);
1082     v->s.pict_type = get_bits1(gb);
1083     if (v->s.avctx->max_b_frames) {
1084         if (!v->s.pict_type) {
1085             if (get_bits1(gb)) v->s.pict_type = FF_I_TYPE;
1086             else v->s.pict_type = FF_B_TYPE;
1087         } else v->s.pict_type = FF_P_TYPE;
1088     } else v->s.pict_type = v->s.pict_type ? FF_P_TYPE : FF_I_TYPE;
1089
1090     v->bi_type = 0;
1091     if(v->s.pict_type == FF_B_TYPE) {
1092         v->bfraction_lut_index = get_vlc2(gb, ff_vc1_bfraction_vlc.table, VC1_BFRACTION_VLC_BITS, 1);
1093         v->bfraction = ff_vc1_bfraction_lut[v->bfraction_lut_index];
1094         if(v->bfraction == 0) {
1095             v->s.pict_type = FF_BI_TYPE;
1096         }
1097     }
1098     if(v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_BI_TYPE)
1099         skip_bits(gb, 7); // skip buffer fullness
1100
1101     if(v->parse_only)
1102         return 0;
1103
1104     /* calculate RND */
1105     if(v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_BI_TYPE)
1106         v->rnd = 1;
1107     if(v->s.pict_type == FF_P_TYPE)
1108         v->rnd ^= 1;
1109
1110     /* Quantizer stuff */
1111     pqindex = get_bits(gb, 5);
1112     if(!pqindex) return -1;
1113     if (v->quantizer_mode == QUANT_FRAME_IMPLICIT)
1114         v->pq = ff_vc1_pquant_table[0][pqindex];
1115     else
1116         v->pq = ff_vc1_pquant_table[1][pqindex];
1117
1118     v->pquantizer = 1;
1119     if (v->quantizer_mode == QUANT_FRAME_IMPLICIT)
1120         v->pquantizer = pqindex < 9;
1121     if (v->quantizer_mode == QUANT_NON_UNIFORM)
1122         v->pquantizer = 0;
1123     v->pqindex = pqindex;
1124     if (pqindex < 9) v->halfpq = get_bits1(gb);
1125     else v->halfpq = 0;
1126     if (v->quantizer_mode == QUANT_FRAME_EXPLICIT)
1127         v->pquantizer = get_bits1(gb);
1128     v->dquantfrm = 0;
1129     if (v->extended_mv == 1) v->mvrange = get_unary(gb, 0, 3);
1130     v->k_x = v->mvrange + 9 + (v->mvrange >> 1); //k_x can be 9 10 12 13
1131     v->k_y = v->mvrange + 8; //k_y can be 8 9 10 11
1132     v->range_x = 1 << (v->k_x - 1);
1133     v->range_y = 1 << (v->k_y - 1);
1134     if (v->multires && v->s.pict_type != FF_B_TYPE) v->respic = get_bits(gb, 2);
1135
1136     if(v->res_x8 && (v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_BI_TYPE)){
1137         v->x8_type = get_bits1(gb);
1138     }else v->x8_type = 0;
1139 //av_log(v->s.avctx, AV_LOG_INFO, "%c Frame: QP=[%i]%i (+%i/2) %i\n",
1140 //        (v->s.pict_type == FF_P_TYPE) ? 'P' : ((v->s.pict_type == FF_I_TYPE) ? 'I' : 'B'), pqindex, v->pq, v->halfpq, v->rangeredfrm);
1141
1142     if(v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_P_TYPE) v->use_ic = 0;
1143
1144     switch(v->s.pict_type) {
1145     case FF_P_TYPE:
1146         if (v->pq < 5) v->tt_index = 0;
1147         else if(v->pq < 13) v->tt_index = 1;
1148         else v->tt_index = 2;
1149
1150         lowquant = (v->pq > 12) ? 0 : 1;
1151         v->mv_mode = ff_vc1_mv_pmode_table[lowquant][get_unary(gb, 1, 4)];
1152         if (v->mv_mode == MV_PMODE_INTENSITY_COMP)
1153         {
1154             int scale, shift, i;
1155             v->mv_mode2 = ff_vc1_mv_pmode_table2[lowquant][get_unary(gb, 1, 3)];
1156             v->lumscale = get_bits(gb, 6);
1157             v->lumshift = get_bits(gb, 6);
1158             v->use_ic = 1;
1159             /* fill lookup tables for intensity compensation */
1160             if(!v->lumscale) {
1161                 scale = -64;
1162                 shift = (255 - v->lumshift * 2) << 6;
1163                 if(v->lumshift > 31)
1164                     shift += 128 << 6;
1165             } else {
1166                 scale = v->lumscale + 32;
1167                 if(v->lumshift > 31)
1168                     shift = (v->lumshift - 64) << 6;
1169                 else
1170                     shift = v->lumshift << 6;
1171             }
1172             for(i = 0; i < 256; i++) {
1173                 v->luty[i] = av_clip_uint8((scale * i + shift + 32) >> 6);
1174                 v->lutuv[i] = av_clip_uint8((scale * (i - 128) + 128*64 + 32) >> 6);
1175             }
1176         }
1177         if(v->mv_mode == MV_PMODE_1MV_HPEL || v->mv_mode == MV_PMODE_1MV_HPEL_BILIN)
1178             v->s.quarter_sample = 0;
1179         else if(v->mv_mode == MV_PMODE_INTENSITY_COMP) {
1180             if(v->mv_mode2 == MV_PMODE_1MV_HPEL || v->mv_mode2 == MV_PMODE_1MV_HPEL_BILIN)
1181                 v->s.quarter_sample = 0;
1182             else
1183                 v->s.quarter_sample = 1;
1184         } else
1185             v->s.quarter_sample = 1;
1186         v->s.mspel = !(v->mv_mode == MV_PMODE_1MV_HPEL_BILIN || (v->mv_mode == MV_PMODE_INTENSITY_COMP && v->mv_mode2 == MV_PMODE_1MV_HPEL_BILIN));
1187
1188         if ((v->mv_mode == MV_PMODE_INTENSITY_COMP &&
1189                  v->mv_mode2 == MV_PMODE_MIXED_MV)
1190                 || v->mv_mode == MV_PMODE_MIXED_MV)
1191         {
1192             status = bitplane_decoding(v->mv_type_mb_plane, &v->mv_type_is_raw, v);
1193             if (status < 0) return -1;
1194             av_log(v->s.avctx, AV_LOG_DEBUG, "MB MV Type plane encoding: "
1195                    "Imode: %i, Invert: %i\n", status>>1, status&1);
1196         } else {
1197             v->mv_type_is_raw = 0;
1198             memset(v->mv_type_mb_plane, 0, v->s.mb_stride * v->s.mb_height);
1199         }
1200         status = bitplane_decoding(v->s.mbskip_table, &v->skip_is_raw, v);
1201         if (status < 0) return -1;
1202         av_log(v->s.avctx, AV_LOG_DEBUG, "MB Skip plane encoding: "
1203                "Imode: %i, Invert: %i\n", status>>1, status&1);
1204
1205         /* Hopefully this is correct for P frames */
1206         v->s.mv_table_index = get_bits(gb, 2); //but using ff_vc1_ tables
1207         v->cbpcy_vlc = &ff_vc1_cbpcy_p_vlc[get_bits(gb, 2)];
1208
1209         if (v->dquant)
1210         {
1211             av_log(v->s.avctx, AV_LOG_DEBUG, "VOP DQuant info\n");
1212             vop_dquant_decoding(v);
1213         }
1214
1215         v->ttfrm = 0; //FIXME Is that so ?
1216         if (v->vstransform)
1217         {
1218             v->ttmbf = get_bits1(gb);
1219             if (v->ttmbf)
1220             {
1221                 v->ttfrm = ff_vc1_ttfrm_to_tt[get_bits(gb, 2)];
1222             }
1223         } else {
1224             v->ttmbf = 1;
1225             v->ttfrm = TT_8X8;
1226         }
1227         break;
1228     case FF_B_TYPE:
1229         if (v->pq < 5) v->tt_index = 0;
1230         else if(v->pq < 13) v->tt_index = 1;
1231         else v->tt_index = 2;
1232
1233         v->mv_mode = get_bits1(gb) ? MV_PMODE_1MV : MV_PMODE_1MV_HPEL_BILIN;
1234         v->s.quarter_sample = (v->mv_mode == MV_PMODE_1MV);
1235         v->s.mspel = v->s.quarter_sample;
1236
1237         status = bitplane_decoding(v->direct_mb_plane, &v->dmb_is_raw, v);
1238         if (status < 0) return -1;
1239         av_log(v->s.avctx, AV_LOG_DEBUG, "MB Direct Type plane encoding: "
1240                "Imode: %i, Invert: %i\n", status>>1, status&1);
1241         status = bitplane_decoding(v->s.mbskip_table, &v->skip_is_raw, v);
1242         if (status < 0) return -1;
1243         av_log(v->s.avctx, AV_LOG_DEBUG, "MB Skip plane encoding: "
1244                "Imode: %i, Invert: %i\n", status>>1, status&1);
1245
1246         v->s.mv_table_index = get_bits(gb, 2);
1247         v->cbpcy_vlc = &ff_vc1_cbpcy_p_vlc[get_bits(gb, 2)];
1248
1249         if (v->dquant)
1250         {
1251             av_log(v->s.avctx, AV_LOG_DEBUG, "VOP DQuant info\n");
1252             vop_dquant_decoding(v);
1253         }
1254
1255         v->ttfrm = 0;
1256         if (v->vstransform)
1257         {
1258             v->ttmbf = get_bits1(gb);
1259             if (v->ttmbf)
1260             {
1261                 v->ttfrm = ff_vc1_ttfrm_to_tt[get_bits(gb, 2)];
1262             }
1263         } else {
1264             v->ttmbf = 1;
1265             v->ttfrm = TT_8X8;
1266         }
1267         break;
1268     }
1269
1270     if(!v->x8_type)
1271     {
1272         /* AC Syntax */
1273         v->c_ac_table_index = decode012(gb);
1274         if (v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_BI_TYPE)
1275         {
1276             v->y_ac_table_index = decode012(gb);
1277         }
1278         /* DC Syntax */
1279         v->s.dc_table_index = get_bits1(gb);
1280     }
1281
1282     if(v->s.pict_type == FF_BI_TYPE) {
1283         v->s.pict_type = FF_B_TYPE;
1284         v->bi_type = 1;
1285     }
1286     return 0;
1287 }
1288
1289 int vc1_parse_frame_header_adv(VC1Context *v, GetBitContext* gb)
1290 {
1291     int pqindex, lowquant;
1292     int status;
1293
1294     v->p_frame_skipped = 0;
1295
1296     if(v->interlace){
1297         v->fcm = decode012(gb);
1298         if(v->fcm) return -1; // interlaced frames/fields are not implemented
1299     }
1300     switch(get_unary(gb, 0, 4)) {
1301     case 0:
1302         v->s.pict_type = FF_P_TYPE;
1303         break;
1304     case 1:
1305         v->s.pict_type = FF_B_TYPE;
1306         break;
1307     case 2:
1308         v->s.pict_type = FF_I_TYPE;
1309         break;
1310     case 3:
1311         v->s.pict_type = FF_BI_TYPE;
1312         break;
1313     case 4:
1314         v->s.pict_type = FF_P_TYPE; // skipped pic
1315         v->p_frame_skipped = 1;
1316         return 0;
1317     }
1318     if(v->tfcntrflag)
1319         skip_bits(gb, 8);
1320     if(v->broadcast) {
1321         if(!v->interlace || v->psf) {
1322             v->rptfrm = get_bits(gb, 2);
1323         } else {
1324             v->tff = get_bits1(gb);
1325             v->rptfrm = get_bits1(gb);
1326         }
1327     }
1328     if(v->panscanflag) {
1329         //...
1330     }
1331     v->rnd = get_bits1(gb);
1332     if(v->interlace)
1333         v->uvsamp = get_bits1(gb);
1334     if(v->finterpflag) v->interpfrm = get_bits1(gb);
1335     if(v->s.pict_type == FF_B_TYPE) {
1336         v->bfraction_lut_index = get_vlc2(gb, ff_vc1_bfraction_vlc.table, VC1_BFRACTION_VLC_BITS, 1);
1337         v->bfraction = ff_vc1_bfraction_lut[v->bfraction_lut_index];
1338         if(v->bfraction == 0) {
1339             v->s.pict_type = FF_BI_TYPE; /* XXX: should not happen here */
1340         }
1341     }
1342     pqindex = get_bits(gb, 5);
1343     if(!pqindex) return -1;
1344     v->pqindex = pqindex;
1345     if (v->quantizer_mode == QUANT_FRAME_IMPLICIT)
1346         v->pq = ff_vc1_pquant_table[0][pqindex];
1347     else
1348         v->pq = ff_vc1_pquant_table[1][pqindex];
1349
1350     v->pquantizer = 1;
1351     if (v->quantizer_mode == QUANT_FRAME_IMPLICIT)
1352         v->pquantizer = pqindex < 9;
1353     if (v->quantizer_mode == QUANT_NON_UNIFORM)
1354         v->pquantizer = 0;
1355     v->pqindex = pqindex;
1356     if (pqindex < 9) v->halfpq = get_bits1(gb);
1357     else v->halfpq = 0;
1358     if (v->quantizer_mode == QUANT_FRAME_EXPLICIT)
1359         v->pquantizer = get_bits1(gb);
1360     if(v->postprocflag)
1361         v->postproc = get_bits(gb, 2);
1362
1363     if(v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_P_TYPE) v->use_ic = 0;
1364
1365     if(v->parse_only)
1366         return 0;
1367
1368     switch(v->s.pict_type) {
1369     case FF_I_TYPE:
1370     case FF_BI_TYPE:
1371         status = bitplane_decoding(v->acpred_plane, &v->acpred_is_raw, v);
1372         if (status < 0) return -1;
1373         av_log(v->s.avctx, AV_LOG_DEBUG, "ACPRED plane encoding: "
1374                 "Imode: %i, Invert: %i\n", status>>1, status&1);
1375         v->condover = CONDOVER_NONE;
1376         if(v->overlap && v->pq <= 8) {
1377             v->condover = decode012(gb);
1378             if(v->condover == CONDOVER_SELECT) {
1379                 status = bitplane_decoding(v->over_flags_plane, &v->overflg_is_raw, v);
1380                 if (status < 0) return -1;
1381                 av_log(v->s.avctx, AV_LOG_DEBUG, "CONDOVER plane encoding: "
1382                         "Imode: %i, Invert: %i\n", status>>1, status&1);
1383             }
1384         }
1385         break;
1386     case FF_P_TYPE:
1387         if (v->extended_mv) v->mvrange = get_unary(gb, 0, 3);
1388         else v->mvrange = 0;
1389         v->k_x = v->mvrange + 9 + (v->mvrange >> 1); //k_x can be 9 10 12 13
1390         v->k_y = v->mvrange + 8; //k_y can be 8 9 10 11
1391         v->range_x = 1 << (v->k_x - 1);
1392         v->range_y = 1 << (v->k_y - 1);
1393
1394         if (v->pq < 5) v->tt_index = 0;
1395         else if(v->pq < 13) v->tt_index = 1;
1396         else v->tt_index = 2;
1397
1398         lowquant = (v->pq > 12) ? 0 : 1;
1399         v->mv_mode = ff_vc1_mv_pmode_table[lowquant][get_unary(gb, 1, 4)];
1400         if (v->mv_mode == MV_PMODE_INTENSITY_COMP)
1401         {
1402             int scale, shift, i;
1403             v->mv_mode2 = ff_vc1_mv_pmode_table2[lowquant][get_unary(gb, 1, 3)];
1404             v->lumscale = get_bits(gb, 6);
1405             v->lumshift = get_bits(gb, 6);
1406             /* fill lookup tables for intensity compensation */
1407             if(!v->lumscale) {
1408                 scale = -64;
1409                 shift = (255 - v->lumshift * 2) << 6;
1410                 if(v->lumshift > 31)
1411                     shift += 128 << 6;
1412             } else {
1413                 scale = v->lumscale + 32;
1414                 if(v->lumshift > 31)
1415                     shift = (v->lumshift - 64) << 6;
1416                 else
1417                     shift = v->lumshift << 6;
1418             }
1419             for(i = 0; i < 256; i++) {
1420                 v->luty[i] = av_clip_uint8((scale * i + shift + 32) >> 6);
1421                 v->lutuv[i] = av_clip_uint8((scale * (i - 128) + 128*64 + 32) >> 6);
1422             }
1423             v->use_ic = 1;
1424         }
1425         if(v->mv_mode == MV_PMODE_1MV_HPEL || v->mv_mode == MV_PMODE_1MV_HPEL_BILIN)
1426             v->s.quarter_sample = 0;
1427         else if(v->mv_mode == MV_PMODE_INTENSITY_COMP) {
1428             if(v->mv_mode2 == MV_PMODE_1MV_HPEL || v->mv_mode2 == MV_PMODE_1MV_HPEL_BILIN)
1429                 v->s.quarter_sample = 0;
1430             else
1431                 v->s.quarter_sample = 1;
1432         } else
1433             v->s.quarter_sample = 1;
1434         v->s.mspel = !(v->mv_mode == MV_PMODE_1MV_HPEL_BILIN || (v->mv_mode == MV_PMODE_INTENSITY_COMP && v->mv_mode2 == MV_PMODE_1MV_HPEL_BILIN));
1435
1436         if ((v->mv_mode == MV_PMODE_INTENSITY_COMP &&
1437                  v->mv_mode2 == MV_PMODE_MIXED_MV)
1438                 || v->mv_mode == MV_PMODE_MIXED_MV)
1439         {
1440             status = bitplane_decoding(v->mv_type_mb_plane, &v->mv_type_is_raw, v);
1441             if (status < 0) return -1;
1442             av_log(v->s.avctx, AV_LOG_DEBUG, "MB MV Type plane encoding: "
1443                    "Imode: %i, Invert: %i\n", status>>1, status&1);
1444         } else {
1445             v->mv_type_is_raw = 0;
1446             memset(v->mv_type_mb_plane, 0, v->s.mb_stride * v->s.mb_height);
1447         }
1448         status = bitplane_decoding(v->s.mbskip_table, &v->skip_is_raw, v);
1449         if (status < 0) return -1;
1450         av_log(v->s.avctx, AV_LOG_DEBUG, "MB Skip plane encoding: "
1451                "Imode: %i, Invert: %i\n", status>>1, status&1);
1452
1453         /* Hopefully this is correct for P frames */
1454         v->s.mv_table_index = get_bits(gb, 2); //but using ff_vc1_ tables
1455         v->cbpcy_vlc = &ff_vc1_cbpcy_p_vlc[get_bits(gb, 2)];
1456         if (v->dquant)
1457         {
1458             av_log(v->s.avctx, AV_LOG_DEBUG, "VOP DQuant info\n");
1459             vop_dquant_decoding(v);
1460         }
1461
1462         v->ttfrm = 0; //FIXME Is that so ?
1463         if (v->vstransform)
1464         {
1465             v->ttmbf = get_bits1(gb);
1466             if (v->ttmbf)
1467             {
1468                 v->ttfrm = ff_vc1_ttfrm_to_tt[get_bits(gb, 2)];
1469             }
1470         } else {
1471             v->ttmbf = 1;
1472             v->ttfrm = TT_8X8;
1473         }
1474         break;
1475     case FF_B_TYPE:
1476         if (v->extended_mv) v->mvrange = get_unary(gb, 0, 3);
1477         else v->mvrange = 0;
1478         v->k_x = v->mvrange + 9 + (v->mvrange >> 1); //k_x can be 9 10 12 13
1479         v->k_y = v->mvrange + 8; //k_y can be 8 9 10 11
1480         v->range_x = 1 << (v->k_x - 1);
1481         v->range_y = 1 << (v->k_y - 1);
1482
1483         if (v->pq < 5) v->tt_index = 0;
1484         else if(v->pq < 13) v->tt_index = 1;
1485         else v->tt_index = 2;
1486
1487         v->mv_mode = get_bits1(gb) ? MV_PMODE_1MV : MV_PMODE_1MV_HPEL_BILIN;
1488         v->s.quarter_sample = (v->mv_mode == MV_PMODE_1MV);
1489         v->s.mspel = v->s.quarter_sample;
1490
1491         status = bitplane_decoding(v->direct_mb_plane, &v->dmb_is_raw, v);
1492         if (status < 0) return -1;
1493         av_log(v->s.avctx, AV_LOG_DEBUG, "MB Direct Type plane encoding: "
1494                "Imode: %i, Invert: %i\n", status>>1, status&1);
1495         status = bitplane_decoding(v->s.mbskip_table, &v->skip_is_raw, v);
1496         if (status < 0) return -1;
1497         av_log(v->s.avctx, AV_LOG_DEBUG, "MB Skip plane encoding: "
1498                "Imode: %i, Invert: %i\n", status>>1, status&1);
1499
1500         v->s.mv_table_index = get_bits(gb, 2);
1501         v->cbpcy_vlc = &ff_vc1_cbpcy_p_vlc[get_bits(gb, 2)];
1502
1503         if (v->dquant)
1504         {
1505             av_log(v->s.avctx, AV_LOG_DEBUG, "VOP DQuant info\n");
1506             vop_dquant_decoding(v);
1507         }
1508
1509         v->ttfrm = 0;
1510         if (v->vstransform)
1511         {
1512             v->ttmbf = get_bits1(gb);
1513             if (v->ttmbf)
1514             {
1515                 v->ttfrm = ff_vc1_ttfrm_to_tt[get_bits(gb, 2)];
1516             }
1517         } else {
1518             v->ttmbf = 1;
1519             v->ttfrm = TT_8X8;
1520         }
1521         break;
1522     }
1523
1524     /* AC Syntax */
1525     v->c_ac_table_index = decode012(gb);
1526     if (v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_BI_TYPE)
1527     {
1528         v->y_ac_table_index = decode012(gb);
1529     }
1530     /* DC Syntax */
1531     v->s.dc_table_index = get_bits1(gb);
1532     if ((v->s.pict_type == FF_I_TYPE || v->s.pict_type == FF_BI_TYPE) && v->dquant) {
1533         av_log(v->s.avctx, AV_LOG_DEBUG, "VOP DQuant info\n");
1534         vop_dquant_decoding(v);
1535     }
1536
1537     v->bi_type = 0;
1538     if(v->s.pict_type == FF_BI_TYPE) {
1539         v->s.pict_type = FF_B_TYPE;
1540         v->bi_type = 1;
1541     }
1542     return 0;
1543 }
1544
1545 /***********************************************************************/
1546 /**
1547  * @defgroup vc1block VC-1 Block-level functions
1548  * @see 7.1.4, p91 and 8.1.1.7, p(1)04
1549  * @{
1550  */
1551
1552 /**
1553  * @def GET_MQUANT
1554  * @brief Get macroblock-level quantizer scale
1555  */
1556 #define GET_MQUANT()                                           \
1557   if (v->dquantfrm)                                            \
1558   {                                                            \
1559     int edges = 0;                                             \
1560     if (v->dqprofile == DQPROFILE_ALL_MBS)                     \
1561     {                                                          \
1562       if (v->dqbilevel)                                        \
1563       {                                                        \
1564         mquant = (get_bits1(gb)) ? v->altpq : v->pq;           \
1565       }                                                        \
1566       else                                                     \
1567       {                                                        \
1568         mqdiff = get_bits(gb, 3);                              \
1569         if (mqdiff != 7) mquant = v->pq + mqdiff;              \
1570         else mquant = get_bits(gb, 5);                         \
1571       }                                                        \
1572     }                                                          \
1573     if(v->dqprofile == DQPROFILE_SINGLE_EDGE)                  \
1574         edges = 1 << v->dqsbedge;                              \
1575     else if(v->dqprofile == DQPROFILE_DOUBLE_EDGES)            \
1576         edges = (3 << v->dqsbedge) % 15;                       \
1577     else if(v->dqprofile == DQPROFILE_FOUR_EDGES)              \
1578         edges = 15;                                            \
1579     if((edges&1) && !s->mb_x)                                  \
1580         mquant = v->altpq;                                     \
1581     if((edges&2) && s->first_slice_line)                       \
1582         mquant = v->altpq;                                     \
1583     if((edges&4) && s->mb_x == (s->mb_width - 1))              \
1584         mquant = v->altpq;                                     \
1585     if((edges&8) && s->mb_y == (s->mb_height - 1))             \
1586         mquant = v->altpq;                                     \
1587   }
1588
1589 /**
1590  * @def GET_MVDATA(_dmv_x, _dmv_y)
1591  * @brief Get MV differentials
1592  * @see MVDATA decoding from 8.3.5.2, p(1)20
1593  * @param _dmv_x Horizontal differential for decoded MV
1594  * @param _dmv_y Vertical differential for decoded MV
1595  */
1596 #define GET_MVDATA(_dmv_x, _dmv_y)                                  \
1597   index = 1 + get_vlc2(gb, ff_vc1_mv_diff_vlc[s->mv_table_index].table,\
1598                        VC1_MV_DIFF_VLC_BITS, 2);                    \
1599   if (index > 36)                                                   \
1600   {                                                                 \
1601     mb_has_coeffs = 1;                                              \
1602     index -= 37;                                                    \
1603   }                                                                 \
1604   else mb_has_coeffs = 0;                                           \
1605   s->mb_intra = 0;                                                  \
1606   if (!index) { _dmv_x = _dmv_y = 0; }                              \
1607   else if (index == 35)                                             \
1608   {                                                                 \
1609     _dmv_x = get_bits(gb, v->k_x - 1 + s->quarter_sample);          \
1610     _dmv_y = get_bits(gb, v->k_y - 1 + s->quarter_sample);          \
1611   }                                                                 \
1612   else if (index == 36)                                             \
1613   {                                                                 \
1614     _dmv_x = 0;                                                     \
1615     _dmv_y = 0;                                                     \
1616     s->mb_intra = 1;                                                \
1617   }                                                                 \
1618   else                                                              \
1619   {                                                                 \
1620     index1 = index%6;                                               \
1621     if (!s->quarter_sample && index1 == 5) val = 1;                 \
1622     else                                   val = 0;                 \
1623     if(size_table[index1] - val > 0)                                \
1624         val = get_bits(gb, size_table[index1] - val);               \
1625     else                                   val = 0;                 \
1626     sign = 0 - (val&1);                                             \
1627     _dmv_x = (sign ^ ((val>>1) + offset_table[index1])) - sign;     \
1628                                                                     \
1629     index1 = index/6;                                               \
1630     if (!s->quarter_sample && index1 == 5) val = 1;                 \
1631     else                                   val = 0;                 \
1632     if(size_table[index1] - val > 0)                                \
1633         val = get_bits(gb, size_table[index1] - val);               \
1634     else                                   val = 0;                 \
1635     sign = 0 - (val&1);                                             \
1636     _dmv_y = (sign ^ ((val>>1) + offset_table[index1])) - sign;     \
1637   }
1638
1639 /** Predict and set motion vector
1640  */
1641 static inline void vc1_pred_mv(MpegEncContext *s, int n, int dmv_x, int dmv_y, int mv1, int r_x, int r_y, uint8_t* is_intra)
1642 {
1643     int xy, wrap, off = 0;
1644     int16_t *A, *B, *C;
1645     int px, py;
1646     int sum;
1647
1648     /* scale MV difference to be quad-pel */
1649     dmv_x <<= 1 - s->quarter_sample;
1650     dmv_y <<= 1 - s->quarter_sample;
1651
1652     wrap = s->b8_stride;
1653     xy = s->block_index[n];
1654
1655     if(s->mb_intra){
1656         s->mv[0][n][0] = s->current_picture.motion_val[0][xy][0] = 0;
1657         s->mv[0][n][1] = s->current_picture.motion_val[0][xy][1] = 0;
1658         s->current_picture.motion_val[1][xy][0] = 0;
1659         s->current_picture.motion_val[1][xy][1] = 0;
1660         if(mv1) { /* duplicate motion data for 1-MV block */
1661             s->current_picture.motion_val[0][xy + 1][0] = 0;
1662             s->current_picture.motion_val[0][xy + 1][1] = 0;
1663             s->current_picture.motion_val[0][xy + wrap][0] = 0;
1664             s->current_picture.motion_val[0][xy + wrap][1] = 0;
1665             s->current_picture.motion_val[0][xy + wrap + 1][0] = 0;
1666             s->current_picture.motion_val[0][xy + wrap + 1][1] = 0;
1667             s->current_picture.motion_val[1][xy + 1][0] = 0;
1668             s->current_picture.motion_val[1][xy + 1][1] = 0;
1669             s->current_picture.motion_val[1][xy + wrap][0] = 0;
1670             s->current_picture.motion_val[1][xy + wrap][1] = 0;
1671             s->current_picture.motion_val[1][xy + wrap + 1][0] = 0;
1672             s->current_picture.motion_val[1][xy + wrap + 1][1] = 0;
1673         }
1674         return;
1675     }
1676
1677     C = s->current_picture.motion_val[0][xy - 1];
1678     A = s->current_picture.motion_val[0][xy - wrap];
1679     if(mv1)
1680         off = (s->mb_x == (s->mb_width - 1)) ? -1 : 2;
1681     else {
1682         //in 4-MV mode different blocks have different B predictor position
1683         switch(n){
1684         case 0:
1685             off = (s->mb_x > 0) ? -1 : 1;
1686             break;
1687         case 1:
1688             off = (s->mb_x == (s->mb_width - 1)) ? -1 : 1;
1689             break;
1690         case 2:
1691             off = 1;
1692             break;
1693         case 3:
1694             off = -1;
1695         }
1696     }
1697     B = s->current_picture.motion_val[0][xy - wrap + off];
1698
1699     if(!s->first_slice_line || (n==2 || n==3)) { // predictor A is not out of bounds
1700         if(s->mb_width == 1) {
1701             px = A[0];
1702             py = A[1];
1703         } else {
1704             px = mid_pred(A[0], B[0], C[0]);
1705             py = mid_pred(A[1], B[1], C[1]);
1706         }
1707     } else if(s->mb_x || (n==1 || n==3)) { // predictor C is not out of bounds
1708         px = C[0];
1709         py = C[1];
1710     } else {
1711         px = py = 0;
1712     }
1713     /* Pullback MV as specified in 8.3.5.3.4 */
1714     {
1715         int qx, qy, X, Y;
1716         qx = (s->mb_x << 6) + ((n==1 || n==3) ? 32 : 0);
1717         qy = (s->mb_y << 6) + ((n==2 || n==3) ? 32 : 0);
1718         X = (s->mb_width << 6) - 4;
1719         Y = (s->mb_height << 6) - 4;
1720         if(mv1) {
1721             if(qx + px < -60) px = -60 - qx;
1722             if(qy + py < -60) py = -60 - qy;
1723         } else {
1724             if(qx + px < -28) px = -28 - qx;
1725             if(qy + py < -28) py = -28 - qy;
1726         }
1727         if(qx + px > X) px = X - qx;
1728         if(qy + py > Y) py = Y - qy;
1729     }
1730     /* Calculate hybrid prediction as specified in 8.3.5.3.5 */
1731     if((!s->first_slice_line || (n==2 || n==3)) && (s->mb_x || (n==1 || n==3))) {
1732         if(is_intra[xy - wrap])
1733             sum = FFABS(px) + FFABS(py);
1734         else
1735             sum = FFABS(px - A[0]) + FFABS(py - A[1]);
1736         if(sum > 32) {
1737             if(get_bits1(&s->gb)) {
1738                 px = A[0];
1739                 py = A[1];
1740             } else {
1741                 px = C[0];
1742                 py = C[1];
1743             }
1744         } else {
1745             if(is_intra[xy - 1])
1746                 sum = FFABS(px) + FFABS(py);
1747             else
1748                 sum = FFABS(px - C[0]) + FFABS(py - C[1]);
1749             if(sum > 32) {
1750                 if(get_bits1(&s->gb)) {
1751                     px = A[0];
1752                     py = A[1];
1753                 } else {
1754                     px = C[0];
1755                     py = C[1];
1756                 }
1757             }
1758         }
1759     }
1760     /* store MV using signed modulus of MV range defined in 4.11 */
1761     s->mv[0][n][0] = s->current_picture.motion_val[0][xy][0] = ((px + dmv_x + r_x) & ((r_x << 1) - 1)) - r_x;
1762     s->mv[0][n][1] = s->current_picture.motion_val[0][xy][1] = ((py + dmv_y + r_y) & ((r_y << 1) - 1)) - r_y;
1763     if(mv1) { /* duplicate motion data for 1-MV block */
1764         s->current_picture.motion_val[0][xy + 1][0] = s->current_picture.motion_val[0][xy][0];
1765         s->current_picture.motion_val[0][xy + 1][1] = s->current_picture.motion_val[0][xy][1];
1766         s->current_picture.motion_val[0][xy + wrap][0] = s->current_picture.motion_val[0][xy][0];
1767         s->current_picture.motion_val[0][xy + wrap][1] = s->current_picture.motion_val[0][xy][1];
1768         s->current_picture.motion_val[0][xy + wrap + 1][0] = s->current_picture.motion_val[0][xy][0];
1769         s->current_picture.motion_val[0][xy + wrap + 1][1] = s->current_picture.motion_val[0][xy][1];
1770     }
1771 }
1772
1773 /** Motion compensation for direct or interpolated blocks in B-frames
1774  */
1775 static void vc1_interp_mc(VC1Context *v)
1776 {
1777     MpegEncContext *s = &v->s;
1778     DSPContext *dsp = &v->s.dsp;
1779     uint8_t *srcY, *srcU, *srcV;
1780     int dxy, mx, my, uvmx, uvmy, src_x, src_y, uvsrc_x, uvsrc_y;
1781
1782     if(!v->s.next_picture.data[0])return;
1783
1784     mx = s->mv[1][0][0];
1785     my = s->mv[1][0][1];
1786     uvmx = (mx + ((mx & 3) == 3)) >> 1;
1787     uvmy = (my + ((my & 3) == 3)) >> 1;
1788     if(v->fastuvmc) {
1789         uvmx = uvmx + ((uvmx<0)?-(uvmx&1):(uvmx&1));
1790         uvmy = uvmy + ((uvmy<0)?-(uvmy&1):(uvmy&1));
1791     }
1792     srcY = s->next_picture.data[0];
1793     srcU = s->next_picture.data[1];
1794     srcV = s->next_picture.data[2];
1795
1796     src_x = s->mb_x * 16 + (mx >> 2);
1797     src_y = s->mb_y * 16 + (my >> 2);
1798     uvsrc_x = s->mb_x * 8 + (uvmx >> 2);
1799     uvsrc_y = s->mb_y * 8 + (uvmy >> 2);
1800
1801     if(v->profile != PROFILE_ADVANCED){
1802         src_x   = av_clip(  src_x, -16, s->mb_width  * 16);
1803         src_y   = av_clip(  src_y, -16, s->mb_height * 16);
1804         uvsrc_x = av_clip(uvsrc_x,  -8, s->mb_width  *  8);
1805         uvsrc_y = av_clip(uvsrc_y,  -8, s->mb_height *  8);
1806     }else{
1807         src_x   = av_clip(  src_x, -17, s->avctx->coded_width);
1808         src_y   = av_clip(  src_y, -18, s->avctx->coded_height + 1);
1809         uvsrc_x = av_clip(uvsrc_x,  -8, s->avctx->coded_width  >> 1);
1810         uvsrc_y = av_clip(uvsrc_y,  -8, s->avctx->coded_height >> 1);
1811     }
1812
1813     srcY += src_y * s->linesize + src_x;
1814     srcU += uvsrc_y * s->uvlinesize + uvsrc_x;
1815     srcV += uvsrc_y * s->uvlinesize + uvsrc_x;
1816
1817     /* for grayscale we should not try to read from unknown area */
1818     if(s->flags & CODEC_FLAG_GRAY) {
1819         srcU = s->edge_emu_buffer + 18 * s->linesize;
1820         srcV = s->edge_emu_buffer + 18 * s->linesize;
1821     }
1822
1823     if(v->rangeredfrm
1824        || (unsigned)src_x > s->h_edge_pos - (mx&3) - 16 - s->mspel*3
1825        || (unsigned)src_y > s->v_edge_pos - (my&3) - 16 - s->mspel*3){
1826         uint8_t *uvbuf= s->edge_emu_buffer + 19 * s->linesize;
1827
1828         srcY -= s->mspel * (1 + s->linesize);
1829         ff_emulated_edge_mc(s->edge_emu_buffer, srcY, s->linesize, 17+s->mspel*2, 17+s->mspel*2,
1830                             src_x - s->mspel, src_y - s->mspel, s->h_edge_pos, s->v_edge_pos);
1831         srcY = s->edge_emu_buffer;
1832         ff_emulated_edge_mc(uvbuf     , srcU, s->uvlinesize, 8+1, 8+1,
1833                             uvsrc_x, uvsrc_y, s->h_edge_pos >> 1, s->v_edge_pos >> 1);
1834         ff_emulated_edge_mc(uvbuf + 16, srcV, s->uvlinesize, 8+1, 8+1,
1835                             uvsrc_x, uvsrc_y, s->h_edge_pos >> 1, s->v_edge_pos >> 1);
1836         srcU = uvbuf;
1837         srcV = uvbuf + 16;
1838         /* if we deal with range reduction we need to scale source blocks */
1839         if(v->rangeredfrm) {
1840             int i, j;
1841             uint8_t *src, *src2;
1842
1843             src = srcY;
1844             for(j = 0; j < 17 + s->mspel*2; j++) {
1845                 for(i = 0; i < 17 + s->mspel*2; i++) src[i] = ((src[i] - 128) >> 1) + 128;
1846                 src += s->linesize;
1847             }
1848             src = srcU; src2 = srcV;
1849             for(j = 0; j < 9; j++) {
1850                 for(i = 0; i < 9; i++) {
1851                     src[i] = ((src[i] - 128) >> 1) + 128;
1852                     src2[i] = ((src2[i] - 128) >> 1) + 128;
1853                 }
1854                 src += s->uvlinesize;
1855                 src2 += s->uvlinesize;
1856             }
1857         }
1858         srcY += s->mspel * (1 + s->linesize);
1859     }
1860
1861     if(s->mspel) {
1862         dxy = ((my & 3) << 2) | (mx & 3);
1863         dsp->avg_vc1_mspel_pixels_tab[dxy](s->dest[0]    , srcY    , s->linesize, v->rnd);
1864         dsp->avg_vc1_mspel_pixels_tab[dxy](s->dest[0] + 8, srcY + 8, s->linesize, v->rnd);
1865         srcY += s->linesize * 8;
1866         dsp->avg_vc1_mspel_pixels_tab[dxy](s->dest[0] + 8 * s->linesize    , srcY    , s->linesize, v->rnd);
1867         dsp->avg_vc1_mspel_pixels_tab[dxy](s->dest[0] + 8 * s->linesize + 8, srcY + 8, s->linesize, v->rnd);
1868     } else { // hpel mc
1869         dxy = (my & 2) | ((mx & 2) >> 1);
1870
1871         if(!v->rnd)
1872             dsp->avg_pixels_tab[0][dxy](s->dest[0], srcY, s->linesize, 16);
1873         else
1874             dsp->avg_no_rnd_pixels_tab[0][dxy](s->dest[0], srcY, s->linesize, 16);
1875     }
1876
1877     if(s->flags & CODEC_FLAG_GRAY) return;
1878     /* Chroma MC always uses qpel blilinear */
1879     uvmx = (uvmx&3)<<1;
1880     uvmy = (uvmy&3)<<1;
1881     if(!v->rnd){
1882         dsp->avg_h264_chroma_pixels_tab[0](s->dest[1], srcU, s->uvlinesize, 8, uvmx, uvmy);
1883         dsp->avg_h264_chroma_pixels_tab[0](s->dest[2], srcV, s->uvlinesize, 8, uvmx, uvmy);
1884     }else{
1885         dsp->avg_no_rnd_vc1_chroma_pixels_tab[0](s->dest[1], srcU, s->uvlinesize, 8, uvmx, uvmy);
1886         dsp->avg_no_rnd_vc1_chroma_pixels_tab[0](s->dest[2], srcV, s->uvlinesize, 8, uvmx, uvmy);
1887     }
1888 }
1889
1890 static av_always_inline int scale_mv(int value, int bfrac, int inv, int qs)
1891 {
1892     int n = bfrac;
1893
1894 #if B_FRACTION_DEN==256
1895     if(inv)
1896         n -= 256;
1897     if(!qs)
1898         return 2 * ((value * n + 255) >> 9);
1899     return (value * n + 128) >> 8;
1900 #else
1901     if(inv)
1902         n -= B_FRACTION_DEN;
1903     if(!qs)
1904         return 2 * ((value * n + B_FRACTION_DEN - 1) / (2 * B_FRACTION_DEN));
1905     return (value * n + B_FRACTION_DEN/2) / B_FRACTION_DEN;
1906 #endif
1907 }
1908
1909 /** Reconstruct motion vector for B-frame and do motion compensation
1910  */
1911 static inline void vc1_b_mc(VC1Context *v, int dmv_x[2], int dmv_y[2], int direct, int mode)
1912 {
1913     if(v->use_ic) {
1914         v->mv_mode2 = v->mv_mode;
1915         v->mv_mode = MV_PMODE_INTENSITY_COMP;
1916     }
1917     if(direct) {
1918         vc1_mc_1mv(v, 0);
1919         vc1_interp_mc(v);
1920         if(v->use_ic) v->mv_mode = v->mv_mode2;
1921         return;
1922     }
1923     if(mode == BMV_TYPE_INTERPOLATED) {
1924         vc1_mc_1mv(v, 0);
1925         vc1_interp_mc(v);
1926         if(v->use_ic) v->mv_mode = v->mv_mode2;
1927         return;
1928     }
1929
1930     if(v->use_ic && (mode == BMV_TYPE_BACKWARD)) v->mv_mode = v->mv_mode2;
1931     vc1_mc_1mv(v, (mode == BMV_TYPE_BACKWARD));
1932     if(v->use_ic) v->mv_mode = v->mv_mode2;
1933 }
1934
1935 static inline void vc1_pred_b_mv(VC1Context *v, int dmv_x[2], int dmv_y[2], int direct, int mvtype)
1936 {
1937     MpegEncContext *s = &v->s;
1938     int xy, wrap, off = 0;
1939     int16_t *A, *B, *C;
1940     int px, py;
1941     int sum;
1942     int r_x, r_y;
1943     const uint8_t *is_intra = v->mb_type[0];
1944
1945     r_x = v->range_x;
1946     r_y = v->range_y;
1947     /* scale MV difference to be quad-pel */
1948     dmv_x[0] <<= 1 - s->quarter_sample;
1949     dmv_y[0] <<= 1 - s->quarter_sample;
1950     dmv_x[1] <<= 1 - s->quarter_sample;
1951     dmv_y[1] <<= 1 - s->quarter_sample;
1952
1953     wrap = s->b8_stride;
1954     xy = s->block_index[0];
1955
1956     if(s->mb_intra) {
1957         s->current_picture.motion_val[0][xy][0] =
1958         s->current_picture.motion_val[0][xy][1] =
1959         s->current_picture.motion_val[1][xy][0] =
1960         s->current_picture.motion_val[1][xy][1] = 0;
1961         return;
1962     }
1963     s->mv[0][0][0] = scale_mv(s->next_picture.motion_val[1][xy][0], v->bfraction, 0, s->quarter_sample);
1964     s->mv[0][0][1] = scale_mv(s->next_picture.motion_val[1][xy][1], v->bfraction, 0, s->quarter_sample);
1965     s->mv[1][0][0] = scale_mv(s->next_picture.motion_val[1][xy][0], v->bfraction, 1, s->quarter_sample);
1966     s->mv[1][0][1] = scale_mv(s->next_picture.motion_val[1][xy][1], v->bfraction, 1, s->quarter_sample);
1967
1968     /* Pullback predicted motion vectors as specified in 8.4.5.4 */
1969     s->mv[0][0][0] = av_clip(s->mv[0][0][0], -60 - (s->mb_x << 6), (s->mb_width  << 6) - 4 - (s->mb_x << 6));
1970     s->mv[0][0][1] = av_clip(s->mv[0][0][1], -60 - (s->mb_y << 6), (s->mb_height << 6) - 4 - (s->mb_y << 6));
1971     s->mv[1][0][0] = av_clip(s->mv[1][0][0], -60 - (s->mb_x << 6), (s->mb_width  << 6) - 4 - (s->mb_x << 6));
1972     s->mv[1][0][1] = av_clip(s->mv[1][0][1], -60 - (s->mb_y << 6), (s->mb_height << 6) - 4 - (s->mb_y << 6));
1973     if(direct) {
1974         s->current_picture.motion_val[0][xy][0] = s->mv[0][0][0];
1975         s->current_picture.motion_val[0][xy][1] = s->mv[0][0][1];
1976         s->current_picture.motion_val[1][xy][0] = s->mv[1][0][0];
1977         s->current_picture.motion_val[1][xy][1] = s->mv[1][0][1];
1978         return;
1979     }
1980
1981     if((mvtype == BMV_TYPE_FORWARD) || (mvtype == BMV_TYPE_INTERPOLATED)) {
1982         C = s->current_picture.motion_val[0][xy - 2];
1983         A = s->current_picture.motion_val[0][xy - wrap*2];
1984         off = (s->mb_x == (s->mb_width - 1)) ? -2 : 2;
1985         B = s->current_picture.motion_val[0][xy - wrap*2 + off];
1986
1987         if(!s->mb_x) C[0] = C[1] = 0;
1988         if(!s->first_slice_line) { // predictor A is not out of bounds
1989             if(s->mb_width == 1) {
1990                 px = A[0];
1991                 py = A[1];
1992             } else {
1993                 px = mid_pred(A[0], B[0], C[0]);
1994                 py = mid_pred(A[1], B[1], C[1]);
1995             }
1996         } else if(s->mb_x) { // predictor C is not out of bounds
1997             px = C[0];
1998             py = C[1];
1999         } else {
2000             px = py = 0;
2001         }
2002         /* Pullback MV as specified in 8.3.5.3.4 */
2003         {
2004             int qx, qy, X, Y;
2005             if(v->profile < PROFILE_ADVANCED) {
2006                 qx = (s->mb_x << 5);
2007                 qy = (s->mb_y << 5);
2008                 X = (s->mb_width << 5) - 4;
2009                 Y = (s->mb_height << 5) - 4;
2010                 if(qx + px < -28) px = -28 - qx;
2011                 if(qy + py < -28) py = -28 - qy;
2012                 if(qx + px > X) px = X - qx;
2013                 if(qy + py > Y) py = Y - qy;
2014             } else {
2015                 qx = (s->mb_x << 6);
2016                 qy = (s->mb_y << 6);
2017                 X = (s->mb_width << 6) - 4;
2018                 Y = (s->mb_height << 6) - 4;
2019                 if(qx + px < -60) px = -60 - qx;
2020                 if(qy + py < -60) py = -60 - qy;
2021                 if(qx + px > X) px = X - qx;
2022                 if(qy + py > Y) py = Y - qy;
2023             }
2024         }
2025         /* Calculate hybrid prediction as specified in 8.3.5.3.5 */
2026         if(0 && !s->first_slice_line && s->mb_x) {
2027             if(is_intra[xy - wrap])
2028                 sum = FFABS(px) + FFABS(py);
2029             else
2030                 sum = FFABS(px - A[0]) + FFABS(py - A[1]);
2031             if(sum > 32) {
2032                 if(get_bits1(&s->gb)) {
2033                     px = A[0];
2034                     py = A[1];
2035                 } else {
2036                     px = C[0];
2037                     py = C[1];
2038                 }
2039             } else {
2040                 if(is_intra[xy - 2])
2041                     sum = FFABS(px) + FFABS(py);
2042                 else
2043                     sum = FFABS(px - C[0]) + FFABS(py - C[1]);
2044                 if(sum > 32) {
2045                     if(get_bits1(&s->gb)) {
2046                         px = A[0];
2047                         py = A[1];
2048                     } else {
2049                         px = C[0];
2050                         py = C[1];
2051                     }
2052                 }
2053             }
2054         }
2055         /* store MV using signed modulus of MV range defined in 4.11 */
2056         s->mv[0][0][0] = ((px + dmv_x[0] + r_x) & ((r_x << 1) - 1)) - r_x;
2057         s->mv[0][0][1] = ((py + dmv_y[0] + r_y) & ((r_y << 1) - 1)) - r_y;
2058     }
2059     if((mvtype == BMV_TYPE_BACKWARD) || (mvtype == BMV_TYPE_INTERPOLATED)) {
2060         C = s->current_picture.motion_val[1][xy - 2];
2061         A = s->current_picture.motion_val[1][xy - wrap*2];
2062         off = (s->mb_x == (s->mb_width - 1)) ? -2 : 2;
2063         B = s->current_picture.motion_val[1][xy - wrap*2 + off];
2064
2065         if(!s->mb_x) C[0] = C[1] = 0;
2066         if(!s->first_slice_line) { // predictor A is not out of bounds
2067             if(s->mb_width == 1) {
2068                 px = A[0];
2069                 py = A[1];
2070             } else {
2071                 px = mid_pred(A[0], B[0], C[0]);
2072                 py = mid_pred(A[1], B[1], C[1]);
2073             }
2074         } else if(s->mb_x) { // predictor C is not out of bounds
2075             px = C[0];
2076             py = C[1];
2077         } else {
2078             px = py = 0;
2079         }
2080         /* Pullback MV as specified in 8.3.5.3.4 */
2081         {
2082             int qx, qy, X, Y;
2083             if(v->profile < PROFILE_ADVANCED) {
2084                 qx = (s->mb_x << 5);
2085                 qy = (s->mb_y << 5);
2086                 X = (s->mb_width << 5) - 4;
2087                 Y = (s->mb_height << 5) - 4;
2088                 if(qx + px < -28) px = -28 - qx;
2089                 if(qy + py < -28) py = -28 - qy;
2090                 if(qx + px > X) px = X - qx;
2091                 if(qy + py > Y) py = Y - qy;
2092             } else {
2093                 qx = (s->mb_x << 6);
2094                 qy = (s->mb_y << 6);
2095                 X = (s->mb_width << 6) - 4;
2096                 Y = (s->mb_height << 6) - 4;
2097                 if(qx + px < -60) px = -60 - qx;
2098                 if(qy + py < -60) py = -60 - qy;
2099                 if(qx + px > X) px = X - qx;
2100                 if(qy + py > Y) py = Y - qy;
2101             }
2102         }
2103         /* Calculate hybrid prediction as specified in 8.3.5.3.5 */
2104         if(0 && !s->first_slice_line && s->mb_x) {
2105             if(is_intra[xy - wrap])
2106                 sum = FFABS(px) + FFABS(py);
2107             else
2108                 sum = FFABS(px - A[0]) + FFABS(py - A[1]);
2109             if(sum > 32) {
2110                 if(get_bits1(&s->gb)) {
2111                     px = A[0];
2112                     py = A[1];
2113                 } else {
2114                     px = C[0];
2115                     py = C[1];
2116                 }
2117             } else {
2118                 if(is_intra[xy - 2])
2119                     sum = FFABS(px) + FFABS(py);
2120                 else
2121                     sum = FFABS(px - C[0]) + FFABS(py - C[1]);
2122                 if(sum > 32) {
2123                     if(get_bits1(&s->gb)) {
2124                         px = A[0];
2125                         py = A[1];
2126                     } else {
2127                         px = C[0];
2128                         py = C[1];
2129                     }
2130                 }
2131             }
2132         }
2133         /* store MV using signed modulus of MV range defined in 4.11 */
2134
2135         s->mv[1][0][0] = ((px + dmv_x[1] + r_x) & ((r_x << 1) - 1)) - r_x;
2136         s->mv[1][0][1] = ((py + dmv_y[1] + r_y) & ((r_y << 1) - 1)) - r_y;
2137     }
2138     s->current_picture.motion_val[0][xy][0] = s->mv[0][0][0];
2139     s->current_picture.motion_val[0][xy][1] = s->mv[0][0][1];
2140     s->current_picture.motion_val[1][xy][0] = s->mv[1][0][0];
2141     s->current_picture.motion_val[1][xy][1] = s->mv[1][0][1];
2142 }
2143
2144 /** Get predicted DC value for I-frames only
2145  * prediction dir: left=0, top=1
2146  * @param s MpegEncContext
2147  * @param overlap flag indicating that overlap filtering is used
2148  * @param pq integer part of picture quantizer
2149  * @param[in] n block index in the current MB
2150  * @param dc_val_ptr Pointer to DC predictor
2151  * @param dir_ptr Prediction direction for use in AC prediction
2152  */
2153 static inline int vc1_i_pred_dc(MpegEncContext *s, int overlap, int pq, int n,
2154                               int16_t **dc_val_ptr, int *dir_ptr)
2155 {
2156     int a, b, c, wrap, pred, scale;
2157     int16_t *dc_val;
2158     static const uint16_t dcpred[32] = {
2159     -1, 1024,  512,  341,  256,  205,  171,  146,  128,
2160          114,  102,   93,   85,   79,   73,   68,   64,
2161           60,   57,   54,   51,   49,   47,   45,   43,
2162           41,   39,   38,   37,   35,   34,   33
2163     };
2164
2165     /* find prediction - wmv3_dc_scale always used here in fact */
2166     if (n < 4)     scale = s->y_dc_scale;
2167     else           scale = s->c_dc_scale;
2168
2169     wrap = s->block_wrap[n];
2170     dc_val= s->dc_val[0] + s->block_index[n];
2171
2172     /* B A
2173      * C X
2174      */
2175     c = dc_val[ - 1];
2176     b = dc_val[ - 1 - wrap];
2177     a = dc_val[ - wrap];
2178
2179     if (pq < 9 || !overlap)
2180     {
2181         /* Set outer values */
2182         if (s->first_slice_line && (n!=2 && n!=3)) b=a=dcpred[scale];
2183         if (s->mb_x == 0 && (n!=1 && n!=3)) b=c=dcpred[scale];
2184     }
2185     else
2186     {
2187         /* Set outer values */
2188         if (s->first_slice_line && (n!=2 && n!=3)) b=a=0;
2189         if (s->mb_x == 0 && (n!=1 && n!=3)) b=c=0;
2190     }
2191
2192     if (abs(a - b) <= abs(b - c)) {
2193         pred = c;
2194         *dir_ptr = 1;//left
2195     } else {
2196         pred = a;
2197         *dir_ptr = 0;//top
2198     }
2199
2200     /* update predictor */
2201     *dc_val_ptr = &dc_val[0];
2202     return pred;
2203 }
2204
2205
2206 /** Get predicted DC value
2207  * prediction dir: left=0, top=1
2208  * @param s MpegEncContext
2209  * @param overlap flag indicating that overlap filtering is used
2210  * @param pq integer part of picture quantizer
2211  * @param[in] n block index in the current MB
2212  * @param a_avail flag indicating top block availability
2213  * @param c_avail flag indicating left block availability
2214  * @param dc_val_ptr Pointer to DC predictor
2215  * @param dir_ptr Prediction direction for use in AC prediction
2216  */
2217 static inline int vc1_pred_dc(MpegEncContext *s, int overlap, int pq, int n,
2218                               int a_avail, int c_avail,
2219                               int16_t **dc_val_ptr, int *dir_ptr)
2220 {
2221     int a, b, c, wrap, pred;
2222     int16_t *dc_val;
2223     int mb_pos = s->mb_x + s->mb_y * s->mb_stride;
2224     int q1, q2 = 0;
2225
2226     wrap = s->block_wrap[n];
2227     dc_val= s->dc_val[0] + s->block_index[n];
2228
2229     /* B A
2230      * C X
2231      */
2232     c = dc_val[ - 1];
2233     b = dc_val[ - 1 - wrap];
2234     a = dc_val[ - wrap];
2235     /* scale predictors if needed */
2236     q1 = s->current_picture.qscale_table[mb_pos];
2237     if(c_avail && (n!= 1 && n!=3)) {
2238         q2 = s->current_picture.qscale_table[mb_pos - 1];
2239         if(q2 && q2 != q1)
2240             c = (c * s->y_dc_scale_table[q2] * ff_vc1_dqscale[s->y_dc_scale_table[q1] - 1] + 0x20000) >> 18;
2241     }
2242     if(a_avail && (n!= 2 && n!=3)) {
2243         q2 = s->current_picture.qscale_table[mb_pos - s->mb_stride];
2244         if(q2 && q2 != q1)
2245             a = (a * s->y_dc_scale_table[q2] * ff_vc1_dqscale[s->y_dc_scale_table[q1] - 1] + 0x20000) >> 18;
2246     }
2247     if(a_avail && c_avail && (n!=3)) {
2248         int off = mb_pos;
2249         if(n != 1) off--;
2250         if(n != 2) off -= s->mb_stride;
2251         q2 = s->current_picture.qscale_table[off];
2252         if(q2 && q2 != q1)
2253             b = (b * s->y_dc_scale_table[q2] * ff_vc1_dqscale[s->y_dc_scale_table[q1] - 1] + 0x20000) >> 18;
2254     }
2255
2256     if(a_avail && c_avail) {
2257         if(abs(a - b) <= abs(b - c)) {
2258             pred = c;
2259             *dir_ptr = 1;//left
2260         } else {
2261             pred = a;
2262             *dir_ptr = 0;//top
2263         }
2264     } else if(a_avail) {
2265         pred = a;
2266         *dir_ptr = 0;//top
2267     } else if(c_avail) {
2268         pred = c;
2269         *dir_ptr = 1;//left
2270     } else {
2271         pred = 0;
2272         *dir_ptr = 1;//left
2273     }
2274
2275     /* update predictor */
2276     *dc_val_ptr = &dc_val[0];
2277     return pred;
2278 }
2279
2280 /** @} */ // Block group
2281
2282 /**
2283  * @defgroup vc1_std_mb VC1 Macroblock-level functions in Simple/Main Profiles
2284  * @see 7.1.4, p91 and 8.1.1.7, p(1)04
2285  * @{
2286  */
2287
2288 static inline int vc1_coded_block_pred(MpegEncContext * s, int n, uint8_t **coded_block_ptr)
2289 {
2290     int xy, wrap, pred, a, b, c;
2291
2292     xy = s->block_index[n];
2293     wrap = s->b8_stride;
2294
2295     /* B C
2296      * A X
2297      */
2298     a = s->coded_block[xy - 1       ];
2299     b = s->coded_block[xy - 1 - wrap];
2300     c = s->coded_block[xy     - wrap];
2301
2302     if (b == c) {
2303         pred = a;
2304     } else {
2305         pred = c;
2306     }
2307
2308     /* store value */
2309     *coded_block_ptr = &s->coded_block[xy];
2310
2311     return pred;
2312 }
2313
2314 /**
2315  * Decode one AC coefficient
2316  * @param v The VC1 context
2317  * @param last Last coefficient
2318  * @param skip How much zero coefficients to skip
2319  * @param value Decoded AC coefficient value
2320  * @param codingset set of VLC to decode data
2321  * @see 8.1.3.4
2322  */
2323 static void vc1_decode_ac_coeff(VC1Context *v, int *last, int *skip, int *value, int codingset)
2324 {
2325     GetBitContext *gb = &v->s.gb;
2326     int index, escape, run = 0, level = 0, lst = 0;
2327
2328     index = get_vlc2(gb, ff_vc1_ac_coeff_table[codingset].table, AC_VLC_BITS, 3);
2329     if (index != vc1_ac_sizes[codingset] - 1) {
2330         run = vc1_index_decode_table[codingset][index][0];
2331         level = vc1_index_decode_table[codingset][index][1];
2332         lst = index >= vc1_last_decode_table[codingset];
2333         if(get_bits1(gb))
2334             level = -level;
2335     } else {
2336         escape = decode210(gb);
2337         if (escape != 2) {
2338             index = get_vlc2(gb, ff_vc1_ac_coeff_table[codingset].table, AC_VLC_BITS, 3);
2339             run = vc1_index_decode_table[codingset][index][0];
2340             level = vc1_index_decode_table[codingset][index][1];
2341             lst = index >= vc1_last_decode_table[codingset];
2342             if(escape == 0) {
2343                 if(lst)
2344                     level += vc1_last_delta_level_table[codingset][run];
2345                 else
2346                     level += vc1_delta_level_table[codingset][run];
2347             } else {
2348                 if(lst)
2349                     run += vc1_last_delta_run_table[codingset][level] + 1;
2350                 else
2351                     run += vc1_delta_run_table[codingset][level] + 1;
2352             }
2353             if(get_bits1(gb))
2354                 level = -level;
2355         } else {
2356             int sign;
2357             lst = get_bits1(gb);
2358             if(v->s.esc3_level_length == 0) {
2359                 if(v->pq < 8 || v->dquantfrm) { // table 59
2360                     v->s.esc3_level_length = get_bits(gb, 3);
2361                     if(!v->s.esc3_level_length)
2362                         v->s.esc3_level_length = get_bits(gb, 2) + 8;
2363                 } else { //table 60
2364                     v->s.esc3_level_length = get_unary(gb, 1, 6) + 2;
2365                 }
2366                 v->s.esc3_run_length = 3 + get_bits(gb, 2);
2367             }
2368             run = get_bits(gb, v->s.esc3_run_length);
2369             sign = get_bits1(gb);
2370             level = get_bits(gb, v->s.esc3_level_length);
2371             if(sign)
2372                 level = -level;
2373         }
2374     }
2375
2376     *last = lst;
2377     *skip = run;
2378     *value = level;
2379 }
2380
2381 /** Decode intra block in intra frames - should be faster than decode_intra_block
2382  * @param v VC1Context
2383  * @param block block to decode
2384  * @param[in] n subblock index
2385  * @param coded are AC coeffs present or not
2386  * @param codingset set of VLC to decode data
2387  */
2388 static int vc1_decode_i_block(VC1Context *v, DCTELEM block[64], int n, int coded, int codingset)
2389 {
2390     GetBitContext *gb = &v->s.gb;
2391     MpegEncContext *s = &v->s;
2392     int dc_pred_dir = 0; /* Direction of the DC prediction used */
2393     int i;
2394     int16_t *dc_val;
2395     int16_t *ac_val, *ac_val2;
2396     int dcdiff;
2397
2398     /* Get DC differential */
2399     if (n < 4) {
2400         dcdiff = get_vlc2(&s->gb, ff_msmp4_dc_luma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
2401     } else {
2402         dcdiff = get_vlc2(&s->gb, ff_msmp4_dc_chroma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
2403     }
2404     if (dcdiff < 0){
2405         av_log(s->avctx, AV_LOG_ERROR, "Illegal DC VLC\n");
2406         return -1;
2407     }
2408     if (dcdiff)
2409     {
2410         if (dcdiff == 119 /* ESC index value */)
2411         {
2412             /* TODO: Optimize */
2413             if (v->pq == 1) dcdiff = get_bits(gb, 10);
2414             else if (v->pq == 2) dcdiff = get_bits(gb, 9);
2415             else dcdiff = get_bits(gb, 8);
2416         }
2417         else
2418         {
2419             if (v->pq == 1)
2420                 dcdiff = (dcdiff<<2) + get_bits(gb, 2) - 3;
2421             else if (v->pq == 2)
2422                 dcdiff = (dcdiff<<1) + get_bits1(gb)   - 1;
2423         }
2424         if (get_bits1(gb))
2425             dcdiff = -dcdiff;
2426     }
2427
2428     /* Prediction */
2429     dcdiff += vc1_i_pred_dc(&v->s, v->overlap, v->pq, n, &dc_val, &dc_pred_dir);
2430     *dc_val = dcdiff;
2431
2432     /* Store the quantized DC coeff, used for prediction */
2433     if (n < 4) {
2434         block[0] = dcdiff * s->y_dc_scale;
2435     } else {
2436         block[0] = dcdiff * s->c_dc_scale;
2437     }
2438     /* Skip ? */
2439     if (!coded) {
2440         goto not_coded;
2441     }
2442
2443     //AC Decoding
2444     i = 1;
2445
2446     {
2447         int last = 0, skip, value;
2448         const int8_t *zz_table;
2449         int scale;
2450         int k;
2451
2452         scale = v->pq * 2 + v->halfpq;
2453
2454         if(v->s.ac_pred) {
2455             if(!dc_pred_dir)
2456                 zz_table = wmv1_scantable[2];
2457             else
2458                 zz_table = wmv1_scantable[3];
2459         } else
2460             zz_table = wmv1_scantable[1];
2461
2462         ac_val = s->ac_val[0][0] + s->block_index[n] * 16;
2463         ac_val2 = ac_val;
2464         if(dc_pred_dir) //left
2465             ac_val -= 16;
2466         else //top
2467             ac_val -= 16 * s->block_wrap[n];
2468
2469         while (!last) {
2470             vc1_decode_ac_coeff(v, &last, &skip, &value, codingset);
2471             i += skip;
2472             if(i > 63)
2473                 break;
2474             block[zz_table[i++]] = value;
2475         }
2476
2477         /* apply AC prediction if needed */
2478         if(s->ac_pred) {
2479             if(dc_pred_dir) { //left
2480                 for(k = 1; k < 8; k++)
2481                     block[k << 3] += ac_val[k];
2482             } else { //top
2483                 for(k = 1; k < 8; k++)
2484                     block[k] += ac_val[k + 8];
2485             }
2486         }
2487         /* save AC coeffs for further prediction */
2488         for(k = 1; k < 8; k++) {
2489             ac_val2[k] = block[k << 3];
2490             ac_val2[k + 8] = block[k];
2491         }
2492
2493         /* scale AC coeffs */
2494         for(k = 1; k < 64; k++)
2495             if(block[k]) {
2496                 block[k] *= scale;
2497                 if(!v->pquantizer)
2498                     block[k] += (block[k] < 0) ? -v->pq : v->pq;
2499             }
2500
2501         if(s->ac_pred) i = 63;
2502     }
2503
2504 not_coded:
2505     if(!coded) {
2506         int k, scale;
2507         ac_val = s->ac_val[0][0] + s->block_index[n] * 16;
2508         ac_val2 = ac_val;
2509
2510         i = 0;
2511         scale = v->pq * 2 + v->halfpq;
2512         memset(ac_val2, 0, 16 * 2);
2513         if(dc_pred_dir) {//left
2514             ac_val -= 16;
2515             if(s->ac_pred)
2516                 memcpy(ac_val2, ac_val, 8 * 2);
2517         } else {//top
2518             ac_val -= 16 * s->block_wrap[n];
2519             if(s->ac_pred)
2520                 memcpy(ac_val2 + 8, ac_val + 8, 8 * 2);
2521         }
2522
2523         /* apply AC prediction if needed */
2524         if(s->ac_pred) {
2525             if(dc_pred_dir) { //left
2526                 for(k = 1; k < 8; k++) {
2527                     block[k << 3] = ac_val[k] * scale;
2528                     if(!v->pquantizer && block[k << 3])
2529                         block[k << 3] += (block[k << 3] < 0) ? -v->pq : v->pq;
2530                 }
2531             } else { //top
2532                 for(k = 1; k < 8; k++) {
2533                     block[k] = ac_val[k + 8] * scale;
2534                     if(!v->pquantizer && block[k])
2535                         block[k] += (block[k] < 0) ? -v->pq : v->pq;
2536                 }
2537             }
2538             i = 63;
2539         }
2540     }
2541     s->block_last_index[n] = i;
2542
2543     return 0;
2544 }
2545
2546 /** Decode intra block in intra frames - should be faster than decode_intra_block
2547  * @param v VC1Context
2548  * @param block block to decode
2549  * @param[in] n subblock number
2550  * @param coded are AC coeffs present or not
2551  * @param codingset set of VLC to decode data
2552  * @param mquant quantizer value for this macroblock
2553  */
2554 static int vc1_decode_i_block_adv(VC1Context *v, DCTELEM block[64], int n, int coded, int codingset, int mquant)
2555 {
2556     GetBitContext *gb = &v->s.gb;
2557     MpegEncContext *s = &v->s;
2558     int dc_pred_dir = 0; /* Direction of the DC prediction used */
2559     int i;
2560     int16_t *dc_val;
2561     int16_t *ac_val, *ac_val2;
2562     int dcdiff;
2563     int a_avail = v->a_avail, c_avail = v->c_avail;
2564     int use_pred = s->ac_pred;
2565     int scale;
2566     int q1, q2 = 0;
2567     int mb_pos = s->mb_x + s->mb_y * s->mb_stride;
2568
2569     /* Get DC differential */
2570     if (n < 4) {
2571         dcdiff = get_vlc2(&s->gb, ff_msmp4_dc_luma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
2572     } else {
2573         dcdiff = get_vlc2(&s->gb, ff_msmp4_dc_chroma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
2574     }
2575     if (dcdiff < 0){
2576         av_log(s->avctx, AV_LOG_ERROR, "Illegal DC VLC\n");
2577         return -1;
2578     }
2579     if (dcdiff)
2580     {
2581         if (dcdiff == 119 /* ESC index value */)
2582         {
2583             /* TODO: Optimize */
2584             if (mquant == 1) dcdiff = get_bits(gb, 10);
2585             else if (mquant == 2) dcdiff = get_bits(gb, 9);
2586             else dcdiff = get_bits(gb, 8);
2587         }
2588         else
2589         {
2590             if (mquant == 1)
2591                 dcdiff = (dcdiff<<2) + get_bits(gb, 2) - 3;
2592             else if (mquant == 2)
2593                 dcdiff = (dcdiff<<1) + get_bits1(gb)   - 1;
2594         }
2595         if (get_bits1(gb))
2596             dcdiff = -dcdiff;
2597     }
2598
2599     /* Prediction */
2600     dcdiff += vc1_pred_dc(&v->s, v->overlap, mquant, n, v->a_avail, v->c_avail, &dc_val, &dc_pred_dir);
2601     *dc_val = dcdiff;
2602
2603     /* Store the quantized DC coeff, used for prediction */
2604     if (n < 4) {
2605         block[0] = dcdiff * s->y_dc_scale;
2606     } else {
2607         block[0] = dcdiff * s->c_dc_scale;
2608     }
2609
2610     //AC Decoding
2611     i = 1;
2612
2613     /* check if AC is needed at all */
2614     if(!a_avail && !c_avail) use_pred = 0;
2615     ac_val = s->ac_val[0][0] + s->block_index[n] * 16;
2616     ac_val2 = ac_val;
2617
2618     scale = mquant * 2 + ((mquant == v->pq) ? v->halfpq : 0);
2619
2620     if(dc_pred_dir) //left
2621         ac_val -= 16;
2622     else //top
2623         ac_val -= 16 * s->block_wrap[n];
2624
2625     q1 = s->current_picture.qscale_table[mb_pos];
2626     if(dc_pred_dir && c_avail && mb_pos) q2 = s->current_picture.qscale_table[mb_pos - 1];
2627     if(!dc_pred_dir && a_avail && mb_pos >= s->mb_stride) q2 = s->current_picture.qscale_table[mb_pos - s->mb_stride];
2628     if(dc_pred_dir && n==1) q2 = q1;
2629     if(!dc_pred_dir && n==2) q2 = q1;
2630     if(n==3) q2 = q1;
2631
2632     if(coded) {
2633         int last = 0, skip, value;
2634         const int8_t *zz_table;
2635         int k;
2636
2637         if(v->s.ac_pred) {
2638             if(!dc_pred_dir)
2639                 zz_table = wmv1_scantable[2];
2640             else
2641                 zz_table = wmv1_scantable[3];
2642         } else
2643             zz_table = wmv1_scantable[1];
2644
2645         while (!last) {
2646             vc1_decode_ac_coeff(v, &last, &skip, &value, codingset);
2647             i += skip;
2648             if(i > 63)
2649                 break;
2650             block[zz_table[i++]] = value;
2651         }
2652
2653         /* apply AC prediction if needed */
2654         if(use_pred) {
2655             /* scale predictors if needed*/
2656             if(q2 && q1!=q2) {
2657                 q1 = q1 * 2 + ((q1 == v->pq) ? v->halfpq : 0) - 1;
2658                 q2 = q2 * 2 + ((q2 == v->pq) ? v->halfpq : 0) - 1;
2659
2660                 if(dc_pred_dir) { //left
2661                     for(k = 1; k < 8; k++)
2662                         block[k << 3] += (ac_val[k] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2663                 } else { //top
2664                     for(k = 1; k < 8; k++)
2665                         block[k] += (ac_val[k + 8] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2666                 }
2667             } else {
2668                 if(dc_pred_dir) { //left
2669                     for(k = 1; k < 8; k++)
2670                         block[k << 3] += ac_val[k];
2671                 } else { //top
2672                     for(k = 1; k < 8; k++)
2673                         block[k] += ac_val[k + 8];
2674                 }
2675             }
2676         }
2677         /* save AC coeffs for further prediction */
2678         for(k = 1; k < 8; k++) {
2679             ac_val2[k] = block[k << 3];
2680             ac_val2[k + 8] = block[k];
2681         }
2682
2683         /* scale AC coeffs */
2684         for(k = 1; k < 64; k++)
2685             if(block[k]) {
2686                 block[k] *= scale;
2687                 if(!v->pquantizer)
2688                     block[k] += (block[k] < 0) ? -mquant : mquant;
2689             }
2690
2691         if(use_pred) i = 63;
2692     } else { // no AC coeffs
2693         int k;
2694
2695         memset(ac_val2, 0, 16 * 2);
2696         if(dc_pred_dir) {//left
2697             if(use_pred) {
2698                 memcpy(ac_val2, ac_val, 8 * 2);
2699                 if(q2 && q1!=q2) {
2700                     q1 = q1 * 2 + ((q1 == v->pq) ? v->halfpq : 0) - 1;
2701                     q2 = q2 * 2 + ((q2 == v->pq) ? v->halfpq : 0) - 1;
2702                     for(k = 1; k < 8; k++)
2703                         ac_val2[k] = (ac_val2[k] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2704                 }
2705             }
2706         } else {//top
2707             if(use_pred) {
2708                 memcpy(ac_val2 + 8, ac_val + 8, 8 * 2);
2709                 if(q2 && q1!=q2) {
2710                     q1 = q1 * 2 + ((q1 == v->pq) ? v->halfpq : 0) - 1;
2711                     q2 = q2 * 2 + ((q2 == v->pq) ? v->halfpq : 0) - 1;
2712                     for(k = 1; k < 8; k++)
2713                         ac_val2[k + 8] = (ac_val2[k + 8] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2714                 }
2715             }
2716         }
2717
2718         /* apply AC prediction if needed */
2719         if(use_pred) {
2720             if(dc_pred_dir) { //left
2721                 for(k = 1; k < 8; k++) {
2722                     block[k << 3] = ac_val2[k] * scale;
2723                     if(!v->pquantizer && block[k << 3])
2724                         block[k << 3] += (block[k << 3] < 0) ? -mquant : mquant;
2725                 }
2726             } else { //top
2727                 for(k = 1; k < 8; k++) {
2728                     block[k] = ac_val2[k + 8] * scale;
2729                     if(!v->pquantizer && block[k])
2730                         block[k] += (block[k] < 0) ? -mquant : mquant;
2731                 }
2732             }
2733             i = 63;
2734         }
2735     }
2736     s->block_last_index[n] = i;
2737
2738     return 0;
2739 }
2740
2741 /** Decode intra block in inter frames - more generic version than vc1_decode_i_block
2742  * @param v VC1Context
2743  * @param block block to decode
2744  * @param[in] n subblock index
2745  * @param coded are AC coeffs present or not
2746  * @param mquant block quantizer
2747  * @param codingset set of VLC to decode data
2748  */
2749 static int vc1_decode_intra_block(VC1Context *v, DCTELEM block[64], int n, int coded, int mquant, int codingset)
2750 {
2751     GetBitContext *gb = &v->s.gb;
2752     MpegEncContext *s = &v->s;
2753     int dc_pred_dir = 0; /* Direction of the DC prediction used */
2754     int i;
2755     int16_t *dc_val;
2756     int16_t *ac_val, *ac_val2;
2757     int dcdiff;
2758     int mb_pos = s->mb_x + s->mb_y * s->mb_stride;
2759     int a_avail = v->a_avail, c_avail = v->c_avail;
2760     int use_pred = s->ac_pred;
2761     int scale;
2762     int q1, q2 = 0;
2763
2764     /* XXX: Guard against dumb values of mquant */
2765     mquant = (mquant < 1) ? 0 : ( (mquant>31) ? 31 : mquant );
2766
2767     /* Set DC scale - y and c use the same */
2768     s->y_dc_scale = s->y_dc_scale_table[mquant];
2769     s->c_dc_scale = s->c_dc_scale_table[mquant];
2770
2771     /* Get DC differential */
2772     if (n < 4) {
2773         dcdiff = get_vlc2(&s->gb, ff_msmp4_dc_luma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
2774     } else {
2775         dcdiff = get_vlc2(&s->gb, ff_msmp4_dc_chroma_vlc[s->dc_table_index].table, DC_VLC_BITS, 3);
2776     }
2777     if (dcdiff < 0){
2778         av_log(s->avctx, AV_LOG_ERROR, "Illegal DC VLC\n");
2779         return -1;
2780     }
2781     if (dcdiff)
2782     {
2783         if (dcdiff == 119 /* ESC index value */)
2784         {
2785             /* TODO: Optimize */
2786             if (mquant == 1) dcdiff = get_bits(gb, 10);
2787             else if (mquant == 2) dcdiff = get_bits(gb, 9);
2788             else dcdiff = get_bits(gb, 8);
2789         }
2790         else
2791         {
2792             if (mquant == 1)
2793                 dcdiff = (dcdiff<<2) + get_bits(gb, 2) - 3;
2794             else if (mquant == 2)
2795                 dcdiff = (dcdiff<<1) + get_bits1(gb)   - 1;
2796         }
2797         if (get_bits1(gb))
2798             dcdiff = -dcdiff;
2799     }
2800
2801     /* Prediction */
2802     dcdiff += vc1_pred_dc(&v->s, v->overlap, mquant, n, a_avail, c_avail, &dc_val, &dc_pred_dir);
2803     *dc_val = dcdiff;
2804
2805     /* Store the quantized DC coeff, used for prediction */
2806
2807     if (n < 4) {
2808         block[0] = dcdiff * s->y_dc_scale;
2809     } else {
2810         block[0] = dcdiff * s->c_dc_scale;
2811     }
2812
2813     //AC Decoding
2814     i = 1;
2815
2816     /* check if AC is needed at all and adjust direction if needed */
2817     if(!a_avail) dc_pred_dir = 1;
2818     if(!c_avail) dc_pred_dir = 0;
2819     if(!a_avail && !c_avail) use_pred = 0;
2820     ac_val = s->ac_val[0][0] + s->block_index[n] * 16;
2821     ac_val2 = ac_val;
2822
2823     scale = mquant * 2 + v->halfpq;
2824
2825     if(dc_pred_dir) //left
2826         ac_val -= 16;
2827     else //top
2828         ac_val -= 16 * s->block_wrap[n];
2829
2830     q1 = s->current_picture.qscale_table[mb_pos];
2831     if(dc_pred_dir && c_avail && mb_pos) q2 = s->current_picture.qscale_table[mb_pos - 1];
2832     if(!dc_pred_dir && a_avail && mb_pos >= s->mb_stride) q2 = s->current_picture.qscale_table[mb_pos - s->mb_stride];
2833     if(dc_pred_dir && n==1) q2 = q1;
2834     if(!dc_pred_dir && n==2) q2 = q1;
2835     if(n==3) q2 = q1;
2836
2837     if(coded) {
2838         int last = 0, skip, value;
2839         const int8_t *zz_table;
2840         int k;
2841
2842         zz_table = wmv1_scantable[0];
2843
2844         while (!last) {
2845             vc1_decode_ac_coeff(v, &last, &skip, &value, codingset);
2846             i += skip;
2847             if(i > 63)
2848                 break;
2849             block[zz_table[i++]] = value;
2850         }
2851
2852         /* apply AC prediction if needed */
2853         if(use_pred) {
2854             /* scale predictors if needed*/
2855             if(q2 && q1!=q2) {
2856                 q1 = q1 * 2 + ((q1 == v->pq) ? v->halfpq : 0) - 1;
2857                 q2 = q2 * 2 + ((q2 == v->pq) ? v->halfpq : 0) - 1;
2858
2859                 if(dc_pred_dir) { //left
2860                     for(k = 1; k < 8; k++)
2861                         block[k << 3] += (ac_val[k] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2862                 } else { //top
2863                     for(k = 1; k < 8; k++)
2864                         block[k] += (ac_val[k + 8] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2865                 }
2866             } else {
2867                 if(dc_pred_dir) { //left
2868                     for(k = 1; k < 8; k++)
2869                         block[k << 3] += ac_val[k];
2870                 } else { //top
2871                     for(k = 1; k < 8; k++)
2872                         block[k] += ac_val[k + 8];
2873                 }
2874             }
2875         }
2876         /* save AC coeffs for further prediction */
2877         for(k = 1; k < 8; k++) {
2878             ac_val2[k] = block[k << 3];
2879             ac_val2[k + 8] = block[k];
2880         }
2881
2882         /* scale AC coeffs */
2883         for(k = 1; k < 64; k++)
2884             if(block[k]) {
2885                 block[k] *= scale;
2886                 if(!v->pquantizer)
2887                     block[k] += (block[k] < 0) ? -mquant : mquant;
2888             }
2889
2890         if(use_pred) i = 63;
2891     } else { // no AC coeffs
2892         int k;
2893
2894         memset(ac_val2, 0, 16 * 2);
2895         if(dc_pred_dir) {//left
2896             if(use_pred) {
2897                 memcpy(ac_val2, ac_val, 8 * 2);
2898                 if(q2 && q1!=q2) {
2899                     q1 = q1 * 2 + ((q1 == v->pq) ? v->halfpq : 0) - 1;
2900                     q2 = q2 * 2 + ((q2 == v->pq) ? v->halfpq : 0) - 1;
2901                     for(k = 1; k < 8; k++)
2902                         ac_val2[k] = (ac_val2[k] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2903                 }
2904             }
2905         } else {//top
2906             if(use_pred) {
2907                 memcpy(ac_val2 + 8, ac_val + 8, 8 * 2);
2908                 if(q2 && q1!=q2) {
2909                     q1 = q1 * 2 + ((q1 == v->pq) ? v->halfpq : 0) - 1;
2910                     q2 = q2 * 2 + ((q2 == v->pq) ? v->halfpq : 0) - 1;
2911                     for(k = 1; k < 8; k++)
2912                         ac_val2[k + 8] = (ac_val2[k + 8] * q2 * ff_vc1_dqscale[q1 - 1] + 0x20000) >> 18;
2913                 }
2914             }
2915         }
2916
2917         /* apply AC prediction if needed */
2918         if(use_pred) {
2919             if(dc_pred_dir) { //left
2920                 for(k = 1; k < 8; k++) {
2921                     block[k << 3] = ac_val2[k] * scale;
2922                     if(!v->pquantizer && block[k << 3])
2923                         block[k << 3] += (block[k << 3] < 0) ? -mquant : mquant;
2924                 }
2925             } else { //top
2926                 for(k = 1; k < 8; k++) {
2927                     block[k] = ac_val2[k + 8] * scale;
2928                     if(!v->pquantizer && block[k])
2929                         block[k] += (block[k] < 0) ? -mquant : mquant;
2930                 }
2931             }
2932             i = 63;
2933         }
2934     }
2935     s->block_last_index[n] = i;
2936
2937     return 0;
2938 }
2939
2940 /** Decode P block
2941  */
2942 static int vc1_decode_p_block(VC1Context *v, DCTELEM block[64], int n, int mquant, int ttmb, int first_block,
2943                               uint8_t *dst, int linesize, int skip_block, int apply_filter, int cbp_top, int cbp_left)
2944 {
2945     MpegEncContext *s = &v->s;
2946     GetBitContext *gb = &s->gb;
2947     int i, j;
2948     int subblkpat = 0;
2949     int scale, off, idx, last, skip, value;
2950     int ttblk = ttmb & 7;
2951     int pat = 0;
2952
2953     if(ttmb == -1) {
2954         ttblk = ff_vc1_ttblk_to_tt[v->tt_index][get_vlc2(gb, ff_vc1_ttblk_vlc[v->tt_index].table, VC1_TTBLK_VLC_BITS, 1)];
2955     }
2956     if(ttblk == TT_4X4) {
2957         subblkpat = ~(get_vlc2(gb, ff_vc1_subblkpat_vlc[v->tt_index].table, VC1_SUBBLKPAT_VLC_BITS, 1) + 1);
2958     }
2959     if((ttblk != TT_8X8 && ttblk != TT_4X4) && (v->ttmbf || (ttmb != -1 && (ttmb & 8) && !first_block))) {
2960         subblkpat = decode012(gb);
2961         if(subblkpat) subblkpat ^= 3; //swap decoded pattern bits
2962         if(ttblk == TT_8X4_TOP || ttblk == TT_8X4_BOTTOM) ttblk = TT_8X4;
2963         if(ttblk == TT_4X8_RIGHT || ttblk == TT_4X8_LEFT) ttblk = TT_4X8;
2964     }
2965     scale = 2 * mquant + ((v->pq == mquant) ? v->halfpq : 0);
2966
2967     // convert transforms like 8X4_TOP to generic TT and SUBBLKPAT
2968     if(ttblk == TT_8X4_TOP || ttblk == TT_8X4_BOTTOM) {
2969         subblkpat = 2 - (ttblk == TT_8X4_TOP);
2970         ttblk = TT_8X4;
2971     }
2972     if(ttblk == TT_4X8_RIGHT || ttblk == TT_4X8_LEFT) {
2973         subblkpat = 2 - (ttblk == TT_4X8_LEFT);
2974         ttblk = TT_4X8;
2975     }
2976     switch(ttblk) {
2977     case TT_8X8:
2978         pat = 0xF;
2979         i = 0;
2980         last = 0;
2981         while (!last) {
2982             vc1_decode_ac_coeff(v, &last, &skip, &value, v->codingset2);
2983             i += skip;
2984             if(i > 63)
2985                 break;
2986             idx = wmv1_scantable[0][i++];
2987             block[idx] = value * scale;
2988             if(!v->pquantizer)
2989                 block[idx] += (block[idx] < 0) ? -mquant : mquant;
2990         }
2991         if(!skip_block){
2992             s->dsp.vc1_inv_trans_8x8(block);
2993             s->dsp.add_pixels_clamped(block, dst, linesize);
2994             if(apply_filter && cbp_top  & 0xC)
2995                 s->dsp.vc1_v_loop_filter8(dst, linesize, v->pq);
2996             if(apply_filter && cbp_left & 0xA)
2997                 s->dsp.vc1_h_loop_filter8(dst, linesize, v->pq);
2998         }
2999         break;
3000     case TT_4X4:
3001         pat = ~subblkpat & 0xF;
3002         for(j = 0; j < 4; j++) {
3003             last = subblkpat & (1 << (3 - j));
3004             i = 0;
3005             off = (j & 1) * 4 + (j & 2) * 16;
3006             while (!last) {
3007                 vc1_decode_ac_coeff(v, &last, &skip, &value, v->codingset2);
3008                 i += skip;
3009                 if(i > 15)
3010                     break;
3011                 idx = ff_vc1_simple_progressive_4x4_zz[i++];
3012                 block[idx + off] = value * scale;
3013                 if(!v->pquantizer)
3014                     block[idx + off] += (block[idx + off] < 0) ? -mquant : mquant;
3015             }
3016             if(!(subblkpat & (1 << (3 - j))) && !skip_block){
3017                 s->dsp.vc1_inv_trans_4x4(dst + (j&1)*4 + (j&2)*2*linesize, linesize, block + off);
3018                 if(apply_filter && (j&2 ? pat & (1<<(j-2)) : (cbp_top & (1 << (j + 2)))))
3019                     s->dsp.vc1_v_loop_filter4(dst + (j&1)*4 + (j&2)*2*linesize, linesize, v->pq);
3020                 if(apply_filter && (j&1 ? pat & (1<<(j-1)) : (cbp_left & (1 << (j + 1)))))
3021                     s->dsp.vc1_h_loop_filter4(dst + (j&1)*4 + (j&2)*2*linesize, linesize, v->pq);
3022             }
3023         }
3024         break;
3025     case TT_8X4:
3026         pat = ~((subblkpat & 2)*6 + (subblkpat & 1)*3) & 0xF;
3027         for(j = 0; j < 2; j++) {
3028             last = subblkpat & (1 << (1 - j));
3029             i = 0;
3030             off = j * 32;
3031             while (!last) {
3032                 vc1_decode_ac_coeff(v, &last, &skip, &value, v->codingset2);
3033                 i += skip;
3034                 if(i > 31)
3035                     break;
3036                 idx = v->zz_8x4[i++]+off;
3037                 block[idx] = value * scale;
3038                 if(!v->pquantizer)
3039                     block[idx] += (block[idx] < 0) ? -mquant : mquant;
3040             }
3041             if(!(subblkpat & (1 << (1 - j))) && !skip_block){
3042                 s->dsp.vc1_inv_trans_8x4(dst + j*4*linesize, linesize, block + off);
3043                 if(apply_filter && j ? pat & 0x3 : (cbp_top & 0xC))
3044                     s->dsp.vc1_v_loop_filter8(dst + j*4*linesize, linesize, v->pq);
3045                 if(apply_filter && cbp_left & (2 << j))
3046                     s->dsp.vc1_h_loop_filter4(dst + j*4*linesize, linesize, v->pq);
3047             }
3048         }
3049         break;
3050     case TT_4X8:
3051         pat = ~(subblkpat*5) & 0xF;
3052         for(j = 0; j < 2; j++) {
3053             last = subblkpat & (1 << (1 - j));
3054             i = 0;
3055             off = j * 4;
3056             while (!last) {
3057                 vc1_decode_ac_coeff(v, &last, &skip, &value, v->codingset2);
3058                 i += skip;
3059                 if(i > 31)
3060                     break;
3061                 idx = v->zz_4x8[i++]+off;
3062                 block[idx] = value * scale;
3063                 if(!v->pquantizer)
3064                     block[idx] += (block[idx] < 0) ? -mquant : mquant;
3065             }
3066             if(!(subblkpat & (1 << (1 - j))) && !skip_block){
3067                 s->dsp.vc1_inv_trans_4x8(dst + j*4, linesize, block + off);
3068                 if(apply_filter && cbp_top & (2 << j))
3069                     s->dsp.vc1_v_loop_filter4(dst + j*4, linesize, v->pq);
3070                 if(apply_filter && j ? pat & 0x5 : (cbp_left & 0xA))
3071                     s->dsp.vc1_h_loop_filter8(dst + j*4, linesize, v->pq);
3072             }
3073         }
3074         break;
3075     }
3076     return pat;
3077 }
3078
3079 /** @} */ // Macroblock group
3080
3081 static const int size_table  [6] = { 0, 2, 3, 4,  5,  8 };
3082 static const int offset_table[6] = { 0, 1, 3, 7, 15, 31 };
3083
3084 /** Decode one P-frame MB (in Simple/Main profile)
3085  */
3086 static int vc1_decode_p_mb(VC1Context *v)
3087 {
3088     MpegEncContext *s = &v->s;
3089     GetBitContext *gb = &s->gb;
3090     int i, j;
3091     int mb_pos = s->mb_x + s->mb_y * s->mb_stride;
3092     int cbp; /* cbp decoding stuff */
3093     int mqdiff, mquant; /* MB quantization */
3094     int ttmb = v->ttfrm; /* MB Transform type */
3095
3096     int mb_has_coeffs = 1; /* last_flag */
3097     int dmv_x, dmv_y; /* Differential MV components */
3098     int index, index1; /* LUT indexes */
3099     int val, sign; /* temp values */
3100     int first_block = 1;
3101     int dst_idx, off;
3102     int skipped, fourmv;
3103     int block_cbp = 0, pat;
3104     int apply_loop_filter;
3105
3106     mquant = v->pq; /* Loosy initialization */
3107
3108     if (v->mv_type_is_raw)
3109         fourmv = get_bits1(gb);
3110     else
3111         fourmv = v->mv_type_mb_plane[mb_pos];
3112     if (v->skip_is_raw)
3113         skipped = get_bits1(gb);
3114     else
3115         skipped = v->s.mbskip_table[mb_pos];
3116
3117     s->dsp.clear_blocks(s->block[0]);
3118
3119     apply_loop_filter = s->loop_filter && !(s->avctx->skip_loop_filter >= AVDISCARD_NONKEY);
3120     if (!fourmv) /* 1MV mode */
3121     {
3122         if (!skipped)
3123         {
3124             GET_MVDATA(dmv_x, dmv_y);
3125
3126             if (s->mb_intra) {
3127                 s->current_picture.motion_val[1][s->block_index[0]][0] = 0;
3128                 s->current_picture.motion_val[1][s->block_index[0]][1] = 0;
3129             }
3130             s->current_picture.mb_type[mb_pos] = s->mb_intra ? MB_TYPE_INTRA : MB_TYPE_16x16;
3131             vc1_pred_mv(s, 0, dmv_x, dmv_y, 1, v->range_x, v->range_y, v->mb_type[0]);
3132
3133             /* FIXME Set DC val for inter block ? */
3134             if (s->mb_intra && !mb_has_coeffs)
3135             {
3136                 GET_MQUANT();
3137                 s->ac_pred = get_bits1(gb);
3138                 cbp = 0;
3139             }
3140             else if (mb_has_coeffs)
3141             {
3142                 if (s->mb_intra) s->ac_pred = get_bits1(gb);
3143                 cbp = get_vlc2(&v->s.gb, v->cbpcy_vlc->table, VC1_CBPCY_P_VLC_BITS, 2);
3144                 GET_MQUANT();
3145             }
3146             else
3147             {
3148                 mquant = v->pq;
3149                 cbp = 0;
3150             }
3151             s->current_picture.qscale_table[mb_pos] = mquant;
3152
3153             if (!v->ttmbf && !s->mb_intra && mb_has_coeffs)
3154                 ttmb = get_vlc2(gb, ff_vc1_ttmb_vlc[v->tt_index].table,
3155                                 VC1_TTMB_VLC_BITS, 2);
3156             if(!s->mb_intra) vc1_mc_1mv(v, 0);
3157             dst_idx = 0;
3158             for (i=0; i<6; i++)
3159             {
3160                 s->dc_val[0][s->block_index[i]] = 0;
3161                 dst_idx += i >> 2;
3162                 val = ((cbp >> (5 - i)) & 1);
3163                 off = (i & 4) ? 0 : ((i & 1) * 8 + (i & 2) * 4 * s->linesize);
3164                 v->mb_type[0][s->block_index[i]] = s->mb_intra;
3165                 if(s->mb_intra) {
3166                     /* check if prediction blocks A and C are available */
3167                     v->a_avail = v->c_avail = 0;
3168                     if(i == 2 || i == 3 || !s->first_slice_line)
3169                         v->a_avail = v->mb_type[0][s->block_index[i] - s->block_wrap[i]];
3170                     if(i == 1 || i == 3 || s->mb_x)
3171                         v->c_avail = v->mb_type[0][s->block_index[i] - 1];
3172
3173                     vc1_decode_intra_block(v, s->block[i], i, val, mquant, (i&4)?v->codingset2:v->codingset);
3174                     if((i>3) && (s->flags & CODEC_FLAG_GRAY)) continue;
3175                     s->dsp.vc1_inv_trans_8x8(s->block[i]);
3176                     if(v->rangeredfrm) for(j = 0; j < 64; j++) s->block[i][j] <<= 1;
3177                     s->dsp.put_signed_pixels_clamped(s->block[i], s->dest[dst_idx] + off, s->linesize >> ((i & 4) >> 2));
3178                     if(v->pq >= 9 && v->overlap) {
3179                         if(v->c_avail)
3180                             s->dsp.vc1_h_overlap(s->dest[dst_idx] + off, s->linesize >> ((i & 4) >> 2));
3181                         if(v->a_avail)
3182                             s->dsp.vc1_v_overlap(s->dest[dst_idx] + off, s->linesize >> ((i & 4) >> 2));
3183                     }
3184                     if(apply_loop_filter && s->mb_x && s->mb_x != (s->mb_width - 1) && s->mb_y && s->mb_y != (s->mb_height - 1)){
3185                         int left_cbp, top_cbp;
3186                         if(i & 4){
3187                             left_cbp = v->cbp[s->mb_x - 1]            >> (i * 4);
3188                             top_cbp  = v->cbp[s->mb_x - s->mb_stride] >> (i * 4);
3189                         }else{
3190                             left_cbp = (i & 1) ? (cbp >> ((i-1)*4)) : (v->cbp[s->mb_x - 1]           >> ((i+1)*4));
3191                             top_cbp  = (i & 2) ? (cbp >> ((i-2)*4)) : (v->cbp[s->mb_x - s->mb_stride] >> ((i+2)*4));
3192                         }
3193                         if(left_cbp & 0xC)
3194                             s->dsp.vc1_v_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3195                         if(top_cbp  & 0xA)
3196                             s->dsp.vc1_h_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3197                     }
3198                     block_cbp |= 0xF << (i << 2);
3199                 } else if(val) {
3200                     int left_cbp = 0, top_cbp = 0, filter = 0;
3201                     if(apply_loop_filter && s->mb_x && s->mb_x != (s->mb_width - 1) && s->mb_y && s->mb_y != (s->mb_height - 1)){
3202                         filter = 1;
3203                         if(i & 4){
3204                             left_cbp = v->cbp[s->mb_x - 1]            >> (i * 4);
3205                             top_cbp  = v->cbp[s->mb_x - s->mb_stride] >> (i * 4);
3206                         }else{
3207                             left_cbp = (i & 1) ? (cbp >> ((i-1)*4)) : (v->cbp[s->mb_x - 1]           >> ((i+1)*4));
3208                             top_cbp  = (i & 2) ? (cbp >> ((i-2)*4)) : (v->cbp[s->mb_x - s->mb_stride] >> ((i+2)*4));
3209                         }
3210                         if(left_cbp & 0xC)
3211                             s->dsp.vc1_v_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3212                         if(top_cbp  & 0xA)
3213                             s->dsp.vc1_h_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3214                     }
3215                     pat = vc1_decode_p_block(v, s->block[i], i, mquant, ttmb, first_block, s->dest[dst_idx] + off, (i&4)?s->uvlinesize:s->linesize, (i&4) && (s->flags & CODEC_FLAG_GRAY), filter, left_cbp, top_cbp);
3216                     block_cbp |= pat << (i << 2);
3217                     if(!v->ttmbf && ttmb < 8) ttmb = -1;
3218                     first_block = 0;
3219                 }
3220             }
3221         }
3222         else //Skipped
3223         {
3224             s->mb_intra = 0;
3225             for(i = 0; i < 6; i++) {
3226                 v->mb_type[0][s->block_index[i]] = 0;
3227                 s->dc_val[0][s->block_index[i]] = 0;
3228             }
3229             s->current_picture.mb_type[mb_pos] = MB_TYPE_SKIP;
3230             s->current_picture.qscale_table[mb_pos] = 0;
3231             vc1_pred_mv(s, 0, 0, 0, 1, v->range_x, v->range_y, v->mb_type[0]);
3232             vc1_mc_1mv(v, 0);
3233             return 0;
3234         }
3235     } //1MV mode
3236     else //4MV mode
3237     {
3238         if (!skipped /* unskipped MB */)
3239         {
3240             int intra_count = 0, coded_inter = 0;
3241             int is_intra[6], is_coded[6];
3242             /* Get CBPCY */
3243             cbp = get_vlc2(&v->s.gb, v->cbpcy_vlc->table, VC1_CBPCY_P_VLC_BITS, 2);
3244             for (i=0; i<6; i++)
3245             {
3246                 val = ((cbp >> (5 - i)) & 1);
3247                 s->dc_val[0][s->block_index[i]] = 0;
3248                 s->mb_intra = 0;
3249                 if(i < 4) {
3250                     dmv_x = dmv_y = 0;
3251                     s->mb_intra = 0;
3252                     mb_has_coeffs = 0;
3253                     if(val) {
3254                         GET_MVDATA(dmv_x, dmv_y);
3255                     }
3256                     vc1_pred_mv(s, i, dmv_x, dmv_y, 0, v->range_x, v->range_y, v->mb_type[0]);
3257                     if(!s->mb_intra) vc1_mc_4mv_luma(v, i);
3258                     intra_count += s->mb_intra;
3259                     is_intra[i] = s->mb_intra;
3260                     is_coded[i] = mb_has_coeffs;
3261                 }
3262                 if(i&4){
3263                     is_intra[i] = (intra_count >= 3);
3264                     is_coded[i] = val;
3265                 }
3266                 if(i == 4) vc1_mc_4mv_chroma(v);
3267                 v->mb_type[0][s->block_index[i]] = is_intra[i];
3268                 if(!coded_inter) coded_inter = !is_intra[i] & is_coded[i];
3269             }
3270             // if there are no coded blocks then don't do anything more
3271             if(!intra_count && !coded_inter) return 0;
3272             dst_idx = 0;
3273             GET_MQUANT();
3274             s->current_picture.qscale_table[mb_pos] = mquant;
3275             /* test if block is intra and has pred */
3276             {
3277                 int intrapred = 0;
3278                 for(i=0; i<6; i++)
3279                     if(is_intra[i]) {
3280                         if(((!s->first_slice_line || (i==2 || i==3)) && v->mb_type[0][s->block_index[i] - s->block_wrap[i]])
3281                             || ((s->mb_x || (i==1 || i==3)) && v->mb_type[0][s->block_index[i] - 1])) {
3282                             intrapred = 1;
3283                             break;
3284                         }
3285                     }
3286                 if(intrapred)s->ac_pred = get_bits1(gb);
3287                 else s->ac_pred = 0;
3288             }
3289             if (!v->ttmbf && coded_inter)
3290                 ttmb = get_vlc2(gb, ff_vc1_ttmb_vlc[v->tt_index].table, VC1_TTMB_VLC_BITS, 2);
3291             for (i=0; i<6; i++)
3292             {
3293                 dst_idx += i >> 2;
3294                 off = (i & 4) ? 0 : ((i & 1) * 8 + (i & 2) * 4 * s->linesize);
3295                 s->mb_intra = is_intra[i];
3296                 if (is_intra[i]) {
3297                     /* check if prediction blocks A and C are available */
3298                     v->a_avail = v->c_avail = 0;
3299                     if(i == 2 || i == 3 || !s->first_slice_line)
3300                         v->a_avail = v->mb_type[0][s->block_index[i] - s->block_wrap[i]];
3301                     if(i == 1 || i == 3 || s->mb_x)
3302                         v->c_avail = v->mb_type[0][s->block_index[i] - 1];
3303
3304                     vc1_decode_intra_block(v, s->block[i], i, is_coded[i], mquant, (i&4)?v->codingset2:v->codingset);
3305                     if((i>3) && (s->flags & CODEC_FLAG_GRAY)) continue;
3306                     s->dsp.vc1_inv_trans_8x8(s->block[i]);
3307                     if(v->rangeredfrm) for(j = 0; j < 64; j++) s->block[i][j] <<= 1;
3308                     s->dsp.put_signed_pixels_clamped(s->block[i], s->dest[dst_idx] + off, (i&4)?s->uvlinesize:s->linesize);
3309                     if(v->pq >= 9 && v->overlap) {
3310                         if(v->c_avail)
3311                             s->dsp.vc1_h_overlap(s->dest[dst_idx] + off, s->linesize >> ((i & 4) >> 2));
3312                         if(v->a_avail)
3313                             s->dsp.vc1_v_overlap(s->dest[dst_idx] + off, s->linesize >> ((i & 4) >> 2));
3314                     }
3315                     if(v->s.loop_filter && s->mb_x && s->mb_x != (s->mb_width - 1) && s->mb_y && s->mb_y != (s->mb_height - 1)){
3316                         int left_cbp, top_cbp;
3317                         if(i & 4){
3318                             left_cbp = v->cbp[s->mb_x - 1]            >> (i * 4);
3319                             top_cbp  = v->cbp[s->mb_x - s->mb_stride] >> (i * 4);
3320                         }else{
3321                             left_cbp = (i & 1) ? (cbp >> ((i-1)*4)) : (v->cbp[s->mb_x - 1]           >> ((i+1)*4));
3322                             top_cbp  = (i & 2) ? (cbp >> ((i-2)*4)) : (v->cbp[s->mb_x - s->mb_stride] >> ((i+2)*4));
3323                         }
3324                         if(left_cbp & 0xC)
3325                             s->dsp.vc1_v_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3326                         if(top_cbp  & 0xA)
3327                             s->dsp.vc1_h_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3328                     }
3329                     block_cbp |= 0xF << (i << 2);
3330                 } else if(is_coded[i]) {
3331                     int left_cbp = 0, top_cbp = 0, filter = 0;
3332                     if(v->s.loop_filter && s->mb_x && s->mb_x != (s->mb_width - 1) && s->mb_y && s->mb_y != (s->mb_height - 1)){
3333                         filter = 1;
3334                         if(i & 4){
3335                             left_cbp = v->cbp[s->mb_x - 1]            >> (i * 4);
3336                             top_cbp  = v->cbp[s->mb_x - s->mb_stride] >> (i * 4);
3337                         }else{
3338                             left_cbp = (i & 1) ? (cbp >> ((i-1)*4)) : (v->cbp[s->mb_x - 1]           >> ((i+1)*4));
3339                             top_cbp  = (i & 2) ? (cbp >> ((i-2)*4)) : (v->cbp[s->mb_x - s->mb_stride] >> ((i+2)*4));
3340                         }
3341                         if(left_cbp & 0xC)
3342                             s->dsp.vc1_v_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3343                         if(top_cbp  & 0xA)
3344                             s->dsp.vc1_h_loop_filter8(s->dest[dst_idx] + off, i & 4 ? s->uvlinesize : s->linesize, v->pq);
3345                     }
3346                     pat = vc1_decode_p_block(v, s->block[i], i, mquant, ttmb, first_block, s->dest[dst_idx] + off, (i&4)?s->uvlinesize:s->linesize, (i&4) && (s->flags & CODEC_FLAG_GRAY), filter, left_cbp, top_cbp);
3347                     block_cbp |= pat << (i << 2);
3348                     if(!v->ttmbf && ttmb < 8) ttmb = -1;
3349                     first_block = 0;
3350                 }
3351             }
3352             return 0;
3353         }
3354         else //Skipped MB
3355         {
3356             s->mb_intra = 0;
3357             s->current_picture.qscale_table[mb_pos] = 0;
3358             for (i=0; i<6; i++) {
3359                 v->mb_type[0][s->block_index[i]] = 0;
3360                 s->dc_val[0][s->block_index[i]] = 0;
3361             }
3362             for (i=0; i<4; i++)
3363             {
3364                 vc1_pred_mv(s, i, 0, 0, 0, v->range_x, v->range_y, v->mb_type[0]);
3365                 vc1_mc_4mv_luma(v, i);
3366             }
3367             vc1_mc_4mv_chroma(v);
3368             s->current_picture.qscale_table[mb_pos] = 0;
3369             return 0;
3370         }
3371     }
3372     v->cbp[s->mb_x] = block_cbp;
3373
3374     /* Should never happen */
3375     return -1;
3376 }
3377
3378 /** Decode one B-frame MB (in Main profile)
3379  */
3380 static void vc1_decode_b_mb(VC1Context *v)
3381 {
3382     MpegEncContext *s = &v->s;
3383     GetBitContext *gb = &s->gb;
3384     int i, j;
3385     int mb_pos = s->mb_x + s->mb_y * s->mb_stride;
3386     int cbp = 0; /* cbp decoding stuff */
3387     int mqdiff, mquant; /* MB quantization */
3388     int ttmb = v->ttfrm; /* MB Transform type */
3389     int mb_has_coeffs = 0; /* last_flag */
3390     int index, index1; /* LUT indexes */
3391     int val, sign; /* temp values */
3392     int first_block = 1;
3393     int dst_idx, off;
3394     int skipped, direct;
3395     int dmv_x[2], dmv_y[2];
3396     int bmvtype = BMV_TYPE_BACKWARD;
3397
3398     mquant = v->pq; /* Loosy initialization */
3399     s->mb_intra = 0;
3400
3401     if (v->dmb_is_raw)
3402         direct = get_bits1(gb);
3403     else
3404         direct = v->direct_mb_plane[mb_pos];
3405     if (v->skip_is_raw)
3406         skipped = get_bits1(gb);
3407     else
3408         skipped = v->s.mbskip_table[mb_pos];
3409
3410     s->dsp.clear_blocks(s->block[0]);
3411     dmv_x[0] = dmv_x[1] = dmv_y[0] = dmv_y[1] = 0;
3412     for(i = 0; i < 6; i++) {
3413         v->mb_type[0][s->block_index[i]] = 0;
3414         s->dc_val[0][s->block_index[i]] = 0;
3415     }
3416     s->current_picture.qscale_table[mb_pos] = 0;
3417
3418     if (!direct) {
3419         if (!skipped) {
3420             GET_MVDATA(dmv_x[0], dmv_y[0]);
3421             dmv_x[1] = dmv_x[0];
3422             dmv_y[1] = dmv_y[0];
3423         }
3424         if(skipped || !s->mb_intra) {
3425             bmvtype = decode012(gb);
3426             switch(bmvtype) {
3427             case 0:
3428                 bmvtype = (v->bfraction >= (B_FRACTION_DEN/2)) ? BMV_TYPE_BACKWARD : BMV_TYPE_FORWARD;
3429                 break;
3430             case 1:
3431                 bmvtype = (v->bfraction >= (B_FRACTION_DEN/2)) ? BMV_TYPE_FORWARD : BMV_TYPE_BACKWARD;
3432                 break;
3433             case 2:
3434                 bmvtype = BMV_TYPE_INTERPOLATED;
3435                 dmv_x[0] = dmv_y[0] = 0;
3436             }
3437         }
3438     }
3439     for(i = 0; i < 6; i++)
3440         v->mb_type[0][s->block_index[i]] = s->mb_intra;
3441
3442     if (skipped) {
3443         if(direct) bmvtype = BMV_TYPE_INTERPOLATED;
3444         vc1_pred_b_mv(v, dmv_x, dmv_y, direct, bmvtype);
3445         vc1_b_mc(v, dmv_x, dmv_y, direct, bmvtype);
3446         return;
3447     }
3448     if (direct) {
3449         cbp = get_vlc2(&v->s.gb, v->cbpcy_vlc->table, VC1_CBPCY_P_VLC_BITS, 2);
3450         GET_MQUANT();
3451         s->mb_intra = 0;
3452         s->current_picture.qscale_table[mb_pos] = mquant;
3453         if(!v->ttmbf)
3454             ttmb = get_vlc2(gb, ff_vc1_ttmb_vlc[v->tt_index].table, VC1_TTMB_VLC_BITS, 2);
3455         dmv_x[0] = dmv_y[0] = dmv_x[1] = dmv_y[1] = 0;
3456         vc1_pred_b_mv(v, dmv_x, dmv_y, direct, bmvtype);
3457         vc1_b_mc(v, dmv_x, dmv_y, direct, bmvtype);
3458     } else {
3459         if(!mb_has_coeffs && !s->mb_intra) {
3460             /* no coded blocks - effectively skipped */
3461             vc1_pred_b_mv(v, dmv_x, dmv_y, direct, bmvtype);
3462             vc1_b_mc(v, dmv_x, dmv_y, direct, bmvtype);
3463             return;
3464         }
3465         if(s->mb_intra && !mb_has_coeffs) {
3466             GET_MQUANT();
3467             s->current_picture.qscale_table[mb_pos] = mquant;
3468             s->ac_pred = get_bits1(gb);
3469             cbp = 0;
3470             vc1_pred_b_mv(v, dmv_x, dmv_y, direct, bmvtype);
3471         } else {
3472             if(bmvtype == BMV_TYPE_INTERPOLATED) {
3473                 GET_MVDATA(dmv_x[0], dmv_y[0]);
3474                 if(!mb_has_coeffs) {
3475                     /* interpolated skipped block */
3476                     vc1_pred_b_mv(v, dmv_x, dmv_y, direct, bmvtype);
3477                     vc1_b_mc(v, dmv_x, dmv_y, direct, bmvtype);
3478                     return;
3479                 }
3480             }
3481             vc1_pred_b_mv(v, dmv_x, dmv_y, direct, bmvtype);
3482             if(!s->mb_intra) {
3483                 vc1_b_mc(v, dmv_x, dmv_y, direct, bmvtype);
3484             }
3485             if(s->mb_intra)
3486                 s->ac_pred = get_bits1(gb);
3487             cbp = get_vlc2(&v->s.gb, v->cbpcy_vlc->table, VC1_CBPCY_P_VLC_BITS, 2);
3488             GET_MQUANT();
3489             s->current_picture.qscale_table[mb_pos] = mquant;
3490             if(!v->ttmbf && !s->mb_intra && mb_has_coeffs)
3491                 ttmb = get_vlc2(gb, ff_vc1_ttmb_vlc[v->tt_index].table, VC1_TTMB_VLC_BITS, 2);
3492         }
3493     }
3494     dst_idx = 0;
3495     for (i=0; i<6; i++)
3496     {
3497         s->dc_val[0][s->block_index[i]] = 0;
3498         dst_idx += i >> 2;
3499         val = ((cbp >> (5 - i)) & 1);
3500         off = (i & 4) ? 0 : ((i & 1) * 8 + (i & 2) * 4 * s->linesize);
3501         v->mb_type[0][s->block_index[i]] = s->mb_intra;
3502         if(s->mb_intra) {
3503             /* check if prediction blocks A and C are available */
3504             v->a_avail = v->c_avail = 0;
3505             if(i == 2 || i == 3 || !s->first_slice_line)
3506                 v->a_avail = v->mb_type[0][s->block_index[i] - s->block_wrap[i]];
3507             if(i == 1 || i == 3 || s->mb_x)
3508                 v->c_avail = v->mb_type[0][s->block_index[i] - 1];
3509
3510             vc1_decode_intra_block(v, s->block[i], i, val, mquant, (i&4)?v->codingset2:v->codingset);
3511             if((i>3) && (s->flags & CODEC_FLAG_GRAY)) continue;
3512             s->dsp.vc1_inv_trans_8x8(s->block[i]);
3513             if(v->rangeredfrm) for(j = 0; j < 64; j++) s->block[i][j] <<= 1;
3514             s->dsp.put_signed_pixels_clamped(s->block[i], s->dest[dst_idx] + off, s->linesize >> ((i & 4) >> 2));
3515         } else if(val) {
3516             vc1_decode_p_block(v, s->block[i], i, mquant, ttmb, first_block, s->dest[dst_idx] + off, (i&4)?s->uvlinesize:s->linesize, (i&4) && (s->flags & CODEC_FLAG_GRAY), 0, 0, 0);
3517             if(!v->ttmbf && ttmb < 8) ttmb = -1;
3518             first_block = 0;
3519         }
3520     }
3521 }
3522
3523 /** Decode blocks of I-frame
3524  */
3525 static void vc1_decode_i_blocks(VC1Context *v)
3526 {
3527     int k, j;
3528     MpegEncContext *s = &v->s;
3529     int cbp, val;
3530     uint8_t *coded_val;
3531     int mb_pos;
3532
3533     /* select codingmode used for VLC tables selection */
3534     switch(v->y_ac_table_index){
3535     case 0:
3536         v->codingset = (v->pqindex <= 8) ? CS_HIGH_RATE_INTRA : CS_LOW_MOT_INTRA;
3537         break;
3538     case 1:
3539         v->codingset = CS_HIGH_MOT_INTRA;
3540         break;
3541     case 2:
3542         v->codingset = CS_MID_RATE_INTRA;
3543         break;
3544     }
3545
3546     switch(v->c_ac_table_index){
3547     case 0:
3548         v->codingset2 = (v->pqindex <= 8) ? CS_HIGH_RATE_INTER : CS_LOW_MOT_INTER;
3549         break;
3550     case 1:
3551         v->codingset2 = CS_HIGH_MOT_INTER;
3552         break;
3553     case 2:
3554         v->codingset2 = CS_MID_RATE_INTER;
3555         break;
3556     }
3557
3558     /* Set DC scale - y and c use the same */
3559     s->y_dc_scale = s->y_dc_scale_table[v->pq];
3560     s->c_dc_scale = s->c_dc_scale_table[v->pq];
3561
3562     //do frame decode
3563     s->mb_x = s->mb_y = 0;
3564     s->mb_intra = 1;
3565     s->first_slice_line = 1;
3566     for(s->mb_y = 0; s->mb_y < s->mb_height; s->mb_y++) {
3567         for(s->mb_x = 0; s->mb_x < s->mb_width; s->mb_x++) {
3568             ff_init_block_index(s);
3569             ff_update_block_index(s);
3570             s->dsp.clear_blocks(s->block[0]);
3571             mb_pos = s->mb_x + s->mb_y * s->mb_width;
3572             s->current_picture.mb_type[mb_pos] = MB_TYPE_INTRA;
3573             s->current_picture.qscale_table[mb_pos] = v->pq;
3574             s->current_picture.motion_val[1][s->block_index[0]][0] = 0;
3575             s->current_picture.motion_val[1][s->block_index[0]][1] = 0;
3576
3577             // do actual MB decoding and displaying
3578             cbp = get_vlc2(&v->s.gb, ff_msmp4_mb_i_vlc.table, MB_INTRA_VLC_BITS, 2);
3579             v->s.ac_pred = get_bits1(&v->s.gb);
3580
3581             for(k = 0; k < 6; k++) {
3582                 val = ((cbp >> (5 - k)) & 1);
3583
3584                 if (k < 4) {
3585                     int pred = vc1_coded_block_pred(&v->s, k, &coded_val);
3586                     val = val ^ pred;
3587                     *coded_val = val;
3588                 }
3589                 cbp |= val << (5 - k);
3590
3591                 vc1_decode_i_block(v, s->block[k], k, val, (k<4)? v->codingset : v->codingset2);
3592
3593                 s->dsp.vc1_inv_trans_8x8(s->block[k]);
3594                 if(v->pq >= 9 && v->overlap) {
3595                     for(j = 0; j < 64; j++) s->block[k][j] += 128;
3596                 }
3597             }
3598
3599             vc1_put_block(v, s->block);
3600             if(v->pq >= 9 && v->overlap) {
3601                 if(s->mb_x) {
3602                     s->dsp.vc1_h_overlap(s->dest[0], s->linesize);
3603                     s->dsp.vc1_h_overlap(s->dest[0] + 8 * s->linesize, s->linesize);
3604                     if(!(s->flags & CODEC_FLAG_GRAY)) {
3605                         s->dsp.vc1_h_overlap(s->dest[1], s->uvlinesize);
3606                         s->dsp.vc1_h_overlap(s->dest[2], s->uvlinesize);
3607                     }
3608                 }
3609                 s->dsp.vc1_h_overlap(s->dest[0] + 8, s->linesize);
3610                 s->dsp.vc1_h_overlap(s->dest[0] + 8 * s->linesize + 8, s->linesize);
3611                 if(!s->first_slice_line) {
3612                     s->dsp.vc1_v_overlap(s->dest[0], s->linesize);
3613                     s->dsp.vc1_v_overlap(s->dest[0] + 8, s->linesize);
3614                     if(!(s->flags & CODEC_FLAG_GRAY)) {
3615                         s->dsp.vc1_v_overlap(s->dest[1], s->uvlinesize);
3616                         s->dsp.vc1_v_overlap(s->dest[2], s->uvlinesize);
3617                     }
3618                 }
3619                 s->dsp.vc1_v_overlap(s->dest[0] + 8 * s->linesize, s->linesize);
3620                 s->dsp.vc1_v_overlap(s->dest[0] + 8 * s->linesize + 8, s->linesize);
3621             }
3622             if(v->s.loop_filter) vc1_loop_filter_iblk(s, v->pq);
3623
3624             if(get_bits_count(&s->gb) > v->bits) {
3625                 ff_er_add_slice(s, 0, 0, s->mb_x, s->mb_y, (AC_END|DC_END|MV_END));
3626                 av_log(s->avctx, AV_LOG_ERROR, "Bits overconsumption: %i > %i\n", get_bits_count(&s->gb), v->bits);
3627                 return;
3628             }
3629         }
3630         ff_draw_horiz_band(s, s->mb_y * 16, 16);
3631         s->first_slice_line = 0;
3632     }
3633     ff_er_add_slice(s, 0, 0, s->mb_width - 1, s->mb_height - 1, (AC_END|DC_END|MV_END));
3634 }
3635
3636 /** Decode blocks of I-frame for advanced profile
3637  */
3638 static void vc1_decode_i_blocks_adv(VC1Context *v)
3639 {
3640     int k, j;
3641     MpegEncContext *s = &v->s;
3642     int cbp, val;
3643     uint8_t *coded_val;
3644     int mb_pos;
3645     int mquant = v->pq;
3646     int mqdiff;
3647     int overlap;
3648     GetBitContext *gb = &s->gb;
3649
3650     /* select codingmode used for VLC tables selection */
3651     switch(v->y_ac_table_index){
3652     case 0:
3653         v->codingset = (v->pqindex <= 8) ? CS_HIGH_RATE_INTRA : CS_LOW_MOT_INTRA;
3654         break;
3655     case 1:
3656         v->codingset = CS_HIGH_MOT_INTRA;
3657         break;
3658     case 2:
3659         v->codingset = CS_MID_RATE_INTRA;
3660         break;
3661     }
3662
3663     switch(v->c_ac_table_index){
3664     case 0:
3665         v->codingset2 = (v->pqindex <= 8) ? CS_HIGH_RATE_INTER : CS_LOW_MOT_INTER;
3666         break;
3667     case 1:
3668         v->codingset2 = CS_HIGH_MOT_INTER;
3669         break;
3670     case 2:
3671         v->codingset2 = CS_MID_RATE_INTER;
3672         break;
3673     }
3674
3675     //do frame decode
3676     s->mb_x = s->mb_y = 0;
3677     s->mb_intra = 1;
3678     s->first_slice_line = 1;
3679     for(s->mb_y = 0; s->mb_y < s->mb_height; s->mb_y++) {
3680         for(s->mb_x = 0; s->mb_x < s->mb_width; s->mb_x++) {
3681             ff_init_block_index(s);
3682             ff_update_block_index(s);
3683             s->dsp.clear_blocks(s->block[0]);
3684             mb_pos = s->mb_x + s->mb_y * s->mb_stride;
3685             s->current_picture.mb_type[mb_pos] = MB_TYPE_INTRA;
3686             s->current_picture.motion_val[1][s->block_index[0]][0] = 0;
3687             s->current_picture.motion_val[1][s->block_index[0]][1] = 0;
3688
3689             // do actual MB decoding and displaying
3690             cbp = get_vlc2(&v->s.gb, ff_msmp4_mb_i_vlc.table, MB_INTRA_VLC_BITS, 2);
3691             if(v->acpred_is_raw)
3692                 v->s.ac_pred = get_bits1(&v->s.gb);
3693             else
3694                 v->s.ac_pred = v->acpred_plane[mb_pos];
3695
3696             if(v->condover == CONDOVER_SELECT) {
3697                 if(v->overflg_is_raw)
3698                     overlap = get_bits1(&v->s.gb);
3699                 else
3700                     overlap = v->over_flags_plane[mb_pos];
3701             } else
3702                 overlap = (v->condover == CONDOVER_ALL);
3703
3704             GET_MQUANT();
3705
3706             s->current_picture.qscale_table[mb_pos] = mquant;
3707             /* Set DC scale - y and c use the same */
3708             s->y_dc_scale = s->y_dc_scale_table[mquant];
3709             s->c_dc_scale = s->c_dc_scale_table[mquant];
3710
3711             for(k = 0; k < 6; k++) {
3712                 val = ((cbp >> (5 - k)) & 1);
3713
3714                 if (k < 4) {
3715                     int pred = vc1_coded_block_pred(&v->s, k, &coded_val);
3716                     val = val ^ pred;
3717                     *coded_val = val;
3718                 }
3719                 cbp |= val << (5 - k);
3720
3721                 v->a_avail = !s->first_slice_line || (k==2 || k==3);
3722                 v->c_avail = !!s->mb_x || (k==1 || k==3);
3723
3724                 vc1_decode_i_block_adv(v, s->block[k], k, val, (k<4)? v->codingset : v->codingset2, mquant);
3725
3726                 s->dsp.vc1_inv_trans_8x8(s->block[k]);
3727                 for(j = 0; j < 64; j++) s->block[k][j] += 128;
3728             }
3729
3730             vc1_put_block(v, s->block);
3731             if(overlap) {
3732                 if(s->mb_x) {
3733                     s->dsp.vc1_h_overlap(s->dest[0], s->linesize);
3734                     s->dsp.vc1_h_overlap(s->dest[0] + 8 * s->linesize, s->linesize);
3735                     if(!(s->flags & CODEC_FLAG_GRAY)) {
3736                         s->dsp.vc1_h_overlap(s->dest[1], s->uvlinesize);
3737                         s->dsp.vc1_h_overlap(s->dest[2], s->uvlinesize);
3738                     }
3739                 }
3740                 s->dsp.vc1_h_overlap(s->dest[0] + 8, s->linesize);
3741                 s->dsp.vc1_h_overlap(s->dest[0] + 8 * s->linesize + 8, s->linesize);
3742                 if(!s->first_slice_line) {
3743                     s->dsp.vc1_v_overlap(s->dest[0], s->linesize);
3744                     s->dsp.vc1_v_overlap(s->dest[0] + 8, s->linesize);
3745                     if(!(s->flags & CODEC_FLAG_GRAY)) {
3746                         s->dsp.vc1_v_overlap(s->dest[1], s->uvlinesize);
3747                         s->dsp.vc1_v_overlap(s->dest[2], s->uvlinesize);
3748                     }
3749                 }
3750                 s->dsp.vc1_v_overlap(s->dest[0] + 8 * s->linesize, s->linesize);
3751                 s->dsp.vc1_v_overlap(s->dest[0] + 8 * s->linesize + 8, s->linesize);
3752             }
3753             if(v->s.loop_filter) vc1_loop_filter_iblk(s, v->pq);
3754
3755             if(get_bits_count(&s->gb) > v->bits) {
3756                 ff_er_add_slice(s, 0, 0, s->mb_x, s->mb_y, (AC_END|DC_END|MV_END));
3757                 av_log(s->avctx, AV_LOG_ERROR, "Bits overconsumption: %i > %i\n", get_bits_count(&s->gb), v->bits);
3758                 return;
3759             }
3760         }
3761         ff_draw_horiz_band(s, s->mb_y * 16, 16);
3762         s->first_slice_line = 0;
3763     }
3764     ff_er_add_slice(s, 0, 0, s->mb_width - 1, s->mb_height - 1, (AC_END|DC_END|MV_END));
3765 }
3766
3767 static void vc1_decode_p_blocks(VC1Context *v)
3768 {
3769     MpegEncContext *s = &v->s;
3770
3771     /* select codingmode used for VLC tables selection */
3772     switch(v->c_ac_table_index){
3773     case 0:
3774         v->codingset = (v->pqindex <= 8) ? CS_HIGH_RATE_INTRA : CS_LOW_MOT_INTRA;
3775         break;
3776     case 1:
3777         v->codingset = CS_HIGH_MOT_INTRA;
3778         break;
3779     case 2:
3780         v->codingset = CS_MID_RATE_INTRA;
3781         break;
3782     }
3783
3784     switch(v->c_ac_table_index){
3785     case 0:
3786         v->codingset2 = (v->pqindex <= 8) ? CS_HIGH_RATE_INTER : CS_LOW_MOT_INTER;
3787         break;
3788     case 1:
3789         v->codingset2 = CS_HIGH_MOT_INTER;
3790         break;
3791     case 2:
3792         v->codingset2 = CS_MID_RATE_INTER;
3793         break;
3794     }
3795
3796     s->first_slice_line = 1;
3797     memset(v->cbp_base, 0, sizeof(v->cbp_base[0])*2*s->mb_stride);
3798     for(s->mb_y = 0; s->mb_y < s->mb_height; s->mb_y++) {
3799         for(s->mb_x = 0; s->mb_x < s->mb_width; s->mb_x++) {
3800             ff_init_block_index(s);
3801             ff_update_block_index(s);
3802             s->dsp.clear_blocks(s->block[0]);
3803
3804             vc1_decode_p_mb(v);
3805             if(get_bits_count(&s->gb) > v->bits || get_bits_count(&s->gb) < 0) {
3806                 ff_er_add_slice(s, 0, 0, s->mb_x, s->mb_y, (AC_END|DC_END|MV_END));
3807                 av_log(s->avctx, AV_LOG_ERROR, "Bits overconsumption: %i > %i at %ix%i\n", get_bits_count(&s->gb), v->bits,s->mb_x,s->mb_y);
3808                 return;
3809             }
3810         }
3811         memmove(v->cbp_base, v->cbp, sizeof(v->cbp_base[0])*s->mb_stride);
3812         ff_draw_horiz_band(s, s->mb_y * 16, 16);
3813         s->first_slice_line = 0;
3814     }
3815     ff_er_add_slice(s, 0, 0, s->mb_width - 1, s->mb_height - 1, (AC_END|DC_END|MV_END));
3816 }
3817
3818 static void vc1_decode_b_blocks(VC1Context *v)
3819 {
3820     MpegEncContext *s = &v->s;
3821
3822     /* select codingmode used for VLC tables selection */
3823     switch(v->c_ac_table_index){
3824     case 0:
3825         v->codingset = (v->pqindex <= 8) ? CS_HIGH_RATE_INTRA : CS_LOW_MOT_INTRA;
3826         break;
3827     case 1:
3828         v->codingset = CS_HIGH_MOT_INTRA;
3829         break;
3830     case 2:
3831         v->codingset = CS_MID_RATE_INTRA;
3832         break;
3833     }
3834
3835     switch(v->c_ac_table_index){
3836     case 0:
3837         v->codingset2 = (v->pqindex <= 8) ? CS_HIGH_RATE_INTER : CS_LOW_MOT_INTER;
3838         break;
3839     case 1:
3840         v->codingset2 = CS_HIGH_MOT_INTER;
3841         break;
3842     case 2:
3843         v->codingset2 = CS_MID_RATE_INTER;
3844         break;
3845     }
3846
3847     s->first_slice_line = 1;
3848     for(s->mb_y = 0; s->mb_y < s->mb_height; s->mb_y++) {
3849         for(s->mb_x = 0; s->mb_x < s->mb_width; s->mb_x++) {
3850             ff_init_block_index(s);
3851             ff_update_block_index(s);
3852             s->dsp.clear_blocks(s->block[0]);
3853
3854             vc1_decode_b_mb(v);
3855             if(get_bits_count(&s->gb) > v->bits || get_bits_count(&s->gb) < 0) {
3856                 ff_er_add_slice(s, 0, 0, s->mb_x, s->mb_y, (AC_END|DC_END|MV_END));
3857                 av_log(s->avctx, AV_LOG_ERROR, "Bits overconsumption: %i > %i at %ix%i\n", get_bits_count(&s->gb), v->bits,s->mb_x,s->mb_y);
3858                 return;
3859             }
3860             if(v->s.loop_filter) vc1_loop_filter_iblk(s, v->pq);
3861         }
3862         ff_draw_horiz_band(s, s->mb_y * 16, 16);
3863         s->first_slice_line = 0;
3864     }
3865     ff_er_add_slice(s, 0, 0, s->mb_width - 1, s->mb_height - 1, (AC_END|DC_END|MV_END));
3866 }
3867
3868 static void vc1_decode_skip_blocks(VC1Context *v)
3869 {
3870     MpegEncContext *s = &v->s;
3871
3872     ff_er_add_slice(s, 0, 0, s->mb_width - 1, s->mb_height - 1, (AC_END|DC_END|MV_END));
3873     s->first_slice_line = 1;
3874     for(s->mb_y = 0; s->mb_y < s->mb_height; s->mb_y++) {
3875         s->mb_x = 0;
3876         ff_init_block_index(s);
3877         ff_update_block_index(s);
3878         memcpy(s->dest[0], s->last_picture.data[0] + s->mb_y * 16 * s->linesize, s->linesize * 16);
3879         memcpy(s->dest[1], s->last_picture.data[1] + s->mb_y * 8 * s->uvlinesize, s->uvlinesize * 8);
3880         memcpy(s->dest[2], s->last_picture.data[2] + s->mb_y * 8 * s->uvlinesize, s->uvlinesize * 8);
3881         ff_draw_horiz_band(s, s->mb_y * 16, 16);
3882         s->first_slice_line = 0;
3883     }
3884     s->pict_type = FF_P_TYPE;
3885 }
3886
3887 static void vc1_decode_blocks(VC1Context *v)
3888 {
3889
3890     v->s.esc3_level_length = 0;
3891     if(v->x8_type){
3892         ff_intrax8_decode_picture(&v->x8, 2*v->pq+v->halfpq, v->pq*(!v->pquantizer) );
3893     }else{
3894
3895         switch(v->s.pict_type) {
3896         case FF_I_TYPE:
3897             if(v->profile == PROFILE_ADVANCED)
3898                 vc1_decode_i_blocks_adv(v);
3899             else
3900                 vc1_decode_i_blocks(v);
3901             break;
3902         case FF_P_TYPE:
3903             if(v->p_frame_skipped)
3904                 vc1_decode_skip_blocks(v);
3905             else
3906                 vc1_decode_p_blocks(v);
3907             break;
3908         case FF_B_TYPE:
3909             if(v->bi_type){
3910                 if(v->profile == PROFILE_ADVANCED)
3911                     vc1_decode_i_blocks_adv(v);
3912                 else
3913                     vc1_decode_i_blocks(v);
3914             }else
3915                 vc1_decode_b_blocks(v);
3916             break;
3917         }
3918     }
3919 }
3920
3921 /** Initialize a VC1/WMV3 decoder
3922  * @todo TODO: Handle VC-1 IDUs (Transport level?)
3923  * @todo TODO: Decypher remaining bits in extra_data
3924  */
3925 static av_cold int vc1_decode_init(AVCodecContext *avctx)
3926 {
3927     VC1Context *v = avctx->priv_data;
3928     MpegEncContext *s = &v->s;
3929     GetBitContext gb;
3930
3931     if (!avctx->extradata_size || !avctx->extradata) return -1;
3932     if (!(avctx->flags & CODEC_FLAG_GRAY))
3933         avctx->pix_fmt = avctx->get_format(avctx, avctx->codec->pix_fmts);
3934     else
3935         avctx->pix_fmt = PIX_FMT_GRAY8;
3936     avctx->hwaccel = ff_find_hwaccel(avctx->codec->id, avctx->pix_fmt);
3937     v->s.avctx = avctx;
3938     avctx->flags |= CODEC_FLAG_EMU_EDGE;
3939     v->s.flags |= CODEC_FLAG_EMU_EDGE;
3940
3941     if(avctx->idct_algo==FF_IDCT_AUTO){
3942         avctx->idct_algo=FF_IDCT_WMV2;
3943     }
3944
3945     if(ff_h263_decode_init(avctx) < 0)
3946         return -1;
3947     if (vc1_init_common(v) < 0) return -1;
3948
3949     avctx->coded_width = avctx->width;
3950     avctx->coded_height = avctx->height;
3951     if (avctx->codec_id == CODEC_ID_WMV3)
3952     {
3953         int count = 0;
3954
3955         // looks like WMV3 has a sequence header stored in the extradata
3956         // advanced sequence header may be before the first frame
3957         // the last byte of the extradata is a version number, 1 for the
3958         // samples we can decode
3959
3960         init_get_bits(&gb, avctx->extradata, avctx->extradata_size*8);
3961
3962         if (vc1_decode_sequence_header(avctx, v, &gb) < 0)
3963           return -1;
3964
3965         count = avctx->extradata_size*8 - get_bits_count(&gb);
3966         if (count>0)
3967         {
3968             av_log(avctx, AV_LOG_INFO, "Extra data: %i bits left, value: %X\n",
3969                    count, get_bits(&gb, count));
3970         }
3971         else if (count < 0)
3972         {
3973             av_log(avctx, AV_LOG_INFO, "Read %i bits in overflow\n", -count);
3974         }
3975     } else { // VC1/WVC1
3976         const uint8_t *start = avctx->extradata;
3977         uint8_t *end = avctx->extradata + avctx->extradata_size;
3978         const uint8_t *next;
3979         int size, buf2_size;
3980         uint8_t *buf2 = NULL;
3981         int seq_initialized = 0, ep_initialized = 0;
3982
3983         if(avctx->extradata_size < 16) {
3984             av_log(avctx, AV_LOG_ERROR, "Extradata size too small: %i\n", avctx->extradata_size);
3985             return -1;
3986         }
3987
3988         buf2 = av_mallocz(avctx->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
3989         if(start[0]) start++; // in WVC1 extradata first byte is its size
3990         next = start;
3991         for(; next < end; start = next){
3992             next = find_next_marker(start + 4, end);
3993             size = next - start - 4;
3994             if(size <= 0) continue;
3995             buf2_size = vc1_unescape_buffer(start + 4, size, buf2);
3996             init_get_bits(&gb, buf2, buf2_size * 8);
3997             switch(AV_RB32(start)){
3998             case VC1_CODE_SEQHDR:
3999                 if(vc1_decode_sequence_header(avctx, v, &gb) < 0){
4000                     av_free(buf2);
4001                     return -1;
4002                 }
4003                 seq_initialized = 1;
4004                 break;
4005             case VC1_CODE_ENTRYPOINT:
4006                 if(vc1_decode_entry_point(avctx, v, &gb) < 0){
4007                     av_free(buf2);
4008                     return -1;
4009                 }
4010                 ep_initialized = 1;
4011                 break;
4012             }
4013         }
4014         av_free(buf2);
4015         if(!seq_initialized || !ep_initialized){
4016             av_log(avctx, AV_LOG_ERROR, "Incomplete extradata\n");
4017             return -1;
4018         }
4019     }
4020     avctx->has_b_frames= !!(avctx->max_b_frames);
4021     s->low_delay = !avctx->has_b_frames;
4022
4023     s->mb_width = (avctx->coded_width+15)>>4;
4024     s->mb_height = (avctx->coded_height+15)>>4;
4025
4026     /* Allocate mb bitplanes */
4027     v->mv_type_mb_plane = av_malloc(s->mb_stride * s->mb_height);