Merge commit 'f8716a1408f4f4ec63857b7015fbd62f9eac344a'
[ffmpeg.git] / libavcodec / mpegvideo.c
1 /*
2  * The simplest mpeg encoder (well, it was the simplest!)
3  * Copyright (c) 2000,2001 Fabrice Bellard
4  * Copyright (c) 2002-2004 Michael Niedermayer <michaelni@gmx.at>
5  *
6  * 4MV & hq & B-frame encoding stuff by Michael Niedermayer <michaelni@gmx.at>
7  *
8  * This file is part of FFmpeg.
9  *
10  * FFmpeg is free software; you can redistribute it and/or
11  * modify it under the terms of the GNU Lesser General Public
12  * License as published by the Free Software Foundation; either
13  * version 2.1 of the License, or (at your option) any later version.
14  *
15  * FFmpeg is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
18  * Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public
21  * License along with FFmpeg; if not, write to the Free Software
22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
23  */
24
25 /**
26  * @file
27  * The simplest mpeg encoder (well, it was the simplest!).
28  */
29
30 #include "libavutil/attributes.h"
31 #include "libavutil/avassert.h"
32 #include "libavutil/imgutils.h"
33 #include "libavutil/internal.h"
34 #include "libavutil/motion_vector.h"
35 #include "libavutil/timer.h"
36 #include "avcodec.h"
37 #include "blockdsp.h"
38 #include "h264chroma.h"
39 #include "idctdsp.h"
40 #include "internal.h"
41 #include "mathops.h"
42 #include "mpegutils.h"
43 #include "mpegvideo.h"
44 #include "mpegvideodata.h"
45 #include "mjpegenc.h"
46 #include "msmpeg4.h"
47 #include "qpeldsp.h"
48 #include "thread.h"
49 #include "wmv2.h"
50 #include <limits.h>
51
52 static void dct_unquantize_mpeg1_intra_c(MpegEncContext *s,
53                                    int16_t *block, int n, int qscale)
54 {
55     int i, level, nCoeffs;
56     const uint16_t *quant_matrix;
57
58     nCoeffs= s->block_last_index[n];
59
60     block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
61     /* XXX: only mpeg1 */
62     quant_matrix = s->intra_matrix;
63     for(i=1;i<=nCoeffs;i++) {
64         int j= s->intra_scantable.permutated[i];
65         level = block[j];
66         if (level) {
67             if (level < 0) {
68                 level = -level;
69                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
70                 level = (level - 1) | 1;
71                 level = -level;
72             } else {
73                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
74                 level = (level - 1) | 1;
75             }
76             block[j] = level;
77         }
78     }
79 }
80
81 static void dct_unquantize_mpeg1_inter_c(MpegEncContext *s,
82                                    int16_t *block, int n, int qscale)
83 {
84     int i, level, nCoeffs;
85     const uint16_t *quant_matrix;
86
87     nCoeffs= s->block_last_index[n];
88
89     quant_matrix = s->inter_matrix;
90     for(i=0; i<=nCoeffs; i++) {
91         int j= s->intra_scantable.permutated[i];
92         level = block[j];
93         if (level) {
94             if (level < 0) {
95                 level = -level;
96                 level = (((level << 1) + 1) * qscale *
97                          ((int) (quant_matrix[j]))) >> 4;
98                 level = (level - 1) | 1;
99                 level = -level;
100             } else {
101                 level = (((level << 1) + 1) * qscale *
102                          ((int) (quant_matrix[j]))) >> 4;
103                 level = (level - 1) | 1;
104             }
105             block[j] = level;
106         }
107     }
108 }
109
110 static void dct_unquantize_mpeg2_intra_c(MpegEncContext *s,
111                                    int16_t *block, int n, int qscale)
112 {
113     int i, level, nCoeffs;
114     const uint16_t *quant_matrix;
115
116     if(s->alternate_scan) nCoeffs= 63;
117     else nCoeffs= s->block_last_index[n];
118
119     block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
120     quant_matrix = s->intra_matrix;
121     for(i=1;i<=nCoeffs;i++) {
122         int j= s->intra_scantable.permutated[i];
123         level = block[j];
124         if (level) {
125             if (level < 0) {
126                 level = -level;
127                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
128                 level = -level;
129             } else {
130                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
131             }
132             block[j] = level;
133         }
134     }
135 }
136
137 static void dct_unquantize_mpeg2_intra_bitexact(MpegEncContext *s,
138                                    int16_t *block, int n, int qscale)
139 {
140     int i, level, nCoeffs;
141     const uint16_t *quant_matrix;
142     int sum=-1;
143
144     if(s->alternate_scan) nCoeffs= 63;
145     else nCoeffs= s->block_last_index[n];
146
147     block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
148     sum += block[0];
149     quant_matrix = s->intra_matrix;
150     for(i=1;i<=nCoeffs;i++) {
151         int j= s->intra_scantable.permutated[i];
152         level = block[j];
153         if (level) {
154             if (level < 0) {
155                 level = -level;
156                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
157                 level = -level;
158             } else {
159                 level = (int)(level * qscale * quant_matrix[j]) >> 3;
160             }
161             block[j] = level;
162             sum+=level;
163         }
164     }
165     block[63]^=sum&1;
166 }
167
168 static void dct_unquantize_mpeg2_inter_c(MpegEncContext *s,
169                                    int16_t *block, int n, int qscale)
170 {
171     int i, level, nCoeffs;
172     const uint16_t *quant_matrix;
173     int sum=-1;
174
175     if(s->alternate_scan) nCoeffs= 63;
176     else nCoeffs= s->block_last_index[n];
177
178     quant_matrix = s->inter_matrix;
179     for(i=0; i<=nCoeffs; i++) {
180         int j= s->intra_scantable.permutated[i];
181         level = block[j];
182         if (level) {
183             if (level < 0) {
184                 level = -level;
185                 level = (((level << 1) + 1) * qscale *
186                          ((int) (quant_matrix[j]))) >> 4;
187                 level = -level;
188             } else {
189                 level = (((level << 1) + 1) * qscale *
190                          ((int) (quant_matrix[j]))) >> 4;
191             }
192             block[j] = level;
193             sum+=level;
194         }
195     }
196     block[63]^=sum&1;
197 }
198
199 static void dct_unquantize_h263_intra_c(MpegEncContext *s,
200                                   int16_t *block, int n, int qscale)
201 {
202     int i, level, qmul, qadd;
203     int nCoeffs;
204
205     av_assert2(s->block_last_index[n]>=0 || s->h263_aic);
206
207     qmul = qscale << 1;
208
209     if (!s->h263_aic) {
210         block[0] *= n < 4 ? s->y_dc_scale : s->c_dc_scale;
211         qadd = (qscale - 1) | 1;
212     }else{
213         qadd = 0;
214     }
215     if(s->ac_pred)
216         nCoeffs=63;
217     else
218         nCoeffs= s->inter_scantable.raster_end[ s->block_last_index[n] ];
219
220     for(i=1; i<=nCoeffs; i++) {
221         level = block[i];
222         if (level) {
223             if (level < 0) {
224                 level = level * qmul - qadd;
225             } else {
226                 level = level * qmul + qadd;
227             }
228             block[i] = level;
229         }
230     }
231 }
232
233 static void dct_unquantize_h263_inter_c(MpegEncContext *s,
234                                   int16_t *block, int n, int qscale)
235 {
236     int i, level, qmul, qadd;
237     int nCoeffs;
238
239     av_assert2(s->block_last_index[n]>=0);
240
241     qadd = (qscale - 1) | 1;
242     qmul = qscale << 1;
243
244     nCoeffs= s->inter_scantable.raster_end[ s->block_last_index[n] ];
245
246     for(i=0; i<=nCoeffs; i++) {
247         level = block[i];
248         if (level) {
249             if (level < 0) {
250                 level = level * qmul - qadd;
251             } else {
252                 level = level * qmul + qadd;
253             }
254             block[i] = level;
255         }
256     }
257 }
258
259 static void mpeg_er_decode_mb(void *opaque, int ref, int mv_dir, int mv_type,
260                               int (*mv)[2][4][2],
261                               int mb_x, int mb_y, int mb_intra, int mb_skipped)
262 {
263     MpegEncContext *s = opaque;
264
265     s->mv_dir     = mv_dir;
266     s->mv_type    = mv_type;
267     s->mb_intra   = mb_intra;
268     s->mb_skipped = mb_skipped;
269     s->mb_x       = mb_x;
270     s->mb_y       = mb_y;
271     memcpy(s->mv, mv, sizeof(*mv));
272
273     ff_init_block_index(s);
274     ff_update_block_index(s);
275
276     s->bdsp.clear_blocks(s->block[0]);
277
278     s->dest[0] = s->current_picture.f->data[0] + (s->mb_y *  16                       * s->linesize)   + s->mb_x *  16;
279     s->dest[1] = s->current_picture.f->data[1] + (s->mb_y * (16 >> s->chroma_y_shift) * s->uvlinesize) + s->mb_x * (16 >> s->chroma_x_shift);
280     s->dest[2] = s->current_picture.f->data[2] + (s->mb_y * (16 >> s->chroma_y_shift) * s->uvlinesize) + s->mb_x * (16 >> s->chroma_x_shift);
281
282     if (ref)
283         av_log(s->avctx, AV_LOG_DEBUG,
284                "Interlaced error concealment is not fully implemented\n");
285     ff_mpv_decode_mb(s, s->block);
286 }
287
288 static void gray16(uint8_t *dst, const uint8_t *src, ptrdiff_t linesize, int h)
289 {
290     while(h--)
291         memset(dst + h*linesize, 128, 16);
292 }
293
294 static void gray8(uint8_t *dst, const uint8_t *src, ptrdiff_t linesize, int h)
295 {
296     while(h--)
297         memset(dst + h*linesize, 128, 8);
298 }
299
300 /* init common dct for both encoder and decoder */
301 static av_cold int dct_init(MpegEncContext *s)
302 {
303     ff_blockdsp_init(&s->bdsp, s->avctx);
304     ff_h264chroma_init(&s->h264chroma, 8); //for lowres
305     ff_hpeldsp_init(&s->hdsp, s->avctx->flags);
306     ff_mpegvideodsp_init(&s->mdsp);
307     ff_videodsp_init(&s->vdsp, s->avctx->bits_per_raw_sample);
308
309     if (s->avctx->debug & FF_DEBUG_NOMC) {
310         int i;
311         for (i=0; i<4; i++) {
312             s->hdsp.avg_pixels_tab[0][i] = gray16;
313             s->hdsp.put_pixels_tab[0][i] = gray16;
314             s->hdsp.put_no_rnd_pixels_tab[0][i] = gray16;
315
316             s->hdsp.avg_pixels_tab[1][i] = gray8;
317             s->hdsp.put_pixels_tab[1][i] = gray8;
318             s->hdsp.put_no_rnd_pixels_tab[1][i] = gray8;
319         }
320     }
321
322     s->dct_unquantize_h263_intra = dct_unquantize_h263_intra_c;
323     s->dct_unquantize_h263_inter = dct_unquantize_h263_inter_c;
324     s->dct_unquantize_mpeg1_intra = dct_unquantize_mpeg1_intra_c;
325     s->dct_unquantize_mpeg1_inter = dct_unquantize_mpeg1_inter_c;
326     s->dct_unquantize_mpeg2_intra = dct_unquantize_mpeg2_intra_c;
327     if (s->avctx->flags & CODEC_FLAG_BITEXACT)
328         s->dct_unquantize_mpeg2_intra = dct_unquantize_mpeg2_intra_bitexact;
329     s->dct_unquantize_mpeg2_inter = dct_unquantize_mpeg2_inter_c;
330
331     if (HAVE_INTRINSICS_NEON)
332         ff_mpv_common_init_neon(s);
333
334     if (ARCH_ALPHA)
335         ff_mpv_common_init_axp(s);
336     if (ARCH_ARM)
337         ff_mpv_common_init_arm(s);
338     if (ARCH_PPC)
339         ff_mpv_common_init_ppc(s);
340     if (ARCH_X86)
341         ff_mpv_common_init_x86(s);
342
343     return 0;
344 }
345
346 av_cold void ff_mpv_idct_init(MpegEncContext *s)
347 {
348     ff_idctdsp_init(&s->idsp, s->avctx);
349
350     /* load & permutate scantables
351      * note: only wmv uses different ones
352      */
353     if (s->alternate_scan) {
354         ff_init_scantable(s->idsp.idct_permutation, &s->inter_scantable, ff_alternate_vertical_scan);
355         ff_init_scantable(s->idsp.idct_permutation, &s->intra_scantable, ff_alternate_vertical_scan);
356     } else {
357         ff_init_scantable(s->idsp.idct_permutation, &s->inter_scantable, ff_zigzag_direct);
358         ff_init_scantable(s->idsp.idct_permutation, &s->intra_scantable, ff_zigzag_direct);
359     }
360     ff_init_scantable(s->idsp.idct_permutation, &s->intra_h_scantable, ff_alternate_horizontal_scan);
361     ff_init_scantable(s->idsp.idct_permutation, &s->intra_v_scantable, ff_alternate_vertical_scan);
362 }
363
364 int ff_mpeg_framesize_alloc(AVCodecContext *avctx, MotionEstContext *me,
365                             ScratchpadContext *sc, int linesize)
366 {
367     int alloc_size = FFALIGN(FFABS(linesize) + 64, 32);
368
369     if (avctx->hwaccel || avctx->codec->capabilities & CODEC_CAP_HWACCEL_VDPAU)
370         return 0;
371
372     if (linesize < 24) {
373         av_log(avctx, AV_LOG_ERROR, "Image too small, temporary buffers cannot function\n");
374         return AVERROR_PATCHWELCOME;
375     }
376
377     // edge emu needs blocksize + filter length - 1
378     // (= 17x17 for  halfpel / 21x21 for  h264)
379     // VC1 computes luma and chroma simultaneously and needs 19X19 + 9x9
380     // at uvlinesize. It supports only YUV420 so 24x24 is enough
381     // linesize * interlaced * MBsize
382     // we also use this buffer for encoding in encode_mb_internal() needig an additional 32 lines
383     FF_ALLOCZ_ARRAY_OR_GOTO(avctx, sc->edge_emu_buffer, alloc_size, 4 * 68,
384                       fail);
385
386     FF_ALLOCZ_ARRAY_OR_GOTO(avctx, me->scratchpad, alloc_size, 4 * 16 * 2,
387                       fail)
388     me->temp            = me->scratchpad;
389     sc->rd_scratchpad   = me->scratchpad;
390     sc->b_scratchpad    = me->scratchpad;
391     sc->obmc_scratchpad = me->scratchpad + 16;
392
393     return 0;
394 fail:
395     av_freep(&sc->edge_emu_buffer);
396     return AVERROR(ENOMEM);
397 }
398
399 /**
400  * Allocate a frame buffer
401  */
402 static int alloc_frame_buffer(MpegEncContext *s, Picture *pic)
403 {
404     int edges_needed = av_codec_is_encoder(s->avctx->codec);
405     int r, ret;
406
407     pic->tf.f = pic->f;
408     if (s->codec_id != AV_CODEC_ID_WMV3IMAGE &&
409         s->codec_id != AV_CODEC_ID_VC1IMAGE  &&
410         s->codec_id != AV_CODEC_ID_MSS2) {
411         if (edges_needed) {
412             pic->f->width  = s->avctx->width  + 2 * EDGE_WIDTH;
413             pic->f->height = s->avctx->height + 2 * EDGE_WIDTH;
414         }
415
416         r = ff_thread_get_buffer(s->avctx, &pic->tf,
417                                  pic->reference ? AV_GET_BUFFER_FLAG_REF : 0);
418     } else {
419         pic->f->width  = s->avctx->width;
420         pic->f->height = s->avctx->height;
421         pic->f->format = s->avctx->pix_fmt;
422         r = avcodec_default_get_buffer2(s->avctx, pic->f, 0);
423     }
424
425     if (r < 0 || !pic->f->buf[0]) {
426         av_log(s->avctx, AV_LOG_ERROR, "get_buffer() failed (%d %p)\n",
427                r, pic->f->data[0]);
428         return -1;
429     }
430
431     if (edges_needed) {
432         int i;
433         for (i = 0; pic->f->data[i]; i++) {
434             int offset = (EDGE_WIDTH >> (i ? s->chroma_y_shift : 0)) *
435                          pic->f->linesize[i] +
436                          (EDGE_WIDTH >> (i ? s->chroma_x_shift : 0));
437             pic->f->data[i] += offset;
438         }
439         pic->f->width  = s->avctx->width;
440         pic->f->height = s->avctx->height;
441     }
442
443     if (s->avctx->hwaccel) {
444         assert(!pic->hwaccel_picture_private);
445         if (s->avctx->hwaccel->frame_priv_data_size) {
446             pic->hwaccel_priv_buf = av_buffer_allocz(s->avctx->hwaccel->frame_priv_data_size);
447             if (!pic->hwaccel_priv_buf) {
448                 av_log(s->avctx, AV_LOG_ERROR, "alloc_frame_buffer() failed (hwaccel private data allocation)\n");
449                 return -1;
450             }
451             pic->hwaccel_picture_private = pic->hwaccel_priv_buf->data;
452         }
453     }
454
455     if (s->linesize && (s->linesize   != pic->f->linesize[0] ||
456                         s->uvlinesize != pic->f->linesize[1])) {
457         av_log(s->avctx, AV_LOG_ERROR,
458                "get_buffer() failed (stride changed)\n");
459         ff_mpeg_unref_picture(s->avctx, pic);
460         return -1;
461     }
462
463     if (pic->f->linesize[1] != pic->f->linesize[2]) {
464         av_log(s->avctx, AV_LOG_ERROR,
465                "get_buffer() failed (uv stride mismatch)\n");
466         ff_mpeg_unref_picture(s->avctx, pic);
467         return -1;
468     }
469
470     if (!s->sc.edge_emu_buffer &&
471         (ret = ff_mpeg_framesize_alloc(s->avctx, &s->me, &s->sc,
472                                        pic->f->linesize[0])) < 0) {
473         av_log(s->avctx, AV_LOG_ERROR,
474                "get_buffer() failed to allocate context scratch buffers.\n");
475         ff_mpeg_unref_picture(s->avctx, pic);
476         return ret;
477     }
478
479     return 0;
480 }
481
482 void ff_free_picture_tables(Picture *pic)
483 {
484     int i;
485
486     pic->alloc_mb_width  =
487     pic->alloc_mb_height = 0;
488
489     av_buffer_unref(&pic->mb_var_buf);
490     av_buffer_unref(&pic->mc_mb_var_buf);
491     av_buffer_unref(&pic->mb_mean_buf);
492     av_buffer_unref(&pic->mbskip_table_buf);
493     av_buffer_unref(&pic->qscale_table_buf);
494     av_buffer_unref(&pic->mb_type_buf);
495
496     for (i = 0; i < 2; i++) {
497         av_buffer_unref(&pic->motion_val_buf[i]);
498         av_buffer_unref(&pic->ref_index_buf[i]);
499     }
500 }
501
502 static int alloc_picture_tables(MpegEncContext *s, Picture *pic)
503 {
504     const int big_mb_num    = s->mb_stride * (s->mb_height + 1) + 1;
505     const int mb_array_size = s->mb_stride * s->mb_height;
506     const int b8_array_size = s->b8_stride * s->mb_height * 2;
507     int i;
508
509
510     pic->mbskip_table_buf = av_buffer_allocz(mb_array_size + 2);
511     pic->qscale_table_buf = av_buffer_allocz(big_mb_num + s->mb_stride);
512     pic->mb_type_buf      = av_buffer_allocz((big_mb_num + s->mb_stride) *
513                                              sizeof(uint32_t));
514     if (!pic->mbskip_table_buf || !pic->qscale_table_buf || !pic->mb_type_buf)
515         return AVERROR(ENOMEM);
516
517     if (s->encoding) {
518         pic->mb_var_buf    = av_buffer_allocz(mb_array_size * sizeof(int16_t));
519         pic->mc_mb_var_buf = av_buffer_allocz(mb_array_size * sizeof(int16_t));
520         pic->mb_mean_buf   = av_buffer_allocz(mb_array_size);
521         if (!pic->mb_var_buf || !pic->mc_mb_var_buf || !pic->mb_mean_buf)
522             return AVERROR(ENOMEM);
523     }
524
525     if (s->out_format == FMT_H263 || s->encoding || s->avctx->debug_mv ||
526         (s->avctx->flags2 & CODEC_FLAG2_EXPORT_MVS)) {
527         int mv_size        = 2 * (b8_array_size + 4) * sizeof(int16_t);
528         int ref_index_size = 4 * mb_array_size;
529
530         for (i = 0; mv_size && i < 2; i++) {
531             pic->motion_val_buf[i] = av_buffer_allocz(mv_size);
532             pic->ref_index_buf[i]  = av_buffer_allocz(ref_index_size);
533             if (!pic->motion_val_buf[i] || !pic->ref_index_buf[i])
534                 return AVERROR(ENOMEM);
535         }
536     }
537
538     pic->alloc_mb_width  = s->mb_width;
539     pic->alloc_mb_height = s->mb_height;
540
541     return 0;
542 }
543
544 static int make_tables_writable(Picture *pic)
545 {
546     int ret, i;
547 #define MAKE_WRITABLE(table) \
548 do {\
549     if (pic->table &&\
550        (ret = av_buffer_make_writable(&pic->table)) < 0)\
551     return ret;\
552 } while (0)
553
554     MAKE_WRITABLE(mb_var_buf);
555     MAKE_WRITABLE(mc_mb_var_buf);
556     MAKE_WRITABLE(mb_mean_buf);
557     MAKE_WRITABLE(mbskip_table_buf);
558     MAKE_WRITABLE(qscale_table_buf);
559     MAKE_WRITABLE(mb_type_buf);
560
561     for (i = 0; i < 2; i++) {
562         MAKE_WRITABLE(motion_val_buf[i]);
563         MAKE_WRITABLE(ref_index_buf[i]);
564     }
565
566     return 0;
567 }
568
569 /**
570  * Allocate a Picture.
571  * The pixels are allocated/set by calling get_buffer() if shared = 0
572  */
573 int ff_alloc_picture(MpegEncContext *s, Picture *pic, int shared)
574 {
575     int i, ret;
576
577     if (pic->qscale_table_buf)
578         if (   pic->alloc_mb_width  != s->mb_width
579             || pic->alloc_mb_height != s->mb_height)
580             ff_free_picture_tables(pic);
581
582     if (shared) {
583         av_assert0(pic->f->data[0]);
584         pic->shared = 1;
585     } else {
586         av_assert0(!pic->f->buf[0]);
587
588         if (alloc_frame_buffer(s, pic) < 0)
589             return -1;
590
591         s->linesize   = pic->f->linesize[0];
592         s->uvlinesize = pic->f->linesize[1];
593     }
594
595     if (!pic->qscale_table_buf)
596         ret = alloc_picture_tables(s, pic);
597     else
598         ret = make_tables_writable(pic);
599     if (ret < 0)
600         goto fail;
601
602     if (s->encoding) {
603         pic->mb_var    = (uint16_t*)pic->mb_var_buf->data;
604         pic->mc_mb_var = (uint16_t*)pic->mc_mb_var_buf->data;
605         pic->mb_mean   = pic->mb_mean_buf->data;
606     }
607
608     pic->mbskip_table = pic->mbskip_table_buf->data;
609     pic->qscale_table = pic->qscale_table_buf->data + 2 * s->mb_stride + 1;
610     pic->mb_type      = (uint32_t*)pic->mb_type_buf->data + 2 * s->mb_stride + 1;
611
612     if (pic->motion_val_buf[0]) {
613         for (i = 0; i < 2; i++) {
614             pic->motion_val[i] = (int16_t (*)[2])pic->motion_val_buf[i]->data + 4;
615             pic->ref_index[i]  = pic->ref_index_buf[i]->data;
616         }
617     }
618
619     return 0;
620 fail:
621     av_log(s->avctx, AV_LOG_ERROR, "Error allocating a picture.\n");
622     ff_mpeg_unref_picture(s->avctx, pic);
623     ff_free_picture_tables(pic);
624     return AVERROR(ENOMEM);
625 }
626
627 /**
628  * Deallocate a picture.
629  */
630 void ff_mpeg_unref_picture(AVCodecContext *avctx, Picture *pic)
631 {
632     int off = offsetof(Picture, mb_mean) + sizeof(pic->mb_mean);
633
634     pic->tf.f = pic->f;
635     /* WM Image / Screen codecs allocate internal buffers with different
636      * dimensions / colorspaces; ignore user-defined callbacks for these. */
637     if (avctx->codec->id != AV_CODEC_ID_WMV3IMAGE &&
638         avctx->codec->id != AV_CODEC_ID_VC1IMAGE  &&
639         avctx->codec->id != AV_CODEC_ID_MSS2)
640         ff_thread_release_buffer(avctx, &pic->tf);
641     else if (pic->f)
642         av_frame_unref(pic->f);
643
644     av_buffer_unref(&pic->hwaccel_priv_buf);
645
646     if (pic->needs_realloc)
647         ff_free_picture_tables(pic);
648
649     memset((uint8_t*)pic + off, 0, sizeof(*pic) - off);
650 }
651
652 static int update_picture_tables(Picture *dst, Picture *src)
653 {
654      int i;
655
656 #define UPDATE_TABLE(table)\
657 do {\
658     if (src->table &&\
659         (!dst->table || dst->table->buffer != src->table->buffer)) {\
660         av_buffer_unref(&dst->table);\
661         dst->table = av_buffer_ref(src->table);\
662         if (!dst->table) {\
663             ff_free_picture_tables(dst);\
664             return AVERROR(ENOMEM);\
665         }\
666     }\
667 } while (0)
668
669     UPDATE_TABLE(mb_var_buf);
670     UPDATE_TABLE(mc_mb_var_buf);
671     UPDATE_TABLE(mb_mean_buf);
672     UPDATE_TABLE(mbskip_table_buf);
673     UPDATE_TABLE(qscale_table_buf);
674     UPDATE_TABLE(mb_type_buf);
675     for (i = 0; i < 2; i++) {
676         UPDATE_TABLE(motion_val_buf[i]);
677         UPDATE_TABLE(ref_index_buf[i]);
678     }
679
680     dst->mb_var        = src->mb_var;
681     dst->mc_mb_var     = src->mc_mb_var;
682     dst->mb_mean       = src->mb_mean;
683     dst->mbskip_table  = src->mbskip_table;
684     dst->qscale_table  = src->qscale_table;
685     dst->mb_type       = src->mb_type;
686     for (i = 0; i < 2; i++) {
687         dst->motion_val[i] = src->motion_val[i];
688         dst->ref_index[i]  = src->ref_index[i];
689     }
690
691     dst->alloc_mb_width  = src->alloc_mb_width;
692     dst->alloc_mb_height = src->alloc_mb_height;
693
694     return 0;
695 }
696
697 int ff_mpeg_ref_picture(AVCodecContext *avctx, Picture *dst, Picture *src)
698 {
699     int ret;
700
701     av_assert0(!dst->f->buf[0]);
702     av_assert0(src->f->buf[0]);
703
704     src->tf.f = src->f;
705     dst->tf.f = dst->f;
706     ret = ff_thread_ref_frame(&dst->tf, &src->tf);
707     if (ret < 0)
708         goto fail;
709
710     ret = update_picture_tables(dst, src);
711     if (ret < 0)
712         goto fail;
713
714     if (src->hwaccel_picture_private) {
715         dst->hwaccel_priv_buf = av_buffer_ref(src->hwaccel_priv_buf);
716         if (!dst->hwaccel_priv_buf)
717             goto fail;
718         dst->hwaccel_picture_private = dst->hwaccel_priv_buf->data;
719     }
720
721     dst->field_picture           = src->field_picture;
722     dst->mb_var_sum              = src->mb_var_sum;
723     dst->mc_mb_var_sum           = src->mc_mb_var_sum;
724     dst->b_frame_score           = src->b_frame_score;
725     dst->needs_realloc           = src->needs_realloc;
726     dst->reference               = src->reference;
727     dst->shared                  = src->shared;
728
729     return 0;
730 fail:
731     ff_mpeg_unref_picture(avctx, dst);
732     return ret;
733 }
734
735 static int init_duplicate_context(MpegEncContext *s)
736 {
737     int y_size = s->b8_stride * (2 * s->mb_height + 1);
738     int c_size = s->mb_stride * (s->mb_height + 1);
739     int yc_size = y_size + 2 * c_size;
740     int i;
741
742     if (s->mb_height & 1)
743         yc_size += 2*s->b8_stride + 2*s->mb_stride;
744
745     s->sc.edge_emu_buffer =
746     s->me.scratchpad   =
747     s->me.temp         =
748     s->sc.rd_scratchpad   =
749     s->sc.b_scratchpad    =
750     s->sc.obmc_scratchpad = NULL;
751
752     if (s->encoding) {
753         FF_ALLOCZ_OR_GOTO(s->avctx, s->me.map,
754                           ME_MAP_SIZE * sizeof(uint32_t), fail)
755         FF_ALLOCZ_OR_GOTO(s->avctx, s->me.score_map,
756                           ME_MAP_SIZE * sizeof(uint32_t), fail)
757         if (s->avctx->noise_reduction) {
758             FF_ALLOCZ_OR_GOTO(s->avctx, s->dct_error_sum,
759                               2 * 64 * sizeof(int), fail)
760         }
761     }
762     FF_ALLOCZ_OR_GOTO(s->avctx, s->blocks, 64 * 12 * 2 * sizeof(int16_t), fail)
763     s->block = s->blocks[0];
764
765     for (i = 0; i < 12; i++) {
766         s->pblocks[i] = &s->block[i];
767     }
768     if (s->avctx->codec_tag == AV_RL32("VCR2")) {
769         // exchange uv
770         FFSWAP(void *, s->pblocks[4], s->pblocks[5]);
771     }
772
773     if (s->out_format == FMT_H263) {
774         /* ac values */
775         FF_ALLOCZ_OR_GOTO(s->avctx, s->ac_val_base,
776                           yc_size * sizeof(int16_t) * 16, fail);
777         s->ac_val[0] = s->ac_val_base + s->b8_stride + 1;
778         s->ac_val[1] = s->ac_val_base + y_size + s->mb_stride + 1;
779         s->ac_val[2] = s->ac_val[1] + c_size;
780     }
781
782     return 0;
783 fail:
784     return -1; // free() through ff_mpv_common_end()
785 }
786
787 static void free_duplicate_context(MpegEncContext *s)
788 {
789     if (!s)
790         return;
791
792     av_freep(&s->sc.edge_emu_buffer);
793     av_freep(&s->me.scratchpad);
794     s->me.temp =
795     s->sc.rd_scratchpad =
796     s->sc.b_scratchpad =
797     s->sc.obmc_scratchpad = NULL;
798
799     av_freep(&s->dct_error_sum);
800     av_freep(&s->me.map);
801     av_freep(&s->me.score_map);
802     av_freep(&s->blocks);
803     av_freep(&s->ac_val_base);
804     s->block = NULL;
805 }
806
807 static void backup_duplicate_context(MpegEncContext *bak, MpegEncContext *src)
808 {
809 #define COPY(a) bak->a = src->a
810     COPY(sc.edge_emu_buffer);
811     COPY(me.scratchpad);
812     COPY(me.temp);
813     COPY(sc.rd_scratchpad);
814     COPY(sc.b_scratchpad);
815     COPY(sc.obmc_scratchpad);
816     COPY(me.map);
817     COPY(me.score_map);
818     COPY(blocks);
819     COPY(block);
820     COPY(start_mb_y);
821     COPY(end_mb_y);
822     COPY(me.map_generation);
823     COPY(pb);
824     COPY(dct_error_sum);
825     COPY(dct_count[0]);
826     COPY(dct_count[1]);
827     COPY(ac_val_base);
828     COPY(ac_val[0]);
829     COPY(ac_val[1]);
830     COPY(ac_val[2]);
831 #undef COPY
832 }
833
834 int ff_update_duplicate_context(MpegEncContext *dst, MpegEncContext *src)
835 {
836     MpegEncContext bak;
837     int i, ret;
838     // FIXME copy only needed parts
839     // START_TIMER
840     backup_duplicate_context(&bak, dst);
841     memcpy(dst, src, sizeof(MpegEncContext));
842     backup_duplicate_context(dst, &bak);
843     for (i = 0; i < 12; i++) {
844         dst->pblocks[i] = &dst->block[i];
845     }
846     if (dst->avctx->codec_tag == AV_RL32("VCR2")) {
847         // exchange uv
848         FFSWAP(void *, dst->pblocks[4], dst->pblocks[5]);
849     }
850     if (!dst->sc.edge_emu_buffer &&
851         (ret = ff_mpeg_framesize_alloc(dst->avctx, &dst->me,
852                                        &dst->sc, dst->linesize)) < 0) {
853         av_log(dst->avctx, AV_LOG_ERROR, "failed to allocate context "
854                "scratch buffers.\n");
855         return ret;
856     }
857     // STOP_TIMER("update_duplicate_context")
858     // about 10k cycles / 0.01 sec for  1000frames on 1ghz with 2 threads
859     return 0;
860 }
861
862 int ff_mpeg_update_thread_context(AVCodecContext *dst,
863                                   const AVCodecContext *src)
864 {
865     int i, ret;
866     MpegEncContext *s = dst->priv_data, *s1 = src->priv_data;
867
868     if (dst == src)
869         return 0;
870
871     av_assert0(s != s1);
872
873     // FIXME can parameters change on I-frames?
874     // in that case dst may need a reinit
875     if (!s->context_initialized) {
876         int err;
877         memcpy(s, s1, sizeof(MpegEncContext));
878
879         s->avctx                 = dst;
880         s->bitstream_buffer      = NULL;
881         s->bitstream_buffer_size = s->allocated_bitstream_buffer_size = 0;
882
883         if (s1->context_initialized){
884 //             s->picture_range_start  += MAX_PICTURE_COUNT;
885 //             s->picture_range_end    += MAX_PICTURE_COUNT;
886             ff_mpv_idct_init(s);
887             if((err = ff_mpv_common_init(s)) < 0){
888                 memset(s, 0, sizeof(MpegEncContext));
889                 s->avctx = dst;
890                 return err;
891             }
892         }
893     }
894
895     if (s->height != s1->height || s->width != s1->width || s->context_reinit) {
896         s->context_reinit = 0;
897         s->height = s1->height;
898         s->width  = s1->width;
899         if ((ret = ff_mpv_common_frame_size_change(s)) < 0)
900             return ret;
901     }
902
903     s->avctx->coded_height  = s1->avctx->coded_height;
904     s->avctx->coded_width   = s1->avctx->coded_width;
905     s->avctx->width         = s1->avctx->width;
906     s->avctx->height        = s1->avctx->height;
907
908     s->coded_picture_number = s1->coded_picture_number;
909     s->picture_number       = s1->picture_number;
910
911     av_assert0(!s->picture || s->picture != s1->picture);
912     if(s->picture)
913     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
914         ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
915         if (s1->picture[i].f->buf[0] &&
916             (ret = ff_mpeg_ref_picture(s->avctx, &s->picture[i], &s1->picture[i])) < 0)
917             return ret;
918     }
919
920 #define UPDATE_PICTURE(pic)\
921 do {\
922     ff_mpeg_unref_picture(s->avctx, &s->pic);\
923     if (s1->pic.f && s1->pic.f->buf[0])\
924         ret = ff_mpeg_ref_picture(s->avctx, &s->pic, &s1->pic);\
925     else\
926         ret = update_picture_tables(&s->pic, &s1->pic);\
927     if (ret < 0)\
928         return ret;\
929 } while (0)
930
931     UPDATE_PICTURE(current_picture);
932     UPDATE_PICTURE(last_picture);
933     UPDATE_PICTURE(next_picture);
934
935 #define REBASE_PICTURE(pic, new_ctx, old_ctx)                                 \
936     ((pic && pic >= old_ctx->picture &&                                       \
937       pic < old_ctx->picture + MAX_PICTURE_COUNT) ?                           \
938         &new_ctx->picture[pic - old_ctx->picture] : NULL)
939
940     s->last_picture_ptr    = REBASE_PICTURE(s1->last_picture_ptr,    s, s1);
941     s->current_picture_ptr = REBASE_PICTURE(s1->current_picture_ptr, s, s1);
942     s->next_picture_ptr    = REBASE_PICTURE(s1->next_picture_ptr,    s, s1);
943
944     // Error/bug resilience
945     s->next_p_frame_damaged = s1->next_p_frame_damaged;
946     s->workaround_bugs      = s1->workaround_bugs;
947     s->padding_bug_score    = s1->padding_bug_score;
948
949     // MPEG4 timing info
950     memcpy(&s->last_time_base, &s1->last_time_base,
951            (char *) &s1->pb_field_time + sizeof(s1->pb_field_time) -
952            (char *) &s1->last_time_base);
953
954     // B-frame info
955     s->max_b_frames = s1->max_b_frames;
956     s->low_delay    = s1->low_delay;
957     s->droppable    = s1->droppable;
958
959     // DivX handling (doesn't work)
960     s->divx_packed  = s1->divx_packed;
961
962     if (s1->bitstream_buffer) {
963         if (s1->bitstream_buffer_size +
964             FF_INPUT_BUFFER_PADDING_SIZE > s->allocated_bitstream_buffer_size) {
965             av_fast_malloc(&s->bitstream_buffer,
966                            &s->allocated_bitstream_buffer_size,
967                            s1->allocated_bitstream_buffer_size);
968             if (!s->bitstream_buffer) {
969                 s->bitstream_buffer_size = 0;
970                 return AVERROR(ENOMEM);
971             }
972         }
973         s->bitstream_buffer_size = s1->bitstream_buffer_size;
974         memcpy(s->bitstream_buffer, s1->bitstream_buffer,
975                s1->bitstream_buffer_size);
976         memset(s->bitstream_buffer + s->bitstream_buffer_size, 0,
977                FF_INPUT_BUFFER_PADDING_SIZE);
978     }
979
980     // linesize dependend scratch buffer allocation
981     if (!s->sc.edge_emu_buffer)
982         if (s1->linesize) {
983             if (ff_mpeg_framesize_alloc(s->avctx, &s->me,
984                                         &s->sc, s1->linesize) < 0) {
985                 av_log(s->avctx, AV_LOG_ERROR, "Failed to allocate context "
986                        "scratch buffers.\n");
987                 return AVERROR(ENOMEM);
988             }
989         } else {
990             av_log(s->avctx, AV_LOG_ERROR, "Context scratch buffers could not "
991                    "be allocated due to unknown size.\n");
992         }
993
994     // MPEG2/interlacing info
995     memcpy(&s->progressive_sequence, &s1->progressive_sequence,
996            (char *) &s1->rtp_mode - (char *) &s1->progressive_sequence);
997
998     if (!s1->first_field) {
999         s->last_pict_type = s1->pict_type;
1000         if (s1->current_picture_ptr)
1001             s->last_lambda_for[s1->pict_type] = s1->current_picture_ptr->f->quality;
1002     }
1003
1004     return 0;
1005 }
1006
1007 /**
1008  * Set the given MpegEncContext to common defaults
1009  * (same for encoding and decoding).
1010  * The changed fields will not depend upon the
1011  * prior state of the MpegEncContext.
1012  */
1013 void ff_mpv_common_defaults(MpegEncContext *s)
1014 {
1015     s->y_dc_scale_table      =
1016     s->c_dc_scale_table      = ff_mpeg1_dc_scale_table;
1017     s->chroma_qscale_table   = ff_default_chroma_qscale_table;
1018     s->progressive_frame     = 1;
1019     s->progressive_sequence  = 1;
1020     s->picture_structure     = PICT_FRAME;
1021
1022     s->coded_picture_number  = 0;
1023     s->picture_number        = 0;
1024
1025     s->f_code                = 1;
1026     s->b_code                = 1;
1027
1028     s->slice_context_count   = 1;
1029 }
1030
1031 /**
1032  * Set the given MpegEncContext to defaults for decoding.
1033  * the changed fields will not depend upon
1034  * the prior state of the MpegEncContext.
1035  */
1036 void ff_mpv_decode_defaults(MpegEncContext *s)
1037 {
1038     ff_mpv_common_defaults(s);
1039 }
1040
1041 void ff_mpv_decode_init(MpegEncContext *s, AVCodecContext *avctx)
1042 {
1043     s->avctx           = avctx;
1044     s->width           = avctx->coded_width;
1045     s->height          = avctx->coded_height;
1046     s->codec_id        = avctx->codec->id;
1047     s->workaround_bugs = avctx->workaround_bugs;
1048
1049     /* convert fourcc to upper case */
1050     s->codec_tag          = avpriv_toupper4(avctx->codec_tag);
1051 }
1052
1053 static int init_er(MpegEncContext *s)
1054 {
1055     ERContext *er = &s->er;
1056     int mb_array_size = s->mb_height * s->mb_stride;
1057     int i;
1058
1059     er->avctx       = s->avctx;
1060
1061     er->mb_index2xy = s->mb_index2xy;
1062     er->mb_num      = s->mb_num;
1063     er->mb_width    = s->mb_width;
1064     er->mb_height   = s->mb_height;
1065     er->mb_stride   = s->mb_stride;
1066     er->b8_stride   = s->b8_stride;
1067
1068     er->er_temp_buffer     = av_malloc(s->mb_height * s->mb_stride);
1069     er->error_status_table = av_mallocz(mb_array_size);
1070     if (!er->er_temp_buffer || !er->error_status_table)
1071         goto fail;
1072
1073     er->mbskip_table  = s->mbskip_table;
1074     er->mbintra_table = s->mbintra_table;
1075
1076     for (i = 0; i < FF_ARRAY_ELEMS(s->dc_val); i++)
1077         er->dc_val[i] = s->dc_val[i];
1078
1079     er->decode_mb = mpeg_er_decode_mb;
1080     er->opaque    = s;
1081
1082     return 0;
1083 fail:
1084     av_freep(&er->er_temp_buffer);
1085     av_freep(&er->error_status_table);
1086     return AVERROR(ENOMEM);
1087 }
1088
1089 /**
1090  * Initialize and allocates MpegEncContext fields dependent on the resolution.
1091  */
1092 static int init_context_frame(MpegEncContext *s)
1093 {
1094     int y_size, c_size, yc_size, i, mb_array_size, mv_table_size, x, y;
1095
1096     s->mb_width   = (s->width + 15) / 16;
1097     s->mb_stride  = s->mb_width + 1;
1098     s->b8_stride  = s->mb_width * 2 + 1;
1099     mb_array_size = s->mb_height * s->mb_stride;
1100     mv_table_size = (s->mb_height + 2) * s->mb_stride + 1;
1101
1102     /* set default edge pos, will be overridden
1103      * in decode_header if needed */
1104     s->h_edge_pos = s->mb_width * 16;
1105     s->v_edge_pos = s->mb_height * 16;
1106
1107     s->mb_num     = s->mb_width * s->mb_height;
1108
1109     s->block_wrap[0] =
1110     s->block_wrap[1] =
1111     s->block_wrap[2] =
1112     s->block_wrap[3] = s->b8_stride;
1113     s->block_wrap[4] =
1114     s->block_wrap[5] = s->mb_stride;
1115
1116     y_size  = s->b8_stride * (2 * s->mb_height + 1);
1117     c_size  = s->mb_stride * (s->mb_height + 1);
1118     yc_size = y_size + 2   * c_size;
1119
1120     if (s->mb_height & 1)
1121         yc_size += 2*s->b8_stride + 2*s->mb_stride;
1122
1123     FF_ALLOCZ_OR_GOTO(s->avctx, s->mb_index2xy, (s->mb_num + 1) * sizeof(int), fail); // error ressilience code looks cleaner with this
1124     for (y = 0; y < s->mb_height; y++)
1125         for (x = 0; x < s->mb_width; x++)
1126             s->mb_index2xy[x + y * s->mb_width] = x + y * s->mb_stride;
1127
1128     s->mb_index2xy[s->mb_height * s->mb_width] = (s->mb_height - 1) * s->mb_stride + s->mb_width; // FIXME really needed?
1129
1130     if (s->encoding) {
1131         /* Allocate MV tables */
1132         FF_ALLOCZ_OR_GOTO(s->avctx, s->p_mv_table_base,                 mv_table_size * 2 * sizeof(int16_t), fail)
1133         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_forw_mv_table_base,            mv_table_size * 2 * sizeof(int16_t), fail)
1134         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_back_mv_table_base,            mv_table_size * 2 * sizeof(int16_t), fail)
1135         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_bidir_forw_mv_table_base,      mv_table_size * 2 * sizeof(int16_t), fail)
1136         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_bidir_back_mv_table_base,      mv_table_size * 2 * sizeof(int16_t), fail)
1137         FF_ALLOCZ_OR_GOTO(s->avctx, s->b_direct_mv_table_base,          mv_table_size * 2 * sizeof(int16_t), fail)
1138         s->p_mv_table            = s->p_mv_table_base + s->mb_stride + 1;
1139         s->b_forw_mv_table       = s->b_forw_mv_table_base + s->mb_stride + 1;
1140         s->b_back_mv_table       = s->b_back_mv_table_base + s->mb_stride + 1;
1141         s->b_bidir_forw_mv_table = s->b_bidir_forw_mv_table_base + s->mb_stride + 1;
1142         s->b_bidir_back_mv_table = s->b_bidir_back_mv_table_base + s->mb_stride + 1;
1143         s->b_direct_mv_table     = s->b_direct_mv_table_base + s->mb_stride + 1;
1144
1145         /* Allocate MB type table */
1146         FF_ALLOCZ_OR_GOTO(s->avctx, s->mb_type, mb_array_size * sizeof(uint16_t), fail) // needed for encoding
1147
1148         FF_ALLOCZ_OR_GOTO(s->avctx, s->lambda_table, mb_array_size * sizeof(int), fail)
1149
1150         FF_ALLOC_OR_GOTO(s->avctx, s->cplx_tab,
1151                          mb_array_size * sizeof(float), fail);
1152         FF_ALLOC_OR_GOTO(s->avctx, s->bits_tab,
1153                          mb_array_size * sizeof(float), fail);
1154
1155     }
1156
1157     if (s->codec_id == AV_CODEC_ID_MPEG4 ||
1158         (s->avctx->flags & CODEC_FLAG_INTERLACED_ME)) {
1159         /* interlaced direct mode decoding tables */
1160         for (i = 0; i < 2; i++) {
1161             int j, k;
1162             for (j = 0; j < 2; j++) {
1163                 for (k = 0; k < 2; k++) {
1164                     FF_ALLOCZ_OR_GOTO(s->avctx,
1165                                       s->b_field_mv_table_base[i][j][k],
1166                                       mv_table_size * 2 * sizeof(int16_t),
1167                                       fail);
1168                     s->b_field_mv_table[i][j][k] = s->b_field_mv_table_base[i][j][k] +
1169                                                    s->mb_stride + 1;
1170                 }
1171                 FF_ALLOCZ_OR_GOTO(s->avctx, s->b_field_select_table [i][j], mb_array_size * 2 * sizeof(uint8_t), fail)
1172                 FF_ALLOCZ_OR_GOTO(s->avctx, s->p_field_mv_table_base[i][j], mv_table_size * 2 * sizeof(int16_t), fail)
1173                 s->p_field_mv_table[i][j] = s->p_field_mv_table_base[i][j] + s->mb_stride + 1;
1174             }
1175             FF_ALLOCZ_OR_GOTO(s->avctx, s->p_field_select_table[i], mb_array_size * 2 * sizeof(uint8_t), fail)
1176         }
1177     }
1178     if (s->out_format == FMT_H263) {
1179         /* cbp values */
1180         FF_ALLOCZ_OR_GOTO(s->avctx, s->coded_block_base, y_size + (s->mb_height&1)*2*s->b8_stride, fail);
1181         s->coded_block = s->coded_block_base + s->b8_stride + 1;
1182
1183         /* cbp, ac_pred, pred_dir */
1184         FF_ALLOCZ_OR_GOTO(s->avctx, s->cbp_table     , mb_array_size * sizeof(uint8_t), fail);
1185         FF_ALLOCZ_OR_GOTO(s->avctx, s->pred_dir_table, mb_array_size * sizeof(uint8_t), fail);
1186     }
1187
1188     if (s->h263_pred || s->h263_plus || !s->encoding) {
1189         /* dc values */
1190         // MN: we need these for  error resilience of intra-frames
1191         FF_ALLOCZ_OR_GOTO(s->avctx, s->dc_val_base, yc_size * sizeof(int16_t), fail);
1192         s->dc_val[0] = s->dc_val_base + s->b8_stride + 1;
1193         s->dc_val[1] = s->dc_val_base + y_size + s->mb_stride + 1;
1194         s->dc_val[2] = s->dc_val[1] + c_size;
1195         for (i = 0; i < yc_size; i++)
1196             s->dc_val_base[i] = 1024;
1197     }
1198
1199     /* which mb is a intra block */
1200     FF_ALLOCZ_OR_GOTO(s->avctx, s->mbintra_table, mb_array_size, fail);
1201     memset(s->mbintra_table, 1, mb_array_size);
1202
1203     /* init macroblock skip table */
1204     FF_ALLOCZ_OR_GOTO(s->avctx, s->mbskip_table, mb_array_size + 2, fail);
1205     // Note the + 1 is for  a quicker mpeg4 slice_end detection
1206
1207     return init_er(s);
1208 fail:
1209     return AVERROR(ENOMEM);
1210 }
1211
1212 /**
1213  * init common structure for both encoder and decoder.
1214  * this assumes that some variables like width/height are already set
1215  */
1216 av_cold int ff_mpv_common_init(MpegEncContext *s)
1217 {
1218     int i;
1219     int nb_slices = (HAVE_THREADS &&
1220                      s->avctx->active_thread_type & FF_THREAD_SLICE) ?
1221                     s->avctx->thread_count : 1;
1222
1223     if (s->encoding && s->avctx->slices)
1224         nb_slices = s->avctx->slices;
1225
1226     if (s->codec_id == AV_CODEC_ID_MPEG2VIDEO && !s->progressive_sequence)
1227         s->mb_height = (s->height + 31) / 32 * 2;
1228     else
1229         s->mb_height = (s->height + 15) / 16;
1230
1231     if (s->avctx->pix_fmt == AV_PIX_FMT_NONE) {
1232         av_log(s->avctx, AV_LOG_ERROR,
1233                "decoding to AV_PIX_FMT_NONE is not supported.\n");
1234         return -1;
1235     }
1236
1237     if (nb_slices > MAX_THREADS || (nb_slices > s->mb_height && s->mb_height)) {
1238         int max_slices;
1239         if (s->mb_height)
1240             max_slices = FFMIN(MAX_THREADS, s->mb_height);
1241         else
1242             max_slices = MAX_THREADS;
1243         av_log(s->avctx, AV_LOG_WARNING, "too many threads/slices (%d),"
1244                " reducing to %d\n", nb_slices, max_slices);
1245         nb_slices = max_slices;
1246     }
1247
1248     if ((s->width || s->height) &&
1249         av_image_check_size(s->width, s->height, 0, s->avctx))
1250         return -1;
1251
1252     dct_init(s);
1253
1254     /* set chroma shifts */
1255     avcodec_get_chroma_sub_sample(s->avctx->pix_fmt,
1256                                   &s->chroma_x_shift,
1257                                   &s->chroma_y_shift);
1258
1259
1260     FF_ALLOCZ_OR_GOTO(s->avctx, s->picture,
1261                       MAX_PICTURE_COUNT * sizeof(Picture), fail);
1262     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1263         s->picture[i].f = av_frame_alloc();
1264         if (!s->picture[i].f)
1265             goto fail;
1266     }
1267     memset(&s->next_picture, 0, sizeof(s->next_picture));
1268     memset(&s->last_picture, 0, sizeof(s->last_picture));
1269     memset(&s->current_picture, 0, sizeof(s->current_picture));
1270     memset(&s->new_picture, 0, sizeof(s->new_picture));
1271     s->next_picture.f = av_frame_alloc();
1272     if (!s->next_picture.f)
1273         goto fail;
1274     s->last_picture.f = av_frame_alloc();
1275     if (!s->last_picture.f)
1276         goto fail;
1277     s->current_picture.f = av_frame_alloc();
1278     if (!s->current_picture.f)
1279         goto fail;
1280     s->new_picture.f = av_frame_alloc();
1281     if (!s->new_picture.f)
1282         goto fail;
1283
1284         if (init_context_frame(s))
1285             goto fail;
1286
1287         s->parse_context.state = -1;
1288
1289         s->context_initialized = 1;
1290         memset(s->thread_context, 0, sizeof(s->thread_context));
1291         s->thread_context[0]   = s;
1292
1293 //     if (s->width && s->height) {
1294         if (nb_slices > 1) {
1295             for (i = 0; i < nb_slices; i++) {
1296                 if (i) {
1297                     s->thread_context[i] = av_memdup(s, sizeof(MpegEncContext));
1298                     if (!s->thread_context[i])
1299                         goto fail;
1300                 }
1301                 if (init_duplicate_context(s->thread_context[i]) < 0)
1302                     goto fail;
1303                     s->thread_context[i]->start_mb_y =
1304                         (s->mb_height * (i) + nb_slices / 2) / nb_slices;
1305                     s->thread_context[i]->end_mb_y   =
1306                         (s->mb_height * (i + 1) + nb_slices / 2) / nb_slices;
1307             }
1308         } else {
1309             if (init_duplicate_context(s) < 0)
1310                 goto fail;
1311             s->start_mb_y = 0;
1312             s->end_mb_y   = s->mb_height;
1313         }
1314         s->slice_context_count = nb_slices;
1315 //     }
1316
1317     return 0;
1318  fail:
1319     ff_mpv_common_end(s);
1320     return -1;
1321 }
1322
1323 /**
1324  * Frees and resets MpegEncContext fields depending on the resolution.
1325  * Is used during resolution changes to avoid a full reinitialization of the
1326  * codec.
1327  */
1328 static void free_context_frame(MpegEncContext *s)
1329 {
1330     int i, j, k;
1331
1332     av_freep(&s->mb_type);
1333     av_freep(&s->p_mv_table_base);
1334     av_freep(&s->b_forw_mv_table_base);
1335     av_freep(&s->b_back_mv_table_base);
1336     av_freep(&s->b_bidir_forw_mv_table_base);
1337     av_freep(&s->b_bidir_back_mv_table_base);
1338     av_freep(&s->b_direct_mv_table_base);
1339     s->p_mv_table            = NULL;
1340     s->b_forw_mv_table       = NULL;
1341     s->b_back_mv_table       = NULL;
1342     s->b_bidir_forw_mv_table = NULL;
1343     s->b_bidir_back_mv_table = NULL;
1344     s->b_direct_mv_table     = NULL;
1345     for (i = 0; i < 2; i++) {
1346         for (j = 0; j < 2; j++) {
1347             for (k = 0; k < 2; k++) {
1348                 av_freep(&s->b_field_mv_table_base[i][j][k]);
1349                 s->b_field_mv_table[i][j][k] = NULL;
1350             }
1351             av_freep(&s->b_field_select_table[i][j]);
1352             av_freep(&s->p_field_mv_table_base[i][j]);
1353             s->p_field_mv_table[i][j] = NULL;
1354         }
1355         av_freep(&s->p_field_select_table[i]);
1356     }
1357
1358     av_freep(&s->dc_val_base);
1359     av_freep(&s->coded_block_base);
1360     av_freep(&s->mbintra_table);
1361     av_freep(&s->cbp_table);
1362     av_freep(&s->pred_dir_table);
1363
1364     av_freep(&s->mbskip_table);
1365
1366     av_freep(&s->er.error_status_table);
1367     av_freep(&s->er.er_temp_buffer);
1368     av_freep(&s->mb_index2xy);
1369     av_freep(&s->lambda_table);
1370
1371     av_freep(&s->cplx_tab);
1372     av_freep(&s->bits_tab);
1373
1374     s->linesize = s->uvlinesize = 0;
1375 }
1376
1377 int ff_mpv_common_frame_size_change(MpegEncContext *s)
1378 {
1379     int i, err = 0;
1380
1381     if (!s->context_initialized)
1382         return AVERROR(EINVAL);
1383
1384     if (s->slice_context_count > 1) {
1385         for (i = 0; i < s->slice_context_count; i++) {
1386             free_duplicate_context(s->thread_context[i]);
1387         }
1388         for (i = 1; i < s->slice_context_count; i++) {
1389             av_freep(&s->thread_context[i]);
1390         }
1391     } else
1392         free_duplicate_context(s);
1393
1394     free_context_frame(s);
1395
1396     if (s->picture)
1397         for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1398                 s->picture[i].needs_realloc = 1;
1399         }
1400
1401     s->last_picture_ptr         =
1402     s->next_picture_ptr         =
1403     s->current_picture_ptr      = NULL;
1404
1405     // init
1406     if (s->codec_id == AV_CODEC_ID_MPEG2VIDEO && !s->progressive_sequence)
1407         s->mb_height = (s->height + 31) / 32 * 2;
1408     else
1409         s->mb_height = (s->height + 15) / 16;
1410
1411     if ((s->width || s->height) &&
1412         (err = av_image_check_size(s->width, s->height, 0, s->avctx)) < 0)
1413         goto fail;
1414
1415     if ((err = init_context_frame(s)))
1416         goto fail;
1417
1418     memset(s->thread_context, 0, sizeof(s->thread_context));
1419     s->thread_context[0]   = s;
1420
1421     if (s->width && s->height) {
1422         int nb_slices = s->slice_context_count;
1423         if (nb_slices > 1) {
1424             for (i = 0; i < nb_slices; i++) {
1425                 if (i) {
1426                     s->thread_context[i] = av_memdup(s, sizeof(MpegEncContext));
1427                     if (!s->thread_context[i]) {
1428                         err = AVERROR(ENOMEM);
1429                         goto fail;
1430                     }
1431                 }
1432                 if ((err = init_duplicate_context(s->thread_context[i])) < 0)
1433                     goto fail;
1434                     s->thread_context[i]->start_mb_y =
1435                         (s->mb_height * (i) + nb_slices / 2) / nb_slices;
1436                     s->thread_context[i]->end_mb_y   =
1437                         (s->mb_height * (i + 1) + nb_slices / 2) / nb_slices;
1438             }
1439         } else {
1440             err = init_duplicate_context(s);
1441             if (err < 0)
1442                 goto fail;
1443             s->start_mb_y = 0;
1444             s->end_mb_y   = s->mb_height;
1445         }
1446         s->slice_context_count = nb_slices;
1447     }
1448
1449     return 0;
1450  fail:
1451     ff_mpv_common_end(s);
1452     return err;
1453 }
1454
1455 /* init common structure for both encoder and decoder */
1456 void ff_mpv_common_end(MpegEncContext *s)
1457 {
1458     int i;
1459
1460     if (s->slice_context_count > 1) {
1461         for (i = 0; i < s->slice_context_count; i++) {
1462             free_duplicate_context(s->thread_context[i]);
1463         }
1464         for (i = 1; i < s->slice_context_count; i++) {
1465             av_freep(&s->thread_context[i]);
1466         }
1467         s->slice_context_count = 1;
1468     } else free_duplicate_context(s);
1469
1470     av_freep(&s->parse_context.buffer);
1471     s->parse_context.buffer_size = 0;
1472
1473     av_freep(&s->bitstream_buffer);
1474     s->allocated_bitstream_buffer_size = 0;
1475
1476     if (s->picture) {
1477         for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1478             ff_free_picture_tables(&s->picture[i]);
1479             ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
1480             av_frame_free(&s->picture[i].f);
1481         }
1482     }
1483     av_freep(&s->picture);
1484     ff_free_picture_tables(&s->last_picture);
1485     ff_mpeg_unref_picture(s->avctx, &s->last_picture);
1486     av_frame_free(&s->last_picture.f);
1487     ff_free_picture_tables(&s->current_picture);
1488     ff_mpeg_unref_picture(s->avctx, &s->current_picture);
1489     av_frame_free(&s->current_picture.f);
1490     ff_free_picture_tables(&s->next_picture);
1491     ff_mpeg_unref_picture(s->avctx, &s->next_picture);
1492     av_frame_free(&s->next_picture.f);
1493     ff_free_picture_tables(&s->new_picture);
1494     ff_mpeg_unref_picture(s->avctx, &s->new_picture);
1495     av_frame_free(&s->new_picture.f);
1496
1497     free_context_frame(s);
1498
1499     s->context_initialized      = 0;
1500     s->last_picture_ptr         =
1501     s->next_picture_ptr         =
1502     s->current_picture_ptr      = NULL;
1503     s->linesize = s->uvlinesize = 0;
1504 }
1505
1506 static void release_unused_pictures(AVCodecContext *avctx, Picture *picture)
1507 {
1508     int i;
1509
1510     /* release non reference frames */
1511     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1512         if (!picture[i].reference)
1513             ff_mpeg_unref_picture(avctx, &picture[i]);
1514     }
1515 }
1516
1517 static inline int pic_is_unused(Picture *pic)
1518 {
1519     if (!pic->f->buf[0])
1520         return 1;
1521     if (pic->needs_realloc && !(pic->reference & DELAYED_PIC_REF))
1522         return 1;
1523     return 0;
1524 }
1525
1526 static int find_unused_picture(AVCodecContext *avctx, Picture *picture, int shared)
1527 {
1528     int i;
1529
1530     if (shared) {
1531         for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1532             if (!picture[i].f->buf[0])
1533                 return i;
1534         }
1535     } else {
1536         for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1537             if (pic_is_unused(&picture[i]))
1538                 return i;
1539         }
1540     }
1541
1542     av_log(avctx, AV_LOG_FATAL,
1543            "Internal error, picture buffer overflow\n");
1544     /* We could return -1, but the codec would crash trying to draw into a
1545      * non-existing frame anyway. This is safer than waiting for a random crash.
1546      * Also the return of this is never useful, an encoder must only allocate
1547      * as much as allowed in the specification. This has no relationship to how
1548      * much libavcodec could allocate (and MAX_PICTURE_COUNT is always large
1549      * enough for such valid streams).
1550      * Plus, a decoder has to check stream validity and remove frames if too
1551      * many reference frames are around. Waiting for "OOM" is not correct at
1552      * all. Similarly, missing reference frames have to be replaced by
1553      * interpolated/MC frames, anything else is a bug in the codec ...
1554      */
1555     abort();
1556     return -1;
1557 }
1558
1559 int ff_find_unused_picture(AVCodecContext *avctx, Picture *picture, int shared)
1560 {
1561     int ret = find_unused_picture(avctx, picture, shared);
1562
1563     if (ret >= 0 && ret < MAX_PICTURE_COUNT) {
1564         if (picture[ret].needs_realloc) {
1565             picture[ret].needs_realloc = 0;
1566             ff_free_picture_tables(&picture[ret]);
1567             ff_mpeg_unref_picture(avctx, &picture[ret]);
1568         }
1569     }
1570     return ret;
1571 }
1572
1573 static void gray_frame(AVFrame *frame)
1574 {
1575     int i, h_chroma_shift, v_chroma_shift;
1576
1577     av_pix_fmt_get_chroma_sub_sample(frame->format, &h_chroma_shift, &v_chroma_shift);
1578
1579     for(i=0; i<frame->height; i++)
1580         memset(frame->data[0] + frame->linesize[0]*i, 0x80, frame->width);
1581     for(i=0; i<FF_CEIL_RSHIFT(frame->height, v_chroma_shift); i++) {
1582         memset(frame->data[1] + frame->linesize[1]*i,
1583                0x80, FF_CEIL_RSHIFT(frame->width, h_chroma_shift));
1584         memset(frame->data[2] + frame->linesize[2]*i,
1585                0x80, FF_CEIL_RSHIFT(frame->width, h_chroma_shift));
1586     }
1587 }
1588
1589 /**
1590  * generic function called after decoding
1591  * the header and before a frame is decoded.
1592  */
1593 int ff_mpv_frame_start(MpegEncContext *s, AVCodecContext *avctx)
1594 {
1595     int i, ret;
1596     Picture *pic;
1597     s->mb_skipped = 0;
1598
1599     if (!ff_thread_can_start_frame(avctx)) {
1600         av_log(avctx, AV_LOG_ERROR, "Attempt to start a frame outside SETUP state\n");
1601         return -1;
1602     }
1603
1604     /* mark & release old frames */
1605     if (s->pict_type != AV_PICTURE_TYPE_B && s->last_picture_ptr &&
1606         s->last_picture_ptr != s->next_picture_ptr &&
1607         s->last_picture_ptr->f->buf[0]) {
1608         ff_mpeg_unref_picture(s->avctx, s->last_picture_ptr);
1609     }
1610
1611     /* release forgotten pictures */
1612     /* if (mpeg124/h263) */
1613     for (i = 0; i < MAX_PICTURE_COUNT; i++) {
1614         if (&s->picture[i] != s->last_picture_ptr &&
1615             &s->picture[i] != s->next_picture_ptr &&
1616             s->picture[i].reference && !s->picture[i].needs_realloc) {
1617             if (!(avctx->active_thread_type & FF_THREAD_FRAME))
1618                 av_log(avctx, AV_LOG_ERROR,
1619                        "releasing zombie picture\n");
1620             ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
1621         }
1622     }
1623
1624     ff_mpeg_unref_picture(s->avctx, &s->current_picture);
1625
1626     release_unused_pictures(s->avctx, s->picture);
1627
1628     if (s->current_picture_ptr && !s->current_picture_ptr->f->buf[0]) {
1629         // we already have a unused image
1630         // (maybe it was set before reading the header)
1631         pic = s->current_picture_ptr;
1632     } else {
1633         i   = ff_find_unused_picture(s->avctx, s->picture, 0);
1634         if (i < 0) {
1635             av_log(s->avctx, AV_LOG_ERROR, "no frame buffer available\n");
1636             return i;
1637         }
1638         pic = &s->picture[i];
1639     }
1640
1641     pic->reference = 0;
1642     if (!s->droppable) {
1643         if (s->pict_type != AV_PICTURE_TYPE_B)
1644             pic->reference = 3;
1645     }
1646
1647     pic->f->coded_picture_number = s->coded_picture_number++;
1648
1649     if (ff_alloc_picture(s, pic, 0) < 0)
1650         return -1;
1651
1652     s->current_picture_ptr = pic;
1653     // FIXME use only the vars from current_pic
1654     s->current_picture_ptr->f->top_field_first = s->top_field_first;
1655     if (s->codec_id == AV_CODEC_ID_MPEG1VIDEO ||
1656         s->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
1657         if (s->picture_structure != PICT_FRAME)
1658             s->current_picture_ptr->f->top_field_first =
1659                 (s->picture_structure == PICT_TOP_FIELD) == s->first_field;
1660     }
1661     s->current_picture_ptr->f->interlaced_frame = !s->progressive_frame &&
1662                                                  !s->progressive_sequence;
1663     s->current_picture_ptr->field_picture      =  s->picture_structure != PICT_FRAME;
1664
1665     s->current_picture_ptr->f->pict_type = s->pict_type;
1666     // if (s->avctx->flags && CODEC_FLAG_QSCALE)
1667     //     s->current_picture_ptr->quality = s->new_picture_ptr->quality;
1668     s->current_picture_ptr->f->key_frame = s->pict_type == AV_PICTURE_TYPE_I;
1669
1670     if ((ret = ff_mpeg_ref_picture(s->avctx, &s->current_picture,
1671                                    s->current_picture_ptr)) < 0)
1672         return ret;
1673
1674     if (s->pict_type != AV_PICTURE_TYPE_B) {
1675         s->last_picture_ptr = s->next_picture_ptr;
1676         if (!s->droppable)
1677             s->next_picture_ptr = s->current_picture_ptr;
1678     }
1679     ff_dlog(s->avctx, "L%p N%p C%p L%p N%p C%p type:%d drop:%d\n",
1680             s->last_picture_ptr, s->next_picture_ptr,s->current_picture_ptr,
1681             s->last_picture_ptr    ? s->last_picture_ptr->f->data[0]    : NULL,
1682             s->next_picture_ptr    ? s->next_picture_ptr->f->data[0]    : NULL,
1683             s->current_picture_ptr ? s->current_picture_ptr->f->data[0] : NULL,
1684             s->pict_type, s->droppable);
1685
1686     if ((!s->last_picture_ptr || !s->last_picture_ptr->f->buf[0]) &&
1687         (s->pict_type != AV_PICTURE_TYPE_I ||
1688          s->picture_structure != PICT_FRAME)) {
1689         int h_chroma_shift, v_chroma_shift;
1690         av_pix_fmt_get_chroma_sub_sample(s->avctx->pix_fmt,
1691                                          &h_chroma_shift, &v_chroma_shift);
1692         if (s->pict_type == AV_PICTURE_TYPE_B && s->next_picture_ptr && s->next_picture_ptr->f->buf[0])
1693             av_log(avctx, AV_LOG_DEBUG,
1694                    "allocating dummy last picture for B frame\n");
1695         else if (s->pict_type != AV_PICTURE_TYPE_I)
1696             av_log(avctx, AV_LOG_ERROR,
1697                    "warning: first frame is no keyframe\n");
1698         else if (s->picture_structure != PICT_FRAME)
1699             av_log(avctx, AV_LOG_DEBUG,
1700                    "allocate dummy last picture for field based first keyframe\n");
1701
1702         /* Allocate a dummy frame */
1703         i = ff_find_unused_picture(s->avctx, s->picture, 0);
1704         if (i < 0) {
1705             av_log(s->avctx, AV_LOG_ERROR, "no frame buffer available\n");
1706             return i;
1707         }
1708         s->last_picture_ptr = &s->picture[i];
1709
1710         s->last_picture_ptr->reference   = 3;
1711         s->last_picture_ptr->f->key_frame = 0;
1712         s->last_picture_ptr->f->pict_type = AV_PICTURE_TYPE_P;
1713
1714         if (ff_alloc_picture(s, s->last_picture_ptr, 0) < 0) {
1715             s->last_picture_ptr = NULL;
1716             return -1;
1717         }
1718
1719         if (!avctx->hwaccel && !(avctx->codec->capabilities&CODEC_CAP_HWACCEL_VDPAU)) {
1720             for(i=0; i<avctx->height; i++)
1721                 memset(s->last_picture_ptr->f->data[0] + s->last_picture_ptr->f->linesize[0]*i,
1722                        0x80, avctx->width);
1723             if (s->last_picture_ptr->f->data[2]) {
1724                 for(i=0; i<FF_CEIL_RSHIFT(avctx->height, v_chroma_shift); i++) {
1725                     memset(s->last_picture_ptr->f->data[1] + s->last_picture_ptr->f->linesize[1]*i,
1726                         0x80, FF_CEIL_RSHIFT(avctx->width, h_chroma_shift));
1727                     memset(s->last_picture_ptr->f->data[2] + s->last_picture_ptr->f->linesize[2]*i,
1728                         0x80, FF_CEIL_RSHIFT(avctx->width, h_chroma_shift));
1729                 }
1730             }
1731
1732             if(s->codec_id == AV_CODEC_ID_FLV1 || s->codec_id == AV_CODEC_ID_H263){
1733                 for(i=0; i<avctx->height; i++)
1734                 memset(s->last_picture_ptr->f->data[0] + s->last_picture_ptr->f->linesize[0]*i, 16, avctx->width);
1735             }
1736         }
1737
1738         ff_thread_report_progress(&s->last_picture_ptr->tf, INT_MAX, 0);
1739         ff_thread_report_progress(&s->last_picture_ptr->tf, INT_MAX, 1);
1740     }
1741     if ((!s->next_picture_ptr || !s->next_picture_ptr->f->buf[0]) &&
1742         s->pict_type == AV_PICTURE_TYPE_B) {
1743         /* Allocate a dummy frame */
1744         i = ff_find_unused_picture(s->avctx, s->picture, 0);
1745         if (i < 0) {
1746             av_log(s->avctx, AV_LOG_ERROR, "no frame buffer available\n");
1747             return i;
1748         }
1749         s->next_picture_ptr = &s->picture[i];
1750
1751         s->next_picture_ptr->reference   = 3;
1752         s->next_picture_ptr->f->key_frame = 0;
1753         s->next_picture_ptr->f->pict_type = AV_PICTURE_TYPE_P;
1754
1755         if (ff_alloc_picture(s, s->next_picture_ptr, 0) < 0) {
1756             s->next_picture_ptr = NULL;
1757             return -1;
1758         }
1759         ff_thread_report_progress(&s->next_picture_ptr->tf, INT_MAX, 0);
1760         ff_thread_report_progress(&s->next_picture_ptr->tf, INT_MAX, 1);
1761     }
1762
1763 #if 0 // BUFREF-FIXME
1764     memset(s->last_picture.f->data, 0, sizeof(s->last_picture.f->data));
1765     memset(s->next_picture.f->data, 0, sizeof(s->next_picture.f->data));
1766 #endif
1767     if (s->last_picture_ptr) {
1768         ff_mpeg_unref_picture(s->avctx, &s->last_picture);
1769         if (s->last_picture_ptr->f->buf[0] &&
1770             (ret = ff_mpeg_ref_picture(s->avctx, &s->last_picture,
1771                                        s->last_picture_ptr)) < 0)
1772             return ret;
1773     }
1774     if (s->next_picture_ptr) {
1775         ff_mpeg_unref_picture(s->avctx, &s->next_picture);
1776         if (s->next_picture_ptr->f->buf[0] &&
1777             (ret = ff_mpeg_ref_picture(s->avctx, &s->next_picture,
1778                                        s->next_picture_ptr)) < 0)
1779             return ret;
1780     }
1781
1782     av_assert0(s->pict_type == AV_PICTURE_TYPE_I || (s->last_picture_ptr &&
1783                                                  s->last_picture_ptr->f->buf[0]));
1784
1785     if (s->picture_structure!= PICT_FRAME) {
1786         int i;
1787         for (i = 0; i < 4; i++) {
1788             if (s->picture_structure == PICT_BOTTOM_FIELD) {
1789                 s->current_picture.f->data[i] +=
1790                     s->current_picture.f->linesize[i];
1791             }
1792             s->current_picture.f->linesize[i] *= 2;
1793             s->last_picture.f->linesize[i]    *= 2;
1794             s->next_picture.f->linesize[i]    *= 2;
1795         }
1796     }
1797
1798     /* set dequantizer, we can't do it during init as
1799      * it might change for mpeg4 and we can't do it in the header
1800      * decode as init is not called for mpeg4 there yet */
1801     if (s->mpeg_quant || s->codec_id == AV_CODEC_ID_MPEG2VIDEO) {
1802         s->dct_unquantize_intra = s->dct_unquantize_mpeg2_intra;
1803         s->dct_unquantize_inter = s->dct_unquantize_mpeg2_inter;
1804     } else if (s->out_format == FMT_H263 || s->out_format == FMT_H261) {
1805         s->dct_unquantize_intra = s->dct_unquantize_h263_intra;
1806         s->dct_unquantize_inter = s->dct_unquantize_h263_inter;
1807     } else {
1808         s->dct_unquantize_intra = s->dct_unquantize_mpeg1_intra;
1809         s->dct_unquantize_inter = s->dct_unquantize_mpeg1_inter;
1810     }
1811
1812     if (s->avctx->debug & FF_DEBUG_NOMC) {
1813         gray_frame(s->current_picture_ptr->f);
1814     }
1815
1816     return 0;
1817 }
1818
1819 /* called after a frame has been decoded. */
1820 void ff_mpv_frame_end(MpegEncContext *s)
1821 {
1822     emms_c();
1823
1824     if (s->current_picture.reference)
1825         ff_thread_report_progress(&s->current_picture_ptr->tf, INT_MAX, 0);
1826 }
1827
1828
1829 #if FF_API_VISMV
1830 static int clip_line(int *sx, int *sy, int *ex, int *ey, int maxx)
1831 {
1832     if(*sx > *ex)
1833         return clip_line(ex, ey, sx, sy, maxx);
1834
1835     if (*sx < 0) {
1836         if (*ex < 0)
1837             return 1;
1838         *sy = *ey + (*sy - *ey) * (int64_t)*ex / (*ex - *sx);
1839         *sx = 0;
1840     }
1841
1842     if (*ex > maxx) {
1843         if (*sx > maxx)
1844             return 1;
1845         *ey = *sy + (*ey - *sy) * (int64_t)(maxx - *sx) / (*ex - *sx);
1846         *ex = maxx;
1847     }
1848     return 0;
1849 }
1850
1851
1852 /**
1853  * Draw a line from (ex, ey) -> (sx, sy).
1854  * @param w width of the image
1855  * @param h height of the image
1856  * @param stride stride/linesize of the image
1857  * @param color color of the arrow
1858  */
1859 static void draw_line(uint8_t *buf, int sx, int sy, int ex, int ey,
1860                       int w, int h, int stride, int color)
1861 {
1862     int x, y, fr, f;
1863
1864     if (clip_line(&sx, &sy, &ex, &ey, w - 1))
1865         return;
1866     if (clip_line(&sy, &sx, &ey, &ex, h - 1))
1867         return;
1868
1869     sx = av_clip(sx, 0, w - 1);
1870     sy = av_clip(sy, 0, h - 1);
1871     ex = av_clip(ex, 0, w - 1);
1872     ey = av_clip(ey, 0, h - 1);
1873
1874     buf[sy * stride + sx] += color;
1875
1876     if (FFABS(ex - sx) > FFABS(ey - sy)) {
1877         if (sx > ex) {
1878             FFSWAP(int, sx, ex);
1879             FFSWAP(int, sy, ey);
1880         }
1881         buf += sx + sy * stride;
1882         ex  -= sx;
1883         f    = ((ey - sy) << 16) / ex;
1884         for (x = 0; x <= ex; x++) {
1885             y  = (x * f) >> 16;
1886             fr = (x * f) & 0xFFFF;
1887             buf[y * stride + x]       += (color * (0x10000 - fr)) >> 16;
1888             if(fr) buf[(y + 1) * stride + x] += (color *            fr ) >> 16;
1889         }
1890     } else {
1891         if (sy > ey) {
1892             FFSWAP(int, sx, ex);
1893             FFSWAP(int, sy, ey);
1894         }
1895         buf += sx + sy * stride;
1896         ey  -= sy;
1897         if (ey)
1898             f = ((ex - sx) << 16) / ey;
1899         else
1900             f = 0;
1901         for(y= 0; y <= ey; y++){
1902             x  = (y*f) >> 16;
1903             fr = (y*f) & 0xFFFF;
1904             buf[y * stride + x]     += (color * (0x10000 - fr)) >> 16;
1905             if(fr) buf[y * stride + x + 1] += (color *            fr ) >> 16;
1906         }
1907     }
1908 }
1909
1910 /**
1911  * Draw an arrow from (ex, ey) -> (sx, sy).
1912  * @param w width of the image
1913  * @param h height of the image
1914  * @param stride stride/linesize of the image
1915  * @param color color of the arrow
1916  */
1917 static void draw_arrow(uint8_t *buf, int sx, int sy, int ex,
1918                        int ey, int w, int h, int stride, int color, int tail, int direction)
1919 {
1920     int dx,dy;
1921
1922     if (direction) {
1923         FFSWAP(int, sx, ex);
1924         FFSWAP(int, sy, ey);
1925     }
1926
1927     sx = av_clip(sx, -100, w + 100);
1928     sy = av_clip(sy, -100, h + 100);
1929     ex = av_clip(ex, -100, w + 100);
1930     ey = av_clip(ey, -100, h + 100);
1931
1932     dx = ex - sx;
1933     dy = ey - sy;
1934
1935     if (dx * dx + dy * dy > 3 * 3) {
1936         int rx =  dx + dy;
1937         int ry = -dx + dy;
1938         int length = ff_sqrt((rx * rx + ry * ry) << 8);
1939
1940         // FIXME subpixel accuracy
1941         rx = ROUNDED_DIV(rx * 3 << 4, length);
1942         ry = ROUNDED_DIV(ry * 3 << 4, length);
1943
1944         if (tail) {
1945             rx = -rx;
1946             ry = -ry;
1947         }
1948
1949         draw_line(buf, sx, sy, sx + rx, sy + ry, w, h, stride, color);
1950         draw_line(buf, sx, sy, sx - ry, sy + rx, w, h, stride, color);
1951     }
1952     draw_line(buf, sx, sy, ex, ey, w, h, stride, color);
1953 }
1954 #endif
1955
1956 static int add_mb(AVMotionVector *mb, uint32_t mb_type,
1957                   int dst_x, int dst_y,
1958                   int src_x, int src_y,
1959                   int direction)
1960 {
1961     mb->w = IS_8X8(mb_type) || IS_8X16(mb_type) ? 8 : 16;
1962     mb->h = IS_8X8(mb_type) || IS_16X8(mb_type) ? 8 : 16;
1963     mb->src_x = src_x;
1964     mb->src_y = src_y;
1965     mb->dst_x = dst_x;
1966     mb->dst_y = dst_y;
1967     mb->source = direction ? 1 : -1;
1968     mb->flags = 0; // XXX: does mb_type contain extra information that could be exported here?
1969     return 1;
1970 }
1971
1972 /**
1973  * Print debugging info for the given picture.
1974  */
1975 void ff_print_debug_info2(AVCodecContext *avctx, AVFrame *pict, uint8_t *mbskip_table,
1976                          uint32_t *mbtype_table, int8_t *qscale_table, int16_t (*motion_val[2])[2],
1977                          int *low_delay,
1978                          int mb_width, int mb_height, int mb_stride, int quarter_sample)
1979 {
1980     if ((avctx->flags2 & CODEC_FLAG2_EXPORT_MVS) && mbtype_table && motion_val[0]) {
1981         const int shift = 1 + quarter_sample;
1982         const int mv_sample_log2 = avctx->codec_id == AV_CODEC_ID_H264 || avctx->codec_id == AV_CODEC_ID_SVQ3 ? 2 : 1;
1983         const int mv_stride      = (mb_width << mv_sample_log2) +
1984                                    (avctx->codec->id == AV_CODEC_ID_H264 ? 0 : 1);
1985         int mb_x, mb_y, mbcount = 0;
1986
1987         /* size is width * height * 2 * 4 where 2 is for directions and 4 is
1988          * for the maximum number of MB (4 MB in case of IS_8x8) */
1989         AVMotionVector *mvs = av_malloc_array(mb_width * mb_height, 2 * 4 * sizeof(AVMotionVector));
1990         if (!mvs)
1991             return;
1992
1993         for (mb_y = 0; mb_y < mb_height; mb_y++) {
1994             for (mb_x = 0; mb_x < mb_width; mb_x++) {
1995                 int i, direction, mb_type = mbtype_table[mb_x + mb_y * mb_stride];
1996                 for (direction = 0; direction < 2; direction++) {
1997                     if (!USES_LIST(mb_type, direction))
1998                         continue;
1999                     if (IS_8X8(mb_type)) {
2000                         for (i = 0; i < 4; i++) {
2001                             int sx = mb_x * 16 + 4 + 8 * (i & 1);
2002                             int sy = mb_y * 16 + 4 + 8 * (i >> 1);
2003                             int xy = (mb_x * 2 + (i & 1) +
2004                                       (mb_y * 2 + (i >> 1)) * mv_stride) << (mv_sample_log2 - 1);
2005                             int mx = (motion_val[direction][xy][0] >> shift) + sx;
2006                             int my = (motion_val[direction][xy][1] >> shift) + sy;
2007                             mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx, my, direction);
2008                         }
2009                     } else if (IS_16X8(mb_type)) {
2010                         for (i = 0; i < 2; i++) {
2011                             int sx = mb_x * 16 + 8;
2012                             int sy = mb_y * 16 + 4 + 8 * i;
2013                             int xy = (mb_x * 2 + (mb_y * 2 + i) * mv_stride) << (mv_sample_log2 - 1);
2014                             int mx = (motion_val[direction][xy][0] >> shift);
2015                             int my = (motion_val[direction][xy][1] >> shift);
2016
2017                             if (IS_INTERLACED(mb_type))
2018                                 my *= 2;
2019
2020                             mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx + sx, my + sy, direction);
2021                         }
2022                     } else if (IS_8X16(mb_type)) {
2023                         for (i = 0; i < 2; i++) {
2024                             int sx = mb_x * 16 + 4 + 8 * i;
2025                             int sy = mb_y * 16 + 8;
2026                             int xy = (mb_x * 2 + i + mb_y * 2 * mv_stride) << (mv_sample_log2 - 1);
2027                             int mx = motion_val[direction][xy][0] >> shift;
2028                             int my = motion_val[direction][xy][1] >> shift;
2029
2030                             if (IS_INTERLACED(mb_type))
2031                                 my *= 2;
2032
2033                             mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx + sx, my + sy, direction);
2034                         }
2035                     } else {
2036                           int sx = mb_x * 16 + 8;
2037                           int sy = mb_y * 16 + 8;
2038                           int xy = (mb_x + mb_y * mv_stride) << mv_sample_log2;
2039                           int mx = (motion_val[direction][xy][0]>>shift) + sx;
2040                           int my = (motion_val[direction][xy][1]>>shift) + sy;
2041                           mbcount += add_mb(mvs + mbcount, mb_type, sx, sy, mx, my, direction);
2042                     }
2043                 }
2044             }
2045         }
2046
2047         if (mbcount) {
2048             AVFrameSideData *sd;
2049
2050             av_log(avctx, AV_LOG_DEBUG, "Adding %d MVs info to frame %d\n", mbcount, avctx->frame_number);
2051             sd = av_frame_new_side_data(pict, AV_FRAME_DATA_MOTION_VECTORS, mbcount * sizeof(AVMotionVector));
2052             if (!sd) {
2053                 av_freep(&mvs);
2054                 return;
2055             }
2056             memcpy(sd->data, mvs, mbcount * sizeof(AVMotionVector));
2057         }
2058
2059         av_freep(&mvs);
2060     }
2061
2062     /* TODO: export all the following to make them accessible for users (and filters) */
2063     if (avctx->hwaccel || !mbtype_table
2064         || (avctx->codec->capabilities&CODEC_CAP_HWACCEL_VDPAU))
2065         return;
2066
2067
2068     if (avctx->debug & (FF_DEBUG_SKIP | FF_DEBUG_QP | FF_DEBUG_MB_TYPE)) {
2069         int x,y;
2070
2071         av_log(avctx, AV_LOG_DEBUG, "New frame, type: %c\n",
2072                av_get_picture_type_char(pict->pict_type));
2073         for (y = 0; y < mb_height; y++) {
2074             for (x = 0; x < mb_width; x++) {
2075                 if (avctx->debug & FF_DEBUG_SKIP) {
2076                     int count = mbskip_table ? mbskip_table[x + y * mb_stride] : 0;
2077                     if (count > 9)
2078                         count = 9;
2079                     av_log(avctx, AV_LOG_DEBUG, "%1d", count);
2080                 }
2081                 if (avctx->debug & FF_DEBUG_QP) {
2082                     av_log(avctx, AV_LOG_DEBUG, "%2d",
2083                            qscale_table[x + y * mb_stride]);
2084                 }
2085                 if (avctx->debug & FF_DEBUG_MB_TYPE) {
2086                     int mb_type = mbtype_table[x + y * mb_stride];
2087                     // Type & MV direction
2088                     if (IS_PCM(mb_type))
2089                         av_log(avctx, AV_LOG_DEBUG, "P");
2090                     else if (IS_INTRA(mb_type) && IS_ACPRED(mb_type))
2091                         av_log(avctx, AV_LOG_DEBUG, "A");
2092                     else if (IS_INTRA4x4(mb_type))
2093                         av_log(avctx, AV_LOG_DEBUG, "i");
2094                     else if (IS_INTRA16x16(mb_type))
2095                         av_log(avctx, AV_LOG_DEBUG, "I");
2096                     else if (IS_DIRECT(mb_type) && IS_SKIP(mb_type))
2097                         av_log(avctx, AV_LOG_DEBUG, "d");
2098                     else if (IS_DIRECT(mb_type))
2099                         av_log(avctx, AV_LOG_DEBUG, "D");
2100                     else if (IS_GMC(mb_type) && IS_SKIP(mb_type))
2101                         av_log(avctx, AV_LOG_DEBUG, "g");
2102                     else if (IS_GMC(mb_type))
2103                         av_log(avctx, AV_LOG_DEBUG, "G");
2104                     else if (IS_SKIP(mb_type))
2105                         av_log(avctx, AV_LOG_DEBUG, "S");
2106                     else if (!USES_LIST(mb_type, 1))
2107                         av_log(avctx, AV_LOG_DEBUG, ">");
2108                     else if (!USES_LIST(mb_type, 0))
2109                         av_log(avctx, AV_LOG_DEBUG, "<");
2110                     else {
2111                         av_assert2(USES_LIST(mb_type, 0) && USES_LIST(mb_type, 1));
2112                         av_log(avctx, AV_LOG_DEBUG, "X");
2113                     }
2114
2115                     // segmentation
2116                     if (IS_8X8(mb_type))
2117                         av_log(avctx, AV_LOG_DEBUG, "+");
2118                     else if (IS_16X8(mb_type))
2119                         av_log(avctx, AV_LOG_DEBUG, "-");
2120                     else if (IS_8X16(mb_type))
2121                         av_log(avctx, AV_LOG_DEBUG, "|");
2122                     else if (IS_INTRA(mb_type) || IS_16X16(mb_type))
2123                         av_log(avctx, AV_LOG_DEBUG, " ");
2124                     else
2125                         av_log(avctx, AV_LOG_DEBUG, "?");
2126
2127
2128                     if (IS_INTERLACED(mb_type))
2129                         av_log(avctx, AV_LOG_DEBUG, "=");
2130                     else
2131                         av_log(avctx, AV_LOG_DEBUG, " ");
2132                 }
2133             }
2134             av_log(avctx, AV_LOG_DEBUG, "\n");
2135         }
2136     }
2137
2138     if ((avctx->debug & (FF_DEBUG_VIS_QP | FF_DEBUG_VIS_MB_TYPE)) ||
2139         (avctx->debug_mv)) {
2140         int mb_y;
2141         int i;
2142         int h_chroma_shift, v_chroma_shift, block_height;
2143 #if FF_API_VISMV
2144         const int shift = 1 + quarter_sample;
2145         uint8_t *ptr;
2146         const int width          = avctx->width;
2147         const int height         = avctx->height;
2148 #endif
2149         const int mv_sample_log2 = avctx->codec_id == AV_CODEC_ID_H264 || avctx->codec_id == AV_CODEC_ID_SVQ3 ? 2 : 1;
2150         const int mv_stride      = (mb_width << mv_sample_log2) +
2151                                    (avctx->codec->id == AV_CODEC_ID_H264 ? 0 : 1);
2152
2153         *low_delay = 0; // needed to see the vectors without trashing the buffers
2154
2155         avcodec_get_chroma_sub_sample(avctx->pix_fmt, &h_chroma_shift, &v_chroma_shift);
2156
2157         av_frame_make_writable(pict);
2158
2159         pict->opaque = NULL;
2160 #if FF_API_VISMV
2161         ptr          = pict->data[0];
2162 #endif
2163         block_height = 16 >> v_chroma_shift;
2164
2165         for (mb_y = 0; mb_y < mb_height; mb_y++) {
2166             int mb_x;
2167             for (mb_x = 0; mb_x < mb_width; mb_x++) {
2168                 const int mb_index = mb_x + mb_y * mb_stride;
2169 #if FF_API_VISMV
2170                 if ((avctx->debug_mv) && motion_val[0]) {
2171                     int type;
2172                     for (type = 0; type < 3; type++) {
2173                         int direction = 0;
2174                         switch (type) {
2175                         case 0:
2176                             if ((!(avctx->debug_mv & FF_DEBUG_VIS_MV_P_FOR)) ||
2177                                 (pict->pict_type!= AV_PICTURE_TYPE_P))
2178                                 continue;
2179                             direction = 0;
2180                             break;
2181                         case 1:
2182                             if ((!(avctx->debug_mv & FF_DEBUG_VIS_MV_B_FOR)) ||
2183                                 (pict->pict_type!= AV_PICTURE_TYPE_B))
2184                                 continue;
2185                             direction = 0;
2186                             break;
2187                         case 2:
2188                             if ((!(avctx->debug_mv & FF_DEBUG_VIS_MV_B_BACK)) ||
2189                                 (pict->pict_type!= AV_PICTURE_TYPE_B))
2190                                 continue;
2191                             direction = 1;
2192                             break;
2193                         }
2194                         if (!USES_LIST(mbtype_table[mb_index], direction))
2195                             continue;
2196
2197                         if (IS_8X8(mbtype_table[mb_index])) {
2198                             int i;
2199                             for (i = 0; i < 4; i++) {
2200                                 int sx = mb_x * 16 + 4 + 8 * (i & 1);
2201                                 int sy = mb_y * 16 + 4 + 8 * (i >> 1);
2202                                 int xy = (mb_x * 2 + (i & 1) +
2203                                           (mb_y * 2 + (i >> 1)) * mv_stride) << (mv_sample_log2 - 1);
2204                                 int mx = (motion_val[direction][xy][0] >> shift) + sx;
2205                                 int my = (motion_val[direction][xy][1] >> shift) + sy;
2206                                 draw_arrow(ptr, sx, sy, mx, my, width,
2207                                            height, pict->linesize[0], 100, 0, direction);
2208                             }
2209                         } else if (IS_16X8(mbtype_table[mb_index])) {
2210                             int i;
2211                             for (i = 0; i < 2; i++) {
2212                                 int sx = mb_x * 16 + 8;
2213                                 int sy = mb_y * 16 + 4 + 8 * i;
2214                                 int xy = (mb_x * 2 + (mb_y * 2 + i) * mv_stride) << (mv_sample_log2 - 1);
2215                                 int mx = (motion_val[direction][xy][0] >> shift);
2216                                 int my = (motion_val[direction][xy][1] >> shift);
2217
2218                                 if (IS_INTERLACED(mbtype_table[mb_index]))
2219                                     my *= 2;
2220
2221                                 draw_arrow(ptr, sx, sy, mx + sx, my + sy, width,
2222                                            height, pict->linesize[0], 100, 0, direction);
2223                             }
2224                         } else if (IS_8X16(mbtype_table[mb_index])) {
2225                             int i;
2226                             for (i = 0; i < 2; i++) {
2227                                 int sx = mb_x * 16 + 4 + 8 * i;
2228                                 int sy = mb_y * 16 + 8;
2229                                 int xy = (mb_x * 2 + i + mb_y * 2 * mv_stride) << (mv_sample_log2 - 1);
2230                                 int mx = motion_val[direction][xy][0] >> shift;
2231                                 int my = motion_val[direction][xy][1] >> shift;
2232
2233                                 if (IS_INTERLACED(mbtype_table[mb_index]))
2234                                     my *= 2;
2235
2236                                 draw_arrow(ptr, sx, sy, mx + sx, my + sy, width,
2237                                            height, pict->linesize[0], 100, 0, direction);
2238                             }
2239                         } else {
2240                               int sx= mb_x * 16 + 8;
2241                               int sy= mb_y * 16 + 8;
2242                               int xy= (mb_x + mb_y * mv_stride) << mv_sample_log2;
2243                               int mx= (motion_val[direction][xy][0]>>shift) + sx;
2244                               int my= (motion_val[direction][xy][1]>>shift) + sy;
2245                               draw_arrow(ptr, sx, sy, mx, my, width, height, pict->linesize[0], 100, 0, direction);
2246                         }
2247                     }
2248                 }
2249 #endif
2250                 if ((avctx->debug & FF_DEBUG_VIS_QP)) {
2251                     uint64_t c = (qscale_table[mb_index] * 128 / 31) *
2252                                  0x0101010101010101ULL;
2253                     int y;
2254                     for (y = 0; y < block_height; y++) {
2255                         *(uint64_t *)(pict->data[1] + 8 * mb_x +
2256                                       (block_height * mb_y + y) *
2257                                       pict->linesize[1]) = c;
2258                         *(uint64_t *)(pict->data[2] + 8 * mb_x +
2259                                       (block_height * mb_y + y) *
2260                                       pict->linesize[2]) = c;
2261                     }
2262                 }
2263                 if ((avctx->debug & FF_DEBUG_VIS_MB_TYPE) &&
2264                     motion_val[0]) {
2265                     int mb_type = mbtype_table[mb_index];
2266                     uint64_t u,v;
2267                     int y;
2268 #define COLOR(theta, r) \
2269     u = (int)(128 + r * cos(theta * 3.141592 / 180)); \
2270     v = (int)(128 + r * sin(theta * 3.141592 / 180));
2271
2272
2273                     u = v = 128;
2274                     if (IS_PCM(mb_type)) {
2275                         COLOR(120, 48)
2276                     } else if ((IS_INTRA(mb_type) && IS_ACPRED(mb_type)) ||
2277                                IS_INTRA16x16(mb_type)) {
2278                         COLOR(30, 48)
2279                     } else if (IS_INTRA4x4(mb_type)) {
2280                         COLOR(90, 48)
2281                     } else if (IS_DIRECT(mb_type) && IS_SKIP(mb_type)) {
2282                         // COLOR(120, 48)
2283                     } else if (IS_DIRECT(mb_type)) {
2284                         COLOR(150, 48)
2285                     } else if (IS_GMC(mb_type) && IS_SKIP(mb_type)) {
2286                         COLOR(170, 48)
2287                     } else if (IS_GMC(mb_type)) {
2288                         COLOR(190, 48)
2289                     } else if (IS_SKIP(mb_type)) {
2290                         // COLOR(180, 48)
2291                     } else if (!USES_LIST(mb_type, 1)) {
2292                         COLOR(240, 48)
2293                     } else if (!USES_LIST(mb_type, 0)) {
2294                         COLOR(0, 48)
2295                     } else {
2296                         av_assert2(USES_LIST(mb_type, 0) && USES_LIST(mb_type, 1));
2297                         COLOR(300,48)
2298                     }
2299
2300                     u *= 0x0101010101010101ULL;
2301                     v *= 0x0101010101010101ULL;
2302                     for (y = 0; y < block_height; y++) {
2303                         *(uint64_t *)(pict->data[1] + 8 * mb_x +
2304                                       (block_height * mb_y + y) * pict->linesize[1]) = u;
2305                         *(uint64_t *)(pict->data[2] + 8 * mb_x +
2306                                       (block_height * mb_y + y) * pict->linesize[2]) = v;
2307                     }
2308
2309                     // segmentation
2310                     if (IS_8X8(mb_type) || IS_16X8(mb_type)) {
2311                         *(uint64_t *)(pict->data[0] + 16 * mb_x + 0 +
2312                                       (16 * mb_y + 8) * pict->linesize[0]) ^= 0x8080808080808080ULL;
2313                         *(uint64_t *)(pict->data[0] + 16 * mb_x + 8 +
2314                                       (16 * mb_y + 8) * pict->linesize[0]) ^= 0x8080808080808080ULL;
2315                     }
2316                     if (IS_8X8(mb_type) || IS_8X16(mb_type)) {
2317                         for (y = 0; y < 16; y++)
2318                             pict->data[0][16 * mb_x + 8 + (16 * mb_y + y) *
2319                                           pict->linesize[0]] ^= 0x80;
2320                     }
2321                     if (IS_8X8(mb_type) && mv_sample_log2 >= 2) {
2322                         int dm = 1 << (mv_sample_log2 - 2);
2323                         for (i = 0; i < 4; i++) {
2324                             int sx = mb_x * 16 + 8 * (i & 1);
2325                             int sy = mb_y * 16 + 8 * (i >> 1);
2326                             int xy = (mb_x * 2 + (i & 1) +
2327                                      (mb_y * 2 + (i >> 1)) * mv_stride) << (mv_sample_log2 - 1);
2328                             // FIXME bidir
2329                             int32_t *mv = (int32_t *) &motion_val[0][xy];
2330                             if (mv[0] != mv[dm] ||
2331                                 mv[dm * mv_stride] != mv[dm * (mv_stride + 1)])
2332                                 for (y = 0; y < 8; y++)
2333                                     pict->data[0][sx + 4 + (sy + y) * pict->linesize[0]] ^= 0x80;
2334                             if (mv[0] != mv[dm * mv_stride] || mv[dm] != mv[dm * (mv_stride + 1)])
2335                                 *(uint64_t *)(pict->data[0] + sx + (sy + 4) *
2336                                               pict->linesize[0]) ^= 0x8080808080808080ULL;
2337                         }
2338                     }
2339
2340                     if (IS_INTERLACED(mb_type) &&
2341                         avctx->codec->id == AV_CODEC_ID_H264) {
2342                         // hmm
2343                     }
2344                 }
2345                 if (mbskip_table)
2346                     mbskip_table[mb_index] = 0;
2347             }
2348         }
2349     }
2350 }
2351
2352 void ff_print_debug_info(MpegEncContext *s, Picture *p, AVFrame *pict)
2353 {
2354     ff_print_debug_info2(s->avctx, pict, s->mbskip_table, p->mb_type,
2355                          p->qscale_table, p->motion_val, &s->low_delay,
2356                          s->mb_width, s->mb_height, s->mb_stride, s->quarter_sample);
2357 }
2358
2359 int ff_mpv_export_qp_table(MpegEncContext *s, AVFrame *f, Picture *p, int qp_type)
2360 {
2361     AVBufferRef *ref = av_buffer_ref(p->qscale_table_buf);
2362     int offset = 2*s->mb_stride + 1;
2363     if(!ref)
2364         return AVERROR(ENOMEM);
2365     av_assert0(ref->size >= offset + s->mb_stride * ((f->height+15)/16));
2366     ref->size -= offset;
2367     ref->data += offset;
2368     return av_frame_set_qp_table(f, ref, s->mb_stride, qp_type);
2369 }
2370
2371 static inline int hpel_motion_lowres(MpegEncContext *s,
2372                                      uint8_t *dest, uint8_t *src,
2373                                      int field_based, int field_select,
2374                                      int src_x, int src_y,
2375                                      int width, int height, ptrdiff_t stride,
2376                                      int h_edge_pos, int v_edge_pos,
2377                                      int w, int h, h264_chroma_mc_func *pix_op,
2378                                      int motion_x, int motion_y)
2379 {
2380     const int lowres   = s->avctx->lowres;
2381     const int op_index = FFMIN(lowres, 3);
2382     const int s_mask   = (2 << lowres) - 1;
2383     int emu = 0;
2384     int sx, sy;
2385
2386     if (s->quarter_sample) {
2387         motion_x /= 2;
2388         motion_y /= 2;
2389     }
2390
2391     sx = motion_x & s_mask;
2392     sy = motion_y & s_mask;
2393     src_x += motion_x >> lowres + 1;
2394     src_y += motion_y >> lowres + 1;
2395
2396     src   += src_y * stride + src_x;
2397
2398     if ((unsigned)src_x > FFMAX( h_edge_pos - (!!sx) - w,                 0) ||
2399         (unsigned)src_y > FFMAX((v_edge_pos >> field_based) - (!!sy) - h, 0)) {
2400         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, src,
2401                                  s->linesize, s->linesize,
2402                                  w + 1, (h + 1) << field_based,
2403                                  src_x, src_y   << field_based,
2404                                  h_edge_pos, v_edge_pos);
2405         src = s->sc.edge_emu_buffer;
2406         emu = 1;
2407     }
2408
2409     sx = (sx << 2) >> lowres;
2410     sy = (sy << 2) >> lowres;
2411     if (field_select)
2412         src += s->linesize;
2413     pix_op[op_index](dest, src, stride, h, sx, sy);
2414     return emu;
2415 }
2416
2417 /* apply one mpeg motion vector to the three components */
2418 static av_always_inline void mpeg_motion_lowres(MpegEncContext *s,
2419                                                 uint8_t *dest_y,
2420                                                 uint8_t *dest_cb,
2421                                                 uint8_t *dest_cr,
2422                                                 int field_based,
2423                                                 int bottom_field,
2424                                                 int field_select,
2425                                                 uint8_t **ref_picture,
2426                                                 h264_chroma_mc_func *pix_op,
2427                                                 int motion_x, int motion_y,
2428                                                 int h, int mb_y)
2429 {
2430     uint8_t *ptr_y, *ptr_cb, *ptr_cr;
2431     int mx, my, src_x, src_y, uvsrc_x, uvsrc_y, sx, sy, uvsx, uvsy;
2432     ptrdiff_t uvlinesize, linesize;
2433     const int lowres     = s->avctx->lowres;
2434     const int op_index   = FFMIN(lowres-1+s->chroma_x_shift, 3);
2435     const int block_s    = 8>>lowres;
2436     const int s_mask     = (2 << lowres) - 1;
2437     const int h_edge_pos = s->h_edge_pos >> lowres;
2438     const int v_edge_pos = s->v_edge_pos >> lowres;
2439     linesize   = s->current_picture.f->linesize[0] << field_based;
2440     uvlinesize = s->current_picture.f->linesize[1] << field_based;
2441
2442     // FIXME obviously not perfect but qpel will not work in lowres anyway
2443     if (s->quarter_sample) {
2444         motion_x /= 2;
2445         motion_y /= 2;
2446     }
2447
2448     if(field_based){
2449         motion_y += (bottom_field - field_select)*((1 << lowres)-1);
2450     }
2451
2452     sx = motion_x & s_mask;
2453     sy = motion_y & s_mask;
2454     src_x = s->mb_x * 2 * block_s + (motion_x >> lowres + 1);
2455     src_y = (mb_y * 2 * block_s >> field_based) + (motion_y >> lowres + 1);
2456
2457     if (s->out_format == FMT_H263) {
2458         uvsx    = ((motion_x >> 1) & s_mask) | (sx & 1);
2459         uvsy    = ((motion_y >> 1) & s_mask) | (sy & 1);
2460         uvsrc_x = src_x >> 1;
2461         uvsrc_y = src_y >> 1;
2462     } else if (s->out_format == FMT_H261) {
2463         // even chroma mv's are full pel in H261
2464         mx      = motion_x / 4;
2465         my      = motion_y / 4;
2466         uvsx    = (2 * mx) & s_mask;
2467         uvsy    = (2 * my) & s_mask;
2468         uvsrc_x = s->mb_x * block_s + (mx >> lowres);
2469         uvsrc_y =    mb_y * block_s + (my >> lowres);
2470     } else {
2471         if(s->chroma_y_shift){
2472             mx      = motion_x / 2;
2473             my      = motion_y / 2;
2474             uvsx    = mx & s_mask;
2475             uvsy    = my & s_mask;
2476             uvsrc_x = s->mb_x * block_s                 + (mx >> lowres + 1);
2477             uvsrc_y =   (mb_y * block_s >> field_based) + (my >> lowres + 1);
2478         } else {
2479             if(s->chroma_x_shift){
2480             //Chroma422
2481                 mx = motion_x / 2;
2482                 uvsx = mx & s_mask;
2483                 uvsy = motion_y & s_mask;
2484                 uvsrc_y = src_y;
2485                 uvsrc_x = s->mb_x*block_s               + (mx >> (lowres+1));
2486             } else {
2487             //Chroma444
2488                 uvsx = motion_x & s_mask;
2489                 uvsy = motion_y & s_mask;
2490                 uvsrc_x = src_x;
2491                 uvsrc_y = src_y;
2492             }
2493         }
2494     }
2495
2496     ptr_y  = ref_picture[0] + src_y   * linesize   + src_x;
2497     ptr_cb = ref_picture[1] + uvsrc_y * uvlinesize + uvsrc_x;
2498     ptr_cr = ref_picture[2] + uvsrc_y * uvlinesize + uvsrc_x;
2499
2500     if ((unsigned) src_x > FFMAX( h_edge_pos - (!!sx) - 2 * block_s,       0) || uvsrc_y<0 ||
2501         (unsigned) src_y > FFMAX((v_edge_pos >> field_based) - (!!sy) - h, 0)) {
2502         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, ptr_y,
2503                                  linesize >> field_based, linesize >> field_based,
2504                                  17, 17 + field_based,
2505                                 src_x, src_y << field_based, h_edge_pos,
2506                                 v_edge_pos);
2507         ptr_y = s->sc.edge_emu_buffer;
2508         if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
2509             uint8_t *ubuf = s->sc.edge_emu_buffer + 18 * s->linesize;
2510             uint8_t *vbuf =ubuf + 9 * s->uvlinesize;
2511             s->vdsp.emulated_edge_mc(ubuf,  ptr_cb,
2512                                      uvlinesize >> field_based, uvlinesize >> field_based,
2513                                      9, 9 + field_based,
2514                                     uvsrc_x, uvsrc_y << field_based,
2515                                     h_edge_pos >> 1, v_edge_pos >> 1);
2516             s->vdsp.emulated_edge_mc(vbuf,  ptr_cr,
2517                                      uvlinesize >> field_based,uvlinesize >> field_based,
2518                                      9, 9 + field_based,
2519                                     uvsrc_x, uvsrc_y << field_based,
2520                                     h_edge_pos >> 1, v_edge_pos >> 1);
2521             ptr_cb = ubuf;
2522             ptr_cr = vbuf;
2523         }
2524     }
2525
2526     // FIXME use this for field pix too instead of the obnoxious hack which changes picture.f->data
2527     if (bottom_field) {
2528         dest_y  += s->linesize;
2529         dest_cb += s->uvlinesize;
2530         dest_cr += s->uvlinesize;
2531     }
2532
2533     if (field_select) {
2534         ptr_y   += s->linesize;
2535         ptr_cb  += s->uvlinesize;
2536         ptr_cr  += s->uvlinesize;
2537     }
2538
2539     sx = (sx << 2) >> lowres;
2540     sy = (sy << 2) >> lowres;
2541     pix_op[lowres - 1](dest_y, ptr_y, linesize, h, sx, sy);
2542
2543     if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
2544         int hc = s->chroma_y_shift ? (h+1-bottom_field)>>1 : h;
2545         uvsx = (uvsx << 2) >> lowres;
2546         uvsy = (uvsy << 2) >> lowres;
2547         if (hc) {
2548             pix_op[op_index](dest_cb, ptr_cb, uvlinesize, hc, uvsx, uvsy);
2549             pix_op[op_index](dest_cr, ptr_cr, uvlinesize, hc, uvsx, uvsy);
2550         }
2551     }
2552     // FIXME h261 lowres loop filter
2553 }
2554
2555 static inline void chroma_4mv_motion_lowres(MpegEncContext *s,
2556                                             uint8_t *dest_cb, uint8_t *dest_cr,
2557                                             uint8_t **ref_picture,
2558                                             h264_chroma_mc_func * pix_op,
2559                                             int mx, int my)
2560 {
2561     const int lowres     = s->avctx->lowres;
2562     const int op_index   = FFMIN(lowres, 3);
2563     const int block_s    = 8 >> lowres;
2564     const int s_mask     = (2 << lowres) - 1;
2565     const int h_edge_pos = s->h_edge_pos >> lowres + 1;
2566     const int v_edge_pos = s->v_edge_pos >> lowres + 1;
2567     int emu = 0, src_x, src_y, sx, sy;
2568     ptrdiff_t offset;
2569     uint8_t *ptr;
2570
2571     if (s->quarter_sample) {
2572         mx /= 2;
2573         my /= 2;
2574     }
2575
2576     /* In case of 8X8, we construct a single chroma motion vector
2577        with a special rounding */
2578     mx = ff_h263_round_chroma(mx);
2579     my = ff_h263_round_chroma(my);
2580
2581     sx = mx & s_mask;
2582     sy = my & s_mask;
2583     src_x = s->mb_x * block_s + (mx >> lowres + 1);
2584     src_y = s->mb_y * block_s + (my >> lowres + 1);
2585
2586     offset = src_y * s->uvlinesize + src_x;
2587     ptr = ref_picture[1] + offset;
2588     if ((unsigned) src_x > FFMAX(h_edge_pos - (!!sx) - block_s, 0) ||
2589         (unsigned) src_y > FFMAX(v_edge_pos - (!!sy) - block_s, 0)) {
2590         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, ptr,
2591                                  s->uvlinesize, s->uvlinesize,
2592                                  9, 9,
2593                                  src_x, src_y, h_edge_pos, v_edge_pos);
2594         ptr = s->sc.edge_emu_buffer;
2595         emu = 1;
2596     }
2597     sx = (sx << 2) >> lowres;
2598     sy = (sy << 2) >> lowres;
2599     pix_op[op_index](dest_cb, ptr, s->uvlinesize, block_s, sx, sy);
2600
2601     ptr = ref_picture[2] + offset;
2602     if (emu) {
2603         s->vdsp.emulated_edge_mc(s->sc.edge_emu_buffer, ptr,
2604                                  s->uvlinesize, s->uvlinesize,
2605                                  9, 9,
2606                                  src_x, src_y, h_edge_pos, v_edge_pos);
2607         ptr = s->sc.edge_emu_buffer;
2608     }
2609     pix_op[op_index](dest_cr, ptr, s->uvlinesize, block_s, sx, sy);
2610 }
2611
2612 /**
2613  * motion compensation of a single macroblock
2614  * @param s context
2615  * @param dest_y luma destination pointer
2616  * @param dest_cb chroma cb/u destination pointer
2617  * @param dest_cr chroma cr/v destination pointer
2618  * @param dir direction (0->forward, 1->backward)
2619  * @param ref_picture array[3] of pointers to the 3 planes of the reference picture
2620  * @param pix_op halfpel motion compensation function (average or put normally)
2621  * the motion vectors are taken from s->mv and the MV type from s->mv_type
2622  */
2623 static inline void MPV_motion_lowres(MpegEncContext *s,
2624                                      uint8_t *dest_y, uint8_t *dest_cb,
2625                                      uint8_t *dest_cr,
2626                                      int dir, uint8_t **ref_picture,
2627                                      h264_chroma_mc_func *pix_op)
2628 {
2629     int mx, my;
2630     int mb_x, mb_y, i;
2631     const int lowres  = s->avctx->lowres;
2632     const int block_s = 8 >>lowres;
2633
2634     mb_x = s->mb_x;
2635     mb_y = s->mb_y;
2636
2637     switch (s->mv_type) {
2638     case MV_TYPE_16X16:
2639         mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2640                            0, 0, 0,
2641                            ref_picture, pix_op,
2642                            s->mv[dir][0][0], s->mv[dir][0][1],
2643                            2 * block_s, mb_y);
2644         break;
2645     case MV_TYPE_8X8:
2646         mx = 0;
2647         my = 0;
2648         for (i = 0; i < 4; i++) {
2649             hpel_motion_lowres(s, dest_y + ((i & 1) + (i >> 1) *
2650                                s->linesize) * block_s,
2651                                ref_picture[0], 0, 0,
2652                                (2 * mb_x + (i & 1)) * block_s,
2653                                (2 * mb_y + (i >> 1)) * block_s,
2654                                s->width, s->height, s->linesize,
2655                                s->h_edge_pos >> lowres, s->v_edge_pos >> lowres,
2656                                block_s, block_s, pix_op,
2657                                s->mv[dir][i][0], s->mv[dir][i][1]);
2658
2659             mx += s->mv[dir][i][0];
2660             my += s->mv[dir][i][1];
2661         }
2662
2663         if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY))
2664             chroma_4mv_motion_lowres(s, dest_cb, dest_cr, ref_picture,
2665                                      pix_op, mx, my);
2666         break;
2667     case MV_TYPE_FIELD:
2668         if (s->picture_structure == PICT_FRAME) {
2669             /* top field */
2670             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2671                                1, 0, s->field_select[dir][0],
2672                                ref_picture, pix_op,
2673                                s->mv[dir][0][0], s->mv[dir][0][1],
2674                                block_s, mb_y);
2675             /* bottom field */
2676             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2677                                1, 1, s->field_select[dir][1],
2678                                ref_picture, pix_op,
2679                                s->mv[dir][1][0], s->mv[dir][1][1],
2680                                block_s, mb_y);
2681         } else {
2682             if (s->picture_structure != s->field_select[dir][0] + 1 &&
2683                 s->pict_type != AV_PICTURE_TYPE_B && !s->first_field) {
2684                 ref_picture = s->current_picture_ptr->f->data;
2685
2686             }
2687             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2688                                0, 0, s->field_select[dir][0],
2689                                ref_picture, pix_op,
2690                                s->mv[dir][0][0],
2691                                s->mv[dir][0][1], 2 * block_s, mb_y >> 1);
2692             }
2693         break;
2694     case MV_TYPE_16X8:
2695         for (i = 0; i < 2; i++) {
2696             uint8_t **ref2picture;
2697
2698             if (s->picture_structure == s->field_select[dir][i] + 1 ||
2699                 s->pict_type == AV_PICTURE_TYPE_B || s->first_field) {
2700                 ref2picture = ref_picture;
2701             } else {
2702                 ref2picture = s->current_picture_ptr->f->data;
2703             }
2704
2705             mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2706                                0, 0, s->field_select[dir][i],
2707                                ref2picture, pix_op,
2708                                s->mv[dir][i][0], s->mv[dir][i][1] +
2709                                2 * block_s * i, block_s, mb_y >> 1);
2710
2711             dest_y  +=  2 * block_s *  s->linesize;
2712             dest_cb += (2 * block_s >> s->chroma_y_shift) * s->uvlinesize;
2713             dest_cr += (2 * block_s >> s->chroma_y_shift) * s->uvlinesize;
2714         }
2715         break;
2716     case MV_TYPE_DMV:
2717         if (s->picture_structure == PICT_FRAME) {
2718             for (i = 0; i < 2; i++) {
2719                 int j;
2720                 for (j = 0; j < 2; j++) {
2721                     mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2722                                        1, j, j ^ i,
2723                                        ref_picture, pix_op,
2724                                        s->mv[dir][2 * i + j][0],
2725                                        s->mv[dir][2 * i + j][1],
2726                                        block_s, mb_y);
2727                 }
2728                 pix_op = s->h264chroma.avg_h264_chroma_pixels_tab;
2729             }
2730         } else {
2731             for (i = 0; i < 2; i++) {
2732                 mpeg_motion_lowres(s, dest_y, dest_cb, dest_cr,
2733                                    0, 0, s->picture_structure != i + 1,
2734                                    ref_picture, pix_op,
2735                                    s->mv[dir][2 * i][0],s->mv[dir][2 * i][1],
2736                                    2 * block_s, mb_y >> 1);
2737
2738                 // after put we make avg of the same block
2739                 pix_op = s->h264chroma.avg_h264_chroma_pixels_tab;
2740
2741                 // opposite parity is always in the same
2742                 // frame if this is second field
2743                 if (!s->first_field) {
2744                     ref_picture = s->current_picture_ptr->f->data;
2745                 }
2746             }
2747         }
2748         break;
2749     default:
2750         av_assert2(0);
2751     }
2752 }
2753
2754 /**
2755  * find the lowest MB row referenced in the MVs
2756  */
2757 int ff_mpv_lowest_referenced_row(MpegEncContext *s, int dir)
2758 {
2759     int my_max = INT_MIN, my_min = INT_MAX, qpel_shift = !s->quarter_sample;
2760     int my, off, i, mvs;
2761
2762     if (s->picture_structure != PICT_FRAME || s->mcsel)
2763         goto unhandled;
2764
2765     switch (s->mv_type) {
2766         case MV_TYPE_16X16:
2767             mvs = 1;
2768             break;
2769         case MV_TYPE_16X8:
2770             mvs = 2;
2771             break;
2772         case MV_TYPE_8X8:
2773             mvs = 4;
2774             break;
2775         default:
2776             goto unhandled;
2777     }
2778
2779     for (i = 0; i < mvs; i++) {
2780         my = s->mv[dir][i][1];
2781         my_max = FFMAX(my_max, my);
2782         my_min = FFMIN(my_min, my);
2783     }
2784
2785     off = ((FFMAX(-my_min, my_max)<<qpel_shift) + 63) >> 6;
2786
2787     return av_clip(s->mb_y + off, 0, s->mb_height - 1);
2788 unhandled:
2789     return s->mb_height-1;
2790 }
2791
2792 /* put block[] to dest[] */
2793 static inline void put_dct(MpegEncContext *s,
2794                            int16_t *block, int i, uint8_t *dest, int line_size, int qscale)
2795 {
2796     s->dct_unquantize_intra(s, block, i, qscale);
2797     s->idsp.idct_put(dest, line_size, block);
2798 }
2799
2800 /* add block[] to dest[] */
2801 static inline void add_dct(MpegEncContext *s,
2802                            int16_t *block, int i, uint8_t *dest, int line_size)
2803 {
2804     if (s->block_last_index[i] >= 0) {
2805         s->idsp.idct_add(dest, line_size, block);
2806     }
2807 }
2808
2809 static inline void add_dequant_dct(MpegEncContext *s,
2810                            int16_t *block, int i, uint8_t *dest, int line_size, int qscale)
2811 {
2812     if (s->block_last_index[i] >= 0) {
2813         s->dct_unquantize_inter(s, block, i, qscale);
2814
2815         s->idsp.idct_add(dest, line_size, block);
2816     }
2817 }
2818
2819 /**
2820  * Clean dc, ac, coded_block for the current non-intra MB.
2821  */
2822 void ff_clean_intra_table_entries(MpegEncContext *s)
2823 {
2824     int wrap = s->b8_stride;
2825     int xy = s->block_index[0];
2826
2827     s->dc_val[0][xy           ] =
2828     s->dc_val[0][xy + 1       ] =
2829     s->dc_val[0][xy     + wrap] =
2830     s->dc_val[0][xy + 1 + wrap] = 1024;
2831     /* ac pred */
2832     memset(s->ac_val[0][xy       ], 0, 32 * sizeof(int16_t));
2833     memset(s->ac_val[0][xy + wrap], 0, 32 * sizeof(int16_t));
2834     if (s->msmpeg4_version>=3) {
2835         s->coded_block[xy           ] =
2836         s->coded_block[xy + 1       ] =
2837         s->coded_block[xy     + wrap] =
2838         s->coded_block[xy + 1 + wrap] = 0;
2839     }
2840     /* chroma */
2841     wrap = s->mb_stride;
2842     xy = s->mb_x + s->mb_y * wrap;
2843     s->dc_val[1][xy] =
2844     s->dc_val[2][xy] = 1024;
2845     /* ac pred */
2846     memset(s->ac_val[1][xy], 0, 16 * sizeof(int16_t));
2847     memset(s->ac_val[2][xy], 0, 16 * sizeof(int16_t));
2848
2849     s->mbintra_table[xy]= 0;
2850 }
2851
2852 /* generic function called after a macroblock has been parsed by the
2853    decoder or after it has been encoded by the encoder.
2854
2855    Important variables used:
2856    s->mb_intra : true if intra macroblock
2857    s->mv_dir   : motion vector direction
2858    s->mv_type  : motion vector type
2859    s->mv       : motion vector
2860    s->interlaced_dct : true if interlaced dct used (mpeg2)
2861  */
2862 static av_always_inline
2863 void mpv_decode_mb_internal(MpegEncContext *s, int16_t block[12][64],
2864                             int lowres_flag, int is_mpeg12)
2865 {
2866     const int mb_xy = s->mb_y * s->mb_stride + s->mb_x;
2867
2868     if (CONFIG_XVMC &&
2869         s->avctx->hwaccel && s->avctx->hwaccel->decode_mb) {
2870         s->avctx->hwaccel->decode_mb(s);//xvmc uses pblocks
2871         return;
2872     }
2873
2874     if(s->avctx->debug&FF_DEBUG_DCT_COEFF) {
2875        /* print DCT coefficients */
2876        int i,j;
2877        av_log(s->avctx, AV_LOG_DEBUG, "DCT coeffs of MB at %dx%d:\n", s->mb_x, s->mb_y);
2878        for(i=0; i<6; i++){
2879            for(j=0; j<64; j++){
2880                av_log(s->avctx, AV_LOG_DEBUG, "%5d",
2881                       block[i][s->idsp.idct_permutation[j]]);
2882            }
2883            av_log(s->avctx, AV_LOG_DEBUG, "\n");
2884        }
2885     }
2886
2887     s->current_picture.qscale_table[mb_xy] = s->qscale;
2888
2889     /* update DC predictors for P macroblocks */
2890     if (!s->mb_intra) {
2891         if (!is_mpeg12 && (s->h263_pred || s->h263_aic)) {
2892             if(s->mbintra_table[mb_xy])
2893                 ff_clean_intra_table_entries(s);
2894         } else {
2895             s->last_dc[0] =
2896             s->last_dc[1] =
2897             s->last_dc[2] = 128 << s->intra_dc_precision;
2898         }
2899     }
2900     else if (!is_mpeg12 && (s->h263_pred || s->h263_aic))
2901         s->mbintra_table[mb_xy]=1;
2902
2903     if ((s->avctx->flags & CODEC_FLAG_PSNR) || s->avctx->frame_skip_threshold || s->avctx->frame_skip_factor ||
2904         !(s->encoding && (s->intra_only || s->pict_type == AV_PICTURE_TYPE_B) &&
2905           s->avctx->mb_decision != FF_MB_DECISION_RD)) { // FIXME precalc
2906         uint8_t *dest_y, *dest_cb, *dest_cr;
2907         int dct_linesize, dct_offset;
2908         op_pixels_func (*op_pix)[4];
2909         qpel_mc_func (*op_qpix)[16];
2910         const int linesize   = s->current_picture.f->linesize[0]; //not s->linesize as this would be wrong for field pics
2911         const int uvlinesize = s->current_picture.f->linesize[1];
2912         const int readable= s->pict_type != AV_PICTURE_TYPE_B || s->encoding || s->avctx->draw_horiz_band || lowres_flag;
2913         const int block_size= lowres_flag ? 8>>s->avctx->lowres : 8;
2914
2915         /* avoid copy if macroblock skipped in last frame too */
2916         /* skip only during decoding as we might trash the buffers during encoding a bit */
2917         if(!s->encoding){
2918             uint8_t *mbskip_ptr = &s->mbskip_table[mb_xy];
2919
2920             if (s->mb_skipped) {
2921                 s->mb_skipped= 0;
2922                 av_assert2(s->pict_type!=AV_PICTURE_TYPE_I);
2923                 *mbskip_ptr = 1;
2924             } else if(!s->current_picture.reference) {
2925                 *mbskip_ptr = 1;
2926             } else{
2927                 *mbskip_ptr = 0; /* not skipped */
2928             }
2929         }
2930
2931         dct_linesize = linesize << s->interlaced_dct;
2932         dct_offset   = s->interlaced_dct ? linesize : linesize * block_size;
2933
2934         if(readable){
2935             dest_y=  s->dest[0];
2936             dest_cb= s->dest[1];
2937             dest_cr= s->dest[2];
2938         }else{
2939             dest_y = s->sc.b_scratchpad;
2940             dest_cb= s->sc.b_scratchpad+16*linesize;
2941             dest_cr= s->sc.b_scratchpad+32*linesize;
2942         }
2943
2944         if (!s->mb_intra) {
2945             /* motion handling */
2946             /* decoding or more than one mb_type (MC was already done otherwise) */
2947             if(!s->encoding){
2948
2949                 if(HAVE_THREADS && s->avctx->active_thread_type&FF_THREAD_FRAME) {
2950                     if (s->mv_dir & MV_DIR_FORWARD) {
2951                         ff_thread_await_progress(&s->last_picture_ptr->tf,
2952                                                  ff_mpv_lowest_referenced_row(s, 0),
2953                                                  0);
2954                     }
2955                     if (s->mv_dir & MV_DIR_BACKWARD) {
2956                         ff_thread_await_progress(&s->next_picture_ptr->tf,
2957                                                  ff_mpv_lowest_referenced_row(s, 1),
2958                                                  0);
2959                     }
2960                 }
2961
2962                 if(lowres_flag){
2963                     h264_chroma_mc_func *op_pix = s->h264chroma.put_h264_chroma_pixels_tab;
2964
2965                     if (s->mv_dir & MV_DIR_FORWARD) {
2966                         MPV_motion_lowres(s, dest_y, dest_cb, dest_cr, 0, s->last_picture.f->data, op_pix);
2967                         op_pix = s->h264chroma.avg_h264_chroma_pixels_tab;
2968                     }
2969                     if (s->mv_dir & MV_DIR_BACKWARD) {
2970                         MPV_motion_lowres(s, dest_y, dest_cb, dest_cr, 1, s->next_picture.f->data, op_pix);
2971                     }
2972                 }else{
2973                     op_qpix = s->me.qpel_put;
2974                     if ((!s->no_rounding) || s->pict_type==AV_PICTURE_TYPE_B){
2975                         op_pix = s->hdsp.put_pixels_tab;
2976                     }else{
2977                         op_pix = s->hdsp.put_no_rnd_pixels_tab;
2978                     }
2979                     if (s->mv_dir & MV_DIR_FORWARD) {
2980                         ff_mpv_motion(s, dest_y, dest_cb, dest_cr, 0, s->last_picture.f->data, op_pix, op_qpix);
2981                         op_pix = s->hdsp.avg_pixels_tab;
2982                         op_qpix= s->me.qpel_avg;
2983                     }
2984                     if (s->mv_dir & MV_DIR_BACKWARD) {
2985                         ff_mpv_motion(s, dest_y, dest_cb, dest_cr, 1, s->next_picture.f->data, op_pix, op_qpix);
2986                     }
2987                 }
2988             }
2989
2990             /* skip dequant / idct if we are really late ;) */
2991             if(s->avctx->skip_idct){
2992                 if(  (s->avctx->skip_idct >= AVDISCARD_NONREF && s->pict_type == AV_PICTURE_TYPE_B)
2993                    ||(s->avctx->skip_idct >= AVDISCARD_NONKEY && s->pict_type != AV_PICTURE_TYPE_I)
2994                    || s->avctx->skip_idct >= AVDISCARD_ALL)
2995                     goto skip_idct;
2996             }
2997
2998             /* add dct residue */
2999             if(s->encoding || !(   s->msmpeg4_version || s->codec_id==AV_CODEC_ID_MPEG1VIDEO || s->codec_id==AV_CODEC_ID_MPEG2VIDEO
3000                                 || (s->codec_id==AV_CODEC_ID_MPEG4 && !s->mpeg_quant))){
3001                 add_dequant_dct(s, block[0], 0, dest_y                          , dct_linesize, s->qscale);
3002                 add_dequant_dct(s, block[1], 1, dest_y              + block_size, dct_linesize, s->qscale);
3003                 add_dequant_dct(s, block[2], 2, dest_y + dct_offset             , dct_linesize, s->qscale);
3004                 add_dequant_dct(s, block[3], 3, dest_y + dct_offset + block_size, dct_linesize, s->qscale);
3005
3006                 if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
3007                     if (s->chroma_y_shift){
3008                         add_dequant_dct(s, block[4], 4, dest_cb, uvlinesize, s->chroma_qscale);
3009                         add_dequant_dct(s, block[5], 5, dest_cr, uvlinesize, s->chroma_qscale);
3010                     }else{
3011                         dct_linesize >>= 1;
3012                         dct_offset >>=1;
3013                         add_dequant_dct(s, block[4], 4, dest_cb,              dct_linesize, s->chroma_qscale);
3014                         add_dequant_dct(s, block[5], 5, dest_cr,              dct_linesize, s->chroma_qscale);
3015                         add_dequant_dct(s, block[6], 6, dest_cb + dct_offset, dct_linesize, s->chroma_qscale);
3016                         add_dequant_dct(s, block[7], 7, dest_cr + dct_offset, dct_linesize, s->chroma_qscale);
3017                     }
3018                 }
3019             } else if(is_mpeg12 || (s->codec_id != AV_CODEC_ID_WMV2)){
3020                 add_dct(s, block[0], 0, dest_y                          , dct_linesize);
3021                 add_dct(s, block[1], 1, dest_y              + block_size, dct_linesize);
3022                 add_dct(s, block[2], 2, dest_y + dct_offset             , dct_linesize);
3023                 add_dct(s, block[3], 3, dest_y + dct_offset + block_size, dct_linesize);
3024
3025                 if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
3026                     if(s->chroma_y_shift){//Chroma420
3027                         add_dct(s, block[4], 4, dest_cb, uvlinesize);
3028                         add_dct(s, block[5], 5, dest_cr, uvlinesize);
3029                     }else{
3030                         //chroma422
3031                         dct_linesize = uvlinesize << s->interlaced_dct;
3032                         dct_offset   = s->interlaced_dct ? uvlinesize : uvlinesize*block_size;
3033
3034                         add_dct(s, block[4], 4, dest_cb, dct_linesize);
3035                         add_dct(s, block[5], 5, dest_cr, dct_linesize);
3036                         add_dct(s, block[6], 6, dest_cb+dct_offset, dct_linesize);
3037                         add_dct(s, block[7], 7, dest_cr+dct_offset, dct_linesize);
3038                         if(!s->chroma_x_shift){//Chroma444
3039                             add_dct(s, block[8], 8, dest_cb+block_size, dct_linesize);
3040                             add_dct(s, block[9], 9, dest_cr+block_size, dct_linesize);
3041                             add_dct(s, block[10], 10, dest_cb+block_size+dct_offset, dct_linesize);
3042                             add_dct(s, block[11], 11, dest_cr+block_size+dct_offset, dct_linesize);
3043                         }
3044                     }
3045                 }//fi gray
3046             }
3047             else if (CONFIG_WMV2_DECODER || CONFIG_WMV2_ENCODER) {
3048                 ff_wmv2_add_mb(s, block, dest_y, dest_cb, dest_cr);
3049             }
3050         } else {
3051             /* dct only in intra block */
3052             if(s->encoding || !(s->codec_id==AV_CODEC_ID_MPEG1VIDEO || s->codec_id==AV_CODEC_ID_MPEG2VIDEO)){
3053                 put_dct(s, block[0], 0, dest_y                          , dct_linesize, s->qscale);
3054                 put_dct(s, block[1], 1, dest_y              + block_size, dct_linesize, s->qscale);
3055                 put_dct(s, block[2], 2, dest_y + dct_offset             , dct_linesize, s->qscale);
3056                 put_dct(s, block[3], 3, dest_y + dct_offset + block_size, dct_linesize, s->qscale);
3057
3058                 if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
3059                     if(s->chroma_y_shift){
3060                         put_dct(s, block[4], 4, dest_cb, uvlinesize, s->chroma_qscale);
3061                         put_dct(s, block[5], 5, dest_cr, uvlinesize, s->chroma_qscale);
3062                     }else{
3063                         dct_offset >>=1;
3064                         dct_linesize >>=1;
3065                         put_dct(s, block[4], 4, dest_cb,              dct_linesize, s->chroma_qscale);
3066                         put_dct(s, block[5], 5, dest_cr,              dct_linesize, s->chroma_qscale);
3067                         put_dct(s, block[6], 6, dest_cb + dct_offset, dct_linesize, s->chroma_qscale);
3068                         put_dct(s, block[7], 7, dest_cr + dct_offset, dct_linesize, s->chroma_qscale);
3069                     }
3070                 }
3071             }else{
3072                 s->idsp.idct_put(dest_y,                           dct_linesize, block[0]);
3073                 s->idsp.idct_put(dest_y              + block_size, dct_linesize, block[1]);
3074                 s->idsp.idct_put(dest_y + dct_offset,              dct_linesize, block[2]);
3075                 s->idsp.idct_put(dest_y + dct_offset + block_size, dct_linesize, block[3]);
3076
3077                 if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
3078                     if(s->chroma_y_shift){
3079                         s->idsp.idct_put(dest_cb, uvlinesize, block[4]);
3080                         s->idsp.idct_put(dest_cr, uvlinesize, block[5]);
3081                     }else{
3082
3083                         dct_linesize = uvlinesize << s->interlaced_dct;
3084                         dct_offset   = s->interlaced_dct ? uvlinesize : uvlinesize*block_size;
3085
3086                         s->idsp.idct_put(dest_cb,              dct_linesize, block[4]);
3087                         s->idsp.idct_put(dest_cr,              dct_linesize, block[5]);
3088                         s->idsp.idct_put(dest_cb + dct_offset, dct_linesize, block[6]);
3089                         s->idsp.idct_put(dest_cr + dct_offset, dct_linesize, block[7]);
3090                         if(!s->chroma_x_shift){//Chroma444
3091                             s->idsp.idct_put(dest_cb + block_size,              dct_linesize, block[8]);
3092                             s->idsp.idct_put(dest_cr + block_size,              dct_linesize, block[9]);
3093                             s->idsp.idct_put(dest_cb + block_size + dct_offset, dct_linesize, block[10]);
3094                             s->idsp.idct_put(dest_cr + block_size + dct_offset, dct_linesize, block[11]);
3095                         }
3096                     }
3097                 }//gray
3098             }
3099         }
3100 skip_idct:
3101         if(!readable){
3102             s->hdsp.put_pixels_tab[0][0](s->dest[0], dest_y ,   linesize,16);
3103             if (!CONFIG_GRAY || !(s->avctx->flags & CODEC_FLAG_GRAY)) {
3104                 s->hdsp.put_pixels_tab[s->chroma_x_shift][0](s->dest[1], dest_cb, uvlinesize,16 >> s->chroma_y_shift);
3105                 s->hdsp.put_pixels_tab[s->chroma_x_shift][0](s->dest[2], dest_cr, uvlinesize,16 >> s->chroma_y_shift);
3106             }
3107         }
3108     }
3109 }
3110
3111 void ff_mpv_decode_mb(MpegEncContext *s, int16_t block[12][64])
3112 {
3113 #if !CONFIG_SMALL
3114     if(s->out_format == FMT_MPEG1) {
3115         if(s->avctx->lowres) mpv_decode_mb_internal(s, block, 1, 1);
3116         else                 mpv_decode_mb_internal(s, block, 0, 1);
3117     } else
3118 #endif
3119     if(s->avctx->lowres) mpv_decode_mb_internal(s, block, 1, 0);
3120     else                  mpv_decode_mb_internal(s, block, 0, 0);
3121 }
3122
3123 void ff_mpeg_draw_horiz_band(MpegEncContext *s, int y, int h)
3124 {
3125     ff_draw_horiz_band(s->avctx, s->current_picture_ptr->f,
3126                        s->last_picture_ptr ? s->last_picture_ptr->f : NULL, y, h, s->picture_structure,
3127                        s->first_field, s->low_delay);
3128 }
3129
3130 void ff_init_block_index(MpegEncContext *s){ //FIXME maybe rename
3131     const int linesize   = s->current_picture.f->linesize[0]; //not s->linesize as this would be wrong for field pics
3132     const int uvlinesize = s->current_picture.f->linesize[1];
3133     const int mb_size= 4 - s->avctx->lowres;
3134
3135     s->block_index[0]= s->b8_stride*(s->mb_y*2    ) - 2 + s->mb_x*2;
3136     s->block_index[1]= s->b8_stride*(s->mb_y*2    ) - 1 + s->mb_x*2;
3137     s->block_index[2]= s->b8_stride*(s->mb_y*2 + 1) - 2 + s->mb_x*2;
3138     s->block_index[3]= s->b8_stride*(s->mb_y*2 + 1) - 1 + s->mb_x*2;
3139     s->block_index[4]= s->mb_stride*(s->mb_y + 1)                + s->b8_stride*s->mb_height*2 + s->mb_x - 1;
3140     s->block_index[5]= s->mb_stride*(s->mb_y + s->mb_height + 2) + s->b8_stride*s->mb_height*2 + s->mb_x - 1;
3141     //block_index is not used by mpeg2, so it is not affected by chroma_format
3142
3143     s->dest[0] = s->current_picture.f->data[0] + (int)((s->mb_x - 1U) <<  mb_size);
3144     s->dest[1] = s->current_picture.f->data[1] + (int)((s->mb_x - 1U) << (mb_size - s->chroma_x_shift));
3145     s->dest[2] = s->current_picture.f->data[2] + (int)((s->mb_x - 1U) << (mb_size - s->chroma_x_shift));
3146
3147     if(!(s->pict_type==AV_PICTURE_TYPE_B && s->avctx->draw_horiz_band && s->picture_structure==PICT_FRAME))
3148     {
3149         if(s->picture_structure==PICT_FRAME){
3150         s->dest[0] += s->mb_y *   linesize << mb_size;
3151         s->dest[1] += s->mb_y * uvlinesize << (mb_size - s->chroma_y_shift);
3152         s->dest[2] += s->mb_y * uvlinesize << (mb_size - s->chroma_y_shift);
3153         }else{
3154             s->dest[0] += (s->mb_y>>1) *   linesize << mb_size;
3155             s->dest[1] += (s->mb_y>>1) * uvlinesize << (mb_size - s->chroma_y_shift);
3156             s->dest[2] += (s->mb_y>>1) * uvlinesize << (mb_size - s->chroma_y_shift);
3157             av_assert1((s->mb_y&1) == (s->picture_structure == PICT_BOTTOM_FIELD));
3158         }
3159     }
3160 }
3161
3162 /**
3163  * Permute an 8x8 block.
3164  * @param block the block which will be permuted according to the given permutation vector
3165  * @param permutation the permutation vector
3166  * @param last the last non zero coefficient in scantable order, used to speed the permutation up
3167  * @param scantable the used scantable, this is only used to speed the permutation up, the block is not
3168  *                  (inverse) permutated to scantable order!
3169  */
3170 void ff_block_permute(int16_t *block, uint8_t *permutation, const uint8_t *scantable, int last)
3171 {
3172     int i;
3173     int16_t temp[64];
3174
3175     if(last<=0) return;
3176     //if(permutation[1]==1) return; //FIXME it is ok but not clean and might fail for some permutations
3177
3178     for(i=0; i<=last; i++){
3179         const int j= scantable[i];
3180         temp[j]= block[j];
3181         block[j]=0;
3182     }
3183
3184     for(i=0; i<=last; i++){
3185         const int j= scantable[i];
3186         const int perm_j= permutation[j];
3187         block[perm_j]= temp[j];
3188     }
3189 }
3190
3191 void ff_mpeg_flush(AVCodecContext *avctx){
3192     int i;
3193     MpegEncContext *s = avctx->priv_data;
3194
3195     if (!s || !s->picture)
3196         return;
3197
3198     for (i = 0; i < MAX_PICTURE_COUNT; i++)
3199         ff_mpeg_unref_picture(s->avctx, &s->picture[i]);
3200     s->current_picture_ptr = s->last_picture_ptr = s->next_picture_ptr = NULL;
3201
3202     ff_mpeg_unref_picture(s->avctx, &s->current_picture);
3203     ff_mpeg_unref_picture(s->avctx, &s->last_picture);
3204     ff_mpeg_unref_picture(s->avctx, &s->next_picture);
3205
3206     s->mb_x= s->mb_y= 0;
3207     s->closed_gop= 0;
3208
3209     s->parse_context.state= -1;
3210     s->parse_context.frame_start_found= 0;
3211     s->parse_context.overread= 0;
3212     s->parse_context.overread_index= 0;
3213     s->parse_context.index= 0;
3214     s->parse_context.last_index= 0;
3215     s->bitstream_buffer_size=0;
3216     s->pp_time=0;
3217 }
3218
3219 /**
3220  * set qscale and update qscale dependent variables.
3221  */
3222 void ff_set_qscale(MpegEncContext * s, int qscale)
3223 {
3224     if (qscale < 1)
3225         qscale = 1;
3226     else if (qscale > 31)
3227         qscale = 31;
3228
3229     s->qscale = qscale;
3230     s->chroma_qscale= s->chroma_qscale_table[qscale];
3231
3232     s->y_dc_scale= s->y_dc_scale_table[ qscale ];
3233     s->c_dc_scale= s->c_dc_scale_table[ s->chroma_qscale ];
3234 }
3235
3236 void ff_mpv_report_decode_progress(MpegEncContext *s)
3237 {
3238     if (s->pict_type != AV_PICTURE_TYPE_B && !s->partitioned_frame && !s->er.error_occurred)
3239         ff_thread_report_progress(&s->current_picture_ptr->tf, s->mb_y, 0);
3240 }