avcodec/mss3: Fix runtime error: signed integer overflow: -2146318336 - 2139696256...
[ffmpeg.git] / libavcodec / mss3.c
1 /*
2  * Microsoft Screen 3 (aka Microsoft ATC Screen) decoder
3  * Copyright (c) 2012 Konstantin Shishkov
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * Microsoft Screen 3 (aka Microsoft ATC Screen) decoder
25  */
26
27 #include "avcodec.h"
28 #include "bytestream.h"
29 #include "internal.h"
30 #include "mathops.h"
31 #include "mss34dsp.h"
32
33 #define HEADER_SIZE 27
34
35 #define MODEL2_SCALE       13
36 #define MODEL_SCALE        15
37 #define MODEL256_SEC_SCALE  9
38
39 typedef struct Model2 {
40     int      upd_val, till_rescale;
41     unsigned zero_freq,  zero_weight;
42     unsigned total_freq, total_weight;
43 } Model2;
44
45 typedef struct Model {
46     int weights[16], freqs[16];
47     int num_syms;
48     int tot_weight;
49     int upd_val, max_upd_val, till_rescale;
50 } Model;
51
52 typedef struct Model256 {
53     int weights[256], freqs[256];
54     int tot_weight;
55     int secondary[68];
56     int sec_size;
57     int upd_val, max_upd_val, till_rescale;
58 } Model256;
59
60 #define RAC_BOTTOM 0x01000000
61 typedef struct RangeCoder {
62     const uint8_t *src, *src_end;
63
64     uint32_t range, low;
65     int got_error;
66 } RangeCoder;
67
68 enum BlockType {
69     FILL_BLOCK = 0,
70     IMAGE_BLOCK,
71     DCT_BLOCK,
72     HAAR_BLOCK,
73     SKIP_BLOCK
74 };
75
76 typedef struct BlockTypeContext {
77     int      last_type;
78     Model    bt_model[5];
79 } BlockTypeContext;
80
81 typedef struct FillBlockCoder {
82     int      fill_val;
83     Model    coef_model;
84 } FillBlockCoder;
85
86 typedef struct ImageBlockCoder {
87     Model256 esc_model, vec_entry_model;
88     Model    vec_size_model;
89     Model    vq_model[125];
90 } ImageBlockCoder;
91
92 typedef struct DCTBlockCoder {
93     int      *prev_dc;
94     ptrdiff_t prev_dc_stride;
95     int      prev_dc_height;
96     int      quality;
97     uint16_t qmat[64];
98     Model    dc_model;
99     Model2   sign_model;
100     Model256 ac_model;
101 } DCTBlockCoder;
102
103 typedef struct HaarBlockCoder {
104     int      quality, scale;
105     Model256 coef_model;
106     Model    coef_hi_model;
107 } HaarBlockCoder;
108
109 typedef struct MSS3Context {
110     AVCodecContext   *avctx;
111     AVFrame          *pic;
112
113     int              got_error;
114     RangeCoder       coder;
115     BlockTypeContext btype[3];
116     FillBlockCoder   fill_coder[3];
117     ImageBlockCoder  image_coder[3];
118     DCTBlockCoder    dct_coder[3];
119     HaarBlockCoder   haar_coder[3];
120
121     int              dctblock[64];
122     int              hblock[16 * 16];
123 } MSS3Context;
124
125
126 static void model2_reset(Model2 *m)
127 {
128     m->zero_weight  = 1;
129     m->total_weight = 2;
130     m->zero_freq    = 0x1000;
131     m->total_freq   = 0x2000;
132     m->upd_val      = 4;
133     m->till_rescale = 4;
134 }
135
136 static void model2_update(Model2 *m, int bit)
137 {
138     unsigned scale;
139
140     if (!bit)
141         m->zero_weight++;
142     m->till_rescale--;
143     if (m->till_rescale)
144         return;
145
146     m->total_weight += m->upd_val;
147     if (m->total_weight > 0x2000) {
148         m->total_weight = (m->total_weight + 1) >> 1;
149         m->zero_weight  = (m->zero_weight  + 1) >> 1;
150         if (m->total_weight == m->zero_weight)
151             m->total_weight = m->zero_weight + 1;
152     }
153     m->upd_val = m->upd_val * 5 >> 2;
154     if (m->upd_val > 64)
155         m->upd_val = 64;
156     scale = 0x80000000u / m->total_weight;
157     m->zero_freq    = m->zero_weight  * scale >> 18;
158     m->total_freq   = m->total_weight * scale >> 18;
159     m->till_rescale = m->upd_val;
160 }
161
162 static void model_update(Model *m, int val)
163 {
164     int i, sum = 0;
165     unsigned scale;
166
167     m->weights[val]++;
168     m->till_rescale--;
169     if (m->till_rescale)
170         return;
171     m->tot_weight += m->upd_val;
172
173     if (m->tot_weight > 0x8000) {
174         m->tot_weight = 0;
175         for (i = 0; i < m->num_syms; i++) {
176             m->weights[i]  = (m->weights[i] + 1) >> 1;
177             m->tot_weight +=  m->weights[i];
178         }
179     }
180     scale = 0x80000000u / m->tot_weight;
181     for (i = 0; i < m->num_syms; i++) {
182         m->freqs[i] = sum * scale >> 16;
183         sum += m->weights[i];
184     }
185
186     m->upd_val = m->upd_val * 5 >> 2;
187     if (m->upd_val > m->max_upd_val)
188         m->upd_val = m->max_upd_val;
189     m->till_rescale = m->upd_val;
190 }
191
192 static void model_reset(Model *m)
193 {
194     int i;
195
196     m->tot_weight   = 0;
197     for (i = 0; i < m->num_syms - 1; i++)
198         m->weights[i] = 1;
199     m->weights[m->num_syms - 1] = 0;
200
201     m->upd_val      = m->num_syms;
202     m->till_rescale = 1;
203     model_update(m, m->num_syms - 1);
204     m->till_rescale =
205     m->upd_val      = (m->num_syms + 6) >> 1;
206 }
207
208 static av_cold void model_init(Model *m, int num_syms)
209 {
210     m->num_syms    = num_syms;
211     m->max_upd_val = 8 * num_syms + 48;
212
213     model_reset(m);
214 }
215
216 static void model256_update(Model256 *m, int val)
217 {
218     int i, sum = 0;
219     unsigned scale;
220     int send, sidx = 1;
221
222     m->weights[val]++;
223     m->till_rescale--;
224     if (m->till_rescale)
225         return;
226     m->tot_weight += m->upd_val;
227
228     if (m->tot_weight > 0x8000) {
229         m->tot_weight = 0;
230         for (i = 0; i < 256; i++) {
231             m->weights[i]  = (m->weights[i] + 1) >> 1;
232             m->tot_weight +=  m->weights[i];
233         }
234     }
235     scale = 0x80000000u / m->tot_weight;
236     m->secondary[0] = 0;
237     for (i = 0; i < 256; i++) {
238         m->freqs[i] = sum * scale >> 16;
239         sum += m->weights[i];
240         send = m->freqs[i] >> MODEL256_SEC_SCALE;
241         while (sidx <= send)
242             m->secondary[sidx++] = i - 1;
243     }
244     while (sidx < m->sec_size)
245         m->secondary[sidx++] = 255;
246
247     m->upd_val = m->upd_val * 5 >> 2;
248     if (m->upd_val > m->max_upd_val)
249         m->upd_val = m->max_upd_val;
250     m->till_rescale = m->upd_val;
251 }
252
253 static void model256_reset(Model256 *m)
254 {
255     int i;
256
257     for (i = 0; i < 255; i++)
258         m->weights[i] = 1;
259     m->weights[255] = 0;
260
261     m->tot_weight   = 0;
262     m->upd_val      = 256;
263     m->till_rescale = 1;
264     model256_update(m, 255);
265     m->till_rescale =
266     m->upd_val      = (256 + 6) >> 1;
267 }
268
269 static av_cold void model256_init(Model256 *m)
270 {
271     m->max_upd_val = 8 * 256 + 48;
272     m->sec_size    = (1 << 6) + 2;
273
274     model256_reset(m);
275 }
276
277 static void rac_init(RangeCoder *c, const uint8_t *src, int size)
278 {
279     int i;
280
281     c->src       = src;
282     c->src_end   = src + size;
283     c->low       = 0;
284     for (i = 0; i < FFMIN(size, 4); i++)
285         c->low = (c->low << 8) | *c->src++;
286     c->range     = 0xFFFFFFFF;
287     c->got_error = 0;
288 }
289
290 static void rac_normalise(RangeCoder *c)
291 {
292     for (;;) {
293         c->range <<= 8;
294         c->low   <<= 8;
295         if (c->src < c->src_end) {
296             c->low |= *c->src++;
297         } else if (!c->low) {
298             c->got_error = 1;
299             c->low = 1;
300         }
301         if (c->range >= RAC_BOTTOM)
302             return;
303     }
304 }
305
306 static int rac_get_bit(RangeCoder *c)
307 {
308     int bit;
309
310     c->range >>= 1;
311
312     bit = (c->range <= c->low);
313     if (bit)
314         c->low -= c->range;
315
316     if (c->range < RAC_BOTTOM)
317         rac_normalise(c);
318
319     return bit;
320 }
321
322 static int rac_get_bits(RangeCoder *c, int nbits)
323 {
324     int val;
325
326     c->range >>= nbits;
327     val = c->low / c->range;
328     c->low -= c->range * val;
329
330     if (c->range < RAC_BOTTOM)
331         rac_normalise(c);
332
333     return val;
334 }
335
336 static int rac_get_model2_sym(RangeCoder *c, Model2 *m)
337 {
338     int bit, helper;
339
340     helper = m->zero_freq * (c->range >> MODEL2_SCALE);
341     bit    = (c->low >= helper);
342     if (bit) {
343         c->low   -= helper;
344         c->range -= helper;
345     } else {
346         c->range  = helper;
347     }
348
349     if (c->range < RAC_BOTTOM)
350         rac_normalise(c);
351
352     model2_update(m, bit);
353
354     return bit;
355 }
356
357 static int rac_get_model_sym(RangeCoder *c, Model *m)
358 {
359     int val;
360     int end, end2;
361     unsigned prob, prob2, helper;
362
363     prob       = 0;
364     prob2      = c->range;
365     c->range >>= MODEL_SCALE;
366     val        = 0;
367     end        = m->num_syms >> 1;
368     end2       = m->num_syms;
369     do {
370         helper = m->freqs[end] * c->range;
371         if (helper <= c->low) {
372             val   = end;
373             prob  = helper;
374         } else {
375             end2  = end;
376             prob2 = helper;
377         }
378         end = (end2 + val) >> 1;
379     } while (end != val);
380     c->low  -= prob;
381     c->range = prob2 - prob;
382     if (c->range < RAC_BOTTOM)
383         rac_normalise(c);
384
385     model_update(m, val);
386
387     return val;
388 }
389
390 static int rac_get_model256_sym(RangeCoder *c, Model256 *m)
391 {
392     int val;
393     int start, end;
394     int ssym;
395     unsigned prob, prob2, helper;
396
397     prob2      = c->range;
398     c->range >>= MODEL_SCALE;
399
400     helper     = c->low / c->range;
401     ssym       = helper >> MODEL256_SEC_SCALE;
402     val        = m->secondary[ssym];
403
404     end = start = m->secondary[ssym + 1] + 1;
405     while (end > val + 1) {
406         ssym = (end + val) >> 1;
407         if (m->freqs[ssym] <= helper) {
408             end = start;
409             val = ssym;
410         } else {
411             end   = (end + val) >> 1;
412             start = ssym;
413         }
414     }
415     prob = m->freqs[val] * c->range;
416     if (val != 255)
417         prob2 = m->freqs[val + 1] * c->range;
418
419     c->low  -= prob;
420     c->range = prob2 - prob;
421     if (c->range < RAC_BOTTOM)
422         rac_normalise(c);
423
424     model256_update(m, val);
425
426     return val;
427 }
428
429 static int decode_block_type(RangeCoder *c, BlockTypeContext *bt)
430 {
431     bt->last_type = rac_get_model_sym(c, &bt->bt_model[bt->last_type]);
432
433     return bt->last_type;
434 }
435
436 static int decode_coeff(RangeCoder *c, Model *m)
437 {
438     int val, sign;
439
440     val = rac_get_model_sym(c, m);
441     if (val) {
442         sign = rac_get_bit(c);
443         if (val > 1) {
444             val--;
445             val = (1 << val) + rac_get_bits(c, val);
446         }
447         if (!sign)
448             val = -val;
449     }
450
451     return val;
452 }
453
454 static void decode_fill_block(RangeCoder *c, FillBlockCoder *fc,
455                               uint8_t *dst, ptrdiff_t stride, int block_size)
456 {
457     int i;
458
459     fc->fill_val += decode_coeff(c, &fc->coef_model);
460
461     for (i = 0; i < block_size; i++, dst += stride)
462         memset(dst, fc->fill_val, block_size);
463 }
464
465 static void decode_image_block(RangeCoder *c, ImageBlockCoder *ic,
466                                uint8_t *dst, ptrdiff_t stride, int block_size)
467 {
468     int i, j;
469     int vec_size;
470     int vec[4];
471     int prev_line[16];
472     int A, B, C;
473
474     vec_size = rac_get_model_sym(c, &ic->vec_size_model) + 2;
475     for (i = 0; i < vec_size; i++)
476         vec[i] = rac_get_model256_sym(c, &ic->vec_entry_model);
477     for (; i < 4; i++)
478         vec[i] = 0;
479     memset(prev_line, 0, sizeof(prev_line));
480
481     for (j = 0; j < block_size; j++) {
482         A = 0;
483         B = 0;
484         for (i = 0; i < block_size; i++) {
485             C = B;
486             B = prev_line[i];
487             A = rac_get_model_sym(c, &ic->vq_model[A + B * 5 + C * 25]);
488
489             prev_line[i] = A;
490             if (A < 4)
491                dst[i] = vec[A];
492             else
493                dst[i] = rac_get_model256_sym(c, &ic->esc_model);
494         }
495         dst += stride;
496     }
497 }
498
499 static int decode_dct(RangeCoder *c, DCTBlockCoder *bc, int *block,
500                       int bx, int by)
501 {
502     int skip, val, sign, pos = 1, zz_pos, dc;
503     int blk_pos = bx + by * bc->prev_dc_stride;
504
505     memset(block, 0, sizeof(*block) * 64);
506
507     dc = decode_coeff(c, &bc->dc_model);
508     if (by) {
509         if (bx) {
510             int l, tl, t;
511
512             l  = bc->prev_dc[blk_pos - 1];
513             tl = bc->prev_dc[blk_pos - 1 - bc->prev_dc_stride];
514             t  = bc->prev_dc[blk_pos     - bc->prev_dc_stride];
515
516             if (FFABS(t - tl) <= FFABS(l - tl))
517                 dc += l;
518             else
519                 dc += t;
520         } else {
521             dc += bc->prev_dc[blk_pos - bc->prev_dc_stride];
522         }
523     } else if (bx) {
524         dc += bc->prev_dc[bx - 1];
525     }
526     bc->prev_dc[blk_pos] = dc;
527     block[0]             = dc * bc->qmat[0];
528
529     while (pos < 64) {
530         val = rac_get_model256_sym(c, &bc->ac_model);
531         if (!val)
532             return 0;
533         if (val == 0xF0) {
534             pos += 16;
535             continue;
536         }
537         skip = val >> 4;
538         val  = val & 0xF;
539         if (!val)
540             return -1;
541         pos += skip;
542         if (pos >= 64)
543             return -1;
544
545         sign = rac_get_model2_sym(c, &bc->sign_model);
546         if (val > 1) {
547             val--;
548             val = (1 << val) + rac_get_bits(c, val);
549         }
550         if (!sign)
551             val = -val;
552
553         zz_pos = ff_zigzag_direct[pos];
554         block[zz_pos] = val * bc->qmat[zz_pos];
555         pos++;
556     }
557
558     return pos == 64 ? 0 : -1;
559 }
560
561 static void decode_dct_block(RangeCoder *c, DCTBlockCoder *bc,
562                              uint8_t *dst, ptrdiff_t stride, int block_size,
563                              int *block, int mb_x, int mb_y)
564 {
565     int i, j;
566     int bx, by;
567     int nblocks = block_size >> 3;
568
569     bx = mb_x * nblocks;
570     by = mb_y * nblocks;
571
572     for (j = 0; j < nblocks; j++) {
573         for (i = 0; i < nblocks; i++) {
574             if (decode_dct(c, bc, block, bx + i, by + j)) {
575                 c->got_error = 1;
576                 return;
577             }
578             ff_mss34_dct_put(dst + i * 8, stride, block);
579         }
580         dst += 8 * stride;
581     }
582 }
583
584 static void decode_haar_block(RangeCoder *c, HaarBlockCoder *hc,
585                               uint8_t *dst, ptrdiff_t stride,
586                               int block_size, int *block)
587 {
588     const int hsize = block_size >> 1;
589     int A, B, C, D, t1, t2, t3, t4;
590     int i, j;
591
592     for (j = 0; j < block_size; j++) {
593         for (i = 0; i < block_size; i++) {
594             if (i < hsize && j < hsize)
595                 block[i] = rac_get_model256_sym(c, &hc->coef_model);
596             else
597                 block[i] = decode_coeff(c, &hc->coef_hi_model);
598             block[i] *= hc->scale;
599         }
600         block += block_size;
601     }
602     block -= block_size * block_size;
603
604     for (j = 0; j < hsize; j++) {
605         for (i = 0; i < hsize; i++) {
606             A = block[i];
607             B = block[i + hsize];
608             C = block[i + hsize * block_size];
609             D = block[i + hsize * block_size + hsize];
610
611             t1 = A - B;
612             t2 = C - D;
613             t3 = A + B;
614             t4 = C + D;
615             dst[i * 2]              = av_clip_uint8(t1 - t2);
616             dst[i * 2 + stride]     = av_clip_uint8(t1 + t2);
617             dst[i * 2 + 1]          = av_clip_uint8(t3 - t4);
618             dst[i * 2 + 1 + stride] = av_clip_uint8(t3 + t4);
619         }
620         block += block_size;
621         dst   += stride * 2;
622     }
623 }
624
625 static void reset_coders(MSS3Context *ctx, int quality)
626 {
627     int i, j;
628
629     for (i = 0; i < 3; i++) {
630         ctx->btype[i].last_type = SKIP_BLOCK;
631         for (j = 0; j < 5; j++)
632             model_reset(&ctx->btype[i].bt_model[j]);
633         ctx->fill_coder[i].fill_val = 0;
634         model_reset(&ctx->fill_coder[i].coef_model);
635         model256_reset(&ctx->image_coder[i].esc_model);
636         model256_reset(&ctx->image_coder[i].vec_entry_model);
637         model_reset(&ctx->image_coder[i].vec_size_model);
638         for (j = 0; j < 125; j++)
639             model_reset(&ctx->image_coder[i].vq_model[j]);
640         if (ctx->dct_coder[i].quality != quality) {
641             ctx->dct_coder[i].quality = quality;
642             ff_mss34_gen_quant_mat(ctx->dct_coder[i].qmat, quality, !i);
643         }
644         memset(ctx->dct_coder[i].prev_dc, 0,
645                sizeof(*ctx->dct_coder[i].prev_dc) *
646                ctx->dct_coder[i].prev_dc_stride *
647                ctx->dct_coder[i].prev_dc_height);
648         model_reset(&ctx->dct_coder[i].dc_model);
649         model2_reset(&ctx->dct_coder[i].sign_model);
650         model256_reset(&ctx->dct_coder[i].ac_model);
651         if (ctx->haar_coder[i].quality != quality) {
652             ctx->haar_coder[i].quality = quality;
653             ctx->haar_coder[i].scale   = 17 - 7 * quality / 50;
654         }
655         model_reset(&ctx->haar_coder[i].coef_hi_model);
656         model256_reset(&ctx->haar_coder[i].coef_model);
657     }
658 }
659
660 static av_cold void init_coders(MSS3Context *ctx)
661 {
662     int i, j;
663
664     for (i = 0; i < 3; i++) {
665         for (j = 0; j < 5; j++)
666             model_init(&ctx->btype[i].bt_model[j], 5);
667         model_init(&ctx->fill_coder[i].coef_model, 12);
668         model256_init(&ctx->image_coder[i].esc_model);
669         model256_init(&ctx->image_coder[i].vec_entry_model);
670         model_init(&ctx->image_coder[i].vec_size_model, 3);
671         for (j = 0; j < 125; j++)
672             model_init(&ctx->image_coder[i].vq_model[j], 5);
673         model_init(&ctx->dct_coder[i].dc_model, 12);
674         model256_init(&ctx->dct_coder[i].ac_model);
675         model_init(&ctx->haar_coder[i].coef_hi_model, 12);
676         model256_init(&ctx->haar_coder[i].coef_model);
677     }
678 }
679
680 static int mss3_decode_frame(AVCodecContext *avctx, void *data, int *got_frame,
681                              AVPacket *avpkt)
682 {
683     const uint8_t *buf = avpkt->data;
684     int buf_size = avpkt->size;
685     MSS3Context *c = avctx->priv_data;
686     RangeCoder *acoder = &c->coder;
687     GetByteContext gb;
688     uint8_t *dst[3];
689     int dec_width, dec_height, dec_x, dec_y, quality, keyframe;
690     int x, y, i, mb_width, mb_height, blk_size, btype;
691     int ret;
692
693     if (buf_size < HEADER_SIZE) {
694         av_log(avctx, AV_LOG_ERROR,
695                "Frame should have at least %d bytes, got %d instead\n",
696                HEADER_SIZE, buf_size);
697         return AVERROR_INVALIDDATA;
698     }
699
700     bytestream2_init(&gb, buf, buf_size);
701     keyframe   = bytestream2_get_be32(&gb);
702     if (keyframe & ~0x301) {
703         av_log(avctx, AV_LOG_ERROR, "Invalid frame type %X\n", keyframe);
704         return AVERROR_INVALIDDATA;
705     }
706     keyframe   = !(keyframe & 1);
707     bytestream2_skip(&gb, 6);
708     dec_x      = bytestream2_get_be16(&gb);
709     dec_y      = bytestream2_get_be16(&gb);
710     dec_width  = bytestream2_get_be16(&gb);
711     dec_height = bytestream2_get_be16(&gb);
712
713     if (dec_x + dec_width > avctx->width ||
714         dec_y + dec_height > avctx->height ||
715         (dec_width | dec_height) & 0xF) {
716         av_log(avctx, AV_LOG_ERROR, "Invalid frame dimensions %dx%d +%d,%d\n",
717                dec_width, dec_height, dec_x, dec_y);
718         return AVERROR_INVALIDDATA;
719     }
720     bytestream2_skip(&gb, 4);
721     quality    = bytestream2_get_byte(&gb);
722     if (quality < 1 || quality > 100) {
723         av_log(avctx, AV_LOG_ERROR, "Invalid quality setting %d\n", quality);
724         return AVERROR_INVALIDDATA;
725     }
726     bytestream2_skip(&gb, 4);
727
728     if (keyframe && !bytestream2_get_bytes_left(&gb)) {
729         av_log(avctx, AV_LOG_ERROR, "Keyframe without data found\n");
730         return AVERROR_INVALIDDATA;
731     }
732     if (!keyframe && c->got_error)
733         return buf_size;
734     c->got_error = 0;
735
736     if ((ret = ff_reget_buffer(avctx, c->pic)) < 0)
737         return ret;
738     c->pic->key_frame = keyframe;
739     c->pic->pict_type = keyframe ? AV_PICTURE_TYPE_I : AV_PICTURE_TYPE_P;
740     if (!bytestream2_get_bytes_left(&gb)) {
741         if ((ret = av_frame_ref(data, c->pic)) < 0)
742             return ret;
743         *got_frame      = 1;
744
745         return buf_size;
746     }
747
748     reset_coders(c, quality);
749
750     rac_init(acoder, buf + HEADER_SIZE, buf_size - HEADER_SIZE);
751
752     mb_width  = dec_width  >> 4;
753     mb_height = dec_height >> 4;
754     dst[0] = c->pic->data[0] + dec_x     +  dec_y      * c->pic->linesize[0];
755     dst[1] = c->pic->data[1] + dec_x / 2 + (dec_y / 2) * c->pic->linesize[1];
756     dst[2] = c->pic->data[2] + dec_x / 2 + (dec_y / 2) * c->pic->linesize[2];
757     for (y = 0; y < mb_height; y++) {
758         for (x = 0; x < mb_width; x++) {
759             for (i = 0; i < 3; i++) {
760                 blk_size = 8 << !i;
761
762                 btype = decode_block_type(acoder, c->btype + i);
763                 switch (btype) {
764                 case FILL_BLOCK:
765                     decode_fill_block(acoder, c->fill_coder + i,
766                                       dst[i] + x * blk_size,
767                                       c->pic->linesize[i], blk_size);
768                     break;
769                 case IMAGE_BLOCK:
770                     decode_image_block(acoder, c->image_coder + i,
771                                        dst[i] + x * blk_size,
772                                        c->pic->linesize[i], blk_size);
773                     break;
774                 case DCT_BLOCK:
775                     decode_dct_block(acoder, c->dct_coder + i,
776                                      dst[i] + x * blk_size,
777                                      c->pic->linesize[i], blk_size,
778                                      c->dctblock, x, y);
779                     break;
780                 case HAAR_BLOCK:
781                     decode_haar_block(acoder, c->haar_coder + i,
782                                       dst[i] + x * blk_size,
783                                       c->pic->linesize[i], blk_size,
784                                       c->hblock);
785                     break;
786                 }
787                 if (c->got_error || acoder->got_error) {
788                     av_log(avctx, AV_LOG_ERROR, "Error decoding block %d,%d\n",
789                            x, y);
790                     c->got_error = 1;
791                     return AVERROR_INVALIDDATA;
792                 }
793             }
794         }
795         dst[0] += c->pic->linesize[0] * 16;
796         dst[1] += c->pic->linesize[1] * 8;
797         dst[2] += c->pic->linesize[2] * 8;
798     }
799
800     if ((ret = av_frame_ref(data, c->pic)) < 0)
801         return ret;
802
803     *got_frame      = 1;
804
805     return buf_size;
806 }
807
808 static av_cold int mss3_decode_end(AVCodecContext *avctx)
809 {
810     MSS3Context * const c = avctx->priv_data;
811     int i;
812
813     av_frame_free(&c->pic);
814     for (i = 0; i < 3; i++)
815         av_freep(&c->dct_coder[i].prev_dc);
816
817     return 0;
818 }
819
820 static av_cold int mss3_decode_init(AVCodecContext *avctx)
821 {
822     MSS3Context * const c = avctx->priv_data;
823     int i;
824
825     c->avctx = avctx;
826
827     if ((avctx->width & 0xF) || (avctx->height & 0xF)) {
828         av_log(avctx, AV_LOG_ERROR,
829                "Image dimensions should be a multiple of 16.\n");
830         return AVERROR_INVALIDDATA;
831     }
832
833     c->got_error = 0;
834     for (i = 0; i < 3; i++) {
835         int b_width  = avctx->width  >> (2 + !!i);
836         int b_height = avctx->height >> (2 + !!i);
837         c->dct_coder[i].prev_dc_stride = b_width;
838         c->dct_coder[i].prev_dc_height = b_height;
839         c->dct_coder[i].prev_dc = av_malloc(sizeof(*c->dct_coder[i].prev_dc) *
840                                             b_width * b_height);
841         if (!c->dct_coder[i].prev_dc) {
842             av_log(avctx, AV_LOG_ERROR, "Cannot allocate buffer\n");
843             av_frame_free(&c->pic);
844             while (i >= 0) {
845                 av_freep(&c->dct_coder[i].prev_dc);
846                 i--;
847             }
848             return AVERROR(ENOMEM);
849         }
850     }
851
852     c->pic = av_frame_alloc();
853     if (!c->pic) {
854         mss3_decode_end(avctx);
855         return AVERROR(ENOMEM);
856     }
857
858     avctx->pix_fmt     = AV_PIX_FMT_YUV420P;
859
860     init_coders(c);
861
862     return 0;
863 }
864
865 AVCodec ff_msa1_decoder = {
866     .name           = "msa1",
867     .long_name      = NULL_IF_CONFIG_SMALL("MS ATC Screen"),
868     .type           = AVMEDIA_TYPE_VIDEO,
869     .id             = AV_CODEC_ID_MSA1,
870     .priv_data_size = sizeof(MSS3Context),
871     .init           = mss3_decode_init,
872     .close          = mss3_decode_end,
873     .decode         = mss3_decode_frame,
874     .capabilities   = AV_CODEC_CAP_DR1,
875 };