avcodec/clearvideo: add inter-frame decoding
[ffmpeg.git] / libavcodec / clearvideo.c
1 /*
2  * ClearVideo decoder
3  * Copyright (c) 2012-2018 Konstantin Shishkov
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * ClearVideo decoder
25  */
26
27 #include "avcodec.h"
28 #include "bytestream.h"
29 #include "get_bits.h"
30 #include "idctdsp.h"
31 #include "internal.h"
32 #include "mathops.h"
33 #include "clearvideodata.h"
34
35 typedef struct LevelCodes {
36     uint16_t    mv_esc;
37     uint16_t    bias_esc;
38     VLC         flags_cb;
39     VLC         mv_cb;
40     VLC         bias_cb;
41 } LevelCodes;
42
43 typedef struct MV {
44     int16_t x, y;
45 } MV;
46
47 static const MV zero_mv = { 0 };
48
49 typedef struct MVInfo {
50     int mb_w;
51     int mb_h;
52     int mb_size;
53     int mb_stride;
54     int top;
55     MV  *mv;
56 } MVInfo;
57
58 typedef struct TileInfo {
59     uint16_t        flags;
60     int16_t         bias;
61     MV              mv;
62     struct TileInfo *child[4];
63 } TileInfo;
64
65 typedef struct CLVContext {
66     AVCodecContext *avctx;
67     IDCTDSPContext idsp;
68     AVFrame        *pic;
69     AVFrame        *prev;
70     GetBitContext  gb;
71     int            mb_width, mb_height;
72     int            pmb_width, pmb_height;
73     MVInfo         mvi;
74     int            tile_size;
75     int            tile_shift;
76     VLC            dc_vlc, ac_vlc;
77     LevelCodes     ylev[4], ulev[3], vlev[3];
78     int            luma_dc_quant, chroma_dc_quant, ac_quant;
79     DECLARE_ALIGNED(16, int16_t, block)[64];
80     int            top_dc[3], left_dc[4];
81 } CLVContext;
82
83 static inline int decode_block(CLVContext *ctx, int16_t *blk, int has_ac,
84                                int ac_quant)
85 {
86     GetBitContext *gb = &ctx->gb;
87     int idx = 1, last = 0, val, skip;
88
89     memset(blk, 0, sizeof(*blk) * 64);
90     blk[0] = get_vlc2(gb, ctx->dc_vlc.table, 9, 3);
91     if (blk[0] < 0)
92         return AVERROR_INVALIDDATA;
93     blk[0] -= 63;
94
95     if (!has_ac)
96         return 0;
97
98     while (idx < 64 && !last) {
99         val = get_vlc2(gb, ctx->ac_vlc.table, 9, 2);
100         if (val < 0)
101             return AVERROR_INVALIDDATA;
102         if (val != 0x1BFF) {
103             last =  val >> 12;
104             skip = (val >> 4) & 0xFF;
105             val &= 0xF;
106             if (get_bits1(gb))
107                 val = -val;
108         } else {
109             last = get_bits1(gb);
110             skip = get_bits(gb, 6);
111             val  = get_sbits(gb, 8);
112         }
113         if (val) {
114             int aval = FFABS(val), sign = val < 0;
115             val = ac_quant * (2 * aval + 1);
116             if (!(ac_quant & 1))
117                 val--;
118             if (sign)
119                 val = -val;
120         }
121         idx += skip;
122         if (idx >= 64)
123             return AVERROR_INVALIDDATA;
124         blk[ff_zigzag_direct[idx++]] = val;
125     }
126
127     return (idx <= 64 && last) ? 0 : -1;
128 }
129
130 #define DCT_TEMPLATE(blk, step, bias, shift, dshift, OP)                \
131     const int t0 = OP(2841 * blk[1 * step] +  565 * blk[7 * step]);     \
132     const int t1 = OP( 565 * blk[1 * step] - 2841 * blk[7 * step]);     \
133     const int t2 = OP(1609 * blk[5 * step] + 2408 * blk[3 * step]);     \
134     const int t3 = OP(2408 * blk[5 * step] - 1609 * blk[3 * step]);     \
135     const int t4 = OP(1108 * blk[2 * step] - 2676 * blk[6 * step]);     \
136     const int t5 = OP(2676 * blk[2 * step] + 1108 * blk[6 * step]);     \
137     const int t6 = ((blk[0 * step] + blk[4 * step]) * (1 << dshift)) + bias;  \
138     const int t7 = ((blk[0 * step] - blk[4 * step]) * (1 << dshift)) + bias;  \
139     const int t8 = t0 + t2;                                             \
140     const int t9 = t0 - t2;                                             \
141     const int tA = (int)(181U * (t9 + (t1 - t3)) + 0x80) >> 8;          \
142     const int tB = (int)(181U * (t9 - (t1 - t3)) + 0x80) >> 8;          \
143     const int tC = t1 + t3;                                             \
144                                                                         \
145     blk[0 * step] = (t6 + t5 + t8) >> shift;                            \
146     blk[1 * step] = (t7 + t4 + tA) >> shift;                            \
147     blk[2 * step] = (t7 - t4 + tB) >> shift;                            \
148     blk[3 * step] = (t6 - t5 + tC) >> shift;                            \
149     blk[4 * step] = (t6 - t5 - tC) >> shift;                            \
150     blk[5 * step] = (t7 - t4 - tB) >> shift;                            \
151     blk[6 * step] = (t7 + t4 - tA) >> shift;                            \
152     blk[7 * step] = (t6 + t5 - t8) >> shift;                            \
153
154 #define ROP(x) x
155 #define COP(x) (((x) + 4) >> 3)
156
157 static void clv_dct(int16_t *block)
158 {
159     int i;
160     int16_t *ptr;
161
162     ptr = block;
163     for (i = 0; i < 8; i++) {
164         DCT_TEMPLATE(ptr, 1, 0x80, 8, 11, ROP);
165         ptr += 8;
166     }
167
168     ptr = block;
169     for (i = 0; i < 8; i++) {
170         DCT_TEMPLATE(ptr, 8, 0x2000, 14, 8, COP);
171         ptr++;
172     }
173 }
174
175 static int decode_mb(CLVContext *c, int x, int y)
176 {
177     int i, has_ac[6], off;
178
179     for (i = 0; i < 6; i++)
180         has_ac[i] = get_bits1(&c->gb);
181
182     off = x * 16 + y * 16 * c->pic->linesize[0];
183     for (i = 0; i < 4; i++) {
184         if (decode_block(c, c->block, has_ac[i], c->ac_quant) < 0)
185             return AVERROR_INVALIDDATA;
186         if (!x && !(i & 1)) {
187             c->block[0] += c->top_dc[0];
188             c->top_dc[0] = c->block[0];
189         } else {
190             c->block[0] += c->left_dc[(i & 2) >> 1];
191         }
192         c->left_dc[(i & 2) >> 1] = c->block[0];
193         c->block[0]             *= c->luma_dc_quant;
194         clv_dct(c->block);
195         if (i == 2)
196             off += c->pic->linesize[0] * 8;
197         c->idsp.put_pixels_clamped(c->block,
198                                    c->pic->data[0] + off + (i & 1) * 8,
199                                    c->pic->linesize[0]);
200     }
201
202     off = x * 8 + y * 8 * c->pic->linesize[1];
203     for (i = 1; i < 3; i++) {
204         if (decode_block(c, c->block, has_ac[i + 3], c->ac_quant) < 0)
205             return AVERROR_INVALIDDATA;
206         if (!x) {
207             c->block[0] += c->top_dc[i];
208             c->top_dc[i] = c->block[0];
209         } else {
210             c->block[0] += c->left_dc[i + 1];
211         }
212         c->left_dc[i + 1] = c->block[0];
213         c->block[0]      *= c->chroma_dc_quant;
214         clv_dct(c->block);
215         c->idsp.put_pixels_clamped(c->block, c->pic->data[i] + off,
216                                    c->pic->linesize[i]);
217     }
218
219     return 0;
220 }
221
222 static int copy_block(AVCodecContext *avctx, AVFrame *dst, AVFrame *src,
223                       int plane, int x, int y, int dx, int dy, int size)
224 {
225     int shift = plane > 0;
226     int sx = x + dx;
227     int sy = y + dy;
228     int sstride, dstride, soff, doff;
229     uint8_t *sbuf, *dbuf;
230     int i;
231
232     if (x < 0 || sx < 0 || y < 0 || sy < 0 ||
233         x + size > avctx->coded_width >> shift ||
234         y + size > avctx->coded_height >> shift ||
235         sx + size > avctx->coded_width >> shift ||
236         sy + size > avctx->coded_height >> shift)
237         return AVERROR_INVALIDDATA;
238
239     sstride = src->linesize[plane];
240     dstride = dst->linesize[plane];
241     soff    = sx + sy * sstride;
242     sbuf    = src->data[plane];
243     doff    = x + y * dstride;
244     dbuf    = dst->data[plane];
245
246     for (i = 0; i < size; i++) {
247         uint8_t *dptr = &dbuf[doff];
248         uint8_t *sptr = &sbuf[soff];
249
250         memcpy(dptr, sptr, size);
251         doff += dstride;
252         soff += sstride;
253     }
254
255     return 0;
256 }
257
258 static int copyadd_block(AVCodecContext *avctx, AVFrame *dst, AVFrame *src,
259                          int plane, int x, int y, int dx, int dy, int size, int bias)
260 {
261     int shift = plane > 0;
262     int sx = x + dx;
263     int sy = y + dy;
264     int sstride   = src->linesize[plane];
265     int dstride   = dst->linesize[plane];
266     int soff      = sx + sy * sstride;
267     uint8_t *sbuf = src->data[plane];
268     int doff      = x + y * dstride;
269     uint8_t *dbuf = dst->data[plane];
270     int i, j;
271
272     if (x < 0 || sx < 0 || y < 0 || sy < 0 ||
273         x + size > avctx->coded_width >> shift ||
274         y + size > avctx->coded_height >> shift ||
275         sx + size > avctx->coded_width >> shift ||
276         sy + size > avctx->coded_height >> shift)
277         return AVERROR_INVALIDDATA;
278
279     for (j = 0; j < size; j++) {
280         uint8_t *dptr = &dbuf[doff];
281         uint8_t *sptr = &sbuf[soff];
282
283         for (i = 0; i < size; i++) {
284             int val = sptr[i] + bias;
285
286             dptr[i] = av_clip_uint8(val);
287         }
288
289         doff += dstride;
290         soff += sstride;
291     }
292
293     return 0;
294 }
295
296 static MV mvi_predict(MVInfo *mvi, int mb_x, int mb_y, MV diff)
297 {
298     MV res, pred_mv;
299
300     if (mvi->top) {
301         if (mb_x > 0) {
302             pred_mv = mvi->mv[mvi->mb_stride + mb_x - 1];
303         } else {
304             pred_mv = zero_mv;
305         }
306     } else if ((mb_x == 0) || (mb_x == mvi->mb_w - 1)) {
307         pred_mv = mvi->mv[mb_x];
308     } else {
309         MV A = mvi->mv[mvi->mb_stride + mb_x - 1];
310         MV B = mvi->mv[                 mb_x    ];
311         MV C = mvi->mv[                 mb_x + 1];
312         pred_mv.x = mid_pred(A.x, B.x, C.x);
313         pred_mv.y = mid_pred(A.y, B.y, C.y);
314     }
315
316     res = pred_mv;
317
318     int left_mv = -((mb_x * mvi->mb_size));
319     int right_mv = ((mvi->mb_w - mb_x - 1) * mvi->mb_size);
320     if (res.x < left_mv) {
321         res.x = left_mv;
322     }
323     if (res.x > right_mv) {
324         res.x = right_mv;
325     }
326     int top_mv = -((mb_y * mvi->mb_size));
327     int bot_mv = ((mvi->mb_h - mb_y - 1) * mvi->mb_size);
328     if (res.y < top_mv) {
329         res.y = top_mv;
330     }
331     if (res.y > bot_mv) {
332         res.y = bot_mv;
333     }
334
335     mvi->mv[mvi->mb_stride + mb_x].x = res.x + diff.x;
336     mvi->mv[mvi->mb_stride + mb_x].y = res.y + diff.y;
337
338     return res;
339 }
340
341 static void mvi_reset(MVInfo *mvi, int mb_w, int mb_h, int mb_size)
342 {
343     mvi->top       = 1;
344     mvi->mb_w      = mb_w;
345     mvi->mb_h      = mb_h;
346     mvi->mb_size   = mb_size;
347     mvi->mb_stride = mb_w;
348     memset(mvi->mv, 0, sizeof(MV) * mvi->mb_stride * 2);
349 }
350
351 static void mvi_update_row(MVInfo *mvi)
352 {
353     int i;
354
355     mvi->top = 0;
356     for (i = 0 ; i < mvi->mb_stride; i++) {
357         mvi->mv[i] = mvi->mv[mvi->mb_stride + i];
358     }
359 }
360
361 static TileInfo* decode_tile_info(GetBitContext *gb, LevelCodes *lc, int level)
362 {
363     TileInfo *ti;
364     int i, flags = 0;
365     int16_t bias = 0;
366     MV mv = { 0 };
367
368     if (lc[level].flags_cb.table) {
369         flags = get_vlc2(gb, lc[level].flags_cb.table, lc[level].flags_cb.bits, 2);
370     }
371
372     if (lc[level].mv_cb.table) {
373         uint16_t mv_code = get_vlc2(gb, lc[level].mv_cb.table, lc[level].mv_cb.bits, 3);
374
375         if (mv_code != lc[level].mv_esc) {
376             mv.x = (int8_t)(mv_code & 0xff);
377             mv.y = (int8_t)(mv_code >> 8);
378         } else {
379             mv.x = get_sbits(gb, 8);
380             mv.y = get_sbits(gb, 8);
381         }
382     }
383
384     if (lc[level].bias_cb.table) {
385         uint16_t bias_val = get_vlc2(gb, lc[level].bias_cb.table, lc[level].bias_cb.bits, 2);
386
387         if (bias_val != lc[level].bias_esc) {
388             bias = (int16_t)(bias_val);
389         } else {
390             bias = get_sbits(gb, 16);
391         }
392     }
393
394     ti = av_calloc(1, sizeof(*ti));
395     if (!ti)
396         return NULL;
397
398     ti->flags = flags;
399     ti->mv = mv;
400     ti->bias = bias;
401
402     if (ti->flags) {
403         for (i = 0; i < 4; i++) {
404             if (ti->flags & (1 << i)) {
405                 TileInfo *subti = decode_tile_info(gb, lc, level + 1);
406                 ti->child[i] = subti;
407             }
408         }
409     }
410
411     return ti;
412 }
413
414 static int tile_do_block(AVCodecContext *avctx, AVFrame *dst, AVFrame *src,
415                          int plane, int x, int y, int dx, int dy, int size, int bias)
416 {
417     int ret;
418
419     if (!bias) {
420         ret = copy_block(avctx, dst, src, plane, x, y, dx, dy, size);
421     } else {
422         ret = copyadd_block(avctx, dst, src, plane, x, y, dx, dy, size, bias);
423     }
424
425     return ret;
426 }
427
428 static int restore_tree(AVCodecContext *avctx, AVFrame *dst, AVFrame *src,
429                         int plane, int x, int y, int size,
430                         TileInfo *tile, MV root_mv)
431 {
432     int ret;
433     MV mv;
434
435     mv.x = root_mv.x + tile->mv.x;
436     mv.y = root_mv.y + tile->mv.y;
437
438     if (!tile->flags) {
439         ret = tile_do_block(avctx, dst, src, plane, x, y, mv.x, mv.y, size, tile->bias);
440     } else {
441         int i, hsize = size >> 1;
442
443         for (i = 0; i < 4; i++) {
444             int xoff = (i & 2) == 0 ? 0 : hsize;
445             int yoff = (i & 1) == 0 ? 0 : hsize;
446
447             if (tile->child[i]) {
448                 ret = restore_tree(avctx, dst, src, plane, x + xoff, y + yoff, hsize, tile->child[i], root_mv);
449                 av_freep(&tile->child[i]);
450             } else {
451                 ret = tile_do_block(avctx, dst, src, plane, x + xoff, y + yoff, mv.x, mv.y, hsize, tile->bias);
452             }
453         }
454     }
455
456     return ret;
457 }
458
459 static void extend_edges(AVFrame *buf, int tile_size)
460 {
461     int comp, i, j;
462
463     for (comp = 0; comp < 3; comp++) {
464         int shift = comp > 0;
465         int w = buf->width  >> shift;
466         int h = buf->height >> shift;
467         int size = comp == 0 ? tile_size : tile_size >> 1;
468         int stride = buf->linesize[comp];
469         uint8_t *framebuf = buf->data[comp];
470
471         int right  = size - (w & (size - 1));
472         int bottom = size - (h & (size - 1));
473
474         if ((right == size) && (bottom == size)) {
475             return;
476         }
477         if (right != size) {
478             int off = w;
479             for (j = 0; j < h; j++) {
480                 for (i = 0; i < right; i++) {
481                     framebuf[off + i] = 0x80;
482                 }
483                 off += stride;
484             }
485         }
486         if (bottom != size) {
487             int off = h * stride;
488             for (j = 0; j < bottom; j++) {
489                 for (i = 0; i < stride; i++) {
490                     framebuf[off + i] = 0x80;
491                 }
492                 off += stride;
493             }
494         }
495     }
496 }
497
498 static int clv_decode_frame(AVCodecContext *avctx, void *data,
499                             int *got_frame, AVPacket *avpkt)
500 {
501     const uint8_t *buf = avpkt->data;
502     int buf_size = avpkt->size;
503     CLVContext *c = avctx->priv_data;
504     GetByteContext gb;
505     uint32_t frame_type;
506     int i, j, ret;
507     int mb_ret = 0;
508
509     bytestream2_init(&gb, buf, buf_size);
510     if (avctx->codec_tag == MKTAG('C', 'L', 'V', '1')) {
511         int skip = bytestream2_get_byte(&gb);
512         bytestream2_skip(&gb, (skip + 1) * 8);
513     }
514
515     frame_type = bytestream2_get_byte(&gb);
516
517     if ((frame_type & 0x7f) == 0x30) {
518         if ((ret = ff_reget_buffer(avctx, c->pic)) < 0)
519             return ret;
520
521         c->pic->key_frame = 0;
522         c->pic->pict_type = AV_PICTURE_TYPE_P;
523     } else if (frame_type & 0x2) {
524         if (buf_size < c->mb_width * c->mb_height) {
525             av_log(avctx, AV_LOG_ERROR, "Packet too small\n");
526             return AVERROR_INVALIDDATA;
527         }
528
529         if ((ret = ff_reget_buffer(avctx, c->pic)) < 0)
530             return ret;
531
532         c->pic->key_frame = 1;
533         c->pic->pict_type = AV_PICTURE_TYPE_I;
534
535         bytestream2_get_be32(&gb); // frame size;
536         c->ac_quant        = bytestream2_get_byte(&gb);
537         c->luma_dc_quant   = 32;
538         c->chroma_dc_quant = 32;
539
540         if ((ret = init_get_bits8(&c->gb, buf + bytestream2_tell(&gb),
541                                   buf_size - bytestream2_tell(&gb))) < 0)
542             return ret;
543
544         for (i = 0; i < 3; i++)
545             c->top_dc[i] = 32;
546         for (i = 0; i < 4; i++)
547             c->left_dc[i] = 32;
548
549         for (j = 0; j < c->mb_height; j++) {
550             for (i = 0; i < c->mb_width; i++) {
551                 ret = decode_mb(c, i, j);
552                 if (ret < 0)
553                     mb_ret = ret;
554             }
555         }
556         extend_edges(c->pic, c->tile_size);
557     } else {
558         int plane;
559
560         if ((ret = ff_reget_buffer(avctx, c->pic)) < 0)
561             return ret;
562
563         ret = av_frame_copy(c->pic, c->prev);
564         if (ret < 0)
565             return ret;
566
567         if ((ret = init_get_bits8(&c->gb, buf + bytestream2_tell(&gb),
568                                   buf_size - bytestream2_tell(&gb))) < 0)
569             return ret;
570
571         mvi_reset(&c->mvi, c->pmb_width, c->pmb_height, 1 << c->tile_shift);
572
573         for (j = 0; j < c->pmb_height; j++) {
574             for (i = 0; i < c->pmb_width; i++) {
575                 if (get_bits1(&c->gb)) {
576                     MV mv = mvi_predict(&c->mvi, i, j, zero_mv);
577
578                     for (plane = 0; plane < 3; plane++) {
579                         int16_t x = plane == 0 ? i << c->tile_shift : i << (c->tile_shift - 1);
580                         int16_t y = plane == 0 ? j << c->tile_shift : j << (c->tile_shift - 1);
581                         int16_t size = plane == 0 ? 1 << c->tile_shift : 1 << (c->tile_shift - 1);
582                         int16_t mx = plane == 0 ? mv.x : mv.x / 2;
583                         int16_t my = plane == 0 ? mv.y : mv.y / 2;
584
585                         ret = copy_block(avctx, c->pic, c->prev, plane, x, y, mx, my, size);
586                         if (ret < 0)
587                             mb_ret = ret;
588                     }
589                 } else {
590                     int x = i << c->tile_shift;
591                     int y = j << c->tile_shift;
592                     int size = 1 << c->tile_shift;
593                     TileInfo *tile;
594                     MV mv, cmv;
595
596                     tile = decode_tile_info(&c->gb, c->ylev, 0);
597                     if (!tile)
598                         return AVERROR(ENOMEM);
599                     mv = mvi_predict(&c->mvi, i, j, tile->mv);
600                     ret = restore_tree(avctx, c->pic, c->prev, 0, x, y, size, tile, mv);
601                     if (ret < 0)
602                         mb_ret = ret;
603                     x = i << (c->tile_shift - 1);
604                     y = j << (c->tile_shift - 1);
605                     size = 1 << (c->tile_shift - 1);
606                     cmv.x = mv.x + tile->mv.x;
607                     cmv.y = mv.y + tile->mv.y;
608                     cmv.x /= 2;
609                     cmv.y /= 2;
610                     av_freep(&tile);
611                     tile = decode_tile_info(&c->gb, c->ulev, 0);
612                     if (!tile)
613                         return AVERROR(ENOMEM);
614                     ret = restore_tree(avctx, c->pic, c->prev, 1, x, y, size, tile, cmv);
615                     if (ret < 0)
616                         mb_ret = ret;
617                     av_freep(&tile);
618                     tile = decode_tile_info(&c->gb, c->vlev, 0);
619                     if (!tile)
620                         return AVERROR(ENOMEM);
621                     ret = restore_tree(avctx, c->pic, c->prev, 2, x, y, size, tile, cmv);
622                     if (ret < 0)
623                         mb_ret = ret;
624                     av_freep(&tile);
625                 }
626             }
627             mvi_update_row(&c->mvi);
628         }
629         extend_edges(c->pic, c->tile_size);
630
631         c->pic->key_frame = 0;
632         c->pic->pict_type = AV_PICTURE_TYPE_P;
633     }
634
635     if ((ret = av_frame_ref(data, c->pic)) < 0)
636         return ret;
637
638     FFSWAP(AVFrame *, c->pic, c->prev);
639
640     *got_frame = 1;
641
642     return mb_ret < 0 ? mb_ret : buf_size;
643 }
644
645 static av_cold int clv_decode_init(AVCodecContext *avctx)
646 {
647     CLVContext *const c = avctx->priv_data;
648     int ret, w, h;
649
650     if (avctx->extradata_size == 110) {
651         c->tile_size = AV_RL32(&avctx->extradata[94]);
652     } else if (avctx->extradata_size == 150) {
653         c->tile_size = AV_RB32(&avctx->extradata[134]);
654     } else {
655         av_log(avctx, AV_LOG_ERROR, "Unsupported extradata size: %d\n", avctx->extradata_size);
656         return AVERROR_INVALIDDATA;
657     }
658
659     c->tile_shift = av_log2(c->tile_size);
660     if (1 << c->tile_shift != c->tile_size) {
661         av_log(avctx, AV_LOG_ERROR, "Tile size: %d, is not power of 2.\n", c->tile_size);
662         return AVERROR_INVALIDDATA;
663     }
664
665     avctx->pix_fmt = AV_PIX_FMT_YUV420P;
666     w = avctx->width;
667     h = avctx->height;
668     ret = ff_set_dimensions(avctx, FFALIGN(w, 1 << c->tile_shift), FFALIGN(h, 1 << c->tile_shift));
669     if (ret < 0)
670         return ret;
671     avctx->width  = w;
672     avctx->height = h;
673
674     c->avctx           = avctx;
675     c->mb_width        = FFALIGN(avctx->width,  16) >> 4;
676     c->mb_height       = FFALIGN(avctx->height, 16) >> 4;
677     c->pmb_width       = (w + c->tile_size - 1) >> c->tile_shift;
678     c->pmb_height      = (h + c->tile_size - 1) >> c->tile_shift;
679     c->pic             = av_frame_alloc();
680     c->prev            = av_frame_alloc();
681     c->mvi.mv          = av_calloc(c->pmb_width * 2, sizeof(*c->mvi.mv));
682     if (!c->pic || !c->prev || !c->mvi.mv)
683         return AVERROR(ENOMEM);
684
685     ff_idctdsp_init(&c->idsp, avctx);
686     ret = init_vlc(&c->dc_vlc, 9, NUM_DC_CODES,
687                    clv_dc_bits,  1, 1,
688                    clv_dc_codes, 1, 1, 0);
689     if (ret) {
690         av_log(avctx, AV_LOG_ERROR, "Error initialising DC VLC\n");
691         return ret;
692     }
693     ret = ff_init_vlc_sparse(&c->ac_vlc, 9, NUM_AC_CODES,
694                              clv_ac_bits,  1, 1,
695                              clv_ac_codes, 1, 1,
696                              clv_ac_syms,  2, 2, 0);
697     if (ret) {
698         av_log(avctx, AV_LOG_ERROR, "Error initialising AC VLC\n");
699         return ret;
700     }
701
702     ret = init_vlc(&c->ylev[0].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsy_0_bits),
703                    clv_flagsy_0_bits,  1, 1,
704                    clv_flagsy_0_codes, 2, 2, 0);
705     if (ret)
706         return ret;
707
708     ret = init_vlc(&c->ylev[1].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsy_1_bits),
709                    clv_flagsy_1_bits,  1, 1,
710                    clv_flagsy_1_codes, 2, 2, 0);
711     if (ret)
712         return ret;
713
714     ret = init_vlc(&c->ylev[2].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsy_2_bits),
715                    clv_flagsy_2_bits,  1, 1,
716                    clv_flagsy_2_codes, 2, 2, 0);
717     if (ret)
718         return ret;
719
720     ret = init_vlc(&c->ulev[0].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsu_0_bits),
721                    clv_flagsu_0_bits,  1, 1,
722                    clv_flagsu_0_codes, 2, 2, 0);
723     if (ret)
724         return ret;
725
726     ret = init_vlc(&c->ulev[1].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsu_1_bits),
727                    clv_flagsu_1_bits,  1, 1,
728                    clv_flagsu_1_codes, 2, 2, 0);
729     if (ret)
730         return ret;
731
732     ret = init_vlc(&c->vlev[0].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsv_0_bits),
733                    clv_flagsv_0_bits,  1, 1,
734                    clv_flagsv_0_codes, 2, 2, 0);
735     if (ret)
736         return ret;
737
738     ret = init_vlc(&c->vlev[1].flags_cb, 9, FF_ARRAY_ELEMS(clv_flagsv_1_bits),
739                    clv_flagsv_1_bits,  1, 1,
740                    clv_flagsv_1_codes, 2, 2, 0);
741     if (ret)
742         return ret;
743
744     ret = ff_init_vlc_sparse(&c->ylev[0].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvy_0_bits),
745                              clv_mvy_0_bits,  1, 1,
746                              clv_mvy_0_codes, 2, 2,
747                              clv_mvy_0_syms,  2, 2, 0);
748     if (ret)
749         return ret;
750
751     ret = ff_init_vlc_sparse(&c->ylev[1].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvy_1_bits),
752                              clv_mvy_1_bits,  1, 1,
753                              clv_mvy_1_codes, 2, 2,
754                              clv_mvy_1_syms,  2, 2, 0);
755     if (ret)
756         return ret;
757
758     ret = ff_init_vlc_sparse(&c->ylev[2].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvy_2_bits),
759                              clv_mvy_2_bits,  1, 1,
760                              clv_mvy_2_codes, 2, 2,
761                              clv_mvy_2_syms,  2, 2, 0);
762     if (ret)
763         return ret;
764
765     ret = ff_init_vlc_sparse(&c->ylev[3].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvy_3_bits),
766                              clv_mvy_3_bits,  1, 1,
767                              clv_mvy_3_codes, 2, 2,
768                              clv_mvy_3_syms,  2, 2, 0);
769     if (ret)
770         return ret;
771
772     ret = ff_init_vlc_sparse(&c->ulev[1].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvu_1_bits),
773                              clv_mvu_1_bits,  1, 1,
774                              clv_mvu_1_codes, 2, 2,
775                              clv_mvu_1_syms,  2, 2, 0);
776     if (ret)
777         return ret;
778
779     ret = ff_init_vlc_sparse(&c->ulev[2].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvu_2_bits),
780                              clv_mvu_2_bits,  1, 1,
781                              clv_mvu_2_codes, 2, 2,
782                              clv_mvu_2_syms,  2, 2, 0);
783     if (ret)
784         return ret;
785
786     ret = ff_init_vlc_sparse(&c->vlev[1].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvv_1_bits),
787                              clv_mvv_1_bits,  1, 1,
788                              clv_mvv_1_codes, 2, 2,
789                              clv_mvv_1_syms,  2, 2, 0);
790     if (ret)
791         return ret;
792
793     ret = ff_init_vlc_sparse(&c->vlev[2].mv_cb, 9, FF_ARRAY_ELEMS(clv_mvv_2_bits),
794                              clv_mvv_2_bits,  1, 1,
795                              clv_mvv_2_codes, 2, 2,
796                              clv_mvv_2_syms,  2, 2, 0);
797     if (ret)
798         return ret;
799
800     ret = ff_init_vlc_sparse(&c->ylev[1].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasy_1_bits),
801                              clv_biasy_1_bits,  1, 1,
802                              clv_biasy_1_codes, 2, 2,
803                              clv_biasy_1_syms,  2, 2, 0);
804     if (ret)
805         return ret;
806
807     ret = ff_init_vlc_sparse(&c->ylev[2].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasy_2_bits),
808                              clv_biasy_2_bits,  1, 1,
809                              clv_biasy_2_codes, 2, 2,
810                              clv_biasy_2_syms,  2, 2, 0);
811     if (ret)
812         return ret;
813
814     ret = ff_init_vlc_sparse(&c->ylev[3].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasy_3_bits),
815                              clv_biasy_3_bits,  1, 1,
816                              clv_biasy_3_codes, 2, 2,
817                              clv_biasy_3_syms,  2, 2, 0);
818     if (ret)
819         return ret;
820
821     ret = ff_init_vlc_sparse(&c->ulev[1].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasu_1_bits),
822                              clv_biasu_1_bits,  1, 1,
823                              clv_biasu_1_codes, 2, 2,
824                              clv_biasu_1_syms,  2, 2, 0);
825     if (ret)
826         return ret;
827
828     ret = ff_init_vlc_sparse(&c->ulev[2].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasu_2_bits),
829                              clv_biasu_2_bits,  1, 1,
830                              clv_biasu_2_codes, 2, 2,
831                              clv_biasu_2_syms,  2, 2, 0);
832     if (ret)
833         return ret;
834
835     ret = ff_init_vlc_sparse(&c->vlev[1].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasv_1_bits),
836                              clv_biasv_1_bits,  1, 1,
837                              clv_biasv_1_codes, 2, 2,
838                              clv_biasv_1_syms,  2, 2, 0);
839     if (ret)
840         return ret;
841
842     ret = ff_init_vlc_sparse(&c->vlev[2].bias_cb, 9, FF_ARRAY_ELEMS(clv_biasv_2_bits),
843                              clv_biasv_2_bits,  1, 1,
844                              clv_biasv_2_codes, 2, 2,
845                              clv_biasv_2_syms,  2, 2, 0);
846     if (ret)
847         return ret;
848
849     c->ylev[0].mv_esc = 0x0909;
850     c->ylev[1].mv_esc = 0x0A0A;
851     c->ylev[2].mv_esc = 0x1010;
852     c->ylev[3].mv_esc = 0x1313;
853     c->ulev[1].mv_esc = 0x0808;
854     c->ulev[2].mv_esc = 0x0B0B;
855     c->vlev[1].mv_esc = 0x0808;
856     c->vlev[2].mv_esc = 0x0B0B;
857
858     c->ylev[1].bias_esc = 0x100;
859     c->ylev[2].bias_esc = 0x100;
860     c->ylev[3].bias_esc = 0x100;
861     c->ulev[1].bias_esc = 0x100;
862     c->ulev[2].bias_esc = 0x100;
863     c->vlev[1].bias_esc = 0x100;
864     c->vlev[2].bias_esc = 0x100;
865
866     return 0;
867 }
868
869 static av_cold int clv_decode_end(AVCodecContext *avctx)
870 {
871     CLVContext *const c = avctx->priv_data;
872     int i;
873
874     av_frame_free(&c->prev);
875     av_frame_free(&c->pic);
876
877     av_freep(&c->mvi.mv);
878
879     ff_free_vlc(&c->dc_vlc);
880     ff_free_vlc(&c->ac_vlc);
881     for (i = 0; i < 4; i++) {
882         ff_free_vlc(&c->ylev[i].mv_cb);
883         ff_free_vlc(&c->ylev[i].flags_cb);
884         ff_free_vlc(&c->ylev[i].bias_cb);
885     }
886     for (i = 0; i < 3; i++) {
887         ff_free_vlc(&c->ulev[i].mv_cb);
888         ff_free_vlc(&c->ulev[i].flags_cb);
889         ff_free_vlc(&c->ulev[i].bias_cb);
890         ff_free_vlc(&c->vlev[i].mv_cb);
891         ff_free_vlc(&c->vlev[i].flags_cb);
892         ff_free_vlc(&c->vlev[i].bias_cb);
893     }
894
895     return 0;
896 }
897
898 AVCodec ff_clearvideo_decoder = {
899     .name           = "clearvideo",
900     .long_name      = NULL_IF_CONFIG_SMALL("Iterated Systems ClearVideo"),
901     .type           = AVMEDIA_TYPE_VIDEO,
902     .id             = AV_CODEC_ID_CLEARVIDEO,
903     .priv_data_size = sizeof(CLVContext),
904     .init           = clv_decode_init,
905     .close          = clv_decode_end,
906     .decode         = clv_decode_frame,
907     .capabilities   = AV_CODEC_CAP_DR1,
908     .caps_internal  = FF_CODEC_CAP_INIT_THREADSAFE | FF_CODEC_CAP_INIT_CLEANUP,
909 };