DNxHD: Add support for id 1258 (DNx100 960x720@8)
[ffmpeg.git] / libavcodec / dnxhddec.c
1 /*
2  * VC3/DNxHD decoder.
3  * Copyright (c) 2007 SmartJog S.A., Baptiste Coudurier <baptiste dot coudurier at smartjog dot com>
4  * Copyright (c) 2011 MirriAd Ltd
5  *
6  * 10 bit support added by MirriAd Ltd, Joseph Artsimovich <joseph@mirriad.com>
7  *
8  * This file is part of Libav.
9  *
10  * Libav is free software; you can redistribute it and/or
11  * modify it under the terms of the GNU Lesser General Public
12  * License as published by the Free Software Foundation; either
13  * version 2.1 of the License, or (at your option) any later version.
14  *
15  * Libav is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
18  * Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public
21  * License along with Libav; if not, write to the Free Software
22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
23  */
24
25 #include "libavutil/imgutils.h"
26 #include "libavutil/timer.h"
27 #include "avcodec.h"
28 #include "blockdsp.h"
29 #include "get_bits.h"
30 #include "dnxhddata.h"
31 #include "idctdsp.h"
32 #include "internal.h"
33
34 typedef struct DNXHDContext {
35     AVCodecContext *avctx;
36     GetBitContext gb;
37     BlockDSPContext bdsp;
38     int cid;                            ///< compression id
39     unsigned int width, height;
40     unsigned int mb_width, mb_height;
41     uint32_t mb_scan_index[68];         /* max for 1080p */
42     int cur_field;                      ///< current interlaced field
43     VLC ac_vlc, dc_vlc, run_vlc;
44     int last_dc[3];
45     IDCTDSPContext idsp;
46     DECLARE_ALIGNED(16, int16_t, blocks)[12][64];
47     ScanTable scantable;
48     const CIDEntry *cid_table;
49     int bit_depth; // 8, 10 or 0 if not initialized at all.
50     int is_444;
51     void (*decode_dct_block)(struct DNXHDContext *ctx, int16_t *block,
52                              int n, int qscale);
53 } DNXHDContext;
54
55 #define DNXHD_VLC_BITS 9
56 #define DNXHD_DC_VLC_BITS 7
57
58 static void dnxhd_decode_dct_block_8(DNXHDContext *ctx, int16_t *block,
59                                      int n, int qscale);
60 static void dnxhd_decode_dct_block_10(DNXHDContext *ctx, int16_t *block,
61                                       int n, int qscale);
62 static void dnxhd_decode_dct_block_10_444(DNXHDContext *ctx, int16_t *block,
63                                           int n, int qscale);
64
65 static av_cold int dnxhd_decode_init(AVCodecContext *avctx)
66 {
67     DNXHDContext *ctx = avctx->priv_data;
68
69     ctx->avctx = avctx;
70     return 0;
71 }
72
73 static int dnxhd_init_vlc(DNXHDContext *ctx, int cid)
74 {
75     if (cid != ctx->cid) {
76         int index;
77
78         if ((index = ff_dnxhd_get_cid_table(cid)) < 0) {
79             av_log(ctx->avctx, AV_LOG_ERROR, "unsupported cid %d\n", cid);
80             return AVERROR(ENOSYS);
81         }
82         ctx->cid_table = &ff_dnxhd_cid_table[index];
83
84         ff_free_vlc(&ctx->ac_vlc);
85         ff_free_vlc(&ctx->dc_vlc);
86         ff_free_vlc(&ctx->run_vlc);
87
88         init_vlc(&ctx->ac_vlc, DNXHD_VLC_BITS, 257,
89                  ctx->cid_table->ac_bits, 1, 1,
90                  ctx->cid_table->ac_codes, 2, 2, 0);
91         init_vlc(&ctx->dc_vlc, DNXHD_DC_VLC_BITS, ctx->bit_depth + 4,
92                  ctx->cid_table->dc_bits, 1, 1,
93                  ctx->cid_table->dc_codes, 1, 1, 0);
94         init_vlc(&ctx->run_vlc, DNXHD_VLC_BITS, 62,
95                  ctx->cid_table->run_bits, 1, 1,
96                  ctx->cid_table->run_codes, 2, 2, 0);
97
98         ff_init_scantable(ctx->idsp.idct_permutation, &ctx->scantable,
99                           ff_zigzag_direct);
100         ctx->cid = cid;
101     }
102     return 0;
103 }
104
105 static int dnxhd_decode_header(DNXHDContext *ctx, AVFrame *frame,
106                                const uint8_t *buf, int buf_size,
107                                int first_field)
108 {
109     static const uint8_t header_prefix[]    = { 0x00, 0x00, 0x02, 0x80, 0x01 };
110     static const uint8_t header_prefix444[] = { 0x00, 0x00, 0x02, 0x80, 0x02 };
111     int i, cid, ret;
112
113     if (buf_size < 0x280) {
114         av_log(ctx->avctx, AV_LOG_ERROR, "buffer too small (%d < 640).\n",
115                buf_size);
116         return AVERROR_INVALIDDATA;
117     }
118
119     if (memcmp(buf, header_prefix, 5) && memcmp(buf, header_prefix444, 5)) {
120         av_log(ctx->avctx, AV_LOG_ERROR, "error in header\n");
121         return AVERROR_INVALIDDATA;
122     }
123     if (buf[5] & 2) { /* interlaced */
124         ctx->cur_field = buf[5] & 1;
125         frame->interlaced_frame = 1;
126         frame->top_field_first  = first_field ^ ctx->cur_field;
127         av_log(ctx->avctx, AV_LOG_DEBUG,
128                "interlaced %d, cur field %d\n", buf[5] & 3, ctx->cur_field);
129     }
130
131     ctx->height = AV_RB16(buf + 0x18);
132     ctx->width  = AV_RB16(buf + 0x1a);
133
134     av_dlog(ctx->avctx, "width %d, height %d\n", ctx->width, ctx->height);
135
136     if (!ctx->bit_depth) {
137         ff_blockdsp_init(&ctx->bdsp, ctx->avctx);
138         ff_idctdsp_init(&ctx->idsp, ctx->avctx);
139     }
140     if (buf[0x21] == 0x58) { /* 10 bit */
141         ctx->bit_depth = ctx->avctx->bits_per_raw_sample = 10;
142
143         if (buf[0x4] == 0x2) {
144             ctx->decode_dct_block = dnxhd_decode_dct_block_10_444;
145             ctx->avctx->pix_fmt = AV_PIX_FMT_YUV444P10;
146             ctx->is_444 = 1;
147         } else {
148             ctx->decode_dct_block = dnxhd_decode_dct_block_10;
149             ctx->avctx->pix_fmt = AV_PIX_FMT_YUV422P10;
150         }
151     } else if (buf[0x21] == 0x38) { /* 8 bit */
152         ctx->bit_depth = ctx->avctx->bits_per_raw_sample = 8;
153
154         ctx->avctx->pix_fmt = AV_PIX_FMT_YUV422P;
155         ctx->decode_dct_block = dnxhd_decode_dct_block_8;
156     } else {
157         av_log(ctx->avctx, AV_LOG_ERROR, "invalid bit depth value (%d).\n",
158                buf[0x21]);
159         return AVERROR_INVALIDDATA;
160     }
161
162     cid = AV_RB32(buf + 0x28);
163     av_dlog(ctx->avctx, "compression id %d\n", cid);
164
165     if ((ret = dnxhd_init_vlc(ctx, cid)) < 0)
166         return ret;
167
168     // make sure profile size constraints are respected
169     // DNx100 allows 1920->1440 and 1280->960 subsampling
170     if (ctx->width != ctx->cid_table->width) {
171         av_reduce(&ctx->avctx->sample_aspect_ratio.num,
172                   &ctx->avctx->sample_aspect_ratio.den,
173                   ctx->width, ctx->cid_table->width, 255);
174         ctx->width = ctx->cid_table->width;
175     }
176
177     if (buf_size < ctx->cid_table->coding_unit_size) {
178         av_log(ctx->avctx, AV_LOG_ERROR, "incorrect frame size (%d < %d).\n",
179                buf_size, ctx->cid_table->coding_unit_size);
180         return AVERROR_INVALIDDATA;
181     }
182
183     ctx->mb_width  = ctx->width >> 4;
184     ctx->mb_height = buf[0x16d];
185
186     av_dlog(ctx->avctx,
187             "mb width %d, mb height %d\n", ctx->mb_width, ctx->mb_height);
188
189     if ((ctx->height + 15) >> 4 == ctx->mb_height && frame->interlaced_frame)
190         ctx->height <<= 1;
191
192     if (ctx->mb_height > 68 ||
193         (ctx->mb_height << frame->interlaced_frame) > (ctx->height + 15) >> 4) {
194         av_log(ctx->avctx, AV_LOG_ERROR,
195                "mb height too big: %d\n", ctx->mb_height);
196         return AVERROR_INVALIDDATA;
197     }
198
199     for (i = 0; i < ctx->mb_height; i++) {
200         ctx->mb_scan_index[i] = AV_RB32(buf + 0x170 + (i << 2));
201         av_dlog(ctx->avctx, "mb scan index %d\n", ctx->mb_scan_index[i]);
202         if (buf_size < ctx->mb_scan_index[i] + 0x280) {
203             av_log(ctx->avctx, AV_LOG_ERROR,
204                    "invalid mb scan index (%d < %d).\n",
205                    buf_size, ctx->mb_scan_index[i] + 0x280);
206             return AVERROR_INVALIDDATA;
207         }
208     }
209
210     return 0;
211 }
212
213 static av_always_inline void dnxhd_decode_dct_block(DNXHDContext *ctx,
214                                                     int16_t *block, int n,
215                                                     int qscale,
216                                                     int index_bits,
217                                                     int level_bias,
218                                                     int level_shift)
219 {
220     int i, j, index1, index2, len;
221     int level, component, sign;
222     const uint8_t *weight_matrix;
223     OPEN_READER(bs, &ctx->gb);
224
225     if (!ctx->is_444) {
226         if (n & 2) {
227             component     = 1 + (n & 1);
228             weight_matrix = ctx->cid_table->chroma_weight;
229         } else {
230             component     = 0;
231             weight_matrix = ctx->cid_table->luma_weight;
232         }
233     } else {
234         component = (n >> 1) % 3;
235         if (component) {
236             weight_matrix = ctx->cid_table->chroma_weight;
237         } else {
238             weight_matrix = ctx->cid_table->luma_weight;
239         }
240     }
241
242     UPDATE_CACHE(bs, &ctx->gb);
243     GET_VLC(len, bs, &ctx->gb, ctx->dc_vlc.table, DNXHD_DC_VLC_BITS, 1);
244     if (len) {
245         level = GET_CACHE(bs, &ctx->gb);
246         LAST_SKIP_BITS(bs, &ctx->gb, len);
247         sign  = ~level >> 31;
248         level = (NEG_USR32(sign ^ level, len) ^ sign) - sign;
249         ctx->last_dc[component] += level;
250     }
251     block[0] = ctx->last_dc[component];
252
253     for (i = 1; ; i++) {
254         UPDATE_CACHE(bs, &ctx->gb);
255         GET_VLC(index1, bs, &ctx->gb, ctx->ac_vlc.table,
256                 DNXHD_VLC_BITS, 2);
257         level = ctx->cid_table->ac_level[index1];
258         if (!level) /* EOB */
259             break;
260
261         sign = SHOW_SBITS(bs, &ctx->gb, 1);
262         SKIP_BITS(bs, &ctx->gb, 1);
263
264         if (ctx->cid_table->ac_index_flag[index1]) {
265             level += SHOW_UBITS(bs, &ctx->gb, index_bits) << 6;
266             SKIP_BITS(bs, &ctx->gb, index_bits);
267         }
268
269         if (ctx->cid_table->ac_run_flag[index1]) {
270             UPDATE_CACHE(bs, &ctx->gb);
271             GET_VLC(index2, bs, &ctx->gb, ctx->run_vlc.table,
272                     DNXHD_VLC_BITS, 2);
273             i += ctx->cid_table->run[index2];
274         }
275
276         if (i > 63) {
277             av_log(ctx->avctx, AV_LOG_ERROR, "ac tex damaged %d, %d\n", n, i);
278             break;
279         }
280
281         j     = ctx->scantable.permutated[i];
282         level = (2 * level + 1) * qscale * weight_matrix[i];
283         if (level_bias < 32 || weight_matrix[i] != level_bias)
284             level += level_bias;
285         level >>= level_shift;
286
287         block[j] = (level ^ sign) - sign;
288     }
289
290     CLOSE_READER(bs, &ctx->gb);
291 }
292
293 static void dnxhd_decode_dct_block_8(DNXHDContext *ctx, int16_t *block,
294                                      int n, int qscale)
295 {
296     dnxhd_decode_dct_block(ctx, block, n, qscale, 4, 32, 6);
297 }
298
299 static void dnxhd_decode_dct_block_10(DNXHDContext *ctx, int16_t *block,
300                                       int n, int qscale)
301 {
302     dnxhd_decode_dct_block(ctx, block, n, qscale, 6, 8, 4);
303 }
304
305 static void dnxhd_decode_dct_block_10_444(DNXHDContext *ctx, int16_t *block,
306                                           int n, int qscale)
307 {
308     dnxhd_decode_dct_block(ctx, block, n, qscale, 6, 32, 6);
309 }
310
311 static int dnxhd_decode_macroblock(DNXHDContext *ctx, AVFrame *frame,
312                                    int x, int y)
313 {
314     int shift1 = ctx->bit_depth == 10;
315     int dct_linesize_luma   = frame->linesize[0];
316     int dct_linesize_chroma = frame->linesize[1];
317     uint8_t *dest_y, *dest_u, *dest_v;
318     int dct_y_offset, dct_x_offset;
319     int qscale, i;
320
321     qscale = get_bits(&ctx->gb, 11);
322     skip_bits1(&ctx->gb);
323
324     for (i = 0; i < 8; i++) {
325         ctx->bdsp.clear_block(ctx->blocks[i]);
326         ctx->decode_dct_block(ctx, ctx->blocks[i], i, qscale);
327     }
328     if (ctx->is_444) {
329         for (; i < 12; i++) {
330             ctx->bdsp.clear_block(ctx->blocks[i]);
331             ctx->decode_dct_block(ctx, ctx->blocks[i], i, qscale);
332         }
333     }
334
335     if (frame->interlaced_frame) {
336         dct_linesize_luma   <<= 1;
337         dct_linesize_chroma <<= 1;
338     }
339
340     dest_y = frame->data[0] + ((y * dct_linesize_luma)   << 4) + (x << (4 + shift1));
341     dest_u = frame->data[1] + ((y * dct_linesize_chroma) << 4) + (x << (3 + shift1 + ctx->is_444));
342     dest_v = frame->data[2] + ((y * dct_linesize_chroma) << 4) + (x << (3 + shift1 + ctx->is_444));
343
344     if (ctx->cur_field) {
345         dest_y += frame->linesize[0];
346         dest_u += frame->linesize[1];
347         dest_v += frame->linesize[2];
348     }
349
350     dct_y_offset = dct_linesize_luma << 3;
351     dct_x_offset = 8 << shift1;
352     if (!ctx->is_444) {
353         ctx->idsp.idct_put(dest_y,                               dct_linesize_luma, ctx->blocks[0]);
354         ctx->idsp.idct_put(dest_y + dct_x_offset,                dct_linesize_luma, ctx->blocks[1]);
355         ctx->idsp.idct_put(dest_y + dct_y_offset,                dct_linesize_luma, ctx->blocks[4]);
356         ctx->idsp.idct_put(dest_y + dct_y_offset + dct_x_offset, dct_linesize_luma, ctx->blocks[5]);
357
358         if (!(ctx->avctx->flags & CODEC_FLAG_GRAY)) {
359             dct_y_offset = dct_linesize_chroma << 3;
360             ctx->idsp.idct_put(dest_u,                dct_linesize_chroma, ctx->blocks[2]);
361             ctx->idsp.idct_put(dest_v,                dct_linesize_chroma, ctx->blocks[3]);
362             ctx->idsp.idct_put(dest_u + dct_y_offset, dct_linesize_chroma, ctx->blocks[6]);
363             ctx->idsp.idct_put(dest_v + dct_y_offset, dct_linesize_chroma, ctx->blocks[7]);
364         }
365     } else {
366         ctx->idsp.idct_put(dest_y,                               dct_linesize_luma, ctx->blocks[0]);
367         ctx->idsp.idct_put(dest_y + dct_x_offset,                dct_linesize_luma, ctx->blocks[1]);
368         ctx->idsp.idct_put(dest_y + dct_y_offset,                dct_linesize_luma, ctx->blocks[6]);
369         ctx->idsp.idct_put(dest_y + dct_y_offset + dct_x_offset, dct_linesize_luma, ctx->blocks[7]);
370
371         if (!(ctx->avctx->flags & CODEC_FLAG_GRAY)) {
372             dct_y_offset = dct_linesize_chroma << 3;
373             ctx->idsp.idct_put(dest_u,                               dct_linesize_chroma, ctx->blocks[2]);
374             ctx->idsp.idct_put(dest_u + dct_x_offset,                dct_linesize_chroma, ctx->blocks[3]);
375             ctx->idsp.idct_put(dest_u + dct_y_offset,                dct_linesize_chroma, ctx->blocks[8]);
376             ctx->idsp.idct_put(dest_u + dct_y_offset + dct_x_offset, dct_linesize_chroma, ctx->blocks[9]);
377             ctx->idsp.idct_put(dest_v,                               dct_linesize_chroma, ctx->blocks[4]);
378             ctx->idsp.idct_put(dest_v + dct_x_offset,                dct_linesize_chroma, ctx->blocks[5]);
379             ctx->idsp.idct_put(dest_v + dct_y_offset,                dct_linesize_chroma, ctx->blocks[10]);
380             ctx->idsp.idct_put(dest_v + dct_y_offset + dct_x_offset, dct_linesize_chroma, ctx->blocks[11]);
381         }
382     }
383
384     return 0;
385 }
386
387 static int dnxhd_decode_macroblocks(DNXHDContext *ctx, AVFrame *frame,
388                                     const uint8_t *buf, int buf_size)
389 {
390     int x, y;
391     for (y = 0; y < ctx->mb_height; y++) {
392         ctx->last_dc[0] =
393         ctx->last_dc[1] =
394         ctx->last_dc[2] = 1 << (ctx->bit_depth + 2); // for levels +2^(bitdepth-1)
395         init_get_bits(&ctx->gb, buf + ctx->mb_scan_index[y], (buf_size - ctx->mb_scan_index[y]) << 3);
396         for (x = 0; x < ctx->mb_width; x++) {
397             //START_TIMER;
398             dnxhd_decode_macroblock(ctx, frame, x, y);
399             //STOP_TIMER("decode macroblock");
400         }
401     }
402     return 0;
403 }
404
405 static int dnxhd_decode_frame(AVCodecContext *avctx, void *data,
406                               int *got_frame, AVPacket *avpkt)
407 {
408     const uint8_t *buf = avpkt->data;
409     int buf_size = avpkt->size;
410     DNXHDContext *ctx = avctx->priv_data;
411     AVFrame *picture = data;
412     int first_field = 1;
413     int ret;
414
415     av_dlog(avctx, "frame size %d\n", buf_size);
416
417 decode_coding_unit:
418     if ((ret = dnxhd_decode_header(ctx, picture, buf, buf_size, first_field)) < 0)
419         return ret;
420
421     if ((avctx->width || avctx->height) &&
422         (ctx->width != avctx->width || ctx->height != avctx->height)) {
423         av_log(avctx, AV_LOG_WARNING, "frame size changed: %dx%d -> %dx%d\n",
424                avctx->width, avctx->height, ctx->width, ctx->height);
425         first_field = 1;
426     }
427
428     ret = ff_set_dimensions(avctx, ctx->width, ctx->height);
429     if (ret < 0)
430         return ret;
431
432     if (first_field) {
433         if ((ret = ff_get_buffer(avctx, picture, 0)) < 0) {
434             av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
435             return ret;
436         }
437         picture->pict_type = AV_PICTURE_TYPE_I;
438         picture->key_frame = 1;
439     }
440
441     dnxhd_decode_macroblocks(ctx, picture, buf + 0x280, buf_size - 0x280);
442
443     if (first_field && picture->interlaced_frame) {
444         buf      += ctx->cid_table->coding_unit_size;
445         buf_size -= ctx->cid_table->coding_unit_size;
446         first_field = 0;
447         goto decode_coding_unit;
448     }
449
450     *got_frame = 1;
451     return buf_size;
452 }
453
454 static av_cold int dnxhd_decode_close(AVCodecContext *avctx)
455 {
456     DNXHDContext *ctx = avctx->priv_data;
457
458     ff_free_vlc(&ctx->ac_vlc);
459     ff_free_vlc(&ctx->dc_vlc);
460     ff_free_vlc(&ctx->run_vlc);
461     return 0;
462 }
463
464 AVCodec ff_dnxhd_decoder = {
465     .name           = "dnxhd",
466     .long_name      = NULL_IF_CONFIG_SMALL("VC3/DNxHD"),
467     .type           = AVMEDIA_TYPE_VIDEO,
468     .id             = AV_CODEC_ID_DNXHD,
469     .priv_data_size = sizeof(DNXHDContext),
470     .init           = dnxhd_decode_init,
471     .close          = dnxhd_decode_close,
472     .decode         = dnxhd_decode_frame,
473     .capabilities   = CODEC_CAP_DR1,
474 };