avcodec/exr: fix tile decoding when all channels doesnt have the same pixel type
[ffmpeg.git] / libavcodec / exr.c
1 /*
2  * OpenEXR (.exr) image decoder
3  * Copyright (c) 2006 Industrial Light & Magic, a division of Lucas Digital Ltd. LLC
4  * Copyright (c) 2009 Jimmy Christensen
5  *
6  * B44/B44A, Tile added by Jokyo Images support by CNC - French National Center for Cinema
7  *
8  * This file is part of FFmpeg.
9  *
10  * FFmpeg is free software; you can redistribute it and/or
11  * modify it under the terms of the GNU Lesser General Public
12  * License as published by the Free Software Foundation; either
13  * version 2.1 of the License, or (at your option) any later version.
14  *
15  * FFmpeg is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
18  * Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public
21  * License along with FFmpeg; if not, write to the Free Software
22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
23  */
24
25 /**
26  * @file
27  * OpenEXR decoder
28  * @author Jimmy Christensen
29  *
30  * For more information on the OpenEXR format, visit:
31  *  http://openexr.com/
32  *
33  * exr_flt2uint() and exr_halflt2uint() is credited to Reimar Döffinger.
34  * exr_half2float() is credited to Aaftab Munshi, Dan Ginsburg, Dave Shreiner.
35  */
36
37 #include <float.h>
38 #include <zlib.h>
39
40 #include "libavutil/common.h"
41 #include "libavutil/imgutils.h"
42 #include "libavutil/intfloat.h"
43 #include "libavutil/opt.h"
44 #include "libavutil/color_utils.h"
45
46 #include "avcodec.h"
47 #include "bytestream.h"
48 #include "get_bits.h"
49 #include "internal.h"
50 #include "mathops.h"
51 #include "thread.h"
52
53 enum ExrCompr {
54     EXR_RAW,
55     EXR_RLE,
56     EXR_ZIP1,
57     EXR_ZIP16,
58     EXR_PIZ,
59     EXR_PXR24,
60     EXR_B44,
61     EXR_B44A,
62     EXR_UNKN,
63 };
64
65 enum ExrPixelType {
66     EXR_UINT,
67     EXR_HALF,
68     EXR_FLOAT,
69     EXR_UNKNOWN,
70 };
71
72 enum ExrTileLevelMode {
73     EXR_TILE_LEVEL_ONE,
74     EXR_TILE_LEVEL_MIPMAP,
75     EXR_TILE_LEVEL_RIPMAP,
76     EXR_TILE_LEVEL_UNKNOWN,
77 };
78
79 enum ExrTileLevelRound {
80     EXR_TILE_ROUND_UP,
81     EXR_TILE_ROUND_DOWN,
82     EXR_TILE_ROUND_UNKNOWN,
83 };
84
85 typedef struct EXRChannel {
86     int xsub, ysub;
87     enum ExrPixelType pixel_type;
88 } EXRChannel;
89
90 typedef struct EXRTileAttribute {
91     int32_t xSize;
92     int32_t ySize;
93     enum ExrTileLevelMode level_mode;
94     enum ExrTileLevelRound level_round;
95 } EXRTileAttribute;
96
97 typedef struct EXRThreadData {
98     uint8_t *uncompressed_data;
99     int uncompressed_size;
100
101     uint8_t *tmp;
102     int tmp_size;
103
104     uint8_t *bitmap;
105     uint16_t *lut;
106
107     int ysize, xsize;
108 } EXRThreadData;
109
110 typedef struct EXRContext {
111     AVClass *class;
112     AVFrame *picture;
113     AVCodecContext *avctx;
114
115     enum ExrCompr compression;
116     enum ExrPixelType pixel_type;
117     int channel_offsets[4]; // 0 = red, 1 = green, 2 = blue and 3 = alpha
118     const AVPixFmtDescriptor *desc;
119
120     int w, h;
121     uint32_t xmax, xmin;
122     uint32_t ymax, ymin;
123     uint32_t xdelta, ydelta;
124
125     uint64_t scan_line_size;
126     int scan_lines_per_block;
127
128     EXRTileAttribute tile_attr; /* header data attribute of tile */
129     int is_tile; /* 0 if scanline, 1 if tile */
130
131     GetByteContext gb;
132     const uint8_t *buf;
133     int buf_size;
134
135     EXRChannel *channels;
136     int nb_channels;
137     int current_channel_offset;
138
139     EXRThreadData *thread_data;
140
141     const char *layer;
142
143     enum AVColorTransferCharacteristic apply_trc_type;
144     float gamma;
145     uint16_t gamma_table[65536];
146 } EXRContext;
147
148 /* -15 stored using a single precision bias of 127 */
149 #define HALF_FLOAT_MIN_BIASED_EXP_AS_SINGLE_FP_EXP 0x38000000
150
151 /* max exponent value in single precision that will be converted
152  * to Inf or Nan when stored as a half-float */
153 #define HALF_FLOAT_MAX_BIASED_EXP_AS_SINGLE_FP_EXP 0x47800000
154
155 /* 255 is the max exponent biased value */
156 #define FLOAT_MAX_BIASED_EXP (0xFF << 23)
157
158 #define HALF_FLOAT_MAX_BIASED_EXP (0x1F << 10)
159
160 /**
161  * Convert a half float as a uint16_t into a full float.
162  *
163  * @param hf half float as uint16_t
164  *
165  * @return float value
166  */
167 static union av_intfloat32 exr_half2float(uint16_t hf)
168 {
169     unsigned int sign = (unsigned int) (hf >> 15);
170     unsigned int mantissa = (unsigned int) (hf & ((1 << 10) - 1));
171     unsigned int exp = (unsigned int) (hf & HALF_FLOAT_MAX_BIASED_EXP);
172     union av_intfloat32 f;
173
174     if (exp == HALF_FLOAT_MAX_BIASED_EXP) {
175         // we have a half-float NaN or Inf
176         // half-float NaNs will be converted to a single precision NaN
177         // half-float Infs will be converted to a single precision Inf
178         exp = FLOAT_MAX_BIASED_EXP;
179         if (mantissa)
180             mantissa = (1 << 23) - 1;    // set all bits to indicate a NaN
181     } else if (exp == 0x0) {
182         // convert half-float zero/denorm to single precision value
183         if (mantissa) {
184             mantissa <<= 1;
185             exp = HALF_FLOAT_MIN_BIASED_EXP_AS_SINGLE_FP_EXP;
186             // check for leading 1 in denorm mantissa
187             while ((mantissa & (1 << 10))) {
188                 // for every leading 0, decrement single precision exponent by 1
189                 // and shift half-float mantissa value to the left
190                 mantissa <<= 1;
191                 exp -= (1 << 23);
192             }
193             // clamp the mantissa to 10-bits
194             mantissa &= ((1 << 10) - 1);
195             // shift left to generate single-precision mantissa of 23-bits
196             mantissa <<= 13;
197         }
198     } else {
199         // shift left to generate single-precision mantissa of 23-bits
200         mantissa <<= 13;
201         // generate single precision biased exponent value
202         exp = (exp << 13) + HALF_FLOAT_MIN_BIASED_EXP_AS_SINGLE_FP_EXP;
203     }
204
205     f.i = (sign << 31) | exp | mantissa;
206
207     return f;
208 }
209
210
211 /**
212  * Convert from 32-bit float as uint32_t to uint16_t.
213  *
214  * @param v 32-bit float
215  *
216  * @return normalized 16-bit unsigned int
217  */
218 static inline uint16_t exr_flt2uint(uint32_t v)
219 {
220     unsigned int exp = v >> 23;
221     // "HACK": negative values result in exp<  0, so clipping them to 0
222     // is also handled by this condition, avoids explicit check for sign bit.
223     if (exp <= 127 + 7 - 24) // we would shift out all bits anyway
224         return 0;
225     if (exp >= 127)
226         return 0xffff;
227     v &= 0x007fffff;
228     return (v + (1 << 23)) >> (127 + 7 - exp);
229 }
230
231 /**
232  * Convert from 16-bit float as uint16_t to uint16_t.
233  *
234  * @param v 16-bit float
235  *
236  * @return normalized 16-bit unsigned int
237  */
238 static inline uint16_t exr_halflt2uint(uint16_t v)
239 {
240     unsigned exp = 14 - (v >> 10);
241     if (exp >= 14) {
242         if (exp == 14)
243             return (v >> 9) & 1;
244         else
245             return (v & 0x8000) ? 0 : 0xffff;
246     }
247     v <<= 6;
248     return (v + (1 << 16)) >> (exp + 1);
249 }
250
251 static void predictor(uint8_t *src, int size)
252 {
253     uint8_t *t    = src + 1;
254     uint8_t *stop = src + size;
255
256     while (t < stop) {
257         int d = (int) t[-1] + (int) t[0] - 128;
258         t[0] = d;
259         ++t;
260     }
261 }
262
263 static void reorder_pixels(uint8_t *src, uint8_t *dst, int size)
264 {
265     const int8_t *t1 = src;
266     const int8_t *t2 = src + (size + 1) / 2;
267     int8_t *s        = dst;
268     int8_t *stop     = s + size;
269
270     while (1) {
271         if (s < stop)
272             *(s++) = *(t1++);
273         else
274             break;
275
276         if (s < stop)
277             *(s++) = *(t2++);
278         else
279             break;
280     }
281 }
282
283 static int zip_uncompress(const uint8_t *src, int compressed_size,
284                           int uncompressed_size, EXRThreadData *td)
285 {
286     unsigned long dest_len = uncompressed_size;
287
288     if (uncompress(td->tmp, &dest_len, src, compressed_size) != Z_OK ||
289         dest_len != uncompressed_size)
290         return AVERROR_INVALIDDATA;
291
292     predictor(td->tmp, uncompressed_size);
293     reorder_pixels(td->tmp, td->uncompressed_data, uncompressed_size);
294
295     return 0;
296 }
297
298 static int rle_uncompress(const uint8_t *src, int compressed_size,
299                           int uncompressed_size, EXRThreadData *td)
300 {
301     uint8_t *d      = td->tmp;
302     const int8_t *s = src;
303     int ssize       = compressed_size;
304     int dsize       = uncompressed_size;
305     uint8_t *dend   = d + dsize;
306     int count;
307
308     while (ssize > 0) {
309         count = *s++;
310
311         if (count < 0) {
312             count = -count;
313
314             if ((dsize -= count) < 0 ||
315                 (ssize -= count + 1) < 0)
316                 return AVERROR_INVALIDDATA;
317
318             while (count--)
319                 *d++ = *s++;
320         } else {
321             count++;
322
323             if ((dsize -= count) < 0 ||
324                 (ssize -= 2) < 0)
325                 return AVERROR_INVALIDDATA;
326
327             while (count--)
328                 *d++ = *s;
329
330             s++;
331         }
332     }
333
334     if (dend != d)
335         return AVERROR_INVALIDDATA;
336
337     predictor(td->tmp, uncompressed_size);
338     reorder_pixels(td->tmp, td->uncompressed_data, uncompressed_size);
339
340     return 0;
341 }
342
343 #define USHORT_RANGE (1 << 16)
344 #define BITMAP_SIZE  (1 << 13)
345
346 static uint16_t reverse_lut(const uint8_t *bitmap, uint16_t *lut)
347 {
348     int i, k = 0;
349
350     for (i = 0; i < USHORT_RANGE; i++)
351         if ((i == 0) || (bitmap[i >> 3] & (1 << (i & 7))))
352             lut[k++] = i;
353
354     i = k - 1;
355
356     memset(lut + k, 0, (USHORT_RANGE - k) * 2);
357
358     return i;
359 }
360
361 static void apply_lut(const uint16_t *lut, uint16_t *dst, int dsize)
362 {
363     int i;
364
365     for (i = 0; i < dsize; ++i)
366         dst[i] = lut[dst[i]];
367 }
368
369 #define HUF_ENCBITS 16  // literal (value) bit length
370 #define HUF_DECBITS 14  // decoding bit size (>= 8)
371
372 #define HUF_ENCSIZE ((1 << HUF_ENCBITS) + 1)  // encoding table size
373 #define HUF_DECSIZE (1 << HUF_DECBITS)        // decoding table size
374 #define HUF_DECMASK (HUF_DECSIZE - 1)
375
376 typedef struct HufDec {
377     int len;
378     int lit;
379     int *p;
380 } HufDec;
381
382 static void huf_canonical_code_table(uint64_t *hcode)
383 {
384     uint64_t c, n[59] = { 0 };
385     int i;
386
387     for (i = 0; i < HUF_ENCSIZE; ++i)
388         n[hcode[i]] += 1;
389
390     c = 0;
391     for (i = 58; i > 0; --i) {
392         uint64_t nc = ((c + n[i]) >> 1);
393         n[i] = c;
394         c    = nc;
395     }
396
397     for (i = 0; i < HUF_ENCSIZE; ++i) {
398         int l = hcode[i];
399
400         if (l > 0)
401             hcode[i] = l | (n[l]++ << 6);
402     }
403 }
404
405 #define SHORT_ZEROCODE_RUN  59
406 #define LONG_ZEROCODE_RUN   63
407 #define SHORTEST_LONG_RUN   (2 + LONG_ZEROCODE_RUN - SHORT_ZEROCODE_RUN)
408 #define LONGEST_LONG_RUN    (255 + SHORTEST_LONG_RUN)
409
410 static int huf_unpack_enc_table(GetByteContext *gb,
411                                 int32_t im, int32_t iM, uint64_t *hcode)
412 {
413     GetBitContext gbit;
414     int ret = init_get_bits8(&gbit, gb->buffer, bytestream2_get_bytes_left(gb));
415     if (ret < 0)
416         return ret;
417
418     for (; im <= iM; im++) {
419         uint64_t l = hcode[im] = get_bits(&gbit, 6);
420
421         if (l == LONG_ZEROCODE_RUN) {
422             int zerun = get_bits(&gbit, 8) + SHORTEST_LONG_RUN;
423
424             if (im + zerun > iM + 1)
425                 return AVERROR_INVALIDDATA;
426
427             while (zerun--)
428                 hcode[im++] = 0;
429
430             im--;
431         } else if (l >= SHORT_ZEROCODE_RUN) {
432             int zerun = l - SHORT_ZEROCODE_RUN + 2;
433
434             if (im + zerun > iM + 1)
435                 return AVERROR_INVALIDDATA;
436
437             while (zerun--)
438                 hcode[im++] = 0;
439
440             im--;
441         }
442     }
443
444     bytestream2_skip(gb, (get_bits_count(&gbit) + 7) / 8);
445     huf_canonical_code_table(hcode);
446
447     return 0;
448 }
449
450 static int huf_build_dec_table(const uint64_t *hcode, int im,
451                                int iM, HufDec *hdecod)
452 {
453     for (; im <= iM; im++) {
454         uint64_t c = hcode[im] >> 6;
455         int i, l = hcode[im] & 63;
456
457         if (c >> l)
458             return AVERROR_INVALIDDATA;
459
460         if (l > HUF_DECBITS) {
461             HufDec *pl = hdecod + (c >> (l - HUF_DECBITS));
462             if (pl->len)
463                 return AVERROR_INVALIDDATA;
464
465             pl->lit++;
466
467             pl->p = av_realloc(pl->p, pl->lit * sizeof(int));
468             if (!pl->p)
469                 return AVERROR(ENOMEM);
470
471             pl->p[pl->lit - 1] = im;
472         } else if (l) {
473             HufDec *pl = hdecod + (c << (HUF_DECBITS - l));
474
475             for (i = 1 << (HUF_DECBITS - l); i > 0; i--, pl++) {
476                 if (pl->len || pl->p)
477                     return AVERROR_INVALIDDATA;
478                 pl->len = l;
479                 pl->lit = im;
480             }
481         }
482     }
483
484     return 0;
485 }
486
487 #define get_char(c, lc, gb)                                                   \
488 {                                                                             \
489         c   = (c << 8) | bytestream2_get_byte(gb);                            \
490         lc += 8;                                                              \
491 }
492
493 #define get_code(po, rlc, c, lc, gb, out, oe, outb)                           \
494 {                                                                             \
495         if (po == rlc) {                                                      \
496             if (lc < 8)                                                       \
497                 get_char(c, lc, gb);                                          \
498             lc -= 8;                                                          \
499                                                                               \
500             cs = c >> lc;                                                     \
501                                                                               \
502             if (out + cs > oe || out == outb)                                 \
503                 return AVERROR_INVALIDDATA;                                   \
504                                                                               \
505             s = out[-1];                                                      \
506                                                                               \
507             while (cs-- > 0)                                                  \
508                 *out++ = s;                                                   \
509         } else if (out < oe) {                                                \
510             *out++ = po;                                                      \
511         } else {                                                              \
512             return AVERROR_INVALIDDATA;                                       \
513         }                                                                     \
514 }
515
516 static int huf_decode(const uint64_t *hcode, const HufDec *hdecod,
517                       GetByteContext *gb, int nbits,
518                       int rlc, int no, uint16_t *out)
519 {
520     uint64_t c        = 0;
521     uint16_t *outb    = out;
522     uint16_t *oe      = out + no;
523     const uint8_t *ie = gb->buffer + (nbits + 7) / 8; // input byte size
524     uint8_t cs;
525     uint16_t s;
526     int i, lc = 0;
527
528     while (gb->buffer < ie) {
529         get_char(c, lc, gb);
530
531         while (lc >= HUF_DECBITS) {
532             const HufDec pl = hdecod[(c >> (lc - HUF_DECBITS)) & HUF_DECMASK];
533
534             if (pl.len) {
535                 lc -= pl.len;
536                 get_code(pl.lit, rlc, c, lc, gb, out, oe, outb);
537             } else {
538                 int j;
539
540                 if (!pl.p)
541                     return AVERROR_INVALIDDATA;
542
543                 for (j = 0; j < pl.lit; j++) {
544                     int l = hcode[pl.p[j]] & 63;
545
546                     while (lc < l && bytestream2_get_bytes_left(gb) > 0)
547                         get_char(c, lc, gb);
548
549                     if (lc >= l) {
550                         if ((hcode[pl.p[j]] >> 6) ==
551                             ((c >> (lc - l)) & ((1LL << l) - 1))) {
552                             lc -= l;
553                             get_code(pl.p[j], rlc, c, lc, gb, out, oe, outb);
554                             break;
555                         }
556                     }
557                 }
558
559                 if (j == pl.lit)
560                     return AVERROR_INVALIDDATA;
561             }
562         }
563     }
564
565     i   = (8 - nbits) & 7;
566     c >>= i;
567     lc -= i;
568
569     while (lc > 0) {
570         const HufDec pl = hdecod[(c << (HUF_DECBITS - lc)) & HUF_DECMASK];
571
572         if (pl.len) {
573             lc -= pl.len;
574             get_code(pl.lit, rlc, c, lc, gb, out, oe, outb);
575         } else {
576             return AVERROR_INVALIDDATA;
577         }
578     }
579
580     if (out - outb != no)
581         return AVERROR_INVALIDDATA;
582     return 0;
583 }
584
585 static int huf_uncompress(GetByteContext *gb,
586                           uint16_t *dst, int dst_size)
587 {
588     int32_t src_size, im, iM;
589     uint32_t nBits;
590     uint64_t *freq;
591     HufDec *hdec;
592     int ret, i;
593
594     src_size = bytestream2_get_le32(gb);
595     im       = bytestream2_get_le32(gb);
596     iM       = bytestream2_get_le32(gb);
597     bytestream2_skip(gb, 4);
598     nBits = bytestream2_get_le32(gb);
599     if (im < 0 || im >= HUF_ENCSIZE ||
600         iM < 0 || iM >= HUF_ENCSIZE ||
601         src_size < 0)
602         return AVERROR_INVALIDDATA;
603
604     bytestream2_skip(gb, 4);
605
606     freq = av_mallocz_array(HUF_ENCSIZE, sizeof(*freq));
607     hdec = av_mallocz_array(HUF_DECSIZE, sizeof(*hdec));
608     if (!freq || !hdec) {
609         ret = AVERROR(ENOMEM);
610         goto fail;
611     }
612
613     if ((ret = huf_unpack_enc_table(gb, im, iM, freq)) < 0)
614         goto fail;
615
616     if (nBits > 8 * bytestream2_get_bytes_left(gb)) {
617         ret = AVERROR_INVALIDDATA;
618         goto fail;
619     }
620
621     if ((ret = huf_build_dec_table(freq, im, iM, hdec)) < 0)
622         goto fail;
623     ret = huf_decode(freq, hdec, gb, nBits, iM, dst_size, dst);
624
625 fail:
626     for (i = 0; i < HUF_DECSIZE; i++)
627         if (hdec)
628             av_freep(&hdec[i].p);
629
630     av_free(freq);
631     av_free(hdec);
632
633     return ret;
634 }
635
636 static inline void wdec14(uint16_t l, uint16_t h, uint16_t *a, uint16_t *b)
637 {
638     int16_t ls = l;
639     int16_t hs = h;
640     int hi     = hs;
641     int ai     = ls + (hi & 1) + (hi >> 1);
642     int16_t as = ai;
643     int16_t bs = ai - hi;
644
645     *a = as;
646     *b = bs;
647 }
648
649 #define NBITS      16
650 #define A_OFFSET  (1 << (NBITS - 1))
651 #define MOD_MASK  ((1 << NBITS) - 1)
652
653 static inline void wdec16(uint16_t l, uint16_t h, uint16_t *a, uint16_t *b)
654 {
655     int m  = l;
656     int d  = h;
657     int bb = (m - (d >> 1)) & MOD_MASK;
658     int aa = (d + bb - A_OFFSET) & MOD_MASK;
659     *b = bb;
660     *a = aa;
661 }
662
663 static void wav_decode(uint16_t *in, int nx, int ox,
664                        int ny, int oy, uint16_t mx)
665 {
666     int w14 = (mx < (1 << 14));
667     int n   = (nx > ny) ? ny : nx;
668     int p   = 1;
669     int p2;
670
671     while (p <= n)
672         p <<= 1;
673
674     p >>= 1;
675     p2  = p;
676     p >>= 1;
677
678     while (p >= 1) {
679         uint16_t *py = in;
680         uint16_t *ey = in + oy * (ny - p2);
681         uint16_t i00, i01, i10, i11;
682         int oy1 = oy * p;
683         int oy2 = oy * p2;
684         int ox1 = ox * p;
685         int ox2 = ox * p2;
686
687         for (; py <= ey; py += oy2) {
688             uint16_t *px = py;
689             uint16_t *ex = py + ox * (nx - p2);
690
691             for (; px <= ex; px += ox2) {
692                 uint16_t *p01 = px + ox1;
693                 uint16_t *p10 = px + oy1;
694                 uint16_t *p11 = p10 + ox1;
695
696                 if (w14) {
697                     wdec14(*px, *p10, &i00, &i10);
698                     wdec14(*p01, *p11, &i01, &i11);
699                     wdec14(i00, i01, px, p01);
700                     wdec14(i10, i11, p10, p11);
701                 } else {
702                     wdec16(*px, *p10, &i00, &i10);
703                     wdec16(*p01, *p11, &i01, &i11);
704                     wdec16(i00, i01, px, p01);
705                     wdec16(i10, i11, p10, p11);
706                 }
707             }
708
709             if (nx & p) {
710                 uint16_t *p10 = px + oy1;
711
712                 if (w14)
713                     wdec14(*px, *p10, &i00, p10);
714                 else
715                     wdec16(*px, *p10, &i00, p10);
716
717                 *px = i00;
718             }
719         }
720
721         if (ny & p) {
722             uint16_t *px = py;
723             uint16_t *ex = py + ox * (nx - p2);
724
725             for (; px <= ex; px += ox2) {
726                 uint16_t *p01 = px + ox1;
727
728                 if (w14)
729                     wdec14(*px, *p01, &i00, p01);
730                 else
731                     wdec16(*px, *p01, &i00, p01);
732
733                 *px = i00;
734             }
735         }
736
737         p2  = p;
738         p >>= 1;
739     }
740 }
741
742 static int piz_uncompress(EXRContext *s, const uint8_t *src, int ssize,
743                           int dsize, EXRThreadData *td)
744 {
745     GetByteContext gb;
746     uint16_t maxval, min_non_zero, max_non_zero;
747     uint16_t *ptr;
748     uint16_t *tmp = (uint16_t *)td->tmp;
749     uint8_t *out;
750     int ret, i, j;
751
752     if (!td->bitmap)
753         td->bitmap = av_malloc(BITMAP_SIZE);
754     if (!td->lut)
755         td->lut = av_malloc(1 << 17);
756     if (!td->bitmap || !td->lut) {
757         av_freep(&td->bitmap);
758         av_freep(&td->lut);
759         return AVERROR(ENOMEM);
760     }
761
762     bytestream2_init(&gb, src, ssize);
763     min_non_zero = bytestream2_get_le16(&gb);
764     max_non_zero = bytestream2_get_le16(&gb);
765
766     if (max_non_zero >= BITMAP_SIZE)
767         return AVERROR_INVALIDDATA;
768
769     memset(td->bitmap, 0, FFMIN(min_non_zero, BITMAP_SIZE));
770     if (min_non_zero <= max_non_zero)
771         bytestream2_get_buffer(&gb, td->bitmap + min_non_zero,
772                                max_non_zero - min_non_zero + 1);
773     memset(td->bitmap + max_non_zero + 1, 0, BITMAP_SIZE - max_non_zero - 1);
774
775     maxval = reverse_lut(td->bitmap, td->lut);
776
777     ret = huf_uncompress(&gb, tmp, dsize / sizeof(uint16_t));
778     if (ret)
779         return ret;
780
781     ptr = tmp;
782     for (i = 0; i < s->nb_channels; i++) {
783         EXRChannel *channel = &s->channels[i];
784         int size = channel->pixel_type;
785
786         for (j = 0; j < size; j++)
787             wav_decode(ptr + j, td->xsize, size, td->ysize,
788                        td->xsize * size, maxval);
789         ptr += td->xsize * td->ysize * size;
790     }
791
792     apply_lut(td->lut, tmp, dsize / sizeof(uint16_t));
793
794     out = td->uncompressed_data;
795     for (i = 0; i < td->ysize; i++)
796         for (j = 0; j < s->nb_channels; j++) {
797             uint16_t *in = tmp + j * td->xsize * td->ysize + i * td->xsize;
798             memcpy(out, in, td->xsize * 2);
799             out += td->xsize * 2;
800         }
801
802     return 0;
803 }
804
805 static int pxr24_uncompress(EXRContext *s, const uint8_t *src,
806                             int compressed_size, int uncompressed_size,
807                             EXRThreadData *td)
808 {
809     unsigned long dest_len, expected_len;
810     const uint8_t *in = td->tmp;
811     uint8_t *out;
812     int c, i, j;
813
814     if (s->pixel_type == EXR_FLOAT)
815         expected_len = (uncompressed_size / 4) * 3; /* PRX 24 store float in 24 bit instead of 32 */
816     else
817         expected_len = uncompressed_size;
818
819     dest_len = expected_len;
820
821     if (uncompress(td->tmp, &dest_len, src, compressed_size) != Z_OK) {
822         return AVERROR_INVALIDDATA;
823     } else if (dest_len != expected_len) {
824         return AVERROR_INVALIDDATA;
825     }
826
827     out = td->uncompressed_data;
828     for (i = 0; i < td->ysize; i++)
829         for (c = 0; c < s->nb_channels; c++) {
830             EXRChannel *channel = &s->channels[c];
831             const uint8_t *ptr[4];
832             uint32_t pixel = 0;
833
834             switch (channel->pixel_type) {
835             case EXR_FLOAT:
836                 ptr[0] = in;
837                 ptr[1] = ptr[0] + td->xsize;
838                 ptr[2] = ptr[1] + td->xsize;
839                 in     = ptr[2] + td->xsize;
840
841                 for (j = 0; j < td->xsize; ++j) {
842                     uint32_t diff = (*(ptr[0]++) << 24) |
843                                     (*(ptr[1]++) << 16) |
844                                     (*(ptr[2]++) << 8);
845                     pixel += diff;
846                     bytestream_put_le32(&out, pixel);
847                 }
848                 break;
849             case EXR_HALF:
850                 ptr[0] = in;
851                 ptr[1] = ptr[0] + td->xsize;
852                 in     = ptr[1] + td->xsize;
853                 for (j = 0; j < td->xsize; j++) {
854                     uint32_t diff = (*(ptr[0]++) << 8) | *(ptr[1]++);
855
856                     pixel += diff;
857                     bytestream_put_le16(&out, pixel);
858                 }
859                 break;
860             default:
861                 return AVERROR_INVALIDDATA;
862             }
863         }
864
865     return 0;
866 }
867
868 static void unpack_14(const uint8_t b[14], uint16_t s[16])
869 {
870     unsigned short shift = (b[ 2] >> 2);
871     unsigned short bias = (0x20 << shift);
872     int i;
873
874     s[ 0] = (b[0] << 8) | b[1];
875
876     s[ 4] = s[ 0] + ((((b[ 2] << 4) | (b[ 3] >> 4)) & 0x3f) << shift) - bias;
877     s[ 8] = s[ 4] + ((((b[ 3] << 2) | (b[ 4] >> 6)) & 0x3f) << shift) - bias;
878     s[12] = s[ 8] +   ((b[ 4]                       & 0x3f) << shift) - bias;
879
880     s[ 1] = s[ 0] +   ((b[ 5] >> 2)                         << shift) - bias;
881     s[ 5] = s[ 4] + ((((b[ 5] << 4) | (b[ 6] >> 4)) & 0x3f) << shift) - bias;
882     s[ 9] = s[ 8] + ((((b[ 6] << 2) | (b[ 7] >> 6)) & 0x3f) << shift) - bias;
883     s[13] = s[12] +   ((b[ 7]                       & 0x3f) << shift) - bias;
884
885     s[ 2] = s[ 1] +   ((b[ 8] >> 2)                         << shift) - bias;
886     s[ 6] = s[ 5] + ((((b[ 8] << 4) | (b[ 9] >> 4)) & 0x3f) << shift) - bias;
887     s[10] = s[ 9] + ((((b[ 9] << 2) | (b[10] >> 6)) & 0x3f) << shift) - bias;
888     s[14] = s[13] +   ((b[10]                       & 0x3f) << shift) - bias;
889
890     s[ 3] = s[ 2] +   ((b[11] >> 2)                         << shift) - bias;
891     s[ 7] = s[ 6] + ((((b[11] << 4) | (b[12] >> 4)) & 0x3f) << shift) - bias;
892     s[11] = s[10] + ((((b[12] << 2) | (b[13] >> 6)) & 0x3f) << shift) - bias;
893     s[15] = s[14] +   ((b[13]                       & 0x3f) << shift) - bias;
894
895     for (i = 0; i < 16; ++i) {
896         if (s[i] & 0x8000)
897             s[i] &= 0x7fff;
898         else
899             s[i] = ~s[i];
900     }
901 }
902
903 static void unpack_3(const uint8_t b[3], uint16_t s[16])
904 {
905     int i;
906
907     s[0] = (b[0] << 8) | b[1];
908
909     if (s[0] & 0x8000)
910         s[0] &= 0x7fff;
911     else
912         s[0] = ~s[0];
913
914     for (i = 1; i < 16; i++)
915         s[i] = s[0];
916 }
917
918
919 static int b44_uncompress(EXRContext *s, const uint8_t *src, int compressed_size,
920                           int uncompressed_size, EXRThreadData *td) {
921     const int8_t *sr = src;
922     int stayToUncompress = compressed_size;
923     int nbB44BlockW, nbB44BlockH;
924     int indexHgX, indexHgY, indexOut, indexTmp;
925     uint16_t tmpBuffer[16]; /* B44 use 4x4 half float pixel */
926     int c, iY, iX, y, x;
927
928     /* calc B44 block count */
929     nbB44BlockW = td->xsize / 4;
930     if ((td->xsize % 4) != 0)
931         nbB44BlockW++;
932
933     nbB44BlockH = td->ysize / 4;
934     if ((td->ysize % 4) != 0)
935         nbB44BlockH++;
936
937     for (c = 0; c < s->nb_channels; c++) {
938         for (iY = 0; iY < nbB44BlockH; iY++) {
939             for (iX = 0; iX < nbB44BlockW; iX++) {/* For each B44 block */
940                 if (stayToUncompress < 3) {
941                     av_log(s, AV_LOG_ERROR, "Not enough data for B44A block: %d", stayToUncompress);
942                     return AVERROR_INVALIDDATA;
943                 }
944
945                 if (src[compressed_size - stayToUncompress + 2] == 0xfc) { /* B44A block */
946                     unpack_3(sr, tmpBuffer);
947                     sr += 3;
948                     stayToUncompress -= 3;
949                 }  else {/* B44 Block */
950                     if (stayToUncompress < 14) {
951                         av_log(s, AV_LOG_ERROR, "Not enough data for B44 block: %d", stayToUncompress);
952                         return AVERROR_INVALIDDATA;
953                     }
954                     unpack_14(sr, tmpBuffer);
955                     sr += 14;
956                     stayToUncompress -= 14;
957                 }
958
959                 /* copy data to uncompress buffer (B44 block can exceed target resolution)*/
960                 indexHgX = iX * 4;
961                 indexHgY = iY * 4;
962
963                 for (y = indexHgY; y < FFMIN(indexHgY + 4, td->ysize); y++) {
964                     for (x = indexHgX; x < FFMIN(indexHgX + 4, td->xsize); x++) {
965                         indexOut = (c * td->xsize + y * td->xsize * s->nb_channels + x) * 2;
966                         indexTmp = (y-indexHgY) * 4 + (x-indexHgX);
967                         td->uncompressed_data[indexOut] = tmpBuffer[indexTmp] & 0xff;
968                         td->uncompressed_data[indexOut + 1] = tmpBuffer[indexTmp] >> 8;
969                     }
970                 }
971             }
972         }
973     }
974
975     return 0;
976 }
977
978 static int decode_block(AVCodecContext *avctx, void *tdata,
979                         int jobnr, int threadnr)
980 {
981     EXRContext *s = avctx->priv_data;
982     AVFrame *const p = s->picture;
983     EXRThreadData *td = &s->thread_data[threadnr];
984     const uint8_t *channel_buffer[4] = { 0 };
985     const uint8_t *buf = s->buf;
986     uint64_t line_offset, uncompressed_size;
987     uint16_t *ptr_x;
988     uint8_t *ptr;
989     uint32_t data_size, line, col = 0;
990     uint32_t tileX, tileY, tileLevelX, tileLevelY;
991     int channel_line_size;
992     const uint8_t *src;
993     int axmax = (avctx->width - (s->xmax + 1)) * 2 * s->desc->nb_components; /* nb pixel to add at the right of the datawindow */
994     int bxmin = s->xmin * 2 * s->desc->nb_components; /* nb pixel to add at the left of the datawindow */
995     int i, x, buf_size = s->buf_size;
996     float one_gamma = 1.0f / s->gamma;
997     avpriv_trc_function trc_func = avpriv_get_trc_function_from_trc(s->apply_trc_type);
998     int ret;
999
1000     line_offset = AV_RL64(s->gb.buffer + jobnr * 8);
1001
1002     if (s->is_tile) {
1003         if (line_offset > buf_size - 20)
1004             return AVERROR_INVALIDDATA;
1005
1006         src  = buf + line_offset + 20;
1007
1008         tileX = AV_RL32(src - 20);
1009         tileY = AV_RL32(src - 16);
1010         tileLevelX = AV_RL32(src - 12);
1011         tileLevelY = AV_RL32(src - 8);
1012
1013         data_size = AV_RL32(src - 4);
1014         if (data_size <= 0 || data_size > buf_size)
1015             return AVERROR_INVALIDDATA;
1016
1017         if (tileLevelX || tileLevelY) { /* tile level, is not the full res level */
1018             avpriv_report_missing_feature(s->avctx, "Subres tile before full res tile");
1019             return AVERROR_PATCHWELCOME;
1020         }
1021
1022         line = s->tile_attr.ySize * tileY;
1023         col = s->tile_attr.xSize * tileX;
1024
1025         td->ysize = FFMIN(s->tile_attr.ySize, s->ydelta - tileY * s->tile_attr.ySize);
1026         td->xsize = FFMIN(s->tile_attr.xSize, s->xdelta - tileX * s->tile_attr.xSize);
1027
1028         if (col) { /* not the first tile of the line */
1029             bxmin = 0; /* doesn't add pixel at the left of the datawindow */
1030         }
1031
1032         if ((col + td->xsize) != s->xdelta)/* not the last tile of the line */
1033             axmax = 0; /* doesn't add pixel at the right of the datawindow */
1034
1035         channel_line_size = td->xsize * s->current_channel_offset;/* uncompress size of one line */
1036         uncompressed_size = channel_line_size * (uint64_t)td->ysize;/* uncompress size of the block */
1037     } else {
1038         if (line_offset > buf_size - 8)
1039             return AVERROR_INVALIDDATA;
1040
1041         src  = buf + line_offset + 8;
1042         line = AV_RL32(src - 8);
1043
1044         if (line < s->ymin || line > s->ymax)
1045             return AVERROR_INVALIDDATA;
1046
1047         data_size = AV_RL32(src - 4);
1048         if (data_size <= 0 || data_size > buf_size)
1049             return AVERROR_INVALIDDATA;
1050
1051         td->ysize          = FFMIN(s->scan_lines_per_block, s->ymax - line + 1); /* s->ydelta - line ?? */
1052         td->xsize          = s->xdelta;
1053
1054         channel_line_size = td->xsize * s->current_channel_offset;/* uncompress size of one line */
1055         uncompressed_size = channel_line_size * (uint64_t)td->ysize;/* uncompress size of the block */
1056
1057         if ((s->compression == EXR_RAW && (data_size != uncompressed_size ||
1058                                            line_offset > buf_size - uncompressed_size)) ||
1059             (s->compression != EXR_RAW && (data_size > uncompressed_size ||
1060                                            line_offset > buf_size - data_size))) {
1061             return AVERROR_INVALIDDATA;
1062         }
1063     }
1064
1065     if (data_size < uncompressed_size || s->is_tile) { /* td->tmp is use for tile reorganization */
1066         av_fast_padded_malloc(&td->tmp, &td->tmp_size, uncompressed_size);
1067         if (!td->tmp)
1068             return AVERROR(ENOMEM);
1069     }
1070
1071     if (data_size < uncompressed_size) {
1072         av_fast_padded_malloc(&td->uncompressed_data,
1073                               &td->uncompressed_size, uncompressed_size);
1074
1075         if (!td->uncompressed_data)
1076             return AVERROR(ENOMEM);
1077
1078         ret = AVERROR_INVALIDDATA;
1079         switch (s->compression) {
1080         case EXR_ZIP1:
1081         case EXR_ZIP16:
1082             ret = zip_uncompress(src, data_size, uncompressed_size, td);
1083             break;
1084         case EXR_PIZ:
1085             ret = piz_uncompress(s, src, data_size, uncompressed_size, td);
1086             break;
1087         case EXR_PXR24:
1088             ret = pxr24_uncompress(s, src, data_size, uncompressed_size, td);
1089             break;
1090         case EXR_RLE:
1091             ret = rle_uncompress(src, data_size, uncompressed_size, td);
1092             break;
1093         case EXR_B44:
1094         case EXR_B44A:
1095             ret = b44_uncompress(s, src, data_size, uncompressed_size, td);
1096             break;
1097         }
1098         if (ret < 0) {
1099             av_log(avctx, AV_LOG_ERROR, "decode_block() failed.\n");
1100             return ret;
1101         }
1102         src = td->uncompressed_data;
1103     }
1104
1105     channel_buffer[0] = src + td->xsize * s->channel_offsets[0];
1106     channel_buffer[1] = src + td->xsize * s->channel_offsets[1];
1107     channel_buffer[2] = src + td->xsize * s->channel_offsets[2];
1108     if (s->channel_offsets[3] >= 0)
1109         channel_buffer[3] = src + td->xsize * s->channel_offsets[3];
1110
1111     ptr = p->data[0] + line * p->linesize[0] + (col * s->desc->nb_components * 2);
1112
1113     for (i = 0;
1114          i < td->ysize; i++, ptr += p->linesize[0]) {
1115
1116         const uint8_t *r, *g, *b, *a;
1117
1118         r = channel_buffer[0];
1119         g = channel_buffer[1];
1120         b = channel_buffer[2];
1121         if (channel_buffer[3])
1122             a = channel_buffer[3];
1123
1124         ptr_x = (uint16_t *) ptr;
1125
1126         // Zero out the start if xmin is not 0
1127         memset(ptr_x, 0, bxmin);
1128         ptr_x += s->xmin * s->desc->nb_components;
1129
1130         if (s->pixel_type == EXR_FLOAT) {
1131             // 32-bit
1132             if (trc_func) {
1133                 for (x = 0; x < td->xsize; x++) {
1134                     union av_intfloat32 t;
1135                     t.i = bytestream_get_le32(&r);
1136                     t.f = trc_func(t.f);
1137                     *ptr_x++ = exr_flt2uint(t.i);
1138
1139                     t.i = bytestream_get_le32(&g);
1140                     t.f = trc_func(t.f);
1141                     *ptr_x++ = exr_flt2uint(t.i);
1142
1143                     t.i = bytestream_get_le32(&b);
1144                     t.f = trc_func(t.f);
1145                     *ptr_x++ = exr_flt2uint(t.i);
1146                     if (channel_buffer[3])
1147                         *ptr_x++ = exr_flt2uint(bytestream_get_le32(&a));
1148                 }
1149             } else {
1150                 for (x = 0; x < td->xsize; x++) {
1151                     union av_intfloat32 t;
1152                     t.i = bytestream_get_le32(&r);
1153                     if (t.f > 0.0f)  /* avoid negative values */
1154                         t.f = powf(t.f, one_gamma);
1155                     *ptr_x++ = exr_flt2uint(t.i);
1156
1157                     t.i = bytestream_get_le32(&g);
1158                     if (t.f > 0.0f)
1159                         t.f = powf(t.f, one_gamma);
1160                     *ptr_x++ = exr_flt2uint(t.i);
1161
1162                     t.i = bytestream_get_le32(&b);
1163                     if (t.f > 0.0f)
1164                         t.f = powf(t.f, one_gamma);
1165                     *ptr_x++ = exr_flt2uint(t.i);
1166                     if (channel_buffer[3])
1167                         *ptr_x++ = exr_flt2uint(bytestream_get_le32(&a));
1168                 }
1169             }
1170         } else {
1171             // 16-bit
1172             for (x = 0; x < td->xsize; x++) {
1173                 *ptr_x++ = s->gamma_table[bytestream_get_le16(&r)];
1174                 *ptr_x++ = s->gamma_table[bytestream_get_le16(&g)];
1175                 *ptr_x++ = s->gamma_table[bytestream_get_le16(&b)];
1176                 if (channel_buffer[3])
1177                     *ptr_x++ = exr_halflt2uint(bytestream_get_le16(&a));
1178             }
1179         }
1180
1181         // Zero out the end if xmax+1 is not w
1182         memset(ptr_x, 0, axmax);
1183
1184         channel_buffer[0] += channel_line_size;
1185         channel_buffer[1] += channel_line_size;
1186         channel_buffer[2] += channel_line_size;
1187         if (channel_buffer[3])
1188             channel_buffer[3] += channel_line_size;
1189     }
1190
1191     return 0;
1192 }
1193
1194 /**
1195  * Check if the variable name corresponds to its data type.
1196  *
1197  * @param s              the EXRContext
1198  * @param value_name     name of the variable to check
1199  * @param value_type     type of the variable to check
1200  * @param minimum_length minimum length of the variable data
1201  *
1202  * @return bytes to read containing variable data
1203  *         -1 if variable is not found
1204  *         0 if buffer ended prematurely
1205  */
1206 static int check_header_variable(EXRContext *s,
1207                                  const char *value_name,
1208                                  const char *value_type,
1209                                  unsigned int minimum_length)
1210 {
1211     int var_size = -1;
1212
1213     if (bytestream2_get_bytes_left(&s->gb) >= minimum_length &&
1214         !strcmp(s->gb.buffer, value_name)) {
1215         // found value_name, jump to value_type (null terminated strings)
1216         s->gb.buffer += strlen(value_name) + 1;
1217         if (!strcmp(s->gb.buffer, value_type)) {
1218             s->gb.buffer += strlen(value_type) + 1;
1219             var_size = bytestream2_get_le32(&s->gb);
1220             // don't go read past boundaries
1221             if (var_size > bytestream2_get_bytes_left(&s->gb))
1222                 var_size = 0;
1223         } else {
1224             // value_type not found, reset the buffer
1225             s->gb.buffer -= strlen(value_name) + 1;
1226             av_log(s->avctx, AV_LOG_WARNING,
1227                    "Unknown data type %s for header variable %s.\n",
1228                    value_type, value_name);
1229         }
1230     }
1231
1232     return var_size;
1233 }
1234
1235 static int decode_header(EXRContext *s)
1236 {
1237     int magic_number, version, i, flags, sar = 0;
1238     int layer_match = 0;
1239
1240     s->current_channel_offset = 0;
1241     s->xmin               = ~0;
1242     s->xmax               = ~0;
1243     s->ymin               = ~0;
1244     s->ymax               = ~0;
1245     s->xdelta             = ~0;
1246     s->ydelta             = ~0;
1247     s->channel_offsets[0] = -1;
1248     s->channel_offsets[1] = -1;
1249     s->channel_offsets[2] = -1;
1250     s->channel_offsets[3] = -1;
1251     s->pixel_type         = EXR_UNKNOWN;
1252     s->compression        = EXR_UNKN;
1253     s->nb_channels        = 0;
1254     s->w                  = 0;
1255     s->h                  = 0;
1256     s->tile_attr.xSize    = -1;
1257     s->tile_attr.ySize    = -1;
1258     s->is_tile            = 0;
1259
1260     if (bytestream2_get_bytes_left(&s->gb) < 10) {
1261         av_log(s->avctx, AV_LOG_ERROR, "Header too short to parse.\n");
1262         return AVERROR_INVALIDDATA;
1263     }
1264
1265     magic_number = bytestream2_get_le32(&s->gb);
1266     if (magic_number != 20000630) {
1267         /* As per documentation of OpenEXR, it is supposed to be
1268          * int 20000630 little-endian */
1269         av_log(s->avctx, AV_LOG_ERROR, "Wrong magic number %d.\n", magic_number);
1270         return AVERROR_INVALIDDATA;
1271     }
1272
1273     version = bytestream2_get_byte(&s->gb);
1274     if (version != 2) {
1275         avpriv_report_missing_feature(s->avctx, "Version %d", version);
1276         return AVERROR_PATCHWELCOME;
1277     }
1278
1279     flags = bytestream2_get_le24(&s->gb);
1280
1281     if (flags == 0x00)
1282         s->is_tile = 0;
1283     else if (flags & 0x02)
1284         s->is_tile = 1;
1285     else{
1286         avpriv_report_missing_feature(s->avctx, "flags %d", flags);
1287         return AVERROR_PATCHWELCOME;
1288     }
1289
1290     // Parse the header
1291     while (bytestream2_get_bytes_left(&s->gb) > 0 && *s->gb.buffer) {
1292         int var_size;
1293         if ((var_size = check_header_variable(s, "channels",
1294                                               "chlist", 38)) >= 0) {
1295             GetByteContext ch_gb;
1296             if (!var_size)
1297                 return AVERROR_INVALIDDATA;
1298
1299             bytestream2_init(&ch_gb, s->gb.buffer, var_size);
1300
1301             while (bytestream2_get_bytes_left(&ch_gb) >= 19) {
1302                 EXRChannel *channel;
1303                 enum ExrPixelType current_pixel_type;
1304                 int channel_index = -1;
1305                 int xsub, ysub;
1306
1307                 if (strcmp(s->layer, "") != 0) {
1308                     if (strncmp(ch_gb.buffer, s->layer, strlen(s->layer)) == 0) {
1309                         layer_match = 1;
1310                         av_log(s->avctx, AV_LOG_INFO,
1311                                "Channel match layer : %s.\n", ch_gb.buffer);
1312                         ch_gb.buffer += strlen(s->layer);
1313                         if (*ch_gb.buffer == '.')
1314                             ch_gb.buffer++;         /* skip dot if not given */
1315                     } else {
1316                         av_log(s->avctx, AV_LOG_INFO,
1317                                "Channel doesn't match layer : %s.\n", ch_gb.buffer);
1318                     }
1319                 } else {
1320                     layer_match = 1;
1321                 }
1322
1323                 if (layer_match) { /* only search channel if the layer match is valid */
1324                     if (!strcmp(ch_gb.buffer, "R") ||
1325                         !strcmp(ch_gb.buffer, "X") ||
1326                         !strcmp(ch_gb.buffer, "U"))
1327                         channel_index = 0;
1328                     else if (!strcmp(ch_gb.buffer, "G") ||
1329                              !strcmp(ch_gb.buffer, "Y") ||
1330                              !strcmp(ch_gb.buffer, "V"))
1331                         channel_index = 1;
1332                     else if (!strcmp(ch_gb.buffer, "B") ||
1333                              !strcmp(ch_gb.buffer, "Z") ||
1334                              !strcmp(ch_gb.buffer, "W"))
1335                         channel_index = 2;
1336                     else if (!strcmp(ch_gb.buffer, "A"))
1337                         channel_index = 3;
1338                     else
1339                         av_log(s->avctx, AV_LOG_WARNING,
1340                                "Unsupported channel %.256s.\n", ch_gb.buffer);
1341                 }
1342
1343                 /* skip until you get a 0 */
1344                 while (bytestream2_get_bytes_left(&ch_gb) > 0 &&
1345                        bytestream2_get_byte(&ch_gb))
1346                     continue;
1347
1348                 if (bytestream2_get_bytes_left(&ch_gb) < 4) {
1349                     av_log(s->avctx, AV_LOG_ERROR, "Incomplete header.\n");
1350                     return AVERROR_INVALIDDATA;
1351                 }
1352
1353                 current_pixel_type = bytestream2_get_le32(&ch_gb);
1354                 if (current_pixel_type >= EXR_UNKNOWN) {
1355                     avpriv_report_missing_feature(s->avctx, "Pixel type %d",
1356                                                   current_pixel_type);
1357                     return AVERROR_PATCHWELCOME;
1358                 }
1359
1360                 bytestream2_skip(&ch_gb, 4);
1361                 xsub = bytestream2_get_le32(&ch_gb);
1362                 ysub = bytestream2_get_le32(&ch_gb);
1363                 if (xsub != 1 || ysub != 1) {
1364                     avpriv_report_missing_feature(s->avctx,
1365                                                   "Subsampling %dx%d",
1366                                                   xsub, ysub);
1367                     return AVERROR_PATCHWELCOME;
1368                 }
1369
1370                 if (s->channel_offsets[channel_index] == -1){/* channel have not been previously assign */
1371                     if (channel_index >= 0) {
1372                         if (s->pixel_type != EXR_UNKNOWN &&
1373                             s->pixel_type != current_pixel_type) {
1374                             av_log(s->avctx, AV_LOG_ERROR,
1375                                    "RGB channels not of the same depth.\n");
1376                             return AVERROR_INVALIDDATA;
1377                         }
1378                         s->pixel_type                     = current_pixel_type;
1379                         s->channel_offsets[channel_index] = s->current_channel_offset;
1380                     }
1381                 }
1382
1383                 s->channels = av_realloc(s->channels,
1384                                          ++s->nb_channels * sizeof(EXRChannel));
1385                 if (!s->channels)
1386                     return AVERROR(ENOMEM);
1387                 channel             = &s->channels[s->nb_channels - 1];
1388                 channel->pixel_type = current_pixel_type;
1389                 channel->xsub       = xsub;
1390                 channel->ysub       = ysub;
1391
1392                 s->current_channel_offset += 1 << current_pixel_type;
1393             }
1394
1395             /* Check if all channels are set with an offset or if the channels
1396              * are causing an overflow  */
1397             if (FFMIN3(s->channel_offsets[0],
1398                        s->channel_offsets[1],
1399                        s->channel_offsets[2]) < 0) {
1400                 if (s->channel_offsets[0] < 0)
1401                     av_log(s->avctx, AV_LOG_ERROR, "Missing red channel.\n");
1402                 if (s->channel_offsets[1] < 0)
1403                     av_log(s->avctx, AV_LOG_ERROR, "Missing green channel.\n");
1404                 if (s->channel_offsets[2] < 0)
1405                     av_log(s->avctx, AV_LOG_ERROR, "Missing blue channel.\n");
1406                 return AVERROR_INVALIDDATA;
1407             }
1408
1409             // skip one last byte and update main gb
1410             s->gb.buffer = ch_gb.buffer + 1;
1411             continue;
1412         } else if ((var_size = check_header_variable(s, "dataWindow", "box2i",
1413                                                      31)) >= 0) {
1414             if (!var_size)
1415                 return AVERROR_INVALIDDATA;
1416
1417             s->xmin   = bytestream2_get_le32(&s->gb);
1418             s->ymin   = bytestream2_get_le32(&s->gb);
1419             s->xmax   = bytestream2_get_le32(&s->gb);
1420             s->ymax   = bytestream2_get_le32(&s->gb);
1421             s->xdelta = (s->xmax - s->xmin) + 1;
1422             s->ydelta = (s->ymax - s->ymin) + 1;
1423
1424             continue;
1425         } else if ((var_size = check_header_variable(s, "displayWindow",
1426                                                      "box2i", 34)) >= 0) {
1427             if (!var_size)
1428                 return AVERROR_INVALIDDATA;
1429
1430             bytestream2_skip(&s->gb, 8);
1431             s->w = bytestream2_get_le32(&s->gb) + 1;
1432             s->h = bytestream2_get_le32(&s->gb) + 1;
1433
1434             continue;
1435         } else if ((var_size = check_header_variable(s, "lineOrder",
1436                                                      "lineOrder", 25)) >= 0) {
1437             int line_order;
1438             if (!var_size)
1439                 return AVERROR_INVALIDDATA;
1440
1441             line_order = bytestream2_get_byte(&s->gb);
1442             av_log(s->avctx, AV_LOG_DEBUG, "line order: %d.\n", line_order);
1443             if (line_order > 2) {
1444                 av_log(s->avctx, AV_LOG_ERROR, "Unknown line order.\n");
1445                 return AVERROR_INVALIDDATA;
1446             }
1447
1448             continue;
1449         } else if ((var_size = check_header_variable(s, "pixelAspectRatio",
1450                                                      "float", 31)) >= 0) {
1451             if (!var_size)
1452                 return AVERROR_INVALIDDATA;
1453
1454             sar = bytestream2_get_le32(&s->gb);
1455
1456             continue;
1457         } else if ((var_size = check_header_variable(s, "compression",
1458                                                      "compression", 29)) >= 0) {
1459             if (!var_size)
1460                 return AVERROR_INVALIDDATA;
1461
1462             if (s->compression == EXR_UNKN)
1463                 s->compression = bytestream2_get_byte(&s->gb);
1464             else
1465                 av_log(s->avctx, AV_LOG_WARNING,
1466                        "Found more than one compression attribute.\n");
1467
1468             continue;
1469         } else if ((var_size = check_header_variable(s, "tiles",
1470                                                      "tiledesc", 22)) >= 0) {
1471             char tileLevel;
1472
1473             if (!s->is_tile)
1474                 av_log(s->avctx, AV_LOG_WARNING,
1475                        "Found tile attribute and scanline flags. Exr will be interpreted as scanline.\n");
1476
1477             s->tile_attr.xSize = bytestream2_get_le32(&s->gb);
1478             s->tile_attr.ySize = bytestream2_get_le32(&s->gb);
1479
1480             tileLevel = bytestream2_get_byte(&s->gb);
1481             s->tile_attr.level_mode = tileLevel & 0x0f;
1482             s->tile_attr.level_round = (tileLevel >> 4) & 0x0f;
1483
1484             if (s->tile_attr.level_mode >= EXR_TILE_LEVEL_UNKNOWN){
1485                 avpriv_report_missing_feature(s->avctx, "Tile level mode %d",
1486                                               s->tile_attr.level_mode);
1487                 return AVERROR_PATCHWELCOME;
1488             }
1489
1490             if (s->tile_attr.level_round >= EXR_TILE_ROUND_UNKNOWN) {
1491                 avpriv_report_missing_feature(s->avctx, "Tile level round %d",
1492                                               s->tile_attr.level_round);
1493                 return AVERROR_PATCHWELCOME;
1494             }
1495
1496             continue;
1497         }
1498
1499         // Check if there are enough bytes for a header
1500         if (bytestream2_get_bytes_left(&s->gb) <= 9) {
1501             av_log(s->avctx, AV_LOG_ERROR, "Incomplete header\n");
1502             return AVERROR_INVALIDDATA;
1503         }
1504
1505         // Process unknown variables
1506         for (i = 0; i < 2; i++) // value_name and value_type
1507             while (bytestream2_get_byte(&s->gb) != 0);
1508
1509         // Skip variable length
1510         bytestream2_skip(&s->gb, bytestream2_get_le32(&s->gb));
1511     }
1512
1513     ff_set_sar(s->avctx, av_d2q(av_int2float(sar), 255));
1514
1515     if (s->compression == EXR_UNKN) {
1516         av_log(s->avctx, AV_LOG_ERROR, "Missing compression attribute.\n");
1517         return AVERROR_INVALIDDATA;
1518     }
1519
1520     if (s->is_tile) {
1521         if (s->tile_attr.xSize < 1 || s->tile_attr.ySize < 1) {
1522             av_log(s->avctx, AV_LOG_ERROR, "Invalid tile attribute.\n");
1523             return AVERROR_INVALIDDATA;
1524         }
1525     }
1526
1527     s->scan_line_size = s->xdelta * s->current_channel_offset;
1528
1529     if (bytestream2_get_bytes_left(&s->gb) <= 0) {
1530         av_log(s->avctx, AV_LOG_ERROR, "Incomplete frame.\n");
1531         return AVERROR_INVALIDDATA;
1532     }
1533
1534     // aaand we are done
1535     bytestream2_skip(&s->gb, 1);
1536     return 0;
1537 }
1538
1539 static int decode_frame(AVCodecContext *avctx, void *data,
1540                         int *got_frame, AVPacket *avpkt)
1541 {
1542     EXRContext *s = avctx->priv_data;
1543     ThreadFrame frame = { .f = data };
1544     AVFrame *picture = data;
1545     uint8_t *ptr;
1546
1547     int y, ret;
1548     int out_line_size;
1549     int nb_blocks;/* nb scanline or nb tile */
1550
1551     bytestream2_init(&s->gb, avpkt->data, avpkt->size);
1552
1553     if ((ret = decode_header(s)) < 0)
1554         return ret;
1555
1556     switch (s->pixel_type) {
1557     case EXR_FLOAT:
1558     case EXR_HALF:
1559         if (s->channel_offsets[3] >= 0)
1560             avctx->pix_fmt = AV_PIX_FMT_RGBA64;
1561         else
1562             avctx->pix_fmt = AV_PIX_FMT_RGB48;
1563         break;
1564     case EXR_UINT:
1565         avpriv_request_sample(avctx, "32-bit unsigned int");
1566         return AVERROR_PATCHWELCOME;
1567     default:
1568         av_log(avctx, AV_LOG_ERROR, "Missing channel list.\n");
1569         return AVERROR_INVALIDDATA;
1570     }
1571
1572     if (s->apply_trc_type != AVCOL_TRC_UNSPECIFIED)
1573         avctx->color_trc = s->apply_trc_type;
1574
1575     switch (s->compression) {
1576     case EXR_RAW:
1577     case EXR_RLE:
1578     case EXR_ZIP1:
1579         s->scan_lines_per_block = 1;
1580         break;
1581     case EXR_PXR24:
1582     case EXR_ZIP16:
1583         s->scan_lines_per_block = 16;
1584         break;
1585     case EXR_PIZ:
1586     case EXR_B44:
1587     case EXR_B44A:
1588         s->scan_lines_per_block = 32;
1589         break;
1590     default:
1591         avpriv_report_missing_feature(avctx, "Compression %d", s->compression);
1592         return AVERROR_PATCHWELCOME;
1593     }
1594
1595     /* Verify the xmin, xmax, ymin, ymax and xdelta before setting
1596      * the actual image size. */
1597     if (s->xmin > s->xmax                  ||
1598         s->ymin > s->ymax                  ||
1599         s->xdelta != s->xmax - s->xmin + 1 ||
1600         s->xmax >= s->w                    ||
1601         s->ymax >= s->h) {
1602         av_log(avctx, AV_LOG_ERROR, "Wrong or missing size information.\n");
1603         return AVERROR_INVALIDDATA;
1604     }
1605
1606     if ((ret = ff_set_dimensions(avctx, s->w, s->h)) < 0)
1607         return ret;
1608
1609     s->desc          = av_pix_fmt_desc_get(avctx->pix_fmt);
1610     if (!s->desc)
1611         return AVERROR_INVALIDDATA;
1612     out_line_size    = avctx->width * 2 * s->desc->nb_components;
1613
1614     if (s->is_tile) {
1615         nb_blocks = ((s->xdelta + s->tile_attr.xSize - 1) / s->tile_attr.xSize) *
1616         ((s->ydelta + s->tile_attr.ySize - 1) / s->tile_attr.ySize);
1617     } else { /* scanline */
1618         nb_blocks = (s->ydelta + s->scan_lines_per_block - 1) /
1619         s->scan_lines_per_block;
1620     }
1621
1622     if ((ret = ff_thread_get_buffer(avctx, &frame, 0)) < 0)
1623         return ret;
1624
1625     if (bytestream2_get_bytes_left(&s->gb) < nb_blocks * 8)
1626         return AVERROR_INVALIDDATA;
1627
1628     // save pointer we are going to use in decode_block
1629     s->buf      = avpkt->data;
1630     s->buf_size = avpkt->size;
1631     ptr         = picture->data[0];
1632
1633     // Zero out the start if ymin is not 0
1634     for (y = 0; y < s->ymin; y++) {
1635         memset(ptr, 0, out_line_size);
1636         ptr += picture->linesize[0];
1637     }
1638
1639     s->picture = picture;
1640
1641     avctx->execute2(avctx, decode_block, s->thread_data, NULL, nb_blocks);
1642
1643     // Zero out the end if ymax+1 is not h
1644     for (y = s->ymax + 1; y < avctx->height; y++) {
1645         memset(ptr, 0, out_line_size);
1646         ptr += picture->linesize[0];
1647     }
1648
1649     picture->pict_type = AV_PICTURE_TYPE_I;
1650     *got_frame = 1;
1651
1652     return avpkt->size;
1653 }
1654
1655 static av_cold int decode_init(AVCodecContext *avctx)
1656 {
1657     EXRContext *s = avctx->priv_data;
1658     uint32_t i;
1659     union av_intfloat32 t;
1660     float one_gamma = 1.0f / s->gamma;
1661     avpriv_trc_function trc_func = NULL;
1662
1663     s->avctx              = avctx;
1664
1665     trc_func = avpriv_get_trc_function_from_trc(s->apply_trc_type);
1666     if (trc_func) {
1667         for (i = 0; i < 65536; ++i) {
1668             t = exr_half2float(i);
1669             t.f = trc_func(t.f);
1670             s->gamma_table[i] = exr_flt2uint(t.i);
1671         }
1672     } else {
1673         if (one_gamma > 0.9999f && one_gamma < 1.0001f) {
1674             for (i = 0; i < 65536; ++i)
1675                 s->gamma_table[i] = exr_halflt2uint(i);
1676         } else {
1677             for (i = 0; i < 65536; ++i) {
1678                 t = exr_half2float(i);
1679                 /* If negative value we reuse half value */
1680                 if (t.f <= 0.0f) {
1681                     s->gamma_table[i] = exr_halflt2uint(i);
1682                 } else {
1683                     t.f = powf(t.f, one_gamma);
1684                     s->gamma_table[i] = exr_flt2uint(t.i);
1685                 }
1686             }
1687         }
1688     }
1689
1690     // allocate thread data, used for non EXR_RAW compreesion types
1691     s->thread_data = av_mallocz_array(avctx->thread_count, sizeof(EXRThreadData));
1692     if (!s->thread_data)
1693         return AVERROR_INVALIDDATA;
1694
1695     return 0;
1696 }
1697
1698 #if HAVE_THREADS
1699 static int decode_init_thread_copy(AVCodecContext *avctx)
1700 {    EXRContext *s = avctx->priv_data;
1701
1702     // allocate thread data, used for non EXR_RAW compreesion types
1703     s->thread_data = av_mallocz_array(avctx->thread_count, sizeof(EXRThreadData));
1704     if (!s->thread_data)
1705         return AVERROR_INVALIDDATA;
1706
1707     return 0;
1708 }
1709 #endif
1710
1711 static av_cold int decode_end(AVCodecContext *avctx)
1712 {
1713     EXRContext *s = avctx->priv_data;
1714     int i;
1715     for (i = 0; i < avctx->thread_count; i++) {
1716         EXRThreadData *td = &s->thread_data[i];
1717         av_freep(&td->uncompressed_data);
1718         av_freep(&td->tmp);
1719         av_freep(&td->bitmap);
1720         av_freep(&td->lut);
1721     }
1722
1723     av_freep(&s->thread_data);
1724     av_freep(&s->channels);
1725
1726     return 0;
1727 }
1728
1729 #define OFFSET(x) offsetof(EXRContext, x)
1730 #define VD AV_OPT_FLAG_VIDEO_PARAM | AV_OPT_FLAG_DECODING_PARAM
1731 static const AVOption options[] = {
1732     { "layer", "Set the decoding layer", OFFSET(layer),
1733         AV_OPT_TYPE_STRING, { .str = "" }, 0, 0, VD },
1734     { "gamma", "Set the float gamma value when decoding", OFFSET(gamma),
1735         AV_OPT_TYPE_FLOAT, { .dbl = 1.0f }, 0.001, FLT_MAX, VD },
1736
1737     // XXX: Note the abuse of the enum using AVCOL_TRC_UNSPECIFIED to subsume the existing gamma option
1738     { "apply_trc", "color transfer characteristics to apply to EXR linear input", OFFSET(apply_trc_type),
1739         AV_OPT_TYPE_INT, {.i64 = AVCOL_TRC_UNSPECIFIED }, 1, AVCOL_TRC_NB-1, VD, "apply_trc_type"},
1740     { "bt709",        "BT.709",           0,
1741         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_BT709 },        INT_MIN, INT_MAX, VD, "apply_trc_type"},
1742     { "gamma",        "gamma",            0,
1743         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_UNSPECIFIED },  INT_MIN, INT_MAX, VD, "apply_trc_type"},
1744     { "gamma22",      "BT.470 M",         0,
1745         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_GAMMA22 },      INT_MIN, INT_MAX, VD, "apply_trc_type"},
1746     { "gamma28",      "BT.470 BG",        0,
1747         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_GAMMA28 },      INT_MIN, INT_MAX, VD, "apply_trc_type"},
1748     { "smpte170m",    "SMPTE 170 M",      0,
1749         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_SMPTE170M },    INT_MIN, INT_MAX, VD, "apply_trc_type"},
1750     { "smpte240m",    "SMPTE 240 M",      0,
1751         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_SMPTE240M },    INT_MIN, INT_MAX, VD, "apply_trc_type"},
1752     { "linear",       "Linear",           0,
1753         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_LINEAR },       INT_MIN, INT_MAX, VD, "apply_trc_type"},
1754     { "log",          "Log",              0,
1755         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_LOG },          INT_MIN, INT_MAX, VD, "apply_trc_type"},
1756     { "log_sqrt",     "Log square root",  0,
1757         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_LOG_SQRT },     INT_MIN, INT_MAX, VD, "apply_trc_type"},
1758     { "iec61966_2_4", "IEC 61966-2-4",    0,
1759         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_IEC61966_2_4 }, INT_MIN, INT_MAX, VD, "apply_trc_type"},
1760     { "bt1361",       "BT.1361",          0,
1761         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_BT1361_ECG },   INT_MIN, INT_MAX, VD, "apply_trc_type"},
1762     { "iec61966_2_1", "IEC 61966-2-1",    0,
1763         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_IEC61966_2_1 }, INT_MIN, INT_MAX, VD, "apply_trc_type"},
1764     { "bt2020_10bit", "BT.2020 - 10 bit", 0,
1765         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_BT2020_10 },    INT_MIN, INT_MAX, VD, "apply_trc_type"},
1766     { "bt2020_12bit", "BT.2020 - 12 bit", 0,
1767         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_BT2020_12 },    INT_MIN, INT_MAX, VD, "apply_trc_type"},
1768     { "smpte2084",    "SMPTE ST 2084",    0,
1769         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_SMPTEST2084 },  INT_MIN, INT_MAX, VD, "apply_trc_type"},
1770     { "smpte428_1",   "SMPTE ST 428-1",   0,
1771         AV_OPT_TYPE_CONST, {.i64 = AVCOL_TRC_SMPTEST428_1 }, INT_MIN, INT_MAX, VD, "apply_trc_type"},
1772
1773     { NULL },
1774 };
1775
1776 static const AVClass exr_class = {
1777     .class_name = "EXR",
1778     .item_name  = av_default_item_name,
1779     .option     = options,
1780     .version    = LIBAVUTIL_VERSION_INT,
1781 };
1782
1783 AVCodec ff_exr_decoder = {
1784     .name             = "exr",
1785     .long_name        = NULL_IF_CONFIG_SMALL("OpenEXR image"),
1786     .type             = AVMEDIA_TYPE_VIDEO,
1787     .id               = AV_CODEC_ID_EXR,
1788     .priv_data_size   = sizeof(EXRContext),
1789     .init             = decode_init,
1790     .init_thread_copy = ONLY_IF_THREADS_ENABLED(decode_init_thread_copy),
1791     .close            = decode_end,
1792     .decode           = decode_frame,
1793     .capabilities     = AV_CODEC_CAP_DR1 | AV_CODEC_CAP_FRAME_THREADS |
1794                         AV_CODEC_CAP_SLICE_THREADS,
1795     .priv_class       = &exr_class,
1796 };