45308ccbbe817e16582b119e904fd4cd8b54eaa0
[ffmpeg.git] / libavcodec / lcldec.c
1 /*
2  * LCL (LossLess Codec Library) Codec
3  * Copyright (c) 2002-2004 Roberto Togni
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * LCL (LossLess Codec Library) Video Codec
25  * Decoder for MSZH and ZLIB codecs
26  * Experimental encoder for ZLIB RGB24
27  *
28  * Fourcc: MSZH, ZLIB
29  *
30  * Original Win32 dll:
31  * Ver2.23 By Kenji Oshima 2000.09.20
32  * avimszh.dll, avizlib.dll
33  *
34  * A description of the decoding algorithm can be found here:
35  *   http://www.pcisys.net/~melanson/codecs
36  *
37  * Supports: BGR24 (RGB 24bpp)
38  *
39  */
40
41 #include <stdio.h>
42 #include <stdlib.h>
43
44 #include "libavutil/mem.h"
45 #include "avcodec.h"
46 #include "bytestream.h"
47 #include "internal.h"
48 #include "lcl.h"
49
50 #if CONFIG_ZLIB_DECODER
51 #include <zlib.h>
52 #endif
53
54 /*
55  * Decoder context
56  */
57 typedef struct LclDecContext {
58     // Image type
59     int imgtype;
60     // Compression type
61     int compression;
62     // Flags
63     int flags;
64     // Decompressed data size
65     unsigned int decomp_size;
66     // Decompression buffer
67     unsigned char* decomp_buf;
68 #if CONFIG_ZLIB_DECODER
69     z_stream zstream;
70 #endif
71 } LclDecContext;
72
73
74 /**
75  * @param srcptr compressed source buffer, must be padded with at least 5 extra bytes
76  * @param destptr must be padded sufficiently for av_memcpy_backptr
77  */
78 static unsigned int mszh_decomp(const unsigned char * srcptr, int srclen, unsigned char * destptr, unsigned int destsize)
79 {
80     unsigned char *destptr_bak = destptr;
81     unsigned char *destptr_end = destptr + destsize;
82     const unsigned char *srcptr_end = srcptr + srclen;
83     unsigned mask = *srcptr++;
84     unsigned maskbit = 0x80;
85
86     while (srcptr < srcptr_end && destptr < destptr_end) {
87         if (!(mask & maskbit)) {
88             memcpy(destptr, srcptr, 4);
89             destptr += 4;
90             srcptr += 4;
91         } else {
92             unsigned ofs = bytestream_get_le16(&srcptr);
93             unsigned cnt = (ofs >> 11) + 1;
94             ofs &= 0x7ff;
95             ofs = FFMIN(ofs, destptr - destptr_bak);
96             cnt *= 4;
97             cnt = FFMIN(cnt, destptr_end - destptr);
98             if (ofs) {
99                 av_memcpy_backptr(destptr, ofs, cnt);
100             } else {
101                 // Not known what the correct behaviour is, but
102                 // this at least avoids uninitialized data.
103                 memset(destptr, 0, cnt);
104             }
105             destptr += cnt;
106         }
107         maskbit >>= 1;
108         if (!maskbit) {
109             mask = *srcptr++;
110             while (!mask) {
111                 if (destptr_end - destptr < 32 || srcptr_end - srcptr < 32) break;
112                 memcpy(destptr, srcptr, 32);
113                 destptr += 32;
114                 srcptr += 32;
115                 mask = *srcptr++;
116             }
117             maskbit = 0x80;
118         }
119     }
120
121     return destptr - destptr_bak;
122 }
123
124
125 #if CONFIG_ZLIB_DECODER
126 /**
127  * @brief decompress a zlib-compressed data block into decomp_buf
128  * @param src compressed input buffer
129  * @param src_len data length in input buffer
130  * @param offset offset in decomp_buf
131  * @param expected expected decompressed length
132  */
133 static int zlib_decomp(AVCodecContext *avctx, const uint8_t *src, int src_len, int offset, int expected)
134 {
135     LclDecContext *c = avctx->priv_data;
136     int zret = inflateReset(&c->zstream);
137     if (zret != Z_OK) {
138         av_log(avctx, AV_LOG_ERROR, "Inflate reset error: %d\n", zret);
139         return AVERROR_UNKNOWN;
140     }
141     c->zstream.next_in = (uint8_t *)src;
142     c->zstream.avail_in = src_len;
143     c->zstream.next_out = c->decomp_buf + offset;
144     c->zstream.avail_out = c->decomp_size - offset;
145     zret = inflate(&c->zstream, Z_FINISH);
146     if (zret != Z_OK && zret != Z_STREAM_END) {
147         av_log(avctx, AV_LOG_ERROR, "Inflate error: %d\n", zret);
148         return AVERROR_UNKNOWN;
149     }
150     if (expected != (unsigned int)c->zstream.total_out) {
151         av_log(avctx, AV_LOG_ERROR, "Decoded size differs (%d != %lu)\n",
152                expected, c->zstream.total_out);
153         return AVERROR_UNKNOWN;
154     }
155     return c->zstream.total_out;
156 }
157 #endif
158
159
160 /*
161  *
162  * Decode a frame
163  *
164  */
165 static int decode_frame(AVCodecContext *avctx, void *data, int *got_frame, AVPacket *avpkt)
166 {
167     AVFrame *frame = data;
168     const uint8_t *buf = avpkt->data;
169     int buf_size = avpkt->size;
170     LclDecContext * const c = avctx->priv_data;
171     unsigned char *encoded = (unsigned char *)buf;
172     unsigned int pixel_ptr;
173     int row, col;
174     unsigned char *outptr;
175     uint8_t *y_out, *u_out, *v_out;
176     unsigned int width = avctx->width; // Real image width
177     unsigned int height = avctx->height; // Real image height
178     unsigned int mszh_dlen;
179     unsigned char yq, y1q, uq, vq;
180     int uqvq, ret;
181     unsigned int mthread_inlen, mthread_outlen;
182     unsigned int len = buf_size;
183
184     if ((ret = ff_get_buffer(avctx, frame, 0)) < 0) {
185         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
186         return ret;
187     }
188
189     outptr = frame->data[0]; // Output image pointer
190
191     /* Decompress frame */
192     switch (avctx->codec_id) {
193     case AV_CODEC_ID_MSZH:
194         switch (c->compression) {
195         case COMP_MSZH:
196             if (c->imgtype == IMGTYPE_RGB24 && len == width * height * 3) {
197                 ;
198             } else if (c->flags & FLAG_MULTITHREAD) {
199                 mthread_inlen = AV_RL32(encoded);
200                 if (len < 8) {
201                     av_log(avctx, AV_LOG_ERROR, "len %d is too small\n", len);
202                     return AVERROR_INVALIDDATA;
203                 }
204                 mthread_inlen = FFMIN(mthread_inlen, len - 8);
205                 mthread_outlen = AV_RL32(encoded+4);
206                 mthread_outlen = FFMIN(mthread_outlen, c->decomp_size);
207                 mszh_dlen = mszh_decomp(encoded + 8, mthread_inlen, c->decomp_buf, c->decomp_size);
208                 if (mthread_outlen != mszh_dlen) {
209                     av_log(avctx, AV_LOG_ERROR, "Mthread1 decoded size differs (%d != %d)\n",
210                            mthread_outlen, mszh_dlen);
211                     return AVERROR_INVALIDDATA;
212                 }
213                 mszh_dlen = mszh_decomp(encoded + 8 + mthread_inlen, len - 8 - mthread_inlen,
214                                         c->decomp_buf + mthread_outlen, c->decomp_size - mthread_outlen);
215                 if (mthread_outlen != mszh_dlen) {
216                     av_log(avctx, AV_LOG_ERROR, "Mthread2 decoded size differs (%d != %d)\n",
217                            mthread_outlen, mszh_dlen);
218                     return AVERROR_INVALIDDATA;
219                 }
220                 encoded = c->decomp_buf;
221                 len = c->decomp_size;
222             } else {
223                 mszh_dlen = mszh_decomp(encoded, len, c->decomp_buf, c->decomp_size);
224                 if (c->decomp_size != mszh_dlen) {
225                     av_log(avctx, AV_LOG_ERROR, "Decoded size differs (%d != %d)\n",
226                            c->decomp_size, mszh_dlen);
227                     return AVERROR_INVALIDDATA;
228                 }
229                 encoded = c->decomp_buf;
230                 len = mszh_dlen;
231             }
232             break;
233         case COMP_MSZH_NOCOMP: {
234             int bppx2;
235             switch (c->imgtype) {
236             case IMGTYPE_YUV111:
237             case IMGTYPE_RGB24:
238                 bppx2 = 6;
239                 break;
240             case IMGTYPE_YUV422:
241             case IMGTYPE_YUV211:
242                 bppx2 = 4;
243                 break;
244             case IMGTYPE_YUV411:
245             case IMGTYPE_YUV420:
246                 bppx2 = 3;
247                 break;
248             default:
249                 bppx2 = 0; // will error out below
250                 break;
251             }
252             if (len < ((width * height * bppx2) >> 1))
253                 return AVERROR_INVALIDDATA;
254             break;
255         }
256         default:
257             av_log(avctx, AV_LOG_ERROR, "BUG! Unknown MSZH compression in frame decoder.\n");
258             return AVERROR_INVALIDDATA;
259         }
260         break;
261 #if CONFIG_ZLIB_DECODER
262     case AV_CODEC_ID_ZLIB:
263         /* Using the original dll with normal compression (-1) and RGB format
264          * gives a file with ZLIB fourcc, but frame is really uncompressed.
265          * To be sure that's true check also frame size */
266         if (c->compression == COMP_ZLIB_NORMAL && c->imgtype == IMGTYPE_RGB24 &&
267             len == width * height * 3) {
268             if (c->flags & FLAG_PNGFILTER) {
269                 memcpy(c->decomp_buf, encoded, len);
270                 encoded = c->decomp_buf;
271             } else {
272                 break;
273             }
274         } else if (c->flags & FLAG_MULTITHREAD) {
275             mthread_inlen = AV_RL32(encoded);
276             mthread_inlen = FFMIN(mthread_inlen, len - 8);
277             mthread_outlen = AV_RL32(encoded+4);
278             mthread_outlen = FFMIN(mthread_outlen, c->decomp_size);
279             ret = zlib_decomp(avctx, encoded + 8, mthread_inlen, 0, mthread_outlen);
280             if (ret < 0) return ret;
281             ret = zlib_decomp(avctx, encoded + 8 + mthread_inlen, len - 8 - mthread_inlen,
282                               mthread_outlen, mthread_outlen);
283             if (ret < 0) return ret;
284         } else {
285             int ret = zlib_decomp(avctx, encoded, len, 0, c->decomp_size);
286             if (ret < 0) return ret;
287         }
288         encoded = c->decomp_buf;
289         len = c->decomp_size;
290         break;
291 #endif
292     default:
293         av_log(avctx, AV_LOG_ERROR, "BUG! Unknown codec in frame decoder compression switch.\n");
294         return AVERROR_INVALIDDATA;
295     }
296
297
298     /* Apply PNG filter */
299     if (avctx->codec_id == AV_CODEC_ID_ZLIB && (c->flags & FLAG_PNGFILTER)) {
300         switch (c->imgtype) {
301         case IMGTYPE_YUV111:
302         case IMGTYPE_RGB24:
303             for (row = 0; row < height; row++) {
304                 pixel_ptr = row * width * 3;
305                 yq = encoded[pixel_ptr++];
306                 uqvq = AV_RL16(encoded+pixel_ptr);
307                 pixel_ptr += 2;
308                 for (col = 1; col < width; col++) {
309                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
310                     uqvq -= AV_RL16(encoded+pixel_ptr+1);
311                     AV_WL16(encoded+pixel_ptr+1, uqvq);
312                     pixel_ptr += 3;
313                 }
314             }
315             break;
316         case IMGTYPE_YUV422:
317             for (row = 0; row < height; row++) {
318                 pixel_ptr = row * width * 2;
319                 yq = uq = vq =0;
320                 for (col = 0; col < width/4; col++) {
321                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
322                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
323                     encoded[pixel_ptr+2] = yq -= encoded[pixel_ptr+2];
324                     encoded[pixel_ptr+3] = yq -= encoded[pixel_ptr+3];
325                     encoded[pixel_ptr+4] = uq -= encoded[pixel_ptr+4];
326                     encoded[pixel_ptr+5] = uq -= encoded[pixel_ptr+5];
327                     encoded[pixel_ptr+6] = vq -= encoded[pixel_ptr+6];
328                     encoded[pixel_ptr+7] = vq -= encoded[pixel_ptr+7];
329                     pixel_ptr += 8;
330                 }
331             }
332             break;
333         case IMGTYPE_YUV411:
334             for (row = 0; row < height; row++) {
335                 pixel_ptr = row * width / 2 * 3;
336                 yq = uq = vq =0;
337                 for (col = 0; col < width/4; col++) {
338                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
339                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
340                     encoded[pixel_ptr+2] = yq -= encoded[pixel_ptr+2];
341                     encoded[pixel_ptr+3] = yq -= encoded[pixel_ptr+3];
342                     encoded[pixel_ptr+4] = uq -= encoded[pixel_ptr+4];
343                     encoded[pixel_ptr+5] = vq -= encoded[pixel_ptr+5];
344                     pixel_ptr += 6;
345                 }
346             }
347             break;
348         case IMGTYPE_YUV211:
349             for (row = 0; row < height; row++) {
350                 pixel_ptr = row * width * 2;
351                 yq = uq = vq =0;
352                 for (col = 0; col < width/2; col++) {
353                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
354                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
355                     encoded[pixel_ptr+2] = uq -= encoded[pixel_ptr+2];
356                     encoded[pixel_ptr+3] = vq -= encoded[pixel_ptr+3];
357                     pixel_ptr += 4;
358                 }
359             }
360             break;
361         case IMGTYPE_YUV420:
362             for (row = 0; row < height/2; row++) {
363                 pixel_ptr = row * width * 3;
364                 yq = y1q = uq = vq =0;
365                 for (col = 0; col < width/2; col++) {
366                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
367                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
368                     encoded[pixel_ptr+2] = y1q -= encoded[pixel_ptr+2];
369                     encoded[pixel_ptr+3] = y1q -= encoded[pixel_ptr+3];
370                     encoded[pixel_ptr+4] = uq -= encoded[pixel_ptr+4];
371                     encoded[pixel_ptr+5] = vq -= encoded[pixel_ptr+5];
372                     pixel_ptr += 6;
373                 }
374             }
375             break;
376         default:
377             av_log(avctx, AV_LOG_ERROR, "BUG! Unknown imagetype in pngfilter switch.\n");
378             return AVERROR_INVALIDDATA;
379         }
380     }
381
382     /* Convert colorspace */
383     y_out = frame->data[0] + (height - 1) * frame->linesize[0];
384     u_out = frame->data[1] + (height - 1) * frame->linesize[1];
385     v_out = frame->data[2] + (height - 1) * frame->linesize[2];
386     switch (c->imgtype) {
387     case IMGTYPE_YUV111:
388         for (row = 0; row < height; row++) {
389             for (col = 0; col < width; col++) {
390                 y_out[col] = *encoded++;
391                 u_out[col] = *encoded++ + 128;
392                 v_out[col] = *encoded++ + 128;
393             }
394             y_out -= frame->linesize[0];
395             u_out -= frame->linesize[1];
396             v_out -= frame->linesize[2];
397         }
398         break;
399     case IMGTYPE_YUV422:
400         for (row = 0; row < height; row++) {
401             for (col = 0; col < width - 3; col += 4) {
402                 memcpy(y_out + col, encoded, 4);
403                 encoded += 4;
404                 u_out[ col >> 1     ] = *encoded++ + 128;
405                 u_out[(col >> 1) + 1] = *encoded++ + 128;
406                 v_out[ col >> 1     ] = *encoded++ + 128;
407                 v_out[(col >> 1) + 1] = *encoded++ + 128;
408             }
409             y_out -= frame->linesize[0];
410             u_out -= frame->linesize[1];
411             v_out -= frame->linesize[2];
412         }
413         break;
414     case IMGTYPE_RGB24:
415         for (row = height - 1; row >= 0; row--) {
416             pixel_ptr = row * frame->linesize[0];
417             memcpy(outptr + pixel_ptr, encoded, 3 * width);
418             encoded += 3 * width;
419         }
420         break;
421     case IMGTYPE_YUV411:
422         for (row = 0; row < height; row++) {
423             for (col = 0; col < width - 3; col += 4) {
424                 memcpy(y_out + col, encoded, 4);
425                 encoded += 4;
426                 u_out[col >> 2] = *encoded++ + 128;
427                 v_out[col >> 2] = *encoded++ + 128;
428             }
429             y_out -= frame->linesize[0];
430             u_out -= frame->linesize[1];
431             v_out -= frame->linesize[2];
432         }
433         break;
434     case IMGTYPE_YUV211:
435         for (row = 0; row < height; row++) {
436             for (col = 0; col < width - 1; col += 2) {
437                 memcpy(y_out + col, encoded, 2);
438                 encoded += 2;
439                 u_out[col >> 1] = *encoded++ + 128;
440                 v_out[col >> 1] = *encoded++ + 128;
441             }
442             y_out -= frame->linesize[0];
443             u_out -= frame->linesize[1];
444             v_out -= frame->linesize[2];
445         }
446         break;
447     case IMGTYPE_YUV420:
448         u_out = frame->data[1] + ((height >> 1) - 1) * frame->linesize[1];
449         v_out = frame->data[2] + ((height >> 1) - 1) * frame->linesize[2];
450         for (row = 0; row < height - 1; row += 2) {
451             for (col = 0; col < width - 1; col += 2) {
452                 memcpy(y_out + col, encoded, 2);
453                 encoded += 2;
454                 memcpy(y_out + col - frame->linesize[0], encoded, 2);
455                 encoded += 2;
456                 u_out[col >> 1] = *encoded++ + 128;
457                 v_out[col >> 1] = *encoded++ + 128;
458             }
459             y_out -= frame->linesize[0] << 1;
460             u_out -= frame->linesize[1];
461             v_out -= frame->linesize[2];
462         }
463         break;
464     default:
465         av_log(avctx, AV_LOG_ERROR, "BUG! Unknown imagetype in image decoder.\n");
466         return AVERROR_INVALIDDATA;
467     }
468
469     *got_frame = 1;
470
471     /* always report that the buffer was completely consumed */
472     return buf_size;
473 }
474
475 /*
476  *
477  * Init lcl decoder
478  *
479  */
480 static av_cold int decode_init(AVCodecContext *avctx)
481 {
482     LclDecContext * const c = avctx->priv_data;
483     unsigned int basesize = avctx->width * avctx->height;
484     unsigned int max_basesize = FFALIGN(avctx->width,  4) *
485                                 FFALIGN(avctx->height, 4);
486     unsigned int max_decomp_size;
487
488     if (avctx->extradata_size < 8) {
489         av_log(avctx, AV_LOG_ERROR, "Extradata size too small.\n");
490         return AVERROR_INVALIDDATA;
491     }
492
493     /* Check codec type */
494     if ((avctx->codec_id == AV_CODEC_ID_MSZH  && avctx->extradata[7] != CODEC_MSZH) ||
495         (avctx->codec_id == AV_CODEC_ID_ZLIB  && avctx->extradata[7] != CODEC_ZLIB)) {
496         av_log(avctx, AV_LOG_ERROR, "Codec id and codec type mismatch. This should not happen.\n");
497     }
498
499     /* Detect image type */
500     switch (c->imgtype = avctx->extradata[4]) {
501     case IMGTYPE_YUV111:
502         c->decomp_size = basesize * 3;
503         max_decomp_size = max_basesize * 3;
504         avctx->pix_fmt = AV_PIX_FMT_YUV444P;
505         av_log(avctx, AV_LOG_DEBUG, "Image type is YUV 1:1:1.\n");
506         break;
507     case IMGTYPE_YUV422:
508         c->decomp_size = basesize * 2;
509         max_decomp_size = max_basesize * 2;
510         avctx->pix_fmt = AV_PIX_FMT_YUV422P;
511         av_log(avctx, AV_LOG_DEBUG, "Image type is YUV 4:2:2.\n");
512         break;
513     case IMGTYPE_RGB24:
514         c->decomp_size = basesize * 3;
515         max_decomp_size = max_basesize * 3;
516         avctx->pix_fmt = AV_PIX_FMT_BGR24;
517         av_log(avctx, AV_LOG_DEBUG, "Image type is RGB 24.\n");
518         break;
519     case IMGTYPE_YUV411:
520         c->decomp_size = basesize / 2 * 3;
521         max_decomp_size = max_basesize / 2 * 3;
522         avctx->pix_fmt = AV_PIX_FMT_YUV411P;
523         av_log(avctx, AV_LOG_DEBUG, "Image type is YUV 4:1:1.\n");
524         break;
525     case IMGTYPE_YUV211:
526         c->decomp_size = basesize * 2;
527         max_decomp_size = max_basesize * 2;
528         avctx->pix_fmt = AV_PIX_FMT_YUV422P;
529         av_log(avctx, AV_LOG_DEBUG, "Image type is YUV 2:1:1.\n");
530         break;
531     case IMGTYPE_YUV420:
532         c->decomp_size = basesize / 2 * 3;
533         max_decomp_size = max_basesize / 2 * 3;
534         avctx->pix_fmt = AV_PIX_FMT_YUV420P;
535         av_log(avctx, AV_LOG_DEBUG, "Image type is YUV 4:2:0.\n");
536         break;
537     default:
538         av_log(avctx, AV_LOG_ERROR, "Unsupported image format %d.\n", c->imgtype);
539         return AVERROR_INVALIDDATA;
540     }
541
542     /* Detect compression method */
543     c->compression = (int8_t)avctx->extradata[5];
544     switch (avctx->codec_id) {
545     case AV_CODEC_ID_MSZH:
546         switch (c->compression) {
547         case COMP_MSZH:
548             av_log(avctx, AV_LOG_DEBUG, "Compression enabled.\n");
549             break;
550         case COMP_MSZH_NOCOMP:
551             c->decomp_size = 0;
552             av_log(avctx, AV_LOG_DEBUG, "No compression.\n");
553             break;
554         default:
555             av_log(avctx, AV_LOG_ERROR, "Unsupported compression format for MSZH (%d).\n", c->compression);
556             return AVERROR_INVALIDDATA;
557         }
558         break;
559 #if CONFIG_ZLIB_DECODER
560     case AV_CODEC_ID_ZLIB:
561         switch (c->compression) {
562         case COMP_ZLIB_HISPEED:
563             av_log(avctx, AV_LOG_DEBUG, "High speed compression.\n");
564             break;
565         case COMP_ZLIB_HICOMP:
566             av_log(avctx, AV_LOG_DEBUG, "High compression.\n");
567             break;
568         case COMP_ZLIB_NORMAL:
569             av_log(avctx, AV_LOG_DEBUG, "Normal compression.\n");
570             break;
571         default:
572             if (c->compression < Z_NO_COMPRESSION || c->compression > Z_BEST_COMPRESSION) {
573                 av_log(avctx, AV_LOG_ERROR, "Unsupported compression level for ZLIB: (%d).\n", c->compression);
574                 return AVERROR_INVALIDDATA;
575             }
576             av_log(avctx, AV_LOG_DEBUG, "Compression level for ZLIB: (%d).\n", c->compression);
577         }
578         break;
579 #endif
580     default:
581         av_log(avctx, AV_LOG_ERROR, "BUG! Unknown codec in compression switch.\n");
582         return AVERROR_INVALIDDATA;
583     }
584
585     /* Allocate decompression buffer */
586     if (c->decomp_size) {
587         if ((c->decomp_buf = av_malloc(max_decomp_size)) == NULL) {
588             av_log(avctx, AV_LOG_ERROR, "Can't allocate decompression buffer.\n");
589             return AVERROR(ENOMEM);
590         }
591     }
592
593     /* Detect flags */
594     c->flags = avctx->extradata[6];
595     if (c->flags & FLAG_MULTITHREAD)
596         av_log(avctx, AV_LOG_DEBUG, "Multithread encoder flag set.\n");
597     if (c->flags & FLAG_NULLFRAME)
598         av_log(avctx, AV_LOG_DEBUG, "Nullframe insertion flag set.\n");
599     if (avctx->codec_id == AV_CODEC_ID_ZLIB && (c->flags & FLAG_PNGFILTER))
600         av_log(avctx, AV_LOG_DEBUG, "PNG filter flag set.\n");
601     if (c->flags & FLAGMASK_UNUSED)
602         av_log(avctx, AV_LOG_ERROR, "Unknown flag set (%d).\n", c->flags);
603
604     /* If needed init zlib */
605 #if CONFIG_ZLIB_DECODER
606     if (avctx->codec_id == AV_CODEC_ID_ZLIB) {
607         int zret;
608         c->zstream.zalloc = Z_NULL;
609         c->zstream.zfree = Z_NULL;
610         c->zstream.opaque = Z_NULL;
611         zret = inflateInit(&c->zstream);
612         if (zret != Z_OK) {
613             av_log(avctx, AV_LOG_ERROR, "Inflate init error: %d\n", zret);
614             av_freep(&c->decomp_buf);
615             return AVERROR_UNKNOWN;
616         }
617     }
618 #endif
619
620     return 0;
621 }
622
623 /*
624  *
625  * Uninit lcl decoder
626  *
627  */
628 static av_cold int decode_end(AVCodecContext *avctx)
629 {
630     LclDecContext * const c = avctx->priv_data;
631
632     av_freep(&c->decomp_buf);
633 #if CONFIG_ZLIB_DECODER
634     if (avctx->codec_id == AV_CODEC_ID_ZLIB)
635         inflateEnd(&c->zstream);
636 #endif
637
638     return 0;
639 }
640
641 #if CONFIG_MSZH_DECODER
642 AVCodec ff_mszh_decoder = {
643     .name           = "mszh",
644     .type           = AVMEDIA_TYPE_VIDEO,
645     .id             = AV_CODEC_ID_MSZH,
646     .priv_data_size = sizeof(LclDecContext),
647     .init           = decode_init,
648     .close          = decode_end,
649     .decode         = decode_frame,
650     .capabilities   = CODEC_CAP_DR1,
651     .long_name      = NULL_IF_CONFIG_SMALL("LCL (LossLess Codec Library) MSZH"),
652 };
653 #endif
654
655 #if CONFIG_ZLIB_DECODER
656 AVCodec ff_zlib_decoder = {
657     .name           = "zlib",
658     .type           = AVMEDIA_TYPE_VIDEO,
659     .id             = AV_CODEC_ID_ZLIB,
660     .priv_data_size = sizeof(LclDecContext),
661     .init           = decode_init,
662     .close          = decode_end,
663     .decode         = decode_frame,
664     .capabilities   = CODEC_CAP_DR1,
665     .long_name      = NULL_IF_CONFIG_SMALL("LCL (LossLess Codec Library) ZLIB"),
666 };
667 #endif