Use av_clip_uint8 instead of equivalent but unoptimzed code,
[ffmpeg.git] / libavcodec / lcldec.c
1 /*
2  * LCL (LossLess Codec Library) Codec
3  * Copyright (c) 2002-2004 Roberto Togni
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file libavcodec/lcldec.c
24  * LCL (LossLess Codec Library) Video Codec
25  * Decoder for MSZH and ZLIB codecs
26  * Experimental encoder for ZLIB RGB24
27  *
28  * Fourcc: MSZH, ZLIB
29  *
30  * Original Win32 dll:
31  * Ver2.23 By Kenji Oshima 2000.09.20
32  * avimszh.dll, avizlib.dll
33  *
34  * A description of the decoding algorithm can be found here:
35  *   http://www.pcisys.net/~melanson/codecs
36  *
37  * Supports: BGR24 (RGB 24bpp)
38  *
39  */
40
41 #include <stdio.h>
42 #include <stdlib.h>
43
44 #include "avcodec.h"
45 #include "get_bits.h"
46 #include "lcl.h"
47
48 #if CONFIG_ZLIB
49 #include <zlib.h>
50 #endif
51
52 /*
53  * Decoder context
54  */
55 typedef struct LclDecContext {
56     AVFrame pic;
57
58     // Image type
59     int imgtype;
60     // Compression type
61     int compression;
62     // Flags
63     int flags;
64     // Decompressed data size
65     unsigned int decomp_size;
66     // Decompression buffer
67     unsigned char* decomp_buf;
68 #if CONFIG_ZLIB
69     z_stream zstream;
70 #endif
71 } LclDecContext;
72
73
74 /*
75  *
76  * Helper functions
77  *
78  */
79 static inline unsigned char fix (int pix14)
80 {
81     int tmp;
82
83     tmp = (pix14 + 0x80000) >> 20;
84     return av_clip_uint8(tmp);
85 }
86
87
88
89 static inline unsigned char get_b (unsigned char yq, signed char bq)
90 {
91     return fix((yq << 20) + bq * 1858076);
92 }
93
94
95
96 static inline unsigned char get_g (unsigned char yq, signed char bq, signed char rq)
97 {
98     return fix((yq << 20) - bq * 360857 - rq * 748830);
99 }
100
101
102
103 static inline unsigned char get_r (unsigned char yq, signed char rq)
104 {
105     return fix((yq << 20) + rq * 1470103);
106 }
107
108
109
110 static unsigned int mszh_decomp(unsigned char * srcptr, int srclen, unsigned char * destptr, unsigned int destsize)
111 {
112     unsigned char *destptr_bak = destptr;
113     unsigned char *destptr_end = destptr + destsize;
114     unsigned char mask = 0;
115     unsigned char maskbit = 0;
116     unsigned int ofs, cnt;
117
118     while ((srclen > 0) && (destptr < destptr_end)) {
119         if (maskbit == 0) {
120             mask = *(srcptr++);
121             maskbit = 8;
122             srclen--;
123             continue;
124         }
125         if ((mask & (1 << (--maskbit))) == 0) {
126             if (destptr + 4 > destptr_end)
127                 break;
128             AV_WN32(destptr, AV_RN32(srcptr));
129             srclen -= 4;
130             destptr += 4;
131             srcptr += 4;
132         } else {
133             ofs = *(srcptr++);
134             cnt = *(srcptr++);
135             ofs += cnt * 256;
136             cnt = ((cnt >> 3) & 0x1f) + 1;
137             ofs &= 0x7ff;
138             srclen -= 2;
139             cnt *= 4;
140             if (destptr + cnt > destptr_end) {
141                 cnt =  destptr_end - destptr;
142             }
143             for (; cnt > 0; cnt--) {
144                 *(destptr) = *(destptr - ofs);
145                 destptr++;
146             }
147         }
148     }
149
150     return (destptr - destptr_bak);
151 }
152
153
154
155 /*
156  *
157  * Decode a frame
158  *
159  */
160 static int decode_frame(AVCodecContext *avctx, void *data, int *data_size, AVPacket *avpkt)
161 {
162     const uint8_t *buf = avpkt->data;
163     int buf_size = avpkt->size;
164     LclDecContext * const c = avctx->priv_data;
165     unsigned char *encoded = (unsigned char *)buf;
166     unsigned int pixel_ptr;
167     int row, col;
168     unsigned char *outptr;
169     unsigned int width = avctx->width; // Real image width
170     unsigned int height = avctx->height; // Real image height
171     unsigned int mszh_dlen;
172     unsigned char yq, y1q, uq, vq;
173     int uqvq;
174     unsigned int mthread_inlen, mthread_outlen;
175 #if CONFIG_ZLIB
176     int zret; // Zlib return code
177 #endif
178     unsigned int len = buf_size;
179
180     if(c->pic.data[0])
181         avctx->release_buffer(avctx, &c->pic);
182
183     c->pic.reference = 0;
184     c->pic.buffer_hints = FF_BUFFER_HINTS_VALID;
185     if(avctx->get_buffer(avctx, &c->pic) < 0){
186         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
187         return -1;
188     }
189
190     outptr = c->pic.data[0]; // Output image pointer
191
192     /* Decompress frame */
193     switch (avctx->codec_id) {
194     case CODEC_ID_MSZH:
195         switch (c->compression) {
196         case COMP_MSZH:
197             if (c->flags & FLAG_MULTITHREAD) {
198                 mthread_inlen = *((unsigned int*)encoded);
199                 mthread_outlen = *((unsigned int*)(encoded+4));
200                 if (mthread_outlen > c->decomp_size) // this should not happen
201                     mthread_outlen = c->decomp_size;
202                 mszh_dlen = mszh_decomp(encoded + 8, mthread_inlen, c->decomp_buf, c->decomp_size);
203                 if (mthread_outlen != mszh_dlen) {
204                     av_log(avctx, AV_LOG_ERROR, "Mthread1 decoded size differs (%d != %d)\n",
205                            mthread_outlen, mszh_dlen);
206                     return -1;
207                 }
208                 mszh_dlen = mszh_decomp(encoded + 8 + mthread_inlen, len - mthread_inlen,
209                                         c->decomp_buf + mthread_outlen, c->decomp_size - mthread_outlen);
210                 if (mthread_outlen != mszh_dlen) {
211                     av_log(avctx, AV_LOG_ERROR, "Mthread2 decoded size differs (%d != %d)\n",
212                            mthread_outlen, mszh_dlen);
213                     return -1;
214                 }
215                 encoded = c->decomp_buf;
216                 len = c->decomp_size;
217             } else {
218                 mszh_dlen = mszh_decomp(encoded, len, c->decomp_buf, c->decomp_size);
219                 if (c->decomp_size != mszh_dlen) {
220                     av_log(avctx, AV_LOG_ERROR, "Decoded size differs (%d != %d)\n",
221                            c->decomp_size, mszh_dlen);
222                     return -1;
223                 }
224                 encoded = c->decomp_buf;
225                 len = mszh_dlen;
226             }
227             break;
228         case COMP_MSZH_NOCOMP:
229             break;
230         default:
231             av_log(avctx, AV_LOG_ERROR, "BUG! Unknown MSZH compression in frame decoder.\n");
232             return -1;
233         }
234         break;
235     case CODEC_ID_ZLIB:
236 #if CONFIG_ZLIB
237         /* Using the original dll with normal compression (-1) and RGB format
238          * gives a file with ZLIB fourcc, but frame is really uncompressed.
239          * To be sure that's true check also frame size */
240         if ((c->compression == COMP_ZLIB_NORMAL) && (c->imgtype == IMGTYPE_RGB24) &&
241             (len == width * height * 3))
242             break;
243         zret = inflateReset(&(c->zstream));
244         if (zret != Z_OK) {
245             av_log(avctx, AV_LOG_ERROR, "Inflate reset error: %d\n", zret);
246             return -1;
247         }
248         if (c->flags & FLAG_MULTITHREAD) {
249             mthread_inlen = *((unsigned int*)encoded);
250             mthread_outlen = *((unsigned int*)(encoded+4));
251             if (mthread_outlen > c->decomp_size)
252                 mthread_outlen = c->decomp_size;
253             c->zstream.next_in = encoded + 8;
254             c->zstream.avail_in = mthread_inlen;
255             c->zstream.next_out = c->decomp_buf;
256             c->zstream.avail_out = c->decomp_size;
257             zret = inflate(&(c->zstream), Z_FINISH);
258             if ((zret != Z_OK) && (zret != Z_STREAM_END)) {
259                 av_log(avctx, AV_LOG_ERROR, "Mthread1 inflate error: %d\n", zret);
260                 return -1;
261             }
262             if (mthread_outlen != (unsigned int)(c->zstream.total_out)) {
263                 av_log(avctx, AV_LOG_ERROR, "Mthread1 decoded size differs (%u != %lu)\n",
264                        mthread_outlen, c->zstream.total_out);
265                 return -1;
266             }
267             zret = inflateReset(&(c->zstream));
268             if (zret != Z_OK) {
269                 av_log(avctx, AV_LOG_ERROR, "Mthread2 inflate reset error: %d\n", zret);
270                 return -1;
271             }
272             c->zstream.next_in = encoded + 8 + mthread_inlen;
273             c->zstream.avail_in = len - mthread_inlen;
274             c->zstream.next_out = c->decomp_buf + mthread_outlen;
275             c->zstream.avail_out = c->decomp_size - mthread_outlen;
276             zret = inflate(&(c->zstream), Z_FINISH);
277             if ((zret != Z_OK) && (zret != Z_STREAM_END)) {
278                 av_log(avctx, AV_LOG_ERROR, "Mthread2 inflate error: %d\n", zret);
279                 return -1;
280             }
281             if (mthread_outlen != (unsigned int)(c->zstream.total_out)) {
282                 av_log(avctx, AV_LOG_ERROR, "Mthread2 decoded size differs (%d != %lu)\n",
283                        mthread_outlen, c->zstream.total_out);
284                 return -1;
285             }
286         } else {
287             c->zstream.next_in = encoded;
288             c->zstream.avail_in = len;
289             c->zstream.next_out = c->decomp_buf;
290             c->zstream.avail_out = c->decomp_size;
291             zret = inflate(&(c->zstream), Z_FINISH);
292             if ((zret != Z_OK) && (zret != Z_STREAM_END)) {
293                 av_log(avctx, AV_LOG_ERROR, "Inflate error: %d\n", zret);
294                 return -1;
295             }
296             if (c->decomp_size != (unsigned int)(c->zstream.total_out)) {
297                 av_log(avctx, AV_LOG_ERROR, "Decoded size differs (%d != %lu)\n",
298                        c->decomp_size, c->zstream.total_out);
299                 return -1;
300             }
301         }
302         encoded = c->decomp_buf;
303         len = c->decomp_size;
304 #else
305         av_log(avctx, AV_LOG_ERROR, "BUG! Zlib support not compiled in frame decoder.\n");
306         return -1;
307 #endif
308         break;
309     default:
310         av_log(avctx, AV_LOG_ERROR, "BUG! Unknown codec in frame decoder compression switch.\n");
311         return -1;
312     }
313
314
315     /* Apply PNG filter */
316     if ((avctx->codec_id == CODEC_ID_ZLIB) && (c->flags & FLAG_PNGFILTER)) {
317         switch (c->imgtype) {
318         case IMGTYPE_YUV111:
319         case IMGTYPE_RGB24:
320             for (row = 0; row < height; row++) {
321                 pixel_ptr = row * width * 3;
322                 yq = encoded[pixel_ptr++];
323                 uqvq = AV_RL16(encoded+pixel_ptr);
324                 pixel_ptr += 2;
325                 for (col = 1; col < width; col++) {
326                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
327                     uqvq -= AV_RL16(encoded+pixel_ptr+1);
328                     AV_WL16(encoded+pixel_ptr+1, uqvq);
329                     pixel_ptr += 3;
330                 }
331             }
332             break;
333         case IMGTYPE_YUV422:
334             for (row = 0; row < height; row++) {
335                 pixel_ptr = row * width * 2;
336                 yq = uq = vq =0;
337                 for (col = 0; col < width/4; col++) {
338                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
339                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
340                     encoded[pixel_ptr+2] = yq -= encoded[pixel_ptr+2];
341                     encoded[pixel_ptr+3] = yq -= encoded[pixel_ptr+3];
342                     encoded[pixel_ptr+4] = uq -= encoded[pixel_ptr+4];
343                     encoded[pixel_ptr+5] = uq -= encoded[pixel_ptr+5];
344                     encoded[pixel_ptr+6] = vq -= encoded[pixel_ptr+6];
345                     encoded[pixel_ptr+7] = vq -= encoded[pixel_ptr+7];
346                     pixel_ptr += 8;
347                 }
348             }
349             break;
350         case IMGTYPE_YUV411:
351             for (row = 0; row < height; row++) {
352                 pixel_ptr = row * width / 2 * 3;
353                 yq = uq = vq =0;
354                 for (col = 0; col < width/4; col++) {
355                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
356                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
357                     encoded[pixel_ptr+2] = yq -= encoded[pixel_ptr+2];
358                     encoded[pixel_ptr+3] = yq -= encoded[pixel_ptr+3];
359                     encoded[pixel_ptr+4] = uq -= encoded[pixel_ptr+4];
360                     encoded[pixel_ptr+5] = vq -= encoded[pixel_ptr+5];
361                     pixel_ptr += 6;
362                 }
363             }
364             break;
365         case IMGTYPE_YUV211:
366             for (row = 0; row < height; row++) {
367                 pixel_ptr = row * width * 2;
368                 yq = uq = vq =0;
369                 for (col = 0; col < width/2; col++) {
370                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
371                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
372                     encoded[pixel_ptr+2] = uq -= encoded[pixel_ptr+2];
373                     encoded[pixel_ptr+3] = vq -= encoded[pixel_ptr+3];
374                     pixel_ptr += 4;
375                 }
376             }
377             break;
378         case IMGTYPE_YUV420:
379             for (row = 0; row < height/2; row++) {
380                 pixel_ptr = row * width * 3;
381                 yq = y1q = uq = vq =0;
382                 for (col = 0; col < width/2; col++) {
383                     encoded[pixel_ptr] = yq -= encoded[pixel_ptr];
384                     encoded[pixel_ptr+1] = yq -= encoded[pixel_ptr+1];
385                     encoded[pixel_ptr+2] = y1q -= encoded[pixel_ptr+2];
386                     encoded[pixel_ptr+3] = y1q -= encoded[pixel_ptr+3];
387                     encoded[pixel_ptr+4] = uq -= encoded[pixel_ptr+4];
388                     encoded[pixel_ptr+5] = vq -= encoded[pixel_ptr+5];
389                     pixel_ptr += 6;
390                 }
391             }
392             break;
393         default:
394             av_log(avctx, AV_LOG_ERROR, "BUG! Unknown imagetype in pngfilter switch.\n");
395             return -1;
396         }
397     }
398
399     /* Convert colorspace */
400     switch (c->imgtype) {
401     case IMGTYPE_YUV111:
402         for (row = height - 1; row >= 0; row--) {
403             pixel_ptr = row * c->pic.linesize[0];
404             for (col = 0; col < width; col++) {
405                 outptr[pixel_ptr++] = get_b(encoded[0], encoded[1]);
406                 outptr[pixel_ptr++] = get_g(encoded[0], encoded[1], encoded[2]);
407                 outptr[pixel_ptr++] = get_r(encoded[0], encoded[2]);
408                 encoded += 3;
409             }
410         }
411         break;
412     case IMGTYPE_YUV422:
413         for (row = height - 1; row >= 0; row--) {
414             pixel_ptr = row * c->pic.linesize[0];
415             for (col = 0; col < width/4; col++) {
416                 outptr[pixel_ptr++] = get_b(encoded[0], encoded[4]);
417                 outptr[pixel_ptr++] = get_g(encoded[0], encoded[4], encoded[6]);
418                 outptr[pixel_ptr++] = get_r(encoded[0], encoded[6]);
419                 outptr[pixel_ptr++] = get_b(encoded[1], encoded[4]);
420                 outptr[pixel_ptr++] = get_g(encoded[1], encoded[4], encoded[6]);
421                 outptr[pixel_ptr++] = get_r(encoded[1], encoded[6]);
422                 outptr[pixel_ptr++] = get_b(encoded[2], encoded[5]);
423                 outptr[pixel_ptr++] = get_g(encoded[2], encoded[5], encoded[7]);
424                 outptr[pixel_ptr++] = get_r(encoded[2], encoded[7]);
425                 outptr[pixel_ptr++] = get_b(encoded[3], encoded[5]);
426                 outptr[pixel_ptr++] = get_g(encoded[3], encoded[5], encoded[7]);
427                 outptr[pixel_ptr++] = get_r(encoded[3], encoded[7]);
428                 encoded += 8;
429             }
430         }
431         break;
432     case IMGTYPE_RGB24:
433         for (row = height - 1; row >= 0; row--) {
434             pixel_ptr = row * c->pic.linesize[0];
435             for (col = 0; col < width; col++) {
436                 outptr[pixel_ptr++] = encoded[0];
437                 outptr[pixel_ptr++] = encoded[1];
438                 outptr[pixel_ptr++] = encoded[2];
439                 encoded += 3;
440             }
441         }
442         break;
443     case IMGTYPE_YUV411:
444         for (row = height - 1; row >= 0; row--) {
445             pixel_ptr = row * c->pic.linesize[0];
446             for (col = 0; col < width/4; col++) {
447                 outptr[pixel_ptr++] = get_b(encoded[0], encoded[4]);
448                 outptr[pixel_ptr++] = get_g(encoded[0], encoded[4], encoded[5]);
449                 outptr[pixel_ptr++] = get_r(encoded[0], encoded[5]);
450                 outptr[pixel_ptr++] = get_b(encoded[1], encoded[4]);
451                 outptr[pixel_ptr++] = get_g(encoded[1], encoded[4], encoded[5]);
452                 outptr[pixel_ptr++] = get_r(encoded[1], encoded[5]);
453                 outptr[pixel_ptr++] = get_b(encoded[2], encoded[4]);
454                 outptr[pixel_ptr++] = get_g(encoded[2], encoded[4], encoded[5]);
455                 outptr[pixel_ptr++] = get_r(encoded[2], encoded[5]);
456                 outptr[pixel_ptr++] = get_b(encoded[3], encoded[4]);
457                 outptr[pixel_ptr++] = get_g(encoded[3], encoded[4], encoded[5]);
458                 outptr[pixel_ptr++] = get_r(encoded[3], encoded[5]);
459                 encoded += 6;
460             }
461         }
462         break;
463     case IMGTYPE_YUV211:
464         for (row = height - 1; row >= 0; row--) {
465             pixel_ptr = row * c->pic.linesize[0];
466             for (col = 0; col < width/2; col++) {
467                 outptr[pixel_ptr++] = get_b(encoded[0], encoded[2]);
468                 outptr[pixel_ptr++] = get_g(encoded[0], encoded[2], encoded[3]);
469                 outptr[pixel_ptr++] = get_r(encoded[0], encoded[3]);
470                 outptr[pixel_ptr++] = get_b(encoded[1], encoded[2]);
471                 outptr[pixel_ptr++] = get_g(encoded[1], encoded[2], encoded[3]);
472                 outptr[pixel_ptr++] = get_r(encoded[1], encoded[3]);
473                 encoded += 4;
474             }
475         }
476         break;
477     case IMGTYPE_YUV420:
478         for (row = height / 2 - 1; row >= 0; row--) {
479             pixel_ptr = 2 * row * c->pic.linesize[0];
480             for (col = 0; col < width/2; col++) {
481                 outptr[pixel_ptr] = get_b(encoded[0], encoded[4]);
482                 outptr[pixel_ptr+1] = get_g(encoded[0], encoded[4], encoded[5]);
483                 outptr[pixel_ptr+2] = get_r(encoded[0], encoded[5]);
484                 outptr[pixel_ptr+3] = get_b(encoded[1], encoded[4]);
485                 outptr[pixel_ptr+4] = get_g(encoded[1], encoded[4], encoded[5]);
486                 outptr[pixel_ptr+5] = get_r(encoded[1], encoded[5]);
487                 outptr[pixel_ptr-c->pic.linesize[0]] = get_b(encoded[2], encoded[4]);
488                 outptr[pixel_ptr-c->pic.linesize[0]+1] = get_g(encoded[2], encoded[4], encoded[5]);
489                 outptr[pixel_ptr-c->pic.linesize[0]+2] = get_r(encoded[2], encoded[5]);
490                 outptr[pixel_ptr-c->pic.linesize[0]+3] = get_b(encoded[3], encoded[4]);
491                 outptr[pixel_ptr-c->pic.linesize[0]+4] = get_g(encoded[3], encoded[4], encoded[5]);
492                 outptr[pixel_ptr-c->pic.linesize[0]+5] = get_r(encoded[3], encoded[5]);
493                 pixel_ptr += 6;
494                 encoded += 6;
495             }
496         }
497         break;
498     default:
499         av_log(avctx, AV_LOG_ERROR, "BUG! Unknown imagetype in image decoder.\n");
500         return -1;
501     }
502
503     *data_size = sizeof(AVFrame);
504     *(AVFrame*)data = c->pic;
505
506     /* always report that the buffer was completely consumed */
507     return buf_size;
508 }
509
510 /*
511  *
512  * Init lcl decoder
513  *
514  */
515 static av_cold int decode_init(AVCodecContext *avctx)
516 {
517     LclDecContext * const c = avctx->priv_data;
518     unsigned int basesize = avctx->width * avctx->height;
519     unsigned int max_basesize = ((avctx->width + 3) & ~3) * ((avctx->height + 3) & ~3);
520     unsigned int max_decomp_size;
521     int zret; // Zlib return code
522
523     c->pic.data[0] = NULL;
524
525 #if CONFIG_ZLIB
526     // Needed if zlib unused or init aborted before inflateInit
527     memset(&(c->zstream), 0, sizeof(z_stream));
528 #endif
529
530     if (avctx->extradata_size < 8) {
531         av_log(avctx, AV_LOG_ERROR, "Extradata size too small.\n");
532         return 1;
533     }
534
535     if (avcodec_check_dimensions(avctx, avctx->width, avctx->height) < 0) {
536         return 1;
537     }
538
539     /* Check codec type */
540     if (((avctx->codec_id == CODEC_ID_MSZH)  && (*((char *)avctx->extradata + 7) != CODEC_MSZH)) ||
541         ((avctx->codec_id == CODEC_ID_ZLIB)  && (*((char *)avctx->extradata + 7) != CODEC_ZLIB))) {
542         av_log(avctx, AV_LOG_ERROR, "Codec id and codec type mismatch. This should not happen.\n");
543     }
544
545     /* Detect image type */
546     switch (c->imgtype = *((char *)avctx->extradata + 4)) {
547     case IMGTYPE_YUV111:
548         c->decomp_size = basesize * 3;
549         max_decomp_size = max_basesize * 3;
550         av_log(avctx, AV_LOG_INFO, "Image type is YUV 1:1:1.\n");
551         break;
552     case IMGTYPE_YUV422:
553         c->decomp_size = basesize * 2;
554         max_decomp_size = max_basesize * 2;
555         av_log(avctx, AV_LOG_INFO, "Image type is YUV 4:2:2.\n");
556         break;
557     case IMGTYPE_RGB24:
558         c->decomp_size = basesize * 3;
559         max_decomp_size = max_basesize * 3;
560         av_log(avctx, AV_LOG_INFO, "Image type is RGB 24.\n");
561         break;
562     case IMGTYPE_YUV411:
563         c->decomp_size = basesize / 2 * 3;
564         max_decomp_size = max_basesize / 2 * 3;
565         av_log(avctx, AV_LOG_INFO, "Image type is YUV 4:1:1.\n");
566         break;
567     case IMGTYPE_YUV211:
568         c->decomp_size = basesize * 2;
569         max_decomp_size = max_basesize * 2;
570         av_log(avctx, AV_LOG_INFO, "Image type is YUV 2:1:1.\n");
571         break;
572     case IMGTYPE_YUV420:
573         c->decomp_size = basesize / 2 * 3;
574         max_decomp_size = max_basesize / 2 * 3;
575         av_log(avctx, AV_LOG_INFO, "Image type is YUV 4:2:0.\n");
576         break;
577     default:
578         av_log(avctx, AV_LOG_ERROR, "Unsupported image format %d.\n", c->imgtype);
579         return 1;
580     }
581
582     /* Detect compression method */
583     c->compression = *((char *)avctx->extradata + 5);
584     switch (avctx->codec_id) {
585     case CODEC_ID_MSZH:
586         switch (c->compression) {
587         case COMP_MSZH:
588             av_log(avctx, AV_LOG_INFO, "Compression enabled.\n");
589             break;
590         case COMP_MSZH_NOCOMP:
591             c->decomp_size = 0;
592             av_log(avctx, AV_LOG_INFO, "No compression.\n");
593             break;
594         default:
595             av_log(avctx, AV_LOG_ERROR, "Unsupported compression format for MSZH (%d).\n", c->compression);
596             return 1;
597         }
598         break;
599     case CODEC_ID_ZLIB:
600 #if CONFIG_ZLIB
601         switch (c->compression) {
602         case COMP_ZLIB_HISPEED:
603             av_log(avctx, AV_LOG_INFO, "High speed compression.\n");
604             break;
605         case COMP_ZLIB_HICOMP:
606             av_log(avctx, AV_LOG_INFO, "High compression.\n");
607             break;
608         case COMP_ZLIB_NORMAL:
609             av_log(avctx, AV_LOG_INFO, "Normal compression.\n");
610             break;
611         default:
612             if ((c->compression < Z_NO_COMPRESSION) || (c->compression > Z_BEST_COMPRESSION)) {
613                 av_log(avctx, AV_LOG_ERROR, "Unsupported compression level for ZLIB: (%d).\n", c->compression);
614                 return 1;
615             }
616             av_log(avctx, AV_LOG_INFO, "Compression level for ZLIB: (%d).\n", c->compression);
617         }
618 #else
619         av_log(avctx, AV_LOG_ERROR, "Zlib support not compiled.\n");
620         return 1;
621 #endif
622         break;
623     default:
624         av_log(avctx, AV_LOG_ERROR, "BUG! Unknown codec in compression switch.\n");
625         return 1;
626     }
627
628     /* Allocate decompression buffer */
629     if (c->decomp_size) {
630         if ((c->decomp_buf = av_malloc(max_decomp_size)) == NULL) {
631             av_log(avctx, AV_LOG_ERROR, "Can't allocate decompression buffer.\n");
632             return 1;
633         }
634     }
635
636     /* Detect flags */
637     c->flags = *((char *)avctx->extradata + 6);
638     if (c->flags & FLAG_MULTITHREAD)
639         av_log(avctx, AV_LOG_INFO, "Multithread encoder flag set.\n");
640     if (c->flags & FLAG_NULLFRAME)
641         av_log(avctx, AV_LOG_INFO, "Nullframe insertion flag set.\n");
642     if ((avctx->codec_id == CODEC_ID_ZLIB) && (c->flags & FLAG_PNGFILTER))
643         av_log(avctx, AV_LOG_INFO, "PNG filter flag set.\n");
644     if (c->flags & FLAGMASK_UNUSED)
645         av_log(avctx, AV_LOG_ERROR, "Unknown flag set (%d).\n", c->flags);
646
647     /* If needed init zlib */
648     if (avctx->codec_id == CODEC_ID_ZLIB) {
649 #if CONFIG_ZLIB
650         c->zstream.zalloc = Z_NULL;
651         c->zstream.zfree = Z_NULL;
652         c->zstream.opaque = Z_NULL;
653         zret = inflateInit(&(c->zstream));
654         if (zret != Z_OK) {
655             av_log(avctx, AV_LOG_ERROR, "Inflate init error: %d\n", zret);
656             return 1;
657         }
658 #else
659         av_log(avctx, AV_LOG_ERROR, "Zlib support not compiled.\n");
660         return 1;
661 #endif
662     }
663
664     avctx->pix_fmt = PIX_FMT_BGR24;
665
666     return 0;
667 }
668
669 /*
670  *
671  * Uninit lcl decoder
672  *
673  */
674 static av_cold int decode_end(AVCodecContext *avctx)
675 {
676     LclDecContext * const c = avctx->priv_data;
677
678     if (c->pic.data[0])
679         avctx->release_buffer(avctx, &c->pic);
680 #if CONFIG_ZLIB
681     inflateEnd(&(c->zstream));
682 #endif
683
684     return 0;
685 }
686
687 #if CONFIG_MSZH_DECODER
688 AVCodec mszh_decoder = {
689     "mszh",
690     CODEC_TYPE_VIDEO,
691     CODEC_ID_MSZH,
692     sizeof(LclDecContext),
693     decode_init,
694     NULL,
695     decode_end,
696     decode_frame,
697     CODEC_CAP_DR1,
698     .long_name = NULL_IF_CONFIG_SMALL("LCL (LossLess Codec Library) MSZH"),
699 };
700 #endif
701
702 #if CONFIG_ZLIB_DECODER
703 AVCodec zlib_decoder = {
704     "zlib",
705     CODEC_TYPE_VIDEO,
706     CODEC_ID_ZLIB,
707     sizeof(LclDecContext),
708     decode_init,
709     NULL,
710     decode_end,
711     decode_frame,
712     CODEC_CAP_DR1,
713     .long_name = NULL_IF_CONFIG_SMALL("LCL (LossLess Codec Library) ZLIB"),
714 };
715 #endif