Prevent a crash by sanity checking buffer reads.
[ffmpeg.git] / libavcodec / bfi.c
1 /*
2  * Brute Force & Ignorance (BFI) video decoder
3  * Copyright (c) 2008 Sisir Koppaka
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * @brief Brute Force & Ignorance (.bfi) video decoder
25  * @author Sisir Koppaka ( sisir.koppaka at gmail dot com )
26  * @sa http://wiki.multimedia.cx/index.php?title=BFI
27  */
28
29 #include "libavutil/common.h"
30 #include "avcodec.h"
31 #include "bytestream.h"
32
33 typedef struct BFIContext {
34     AVCodecContext *avctx;
35     AVFrame frame;
36     uint8_t *dst;
37 } BFIContext;
38
39 static av_cold int bfi_decode_init(AVCodecContext * avctx)
40 {
41     BFIContext *bfi = avctx->priv_data;
42     avctx->pix_fmt = PIX_FMT_PAL8;
43     bfi->dst = av_mallocz(avctx->width * avctx->height);
44     return 0;
45 }
46
47 static int bfi_decode_frame(AVCodecContext * avctx, void *data,
48                             int *data_size, AVPacket *avpkt)
49 {
50     const uint8_t *buf = avpkt->data, *buf_end = avpkt->data + avpkt->size;
51     int buf_size = avpkt->size;
52     BFIContext *bfi = avctx->priv_data;
53     uint8_t *dst = bfi->dst;
54     uint8_t *src, *dst_offset, colour1, colour2;
55     uint8_t *frame_end = bfi->dst + avctx->width * avctx->height;
56     uint32_t *pal;
57     int i, j, height = avctx->height;
58
59     if (bfi->frame.data[0])
60         avctx->release_buffer(avctx, &bfi->frame);
61
62     bfi->frame.reference = 1;
63
64     if (avctx->get_buffer(avctx, &bfi->frame) < 0) {
65         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
66         return -1;
67     }
68
69     /* Set frame parameters and palette, if necessary */
70     if (!avctx->frame_number) {
71         bfi->frame.pict_type = FF_I_TYPE;
72         bfi->frame.key_frame = 1;
73         /* Setting the palette */
74         if(avctx->extradata_size>768) {
75             av_log(NULL, AV_LOG_ERROR, "Palette is too large.\n");
76             return -1;
77         }
78         pal = (uint32_t *) bfi->frame.data[1];
79         for (i = 0; i < avctx->extradata_size / 3; i++) {
80             int shift = 16;
81             *pal = 0;
82             for (j = 0; j < 3; j++, shift -= 8)
83                 *pal +=
84                     ((avctx->extradata[i * 3 + j] << 2) |
85                     (avctx->extradata[i * 3 + j] >> 4)) << shift;
86             pal++;
87         }
88         bfi->frame.palette_has_changed = 1;
89     } else {
90         bfi->frame.pict_type = FF_P_TYPE;
91         bfi->frame.key_frame = 0;
92     }
93
94     buf += 4; //Unpacked size, not required.
95
96     while (dst != frame_end) {
97         static const uint8_t lentab[4]={0,2,0,1};
98         unsigned int byte = *buf++, av_uninit(offset);
99         unsigned int code = byte >> 6;
100         unsigned int length = byte & ~0xC0;
101
102         if (buf >= buf_end) {
103             av_log(avctx, AV_LOG_ERROR, "Input resolution larger than actual frame.\n");
104             return -1;
105         }
106
107         /* Get length and offset(if required) */
108         if (length == 0) {
109             if (code == 1) {
110                 length = bytestream_get_byte(&buf);
111                 offset = bytestream_get_le16(&buf);
112             } else {
113                 length = bytestream_get_le16(&buf);
114                 if (code == 2 && length == 0)
115                     break;
116             }
117         } else {
118             if (code == 1)
119                 offset = bytestream_get_byte(&buf);
120         }
121
122         /* Do boundary check */
123         if (dst + (length<<lentab[code]) > frame_end)
124             break;
125
126         switch (code) {
127
128         case 0:                //Normal Chain
129             if (length >= buf_end - buf) {
130                 av_log(avctx, AV_LOG_ERROR, "Frame larger than buffer.\n");
131                 return -1;
132             }
133             bytestream_get_buffer(&buf, dst, length);
134             dst += length;
135             break;
136
137         case 1:                //Back Chain
138             dst_offset = dst - offset;
139             length *= 4;        //Convert dwords to bytes.
140             if (dst_offset < bfi->dst)
141                 break;
142             while (length--)
143                 *dst++ = *dst_offset++;
144             break;
145
146         case 2:                //Skip Chain
147             dst += length;
148             break;
149
150         case 3:                //Fill Chain
151             colour1 = bytestream_get_byte(&buf);
152             colour2 = bytestream_get_byte(&buf);
153             while (length--) {
154                 *dst++ = colour1;
155                 *dst++ = colour2;
156             }
157             break;
158
159         }
160     }
161
162     src = bfi->dst;
163     dst = bfi->frame.data[0];
164     while (height--) {
165         memcpy(dst, src, avctx->width);
166         src += avctx->width;
167         dst += bfi->frame.linesize[0];
168     }
169     *data_size = sizeof(AVFrame);
170     *(AVFrame *) data = bfi->frame;
171     return buf_size;
172 }
173
174 static av_cold int bfi_decode_close(AVCodecContext * avctx)
175 {
176     BFIContext *bfi = avctx->priv_data;
177     if (bfi->frame.data[0])
178         avctx->release_buffer(avctx, &bfi->frame);
179     av_free(bfi->dst);
180     return 0;
181 }
182
183 AVCodec bfi_decoder = {
184     .name = "bfi",
185     .type = AVMEDIA_TYPE_VIDEO,
186     .id = CODEC_ID_BFI,
187     .priv_data_size = sizeof(BFIContext),
188     .init = bfi_decode_init,
189     .close = bfi_decode_close,
190     .decode = bfi_decode_frame,
191     .capabilities = CODEC_CAP_DR1,
192     .long_name = NULL_IF_CONFIG_SMALL("Brute Force & Ignorance"),
193 };