stereo3d: Support view type for frame sequence type
[ffmpeg.git] / libavcodec / 8bps.c
1 /*
2  * Quicktime Planar RGB (8BPS) Video Decoder
3  * Copyright (C) 2003 Roberto Togni
4  *
5  * This file is part of Libav.
6  *
7  * Libav is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * Libav is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with Libav; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * QT 8BPS Video Decoder by Roberto Togni
25  * For more information about the 8BPS format, visit:
26  *   http://www.pcisys.net/~melanson/codecs/
27  *
28  * Supports: PAL8 (RGB 8bpp, paletted)
29  *         : BGR24 (RGB 24bpp) (can also output it as RGB32)
30  *         : RGB32 (RGB 32bpp, 4th plane is probably alpha and it's ignored)
31  */
32
33 #include <stdio.h>
34 #include <stdlib.h>
35 #include <string.h>
36
37 #include "libavutil/internal.h"
38 #include "libavutil/intreadwrite.h"
39 #include "avcodec.h"
40 #include "internal.h"
41
42
43 static const enum AVPixelFormat pixfmt_rgb24[] = {
44     AV_PIX_FMT_BGR24, AV_PIX_FMT_RGB32, AV_PIX_FMT_NONE };
45
46 typedef struct EightBpsContext {
47     AVCodecContext *avctx;
48
49     unsigned char planes;
50     unsigned char planemap[4];
51
52     uint32_t pal[256];
53 } EightBpsContext;
54
55 static int decode_frame(AVCodecContext *avctx, void *data,
56                         int *got_frame, AVPacket *avpkt)
57 {
58     AVFrame *frame = data;
59     const uint8_t *buf = avpkt->data;
60     int buf_size       = avpkt->size;
61     EightBpsContext * const c = avctx->priv_data;
62     const unsigned char *encoded = buf;
63     unsigned char *pixptr, *pixptr_end;
64     unsigned int height = avctx->height; // Real image height
65     unsigned int dlen, p, row;
66     const unsigned char *lp, *dp, *ep;
67     unsigned char count;
68     unsigned int px_inc;
69     unsigned int planes     = c->planes;
70     unsigned char *planemap = c->planemap;
71     int ret;
72
73     if ((ret = ff_get_buffer(avctx, frame, 0)) < 0) {
74         av_log(avctx, AV_LOG_ERROR, "get_buffer() failed\n");
75         return ret;
76     }
77
78     ep = encoded + buf_size;
79
80     /* Set data pointer after line lengths */
81     dp = encoded + planes * (height << 1);
82
83     /* Ignore alpha plane, don't know what to do with it */
84     if (planes == 4)
85         planes--;
86
87     px_inc = planes + (avctx->pix_fmt == AV_PIX_FMT_RGB32);
88
89     for (p = 0; p < planes; p++) {
90         /* Lines length pointer for this plane */
91         lp = encoded + p * (height << 1);
92
93         /* Decode a plane */
94         for (row = 0; row < height; row++) {
95             pixptr = frame->data[0] + row * frame->linesize[0] + planemap[p];
96             pixptr_end = pixptr + frame->linesize[0];
97             if (ep - lp < row * 2 + 2)
98                 return AVERROR_INVALIDDATA;
99             dlen = av_be2ne16(*(const unsigned short *)(lp + row * 2));
100             /* Decode a row of this plane */
101             while (dlen > 0) {
102                 if (ep - dp <= 1)
103                     return AVERROR_INVALIDDATA;
104                 if ((count = *dp++) <= 127) {
105                     count++;
106                     dlen -= count + 1;
107                     if (pixptr_end - pixptr < count * px_inc)
108                         break;
109                     if (ep - dp < count)
110                         return AVERROR_INVALIDDATA;
111                     while (count--) {
112                         *pixptr = *dp++;
113                         pixptr += px_inc;
114                     }
115                 } else {
116                     count = 257 - count;
117                     if (pixptr_end - pixptr < count * px_inc)
118                         break;
119                     while (count--) {
120                         *pixptr = *dp;
121                         pixptr += px_inc;
122                     }
123                     dp++;
124                     dlen -= 2;
125                 }
126             }
127         }
128     }
129
130     if (avctx->bits_per_coded_sample <= 8) {
131         const uint8_t *pal = av_packet_get_side_data(avpkt,
132                                                      AV_PKT_DATA_PALETTE,
133                                                      NULL);
134         if (pal) {
135             frame->palette_has_changed = 1;
136             memcpy(c->pal, pal, AVPALETTE_SIZE);
137         }
138
139         memcpy (frame->data[1], c->pal, AVPALETTE_SIZE);
140     }
141
142     *got_frame = 1;
143
144     /* always report that the buffer was completely consumed */
145     return buf_size;
146 }
147
148 static av_cold int decode_init(AVCodecContext *avctx)
149 {
150     EightBpsContext * const c = avctx->priv_data;
151
152     c->avctx       = avctx;
153
154     switch (avctx->bits_per_coded_sample) {
155     case 8:
156         avctx->pix_fmt = AV_PIX_FMT_PAL8;
157         c->planes      = 1;
158         c->planemap[0] = 0; // 1st plane is palette indexes
159         break;
160     case 24:
161         avctx->pix_fmt = ff_get_format(avctx, pixfmt_rgb24);
162         c->planes      = 3;
163         c->planemap[0] = 2; // 1st plane is red
164         c->planemap[1] = 1; // 2nd plane is green
165         c->planemap[2] = 0; // 3rd plane is blue
166         break;
167     case 32:
168         avctx->pix_fmt = AV_PIX_FMT_RGB32;
169         c->planes      = 4;
170         /* handle planemap setup later for decoding rgb24 data as rbg32 */
171         break;
172     default:
173         av_log(avctx, AV_LOG_ERROR, "Error: Unsupported color depth: %u.\n",
174                avctx->bits_per_coded_sample);
175         return AVERROR_INVALIDDATA;
176     }
177
178     if (avctx->pix_fmt == AV_PIX_FMT_RGB32) {
179         c->planemap[0] = HAVE_BIGENDIAN ? 1 : 2; // 1st plane is red
180         c->planemap[1] = HAVE_BIGENDIAN ? 2 : 1; // 2nd plane is green
181         c->planemap[2] = HAVE_BIGENDIAN ? 3 : 0; // 3rd plane is blue
182         c->planemap[3] = HAVE_BIGENDIAN ? 0 : 3; // 4th plane is alpha???
183     }
184     return 0;
185 }
186
187 AVCodec ff_eightbps_decoder = {
188     .name           = "8bps",
189     .long_name      = NULL_IF_CONFIG_SMALL("QuickTime 8BPS video"),
190     .type           = AVMEDIA_TYPE_VIDEO,
191     .id             = AV_CODEC_ID_8BPS,
192     .priv_data_size = sizeof(EightBpsContext),
193     .init           = decode_init,
194     .decode         = decode_frame,
195     .capabilities   = AV_CODEC_CAP_DR1,
196 };