7dc528abd1d9901a72fc3b01741a6d444365065e
[ffmpeg.git] / libavformat / avidec.c
1 /*
2  * AVI demuxer
3  * Copyright (c) 2001 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 //#define DEBUG
23 //#define DEBUG_SEEK
24
25 #include "libavutil/intreadwrite.h"
26 #include "libavutil/bswap.h"
27 #include "avformat.h"
28 #include "avi.h"
29 #include "dv.h"
30 #include "riff.h"
31
32 #undef NDEBUG
33 #include <assert.h>
34
35 typedef struct AVIStream {
36     int64_t frame_offset; /* current frame (video) or byte (audio) counter
37                          (used to compute the pts) */
38     int remaining;
39     int packet_size;
40
41     int scale;
42     int rate;
43     int sample_size; /* size of one sample (or packet) (in the rate/scale sense) in bytes */
44
45     int64_t cum_len; /* temporary storage (used during seek) */
46
47     int prefix;                       ///< normally 'd'<<8 + 'c' or 'w'<<8 + 'b'
48     int prefix_count;
49     uint32_t pal[256];
50     int has_pal;
51 } AVIStream;
52
53 typedef struct {
54     int64_t  riff_end;
55     int64_t  movi_end;
56     int64_t  fsize;
57     int64_t movi_list;
58     int64_t last_pkt_pos;
59     int index_loaded;
60     int is_odml;
61     int non_interleaved;
62     int stream_index;
63     DVDemuxContext* dv_demux;
64     int odml_depth;
65 #define MAX_ODML_DEPTH 1000
66 } AVIContext;
67
68 static const char avi_headers[][8] = {
69     { 'R', 'I', 'F', 'F',    'A', 'V', 'I', ' ' },
70     { 'R', 'I', 'F', 'F',    'A', 'V', 'I', 'X' },
71     { 'R', 'I', 'F', 'F',    'A', 'V', 'I', 0x19},
72     { 'O', 'N', '2', ' ',    'O', 'N', '2', 'f' },
73     { 'R', 'I', 'F', 'F',    'A', 'M', 'V', ' ' },
74     { 0 }
75 };
76
77 static int avi_load_index(AVFormatContext *s);
78 static int guess_ni_flag(AVFormatContext *s);
79
80 #ifdef DEBUG
81 static void print_tag(const char *str, unsigned int tag, int size)
82 {
83     dprintf(NULL, "%s: tag=%c%c%c%c size=0x%x\n",
84            str, tag & 0xff,
85            (tag >> 8) & 0xff,
86            (tag >> 16) & 0xff,
87            (tag >> 24) & 0xff,
88            size);
89 }
90 #endif
91
92 static int get_riff(AVFormatContext *s, ByteIOContext *pb)
93 {
94     AVIContext *avi = s->priv_data;
95     char header[8];
96     int i;
97
98     /* check RIFF header */
99     get_buffer(pb, header, 4);
100     avi->riff_end = get_le32(pb);   /* RIFF chunk size */
101     avi->riff_end += url_ftell(pb); /* RIFF chunk end */
102     get_buffer(pb, header+4, 4);
103
104     for(i=0; avi_headers[i][0]; i++)
105         if(!memcmp(header, avi_headers[i], 8))
106             break;
107     if(!avi_headers[i][0])
108         return -1;
109
110     if(header[7] == 0x19)
111         av_log(s, AV_LOG_INFO, "This file has been generated by a totally broken muxer.\n");
112
113     return 0;
114 }
115
116 static int read_braindead_odml_indx(AVFormatContext *s, int frame_num){
117     AVIContext *avi = s->priv_data;
118     ByteIOContext *pb = s->pb;
119     int longs_pre_entry= get_le16(pb);
120     int index_sub_type = get_byte(pb);
121     int index_type     = get_byte(pb);
122     int entries_in_use = get_le32(pb);
123     int chunk_id       = get_le32(pb);
124     int64_t base       = get_le64(pb);
125     int stream_id= 10*((chunk_id&0xFF) - '0') + (((chunk_id>>8)&0xFF) - '0');
126     AVStream *st;
127     AVIStream *ast;
128     int i;
129     int64_t last_pos= -1;
130     int64_t filesize= url_fsize(s->pb);
131
132 #ifdef DEBUG_SEEK
133     av_log(s, AV_LOG_ERROR, "longs_pre_entry:%d index_type:%d entries_in_use:%d chunk_id:%X base:%16"PRIX64"\n",
134         longs_pre_entry,index_type, entries_in_use, chunk_id, base);
135 #endif
136
137     if(stream_id >= s->nb_streams || stream_id < 0)
138         return -1;
139     st= s->streams[stream_id];
140     ast = st->priv_data;
141
142     if(index_sub_type)
143         return -1;
144
145     get_le32(pb);
146
147     if(index_type && longs_pre_entry != 2)
148         return -1;
149     if(index_type>1)
150         return -1;
151
152     if(filesize > 0 && base >= filesize){
153         av_log(s, AV_LOG_ERROR, "ODML index invalid\n");
154         if(base>>32 == (base & 0xFFFFFFFF) && (base & 0xFFFFFFFF) < filesize && filesize <= 0xFFFFFFFF)
155             base &= 0xFFFFFFFF;
156         else
157             return -1;
158     }
159
160     for(i=0; i<entries_in_use; i++){
161         if(index_type){
162             int64_t pos= get_le32(pb) + base - 8;
163             int len    = get_le32(pb);
164             int key= len >= 0;
165             len &= 0x7FFFFFFF;
166
167 #ifdef DEBUG_SEEK
168             av_log(s, AV_LOG_ERROR, "pos:%"PRId64", len:%X\n", pos, len);
169 #endif
170             if(url_feof(pb))
171                 return -1;
172
173             if(last_pos == pos || pos == base - 8)
174                 avi->non_interleaved= 1;
175             if(last_pos != pos && (len || !ast->sample_size))
176                 av_add_index_entry(st, pos, ast->cum_len, len, 0, key ? AVINDEX_KEYFRAME : 0);
177
178             if(ast->sample_size)
179                 ast->cum_len += len;
180             else
181                 ast->cum_len ++;
182             last_pos= pos;
183         }else{
184             int64_t offset, pos;
185             int duration;
186             offset = get_le64(pb);
187             get_le32(pb);       /* size */
188             duration = get_le32(pb);
189
190             if(url_feof(pb))
191                 return -1;
192
193             pos = url_ftell(pb);
194
195             if(avi->odml_depth > MAX_ODML_DEPTH){
196                 av_log(s, AV_LOG_ERROR, "Too deeply nested ODML indexes\n");
197                 return -1;
198             }
199
200             url_fseek(pb, offset+8, SEEK_SET);
201             avi->odml_depth++;
202             read_braindead_odml_indx(s, frame_num);
203             avi->odml_depth--;
204             frame_num += duration;
205
206             url_fseek(pb, pos, SEEK_SET);
207         }
208     }
209     avi->index_loaded=1;
210     return 0;
211 }
212
213 static void clean_index(AVFormatContext *s){
214     int i;
215     int64_t j;
216
217     for(i=0; i<s->nb_streams; i++){
218         AVStream *st = s->streams[i];
219         AVIStream *ast = st->priv_data;
220         int n= st->nb_index_entries;
221         int max= ast->sample_size;
222         int64_t pos, size, ts;
223
224         if(n != 1 || ast->sample_size==0)
225             continue;
226
227         while(max < 1024) max+=max;
228
229         pos= st->index_entries[0].pos;
230         size= st->index_entries[0].size;
231         ts= st->index_entries[0].timestamp;
232
233         for(j=0; j<size; j+=max){
234             av_add_index_entry(st, pos+j, ts+j, FFMIN(max, size-j), 0, AVINDEX_KEYFRAME);
235         }
236     }
237 }
238
239 static int avi_read_tag(AVFormatContext *s, AVStream *st, uint32_t tag, uint32_t size)
240 {
241     ByteIOContext *pb = s->pb;
242     char key[5] = {0}, *value;
243
244     size += (size & 1);
245
246     if (size == UINT_MAX)
247         return -1;
248     value = av_malloc(size+1);
249     if (!value)
250         return -1;
251     get_buffer(pb, value, size);
252     value[size]=0;
253
254     AV_WL32(key, tag);
255
256     if(st)
257         return av_metadata_set2(&st->metadata, key, value,
258                                     AV_METADATA_DONT_STRDUP_VAL);
259     else
260     return av_metadata_set2(&s->metadata, key, value,
261                                   AV_METADATA_DONT_STRDUP_VAL);
262 }
263
264 static void avi_read_info(AVFormatContext *s, uint64_t end)
265 {
266     while (url_ftell(s->pb) < end) {
267         uint32_t tag  = get_le32(s->pb);
268         uint32_t size = get_le32(s->pb);
269         avi_read_tag(s, NULL, tag, size);
270     }
271 }
272
273 static int avi_read_header(AVFormatContext *s, AVFormatParameters *ap)
274 {
275     AVIContext *avi = s->priv_data;
276     ByteIOContext *pb = s->pb;
277     unsigned int tag, tag1, handler;
278     int codec_type, stream_index, frame_period, bit_rate;
279     unsigned int size;
280     int i;
281     AVStream *st;
282     AVIStream *ast = NULL;
283     int avih_width=0, avih_height=0;
284     int amv_file_format=0;
285     uint64_t list_end = 0;
286
287     avi->stream_index= -1;
288
289     if (get_riff(s, pb) < 0)
290         return -1;
291
292     avi->fsize = url_fsize(pb);
293     if(avi->fsize<=0)
294         avi->fsize= avi->riff_end == 8 ? INT64_MAX : avi->riff_end;
295
296     /* first list tag */
297     stream_index = -1;
298     codec_type = -1;
299     frame_period = 0;
300     for(;;) {
301         if (url_feof(pb))
302             goto fail;
303         tag = get_le32(pb);
304         size = get_le32(pb);
305 #ifdef DEBUG
306         print_tag("tag", tag, size);
307 #endif
308
309         switch(tag) {
310         case MKTAG('L', 'I', 'S', 'T'):
311             list_end = url_ftell(pb) + size;
312             /* Ignored, except at start of video packets. */
313             tag1 = get_le32(pb);
314 #ifdef DEBUG
315             print_tag("list", tag1, 0);
316 #endif
317             if (tag1 == MKTAG('m', 'o', 'v', 'i')) {
318                 avi->movi_list = url_ftell(pb) - 4;
319                 if(size) avi->movi_end = avi->movi_list + size + (size & 1);
320                 else     avi->movi_end = url_fsize(pb);
321                 dprintf(NULL, "movi end=%"PRIx64"\n", avi->movi_end);
322                 goto end_of_header;
323             }
324             else if (tag1 == MKTAG('I', 'N', 'F', 'O'))
325                 avi_read_info(s, list_end);
326
327             break;
328         case MKTAG('d', 'm', 'l', 'h'):
329             avi->is_odml = 1;
330             url_fskip(pb, size + (size & 1));
331             break;
332         case MKTAG('a', 'm', 'v', 'h'):
333             amv_file_format=1;
334         case MKTAG('a', 'v', 'i', 'h'):
335             /* AVI header */
336             /* using frame_period is bad idea */
337             frame_period = get_le32(pb);
338             bit_rate = get_le32(pb) * 8;
339             get_le32(pb);
340             avi->non_interleaved |= get_le32(pb) & AVIF_MUSTUSEINDEX;
341
342             url_fskip(pb, 2 * 4);
343             get_le32(pb);
344             get_le32(pb);
345             avih_width=get_le32(pb);
346             avih_height=get_le32(pb);
347
348             url_fskip(pb, size - 10 * 4);
349             break;
350         case MKTAG('s', 't', 'r', 'h'):
351             /* stream header */
352
353             tag1 = get_le32(pb);
354             handler = get_le32(pb); /* codec tag */
355
356             if(tag1 == MKTAG('p', 'a', 'd', 's')){
357                 url_fskip(pb, size - 8);
358                 break;
359             }else{
360                 stream_index++;
361                 st = av_new_stream(s, stream_index);
362                 if (!st)
363                     goto fail;
364
365                 ast = av_mallocz(sizeof(AVIStream));
366                 if (!ast)
367                     goto fail;
368                 st->priv_data = ast;
369             }
370             if(amv_file_format)
371                 tag1 = stream_index ? MKTAG('a','u','d','s') : MKTAG('v','i','d','s');
372
373 #ifdef DEBUG
374             print_tag("strh", tag1, -1);
375 #endif
376             if(tag1 == MKTAG('i', 'a', 'v', 's') || tag1 == MKTAG('i', 'v', 'a', 's')){
377                 int64_t dv_dur;
378
379                 /*
380                  * After some consideration -- I don't think we
381                  * have to support anything but DV in type1 AVIs.
382                  */
383                 if (s->nb_streams != 1)
384                     goto fail;
385
386                 if (handler != MKTAG('d', 'v', 's', 'd') &&
387                     handler != MKTAG('d', 'v', 'h', 'd') &&
388                     handler != MKTAG('d', 'v', 's', 'l'))
389                    goto fail;
390
391                 ast = s->streams[0]->priv_data;
392                 av_freep(&s->streams[0]->codec->extradata);
393                 av_freep(&s->streams[0]);
394                 s->nb_streams = 0;
395                 if (CONFIG_DV_DEMUXER) {
396                     avi->dv_demux = dv_init_demux(s);
397                     if (!avi->dv_demux)
398                         goto fail;
399                 }
400                 s->streams[0]->priv_data = ast;
401                 url_fskip(pb, 3 * 4);
402                 ast->scale = get_le32(pb);
403                 ast->rate = get_le32(pb);
404                 url_fskip(pb, 4);  /* start time */
405
406                 dv_dur = get_le32(pb);
407                 if (ast->scale > 0 && ast->rate > 0 && dv_dur > 0) {
408                     dv_dur *= AV_TIME_BASE;
409                     s->duration = av_rescale(dv_dur, ast->scale, ast->rate);
410                 }
411                 /*
412                  * else, leave duration alone; timing estimation in utils.c
413                  *      will make a guess based on bitrate.
414                  */
415
416                 stream_index = s->nb_streams - 1;
417                 url_fskip(pb, size - 9*4);
418                 break;
419             }
420
421             assert(stream_index < s->nb_streams);
422             st->codec->stream_codec_tag= handler;
423
424             get_le32(pb); /* flags */
425             get_le16(pb); /* priority */
426             get_le16(pb); /* language */
427             get_le32(pb); /* initial frame */
428             ast->scale = get_le32(pb);
429             ast->rate = get_le32(pb);
430             if(!(ast->scale && ast->rate)){
431                 av_log(s, AV_LOG_WARNING, "scale/rate is %u/%u which is invalid. (This file has been generated by broken software.)\n", ast->scale, ast->rate);
432                 if(frame_period){
433                     ast->rate = 1000000;
434                     ast->scale = frame_period;
435                 }else{
436                     ast->rate = 25;
437                     ast->scale = 1;
438                 }
439             }
440             av_set_pts_info(st, 64, ast->scale, ast->rate);
441
442             ast->cum_len=get_le32(pb); /* start */
443             st->nb_frames = get_le32(pb);
444
445             st->start_time = 0;
446             get_le32(pb); /* buffer size */
447             get_le32(pb); /* quality */
448             ast->sample_size = get_le32(pb); /* sample ssize */
449             ast->cum_len *= FFMAX(1, ast->sample_size);
450 //            av_log(s, AV_LOG_DEBUG, "%d %d %d %d\n", ast->rate, ast->scale, ast->start, ast->sample_size);
451
452             switch(tag1) {
453             case MKTAG('v', 'i', 'd', 's'):
454                 codec_type = AVMEDIA_TYPE_VIDEO;
455
456                 ast->sample_size = 0;
457                 break;
458             case MKTAG('a', 'u', 'd', 's'):
459                 codec_type = AVMEDIA_TYPE_AUDIO;
460                 break;
461             case MKTAG('t', 'x', 't', 's'):
462                 //FIXME
463                 codec_type = AVMEDIA_TYPE_DATA; //AVMEDIA_TYPE_SUB ?  FIXME
464                 break;
465             case MKTAG('d', 'a', 't', 's'):
466                 codec_type = AVMEDIA_TYPE_DATA;
467                 break;
468             default:
469                 av_log(s, AV_LOG_ERROR, "unknown stream type %X\n", tag1);
470                 goto fail;
471             }
472             if(ast->sample_size == 0)
473                 st->duration = st->nb_frames;
474             ast->frame_offset= ast->cum_len;
475             url_fskip(pb, size - 12 * 4);
476             break;
477         case MKTAG('s', 't', 'r', 'f'):
478             /* stream header */
479             if (stream_index >= (unsigned)s->nb_streams || avi->dv_demux) {
480                 url_fskip(pb, size);
481             } else {
482                 uint64_t cur_pos = url_ftell(pb);
483                 if (cur_pos < list_end)
484                     size = FFMIN(size, list_end - cur_pos);
485                 st = s->streams[stream_index];
486                 switch(codec_type) {
487                 case AVMEDIA_TYPE_VIDEO:
488                     if(amv_file_format){
489                         st->codec->width=avih_width;
490                         st->codec->height=avih_height;
491                         st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
492                         st->codec->codec_id = CODEC_ID_AMV;
493                         url_fskip(pb, size);
494                         break;
495                     }
496                     get_le32(pb); /* size */
497                     st->codec->width = get_le32(pb);
498                     st->codec->height = (int32_t)get_le32(pb);
499                     get_le16(pb); /* panes */
500                     st->codec->bits_per_coded_sample= get_le16(pb); /* depth */
501                     tag1 = get_le32(pb);
502                     get_le32(pb); /* ImageSize */
503                     get_le32(pb); /* XPelsPerMeter */
504                     get_le32(pb); /* YPelsPerMeter */
505                     get_le32(pb); /* ClrUsed */
506                     get_le32(pb); /* ClrImportant */
507
508                     if (tag1 == MKTAG('D', 'X', 'S', 'B') || tag1 == MKTAG('D','X','S','A')) {
509                         st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
510                         st->codec->codec_tag = tag1;
511                         st->codec->codec_id = CODEC_ID_XSUB;
512                         break;
513                     }
514
515                     if(size > 10*4 && size<(1<<30)){
516                         st->codec->extradata_size= size - 10*4;
517                         st->codec->extradata= av_malloc(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
518                         if (!st->codec->extradata) {
519                             st->codec->extradata_size= 0;
520                             return AVERROR(ENOMEM);
521                         }
522                         get_buffer(pb, st->codec->extradata, st->codec->extradata_size);
523                     }
524
525                     if(st->codec->extradata_size & 1) //FIXME check if the encoder really did this correctly
526                         get_byte(pb);
527
528                     /* Extract palette from extradata if bpp <= 8. */
529                     /* This code assumes that extradata contains only palette. */
530                     /* This is true for all paletted codecs implemented in FFmpeg. */
531                     if (st->codec->extradata_size && (st->codec->bits_per_coded_sample <= 8)) {
532                         st->codec->palctrl = av_mallocz(sizeof(AVPaletteControl));
533 #if HAVE_BIGENDIAN
534                         for (i = 0; i < FFMIN(st->codec->extradata_size, AVPALETTE_SIZE)/4; i++)
535                             st->codec->palctrl->palette[i] = bswap_32(((uint32_t*)st->codec->extradata)[i]);
536 #else
537                         memcpy(st->codec->palctrl->palette, st->codec->extradata,
538                                FFMIN(st->codec->extradata_size, AVPALETTE_SIZE));
539 #endif
540                         st->codec->palctrl->palette_changed = 1;
541                     }
542
543 #ifdef DEBUG
544                     print_tag("video", tag1, 0);
545 #endif
546                     st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
547                     st->codec->codec_tag = tag1;
548                     st->codec->codec_id = ff_codec_get_id(ff_codec_bmp_tags, tag1);
549                     st->need_parsing = AVSTREAM_PARSE_HEADERS; // This is needed to get the pict type which is necessary for generating correct pts.
550                     // Support "Resolution 1:1" for Avid AVI Codec
551                     if(tag1 == MKTAG('A', 'V', 'R', 'n') &&
552                        st->codec->extradata_size >= 31 &&
553                        !memcmp(&st->codec->extradata[28], "1:1", 3))
554                         st->codec->codec_id = CODEC_ID_RAWVIDEO;
555
556                     if(st->codec->codec_tag==0 && st->codec->height > 0 && st->codec->extradata_size < 1U<<30){
557                         st->codec->extradata_size+= 9;
558                         st->codec->extradata= av_realloc(st->codec->extradata, st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
559                         if(st->codec->extradata)
560                             memcpy(st->codec->extradata + st->codec->extradata_size - 9, "BottomUp", 9);
561                     }
562                     st->codec->height= FFABS(st->codec->height);
563
564 //                    url_fskip(pb, size - 5 * 4);
565                     break;
566                 case AVMEDIA_TYPE_AUDIO:
567                     ff_get_wav_header(pb, st->codec, size);
568                     if(ast->sample_size && st->codec->block_align && ast->sample_size != st->codec->block_align){
569                         av_log(s, AV_LOG_WARNING, "sample size (%d) != block align (%d)\n", ast->sample_size, st->codec->block_align);
570                         ast->sample_size= st->codec->block_align;
571                     }
572                     if (size&1) /* 2-aligned (fix for Stargate SG-1 - 3x18 - Shades of Grey.avi) */
573                         url_fskip(pb, 1);
574                     /* Force parsing as several audio frames can be in
575                      * one packet and timestamps refer to packet start. */
576                     st->need_parsing = AVSTREAM_PARSE_TIMESTAMPS;
577                     /* ADTS header is in extradata, AAC without header must be
578                      * stored as exact frames. Parser not needed and it will
579                      * fail. */
580                     if (st->codec->codec_id == CODEC_ID_AAC && st->codec->extradata_size)
581                         st->need_parsing = AVSTREAM_PARSE_NONE;
582                     /* AVI files with Xan DPCM audio (wrongly) declare PCM
583                      * audio in the header but have Axan as stream_code_tag. */
584                     if (st->codec->stream_codec_tag == AV_RL32("Axan")){
585                         st->codec->codec_id  = CODEC_ID_XAN_DPCM;
586                         st->codec->codec_tag = 0;
587                     }
588                     if (amv_file_format)
589                         st->codec->codec_id  = CODEC_ID_ADPCM_IMA_AMV;
590                     break;
591                 default:
592                     st->codec->codec_type = AVMEDIA_TYPE_DATA;
593                     st->codec->codec_id= CODEC_ID_NONE;
594                     st->codec->codec_tag= 0;
595                     url_fskip(pb, size);
596                     break;
597                 }
598             }
599             break;
600         case MKTAG('i', 'n', 'd', 'x'):
601             i= url_ftell(pb);
602             if(!url_is_streamed(pb) && !(s->flags & AVFMT_FLAG_IGNIDX)){
603                 read_braindead_odml_indx(s, 0);
604             }
605             url_fseek(pb, i+size, SEEK_SET);
606             break;
607         case MKTAG('v', 'p', 'r', 'p'):
608             if(stream_index < (unsigned)s->nb_streams && size > 9*4){
609                 AVRational active, active_aspect;
610
611                 st = s->streams[stream_index];
612                 get_le32(pb);
613                 get_le32(pb);
614                 get_le32(pb);
615                 get_le32(pb);
616                 get_le32(pb);
617
618                 active_aspect.den= get_le16(pb);
619                 active_aspect.num= get_le16(pb);
620                 active.num       = get_le32(pb);
621                 active.den       = get_le32(pb);
622                 get_le32(pb); //nbFieldsPerFrame
623
624                 if(active_aspect.num && active_aspect.den && active.num && active.den){
625                     st->sample_aspect_ratio= av_div_q(active_aspect, active);
626 //av_log(s, AV_LOG_ERROR, "vprp %d/%d %d/%d\n", active_aspect.num, active_aspect.den, active.num, active.den);
627                 }
628                 size -= 9*4;
629             }
630             url_fseek(pb, size, SEEK_CUR);
631             break;
632         case MKTAG('s', 't', 'r', 'n'):
633             if(s->nb_streams){
634                 avi_read_tag(s, s->streams[s->nb_streams-1], tag, size);
635                 break;
636             }
637         default:
638             if(size > 1000000){
639                 av_log(s, AV_LOG_ERROR, "Something went wrong during header parsing, "
640                                         "I will ignore it and try to continue anyway.\n");
641                 avi->movi_list = url_ftell(pb) - 4;
642                 avi->movi_end  = url_fsize(pb);
643                 goto end_of_header;
644             }
645             /* skip tag */
646             size += (size & 1);
647             url_fskip(pb, size);
648             break;
649         }
650     }
651  end_of_header:
652     /* check stream number */
653     if (stream_index != s->nb_streams - 1) {
654     fail:
655         return -1;
656     }
657
658     if(!avi->index_loaded && !url_is_streamed(pb))
659         avi_load_index(s);
660     avi->index_loaded = 1;
661     avi->non_interleaved |= guess_ni_flag(s);
662     for(i=0; i<s->nb_streams; i++){
663         AVStream *st = s->streams[i];
664         if(st->nb_index_entries)
665             break;
666     }
667     if(i==s->nb_streams && avi->non_interleaved) {
668         av_log(s, AV_LOG_WARNING, "non-interleaved AVI without index, switching to interleaved\n");
669         avi->non_interleaved=0;
670     }
671
672     if(avi->non_interleaved) {
673         av_log(s, AV_LOG_INFO, "non-interleaved AVI\n");
674         clean_index(s);
675     }
676
677     return 0;
678 }
679
680 static int get_stream_idx(int *d){
681     if(    d[0] >= '0' && d[0] <= '9'
682         && d[1] >= '0' && d[1] <= '9'){
683         return (d[0] - '0') * 10 + (d[1] - '0');
684     }else{
685         return 100; //invalid stream ID
686     }
687 }
688
689 static int avi_read_packet(AVFormatContext *s, AVPacket *pkt)
690 {
691     AVIContext *avi = s->priv_data;
692     ByteIOContext *pb = s->pb;
693     int n, d[8];
694     unsigned int size;
695     int64_t i, sync;
696     void* dstr;
697
698     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
699         int size = dv_get_packet(avi->dv_demux, pkt);
700         if (size >= 0)
701             return size;
702     }
703
704     if(avi->non_interleaved){
705         int best_stream_index = 0;
706         AVStream *best_st= NULL;
707         AVIStream *best_ast;
708         int64_t best_ts= INT64_MAX;
709         int i;
710
711         for(i=0; i<s->nb_streams; i++){
712             AVStream *st = s->streams[i];
713             AVIStream *ast = st->priv_data;
714             int64_t ts= ast->frame_offset;
715             int64_t last_ts;
716
717             if(!st->nb_index_entries)
718                 continue;
719
720             last_ts = st->index_entries[st->nb_index_entries - 1].timestamp;
721             if(!ast->remaining && ts > last_ts)
722                 continue;
723
724             ts = av_rescale_q(ts, st->time_base, (AVRational){FFMAX(1, ast->sample_size), AV_TIME_BASE});
725
726 //            av_log(s, AV_LOG_DEBUG, "%"PRId64" %d/%d %"PRId64"\n", ts, st->time_base.num, st->time_base.den, ast->frame_offset);
727             if(ts < best_ts){
728                 best_ts= ts;
729                 best_st= st;
730                 best_stream_index= i;
731             }
732         }
733         if(!best_st)
734             return -1;
735
736         best_ast = best_st->priv_data;
737         best_ts = av_rescale_q(best_ts, (AVRational){FFMAX(1, best_ast->sample_size), AV_TIME_BASE}, best_st->time_base);
738         if(best_ast->remaining)
739             i= av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY | AVSEEK_FLAG_BACKWARD);
740         else{
741             i= av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY);
742             if(i>=0)
743                 best_ast->frame_offset= best_st->index_entries[i].timestamp;
744         }
745
746 //        av_log(s, AV_LOG_DEBUG, "%d\n", i);
747         if(i>=0){
748             int64_t pos= best_st->index_entries[i].pos;
749             pos += best_ast->packet_size - best_ast->remaining;
750             url_fseek(s->pb, pos + 8, SEEK_SET);
751 //        av_log(s, AV_LOG_DEBUG, "pos=%"PRId64"\n", pos);
752
753             assert(best_ast->remaining <= best_ast->packet_size);
754
755             avi->stream_index= best_stream_index;
756             if(!best_ast->remaining)
757                 best_ast->packet_size=
758                 best_ast->remaining= best_st->index_entries[i].size;
759         }
760     }
761
762 resync:
763     if(avi->stream_index >= 0){
764         AVStream *st= s->streams[ avi->stream_index ];
765         AVIStream *ast= st->priv_data;
766         int size, err;
767
768         if(ast->sample_size <= 1) // minorityreport.AVI block_align=1024 sample_size=1 IMA-ADPCM
769             size= INT_MAX;
770         else if(ast->sample_size < 32)
771             // arbitrary multiplier to avoid tiny packets for raw PCM data
772             size= 1024*ast->sample_size;
773         else
774             size= ast->sample_size;
775
776         if(size > ast->remaining)
777             size= ast->remaining;
778         avi->last_pkt_pos= url_ftell(pb);
779         err= av_get_packet(pb, pkt, size);
780         if(err<0)
781             return err;
782
783         if(ast->has_pal && pkt->data && pkt->size<(unsigned)INT_MAX/2){
784             void *ptr= av_realloc(pkt->data, pkt->size + 4*256 + FF_INPUT_BUFFER_PADDING_SIZE);
785             if(ptr){
786             ast->has_pal=0;
787             pkt->size += 4*256;
788             pkt->data= ptr;
789                 memcpy(pkt->data + pkt->size - 4*256, ast->pal, 4*256);
790             }else
791                 av_log(s, AV_LOG_ERROR, "Failed to append palette\n");
792         }
793
794         if (CONFIG_DV_DEMUXER && avi->dv_demux) {
795             dstr = pkt->destruct;
796             size = dv_produce_packet(avi->dv_demux, pkt,
797                                     pkt->data, pkt->size);
798             pkt->destruct = dstr;
799             pkt->flags |= AV_PKT_FLAG_KEY;
800         } else {
801             /* XXX: How to handle B-frames in AVI? */
802             pkt->dts = ast->frame_offset;
803 //                pkt->dts += ast->start;
804             if(ast->sample_size)
805                 pkt->dts /= ast->sample_size;
806 //av_log(s, AV_LOG_DEBUG, "dts:%"PRId64" offset:%"PRId64" %d/%d smpl_siz:%d base:%d st:%d size:%d\n", pkt->dts, ast->frame_offset, ast->scale, ast->rate, ast->sample_size, AV_TIME_BASE, avi->stream_index, size);
807             pkt->stream_index = avi->stream_index;
808
809             if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
810                 AVIndexEntry *e;
811                 int index;
812                 assert(st->index_entries);
813
814                 index= av_index_search_timestamp(st, ast->frame_offset, 0);
815                 e= &st->index_entries[index];
816
817                 if(index >= 0 && e->timestamp == ast->frame_offset){
818                     if (e->flags & AVINDEX_KEYFRAME)
819                         pkt->flags |= AV_PKT_FLAG_KEY;
820                 }
821             } else {
822                 pkt->flags |= AV_PKT_FLAG_KEY;
823             }
824             if(ast->sample_size)
825                 ast->frame_offset += pkt->size;
826             else
827                 ast->frame_offset++;
828         }
829         ast->remaining -= size;
830         if(!ast->remaining){
831             avi->stream_index= -1;
832             ast->packet_size= 0;
833         }
834
835         return size;
836     }
837
838     memset(d, -1, sizeof(int)*8);
839     for(i=sync=url_ftell(pb); !url_feof(pb); i++) {
840         int j;
841
842         for(j=0; j<7; j++)
843             d[j]= d[j+1];
844         d[7]= get_byte(pb);
845
846         size= d[4] + (d[5]<<8) + (d[6]<<16) + (d[7]<<24);
847
848         n= get_stream_idx(d+2);
849 //av_log(s, AV_LOG_DEBUG, "%X %X %X %X %X %X %X %X %"PRId64" %d %d\n", d[0], d[1], d[2], d[3], d[4], d[5], d[6], d[7], i, size, n);
850         if(i + (uint64_t)size > avi->fsize || d[0]<0)
851             continue;
852
853         //parse ix##
854         if(  (d[0] == 'i' && d[1] == 'x' && n < s->nb_streams)
855         //parse JUNK
856            ||(d[0] == 'J' && d[1] == 'U' && d[2] == 'N' && d[3] == 'K')
857            ||(d[0] == 'i' && d[1] == 'd' && d[2] == 'x' && d[3] == '1')){
858             url_fskip(pb, size);
859 //av_log(s, AV_LOG_DEBUG, "SKIP\n");
860             goto resync;
861         }
862
863         //parse stray LIST
864         if(d[0] == 'L' && d[1] == 'I' && d[2] == 'S' && d[3] == 'T'){
865             url_fskip(pb, 4);
866             goto resync;
867         }
868
869         n= get_stream_idx(d);
870
871         if(!((i-avi->last_pkt_pos)&1) && get_stream_idx(d+1) < s->nb_streams)
872             continue;
873
874         //detect ##ix chunk and skip
875         if(d[2] == 'i' && d[3] == 'x' && n < s->nb_streams){
876             url_fskip(pb, size);
877             goto resync;
878         }
879
880         //parse ##dc/##wb
881         if(n < s->nb_streams){
882             AVStream *st;
883             AVIStream *ast;
884             st = s->streams[n];
885             ast = st->priv_data;
886
887             if(s->nb_streams>=2){
888                 AVStream *st1  = s->streams[1];
889                 AVIStream *ast1= st1->priv_data;
890                 //workaround for broken small-file-bug402.avi
891                 if(   d[2] == 'w' && d[3] == 'b'
892                    && n==0
893                    && st ->codec->codec_type == AVMEDIA_TYPE_VIDEO
894                    && st1->codec->codec_type == AVMEDIA_TYPE_AUDIO
895                    && ast->prefix == 'd'*256+'c'
896                    && (d[2]*256+d[3] == ast1->prefix || !ast1->prefix_count)
897                   ){
898                     n=1;
899                     st = st1;
900                     ast = ast1;
901                     av_log(s, AV_LOG_WARNING, "Invalid stream + prefix combination, assuming audio.\n");
902                 }
903             }
904
905
906             if(   (st->discard >= AVDISCARD_DEFAULT && size==0)
907                /*|| (st->discard >= AVDISCARD_NONKEY && !(pkt->flags & AV_PKT_FLAG_KEY))*/ //FIXME needs a little reordering
908                || st->discard >= AVDISCARD_ALL){
909                 if(ast->sample_size) ast->frame_offset += size;
910                 else                 ast->frame_offset++;
911                 url_fskip(pb, size);
912                 goto resync;
913             }
914
915             if (d[2] == 'p' && d[3] == 'c' && size<=4*256+4) {
916                 int k = get_byte(pb);
917                 int last = (k + get_byte(pb) - 1) & 0xFF;
918
919                 get_le16(pb); //flags
920
921                 for (; k <= last; k++)
922                     ast->pal[k] = get_be32(pb)>>8;// b + (g << 8) + (r << 16);
923                 ast->has_pal= 1;
924                 goto resync;
925             } else if(   ((ast->prefix_count<5 || sync+9 > i) && d[2]<128 && d[3]<128) ||
926                          d[2]*256+d[3] == ast->prefix /*||
927                          (d[2] == 'd' && d[3] == 'c') ||
928                          (d[2] == 'w' && d[3] == 'b')*/) {
929
930 //av_log(s, AV_LOG_DEBUG, "OK\n");
931                 if(d[2]*256+d[3] == ast->prefix)
932                     ast->prefix_count++;
933                 else{
934                     ast->prefix= d[2]*256+d[3];
935                     ast->prefix_count= 0;
936                 }
937
938                 avi->stream_index= n;
939                 ast->packet_size= size + 8;
940                 ast->remaining= size;
941
942                 if(size || !ast->sample_size){
943                     uint64_t pos= url_ftell(pb) - 8;
944                     if(!st->index_entries || !st->nb_index_entries || st->index_entries[st->nb_index_entries - 1].pos < pos){
945                         av_add_index_entry(st, pos, ast->frame_offset, size, 0, AVINDEX_KEYFRAME);
946                     }
947                 }
948                 goto resync;
949             }
950         }
951     }
952
953     return AVERROR_EOF;
954 }
955
956 /* XXX: We make the implicit supposition that the positions are sorted
957    for each stream. */
958 static int avi_read_idx1(AVFormatContext *s, int size)
959 {
960     AVIContext *avi = s->priv_data;
961     ByteIOContext *pb = s->pb;
962     int nb_index_entries, i;
963     AVStream *st;
964     AVIStream *ast;
965     unsigned int index, tag, flags, pos, len;
966     unsigned last_pos= -1;
967
968     nb_index_entries = size / 16;
969     if (nb_index_entries <= 0)
970         return -1;
971
972     /* Read the entries and sort them in each stream component. */
973     for(i = 0; i < nb_index_entries; i++) {
974         tag = get_le32(pb);
975         flags = get_le32(pb);
976         pos = get_le32(pb);
977         len = get_le32(pb);
978 #if defined(DEBUG_SEEK)
979         av_log(s, AV_LOG_DEBUG, "%d: tag=0x%x flags=0x%x pos=0x%x len=%d/",
980                i, tag, flags, pos, len);
981 #endif
982         if(i==0 && pos > avi->movi_list)
983             avi->movi_list= 0; //FIXME better check
984         pos += avi->movi_list;
985
986         index = ((tag & 0xff) - '0') * 10;
987         index += ((tag >> 8) & 0xff) - '0';
988         if (index >= s->nb_streams)
989             continue;
990         st = s->streams[index];
991         ast = st->priv_data;
992
993 #if defined(DEBUG_SEEK)
994         av_log(s, AV_LOG_DEBUG, "%d cum_len=%"PRId64"\n", len, ast->cum_len);
995 #endif
996         if(url_feof(pb))
997             return -1;
998
999         if(last_pos == pos)
1000             avi->non_interleaved= 1;
1001         else if(len || !ast->sample_size)
1002             av_add_index_entry(st, pos, ast->cum_len, len, 0, (flags&AVIIF_INDEX) ? AVINDEX_KEYFRAME : 0);
1003         if(ast->sample_size)
1004             ast->cum_len += len;
1005         else
1006             ast->cum_len ++;
1007         last_pos= pos;
1008     }
1009     return 0;
1010 }
1011
1012 static int guess_ni_flag(AVFormatContext *s){
1013     int i;
1014     int64_t last_start=0;
1015     int64_t first_end= INT64_MAX;
1016     int64_t oldpos= url_ftell(s->pb);
1017
1018     for(i=0; i<s->nb_streams; i++){
1019         AVStream *st = s->streams[i];
1020         int n= st->nb_index_entries;
1021         unsigned int size;
1022
1023         if(n <= 0)
1024             continue;
1025
1026         if(n >= 2){
1027             int64_t pos= st->index_entries[0].pos;
1028             url_fseek(s->pb, pos + 4, SEEK_SET);
1029             size= get_le32(s->pb);
1030             if(pos + size > st->index_entries[1].pos)
1031                 last_start= INT64_MAX;
1032         }
1033
1034         if(st->index_entries[0].pos > last_start)
1035             last_start= st->index_entries[0].pos;
1036         if(st->index_entries[n-1].pos < first_end)
1037             first_end= st->index_entries[n-1].pos;
1038     }
1039     url_fseek(s->pb, oldpos, SEEK_SET);
1040     return last_start > first_end;
1041 }
1042
1043 static int avi_load_index(AVFormatContext *s)
1044 {
1045     AVIContext *avi = s->priv_data;
1046     ByteIOContext *pb = s->pb;
1047     uint32_t tag, size;
1048     int64_t pos= url_ftell(pb);
1049     int ret = -1;
1050
1051     if (url_fseek(pb, avi->movi_end, SEEK_SET) < 0)
1052         goto the_end; // maybe truncated file
1053 #ifdef DEBUG_SEEK
1054     printf("movi_end=0x%"PRIx64"\n", avi->movi_end);
1055 #endif
1056     for(;;) {
1057         if (url_feof(pb))
1058             break;
1059         tag = get_le32(pb);
1060         size = get_le32(pb);
1061 #ifdef DEBUG_SEEK
1062         printf("tag=%c%c%c%c size=0x%x\n",
1063                tag & 0xff,
1064                (tag >> 8) & 0xff,
1065                (tag >> 16) & 0xff,
1066                (tag >> 24) & 0xff,
1067                size);
1068 #endif
1069         switch(tag) {
1070         case MKTAG('i', 'd', 'x', '1'):
1071             if (avi_read_idx1(s, size) < 0)
1072                 goto skip;
1073             ret = 0;
1074                 goto the_end;
1075             break;
1076         default:
1077         skip:
1078             size += (size & 1);
1079             if (url_fseek(pb, size, SEEK_CUR) < 0)
1080                 goto the_end; // something is wrong here
1081             break;
1082         }
1083     }
1084  the_end:
1085     url_fseek(pb, pos, SEEK_SET);
1086     return ret;
1087 }
1088
1089 static int avi_read_seek(AVFormatContext *s, int stream_index, int64_t timestamp, int flags)
1090 {
1091     AVIContext *avi = s->priv_data;
1092     AVStream *st;
1093     int i, index;
1094     int64_t pos;
1095     AVIStream *ast;
1096
1097     if (!avi->index_loaded) {
1098         /* we only load the index on demand */
1099         avi_load_index(s);
1100         avi->index_loaded = 1;
1101     }
1102     assert(stream_index>= 0);
1103
1104     st = s->streams[stream_index];
1105     ast= st->priv_data;
1106     index= av_index_search_timestamp(st, timestamp * FFMAX(ast->sample_size, 1), flags);
1107     if(index<0)
1108         return -1;
1109
1110     /* find the position */
1111     pos = st->index_entries[index].pos;
1112     timestamp = st->index_entries[index].timestamp / FFMAX(ast->sample_size, 1);
1113
1114 //    av_log(s, AV_LOG_DEBUG, "XX %"PRId64" %d %"PRId64"\n", timestamp, index, st->index_entries[index].timestamp);
1115
1116     if (CONFIG_DV_DEMUXER && avi->dv_demux) {
1117         /* One and only one real stream for DV in AVI, and it has video  */
1118         /* offsets. Calling with other stream indexes should have failed */
1119         /* the av_index_search_timestamp call above.                     */
1120         assert(stream_index == 0);
1121
1122         /* Feed the DV video stream version of the timestamp to the */
1123         /* DV demux so it can synthesize correct timestamps.        */
1124         dv_offset_reset(avi->dv_demux, timestamp);
1125
1126         url_fseek(s->pb, pos, SEEK_SET);
1127         avi->stream_index= -1;
1128         return 0;
1129     }
1130
1131     for(i = 0; i < s->nb_streams; i++) {
1132         AVStream *st2 = s->streams[i];
1133         AVIStream *ast2 = st2->priv_data;
1134
1135         ast2->packet_size=
1136         ast2->remaining= 0;
1137
1138         if (st2->nb_index_entries <= 0)
1139             continue;
1140
1141 //        assert(st2->codec->block_align);
1142         assert((int64_t)st2->time_base.num*ast2->rate == (int64_t)st2->time_base.den*ast2->scale);
1143         index = av_index_search_timestamp(
1144                 st2,
1145                 av_rescale_q(timestamp, st->time_base, st2->time_base) * FFMAX(ast2->sample_size, 1),
1146                 flags | AVSEEK_FLAG_BACKWARD);
1147         if(index<0)
1148             index=0;
1149
1150         if(!avi->non_interleaved){
1151             while(index>0 && st2->index_entries[index].pos > pos)
1152                 index--;
1153             while(index+1 < st2->nb_index_entries && st2->index_entries[index].pos < pos)
1154                 index++;
1155         }
1156
1157 //        av_log(s, AV_LOG_DEBUG, "%"PRId64" %d %"PRId64"\n", timestamp, index, st2->index_entries[index].timestamp);
1158         /* extract the current frame number */
1159         ast2->frame_offset = st2->index_entries[index].timestamp;
1160     }
1161
1162     /* do the seek */
1163     url_fseek(s->pb, pos, SEEK_SET);
1164     avi->stream_index= -1;
1165     return 0;
1166 }
1167
1168 static int avi_read_close(AVFormatContext *s)
1169 {
1170     int i;
1171     AVIContext *avi = s->priv_data;
1172
1173     for(i=0;i<s->nb_streams;i++) {
1174         AVStream *st = s->streams[i];
1175         av_free(st->codec->palctrl);
1176     }
1177
1178     if (avi->dv_demux)
1179         av_free(avi->dv_demux);
1180
1181     return 0;
1182 }
1183
1184 static int avi_probe(AVProbeData *p)
1185 {
1186     int i;
1187
1188     /* check file header */
1189     for(i=0; avi_headers[i][0]; i++)
1190         if(!memcmp(p->buf  , avi_headers[i]  , 4) &&
1191            !memcmp(p->buf+8, avi_headers[i]+4, 4))
1192             return AVPROBE_SCORE_MAX;
1193
1194     return 0;
1195 }
1196
1197 AVInputFormat avi_demuxer = {
1198     "avi",
1199     NULL_IF_CONFIG_SMALL("AVI format"),
1200     sizeof(AVIContext),
1201     avi_probe,
1202     avi_read_header,
1203     avi_read_packet,
1204     avi_read_close,
1205     avi_read_seek,
1206     .metadata_conv = ff_avi_metadata_conv,
1207 };