fix demuxing of broken MVI_3011.avi
[ffmpeg.git] / libavformat / avidec.c
1 /*
2  * AVI demuxer
3  * Copyright (c) 2001 Fabrice Bellard.
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21 #include "avformat.h"
22 #include "avi.h"
23 #include "dv.h"
24 #include "riff.h"
25
26 #undef NDEBUG
27 #include <assert.h>
28
29 //#define DEBUG
30 //#define DEBUG_SEEK
31
32 typedef struct AVIStream {
33     int64_t frame_offset; /* current frame (video) or byte (audio) counter
34                          (used to compute the pts) */
35     int remaining;
36     int packet_size;
37
38     int scale;
39     int rate;
40     int sample_size; /* size of one sample (or packet) (in the rate/scale sense) in bytes */
41
42     int64_t cum_len; /* temporary storage (used during seek) */
43
44     int prefix;                       ///< normally 'd'<<8 + 'c' or 'w'<<8 + 'b'
45     int prefix_count;
46 } AVIStream;
47
48 typedef struct {
49     int64_t  riff_end;
50     int64_t  movi_end;
51     offset_t movi_list;
52     int index_loaded;
53     int is_odml;
54     int non_interleaved;
55     int stream_index;
56     DVDemuxContext* dv_demux;
57 } AVIContext;
58
59 static int avi_load_index(AVFormatContext *s);
60 static int guess_ni_flag(AVFormatContext *s);
61
62 #ifdef DEBUG
63 static void print_tag(const char *str, unsigned int tag, int size)
64 {
65     printf("%s: tag=%c%c%c%c size=0x%x\n",
66            str, tag & 0xff,
67            (tag >> 8) & 0xff,
68            (tag >> 16) & 0xff,
69            (tag >> 24) & 0xff,
70            size);
71 }
72 #endif
73
74 static int get_riff(AVIContext *avi, ByteIOContext *pb)
75 {
76     uint32_t tag;
77     /* check RIFF header */
78     tag = get_le32(pb);
79
80     if (tag != MKTAG('R', 'I', 'F', 'F'))
81         return -1;
82     avi->riff_end = get_le32(pb);   /* RIFF chunk size */
83     avi->riff_end += url_ftell(pb); /* RIFF chunk end */
84     tag = get_le32(pb);
85     if(tag == MKTAG('A', 'V', 'I', 0x19))
86         av_log(NULL, AV_LOG_INFO, "file has been generated with a totally broken muxer\n");
87     else
88     if (tag != MKTAG('A', 'V', 'I', ' ') && tag != MKTAG('A', 'V', 'I', 'X'))
89         return -1;
90
91     return 0;
92 }
93
94 static int read_braindead_odml_indx(AVFormatContext *s, int frame_num){
95     AVIContext *avi = s->priv_data;
96     ByteIOContext *pb = &s->pb;
97     int longs_pre_entry= get_le16(pb);
98     int index_sub_type = get_byte(pb);
99     int index_type     = get_byte(pb);
100     int entries_in_use = get_le32(pb);
101     int chunk_id       = get_le32(pb);
102     int64_t base       = get_le64(pb);
103     int stream_id= 10*((chunk_id&0xFF) - '0') + (((chunk_id>>8)&0xFF) - '0');
104     AVStream *st;
105     AVIStream *ast;
106     int i;
107     int64_t last_pos= -1;
108     int64_t filesize= url_fsize(&s->pb);
109
110 #ifdef DEBUG_SEEK
111     av_log(s, AV_LOG_ERROR, "longs_pre_entry:%d index_type:%d entries_in_use:%d chunk_id:%X base:%16"PRIX64"\n",
112         longs_pre_entry,index_type, entries_in_use, chunk_id, base);
113 #endif
114
115     if(stream_id > s->nb_streams || stream_id < 0)
116         return -1;
117     st= s->streams[stream_id];
118     ast = st->priv_data;
119
120     if(index_sub_type)
121         return -1;
122
123     get_le32(pb);
124
125     if(index_type && longs_pre_entry != 2)
126         return -1;
127     if(index_type>1)
128         return -1;
129
130     if(filesize > 0 && base >= filesize){
131         av_log(s, AV_LOG_ERROR, "ODML index invalid\n");
132         if(base>>32 == (base & 0xFFFFFFFF) && (base & 0xFFFFFFFF) < filesize && filesize <= 0xFFFFFFFF)
133             base &= 0xFFFFFFFF;
134         else
135             return -1;
136     }
137
138     for(i=0; i<entries_in_use; i++){
139         if(index_type){
140             int64_t pos= get_le32(pb) + base - 8;
141             int len    = get_le32(pb);
142             int key= len >= 0;
143             len &= 0x7FFFFFFF;
144
145 #ifdef DEBUG_SEEK
146             av_log(s, AV_LOG_ERROR, "pos:%"PRId64", len:%X\n", pos, len);
147 #endif
148             if(last_pos == pos || pos == base - 8)
149                 avi->non_interleaved= 1;
150             else
151                 av_add_index_entry(st, pos, ast->cum_len / FFMAX(1, ast->sample_size), len, 0, key ? AVINDEX_KEYFRAME : 0);
152
153             if(ast->sample_size)
154                 ast->cum_len += len;
155             else
156                 ast->cum_len ++;
157             last_pos= pos;
158         }else{
159             int64_t offset, pos;
160             int duration;
161             offset = get_le64(pb);
162             get_le32(pb);       /* size */
163             duration = get_le32(pb);
164             pos = url_ftell(pb);
165
166             url_fseek(pb, offset+8, SEEK_SET);
167             read_braindead_odml_indx(s, frame_num);
168             frame_num += duration;
169
170             url_fseek(pb, pos, SEEK_SET);
171         }
172     }
173     avi->index_loaded=1;
174     return 0;
175 }
176
177 static void clean_index(AVFormatContext *s){
178     int i;
179     int64_t j;
180
181     for(i=0; i<s->nb_streams; i++){
182         AVStream *st = s->streams[i];
183         AVIStream *ast = st->priv_data;
184         int n= st->nb_index_entries;
185         int max= ast->sample_size;
186         int64_t pos, size, ts;
187
188         if(n != 1 || ast->sample_size==0)
189             continue;
190
191         while(max < 1024) max+=max;
192
193         pos= st->index_entries[0].pos;
194         size= st->index_entries[0].size;
195         ts= st->index_entries[0].timestamp;
196
197         for(j=0; j<size; j+=max){
198             av_add_index_entry(st, pos+j, ts + j/ast->sample_size, FFMIN(max, size-j), 0, AVINDEX_KEYFRAME);
199         }
200     }
201 }
202
203 static int avi_read_tag(ByteIOContext *pb, char *buf, int maxlen,  unsigned int size)
204 {
205     offset_t i = url_ftell(pb);
206     size += (size & 1);
207     get_strz(pb, buf, maxlen);
208     url_fseek(pb, i+size, SEEK_SET);
209     return 0;
210 }
211
212 static int avi_read_header(AVFormatContext *s, AVFormatParameters *ap)
213 {
214     AVIContext *avi = s->priv_data;
215     ByteIOContext *pb = &s->pb;
216     uint32_t tag, tag1, handler;
217     int codec_type, stream_index, frame_period, bit_rate;
218     unsigned int size, nb_frames;
219     int i;
220     AVStream *st;
221     AVIStream *ast = NULL;
222     char str_track[4];
223
224     avi->stream_index= -1;
225
226     if (get_riff(avi, pb) < 0)
227         return -1;
228
229     /* first list tag */
230     stream_index = -1;
231     codec_type = -1;
232     frame_period = 0;
233     for(;;) {
234         if (url_feof(pb))
235             goto fail;
236         tag = get_le32(pb);
237         size = get_le32(pb);
238 #ifdef DEBUG
239         print_tag("tag", tag, size);
240 #endif
241
242         switch(tag) {
243         case MKTAG('L', 'I', 'S', 'T'):
244             /* ignored, except when start of video packets */
245             tag1 = get_le32(pb);
246 #ifdef DEBUG
247             print_tag("list", tag1, 0);
248 #endif
249             if (tag1 == MKTAG('m', 'o', 'v', 'i')) {
250                 avi->movi_list = url_ftell(pb) - 4;
251                 if(size) avi->movi_end = avi->movi_list + size + (size & 1);
252                 else     avi->movi_end = url_fsize(pb);
253 #ifdef DEBUG
254                 printf("movi end=%"PRIx64"\n", avi->movi_end);
255 #endif
256                 goto end_of_header;
257             }
258             break;
259         case MKTAG('d', 'm', 'l', 'h'):
260             avi->is_odml = 1;
261             url_fskip(pb, size + (size & 1));
262             break;
263         case MKTAG('a', 'v', 'i', 'h'):
264             /* avi header */
265             /* using frame_period is bad idea */
266             frame_period = get_le32(pb);
267             bit_rate = get_le32(pb) * 8;
268             get_le32(pb);
269             avi->non_interleaved |= get_le32(pb) & AVIF_MUSTUSEINDEX;
270
271             url_fskip(pb, 2 * 4);
272             get_le32(pb);
273
274             url_fskip(pb, size - 7 * 4);
275             break;
276         case MKTAG('s', 't', 'r', 'h'):
277             /* stream header */
278
279             tag1 = get_le32(pb);
280             handler = get_le32(pb); /* codec tag */
281
282             if(tag1 == MKTAG('p', 'a', 'd', 's')){
283                 url_fskip(pb, size - 8);
284                 break;
285             }else{
286                 stream_index++;
287                 st = av_new_stream(s, stream_index);
288                 if (!st)
289                     goto fail;
290
291                 ast = av_mallocz(sizeof(AVIStream));
292                 if (!ast)
293                     goto fail;
294                 st->priv_data = ast;
295             }
296
297 #ifdef DEBUG
298             print_tag("strh", tag1, -1);
299 #endif
300             if(tag1 == MKTAG('i', 'a', 'v', 's') || tag1 == MKTAG('i', 'v', 'a', 's')){
301                 int64_t dv_dur;
302
303                 /*
304                  * After some consideration -- I don't think we
305                  * have to support anything but DV in a type1 AVIs.
306                  */
307                 if (s->nb_streams != 1)
308                     goto fail;
309
310                 if (handler != MKTAG('d', 'v', 's', 'd') &&
311                     handler != MKTAG('d', 'v', 'h', 'd') &&
312                     handler != MKTAG('d', 'v', 's', 'l'))
313                    goto fail;
314
315                 ast = s->streams[0]->priv_data;
316                 av_freep(&s->streams[0]->codec->extradata);
317                 av_freep(&s->streams[0]);
318                 s->nb_streams = 0;
319                 if (ENABLE_DV_DEMUXER) {
320                     avi->dv_demux = dv_init_demux(s);
321                     if (!avi->dv_demux)
322                         goto fail;
323                 }
324                 s->streams[0]->priv_data = ast;
325                 url_fskip(pb, 3 * 4);
326                 ast->scale = get_le32(pb);
327                 ast->rate = get_le32(pb);
328                 url_fskip(pb, 4);  /* start time */
329
330                 dv_dur = get_le32(pb);
331                 if (ast->scale > 0 && ast->rate > 0 && dv_dur > 0) {
332                     dv_dur *= AV_TIME_BASE;
333                     s->duration = av_rescale(dv_dur, ast->scale, ast->rate);
334                 }
335                 /*
336                  * else, leave duration alone; timing estimation in utils.c
337                  *      will make a guess based on bit rate.
338                  */
339
340                 stream_index = s->nb_streams - 1;
341                 url_fskip(pb, size - 9*4);
342                 break;
343             }
344
345             assert(stream_index < s->nb_streams);
346             st->codec->stream_codec_tag= handler;
347
348             get_le32(pb); /* flags */
349             get_le16(pb); /* priority */
350             get_le16(pb); /* language */
351             get_le32(pb); /* initial frame */
352             ast->scale = get_le32(pb);
353             ast->rate = get_le32(pb);
354             if(ast->scale && ast->rate){
355             }else if(frame_period){
356                 ast->rate = 1000000;
357                 ast->scale = frame_period;
358             }else{
359                 ast->rate = 25;
360                 ast->scale = 1;
361             }
362             av_set_pts_info(st, 64, ast->scale, ast->rate);
363
364             ast->cum_len=get_le32(pb); /* start */
365             nb_frames = get_le32(pb);
366
367             st->start_time = 0;
368             st->duration = nb_frames;
369             get_le32(pb); /* buffer size */
370             get_le32(pb); /* quality */
371             ast->sample_size = get_le32(pb); /* sample ssize */
372             ast->cum_len *= FFMAX(1, ast->sample_size);
373 //            av_log(NULL, AV_LOG_DEBUG, "%d %d %d %d\n", ast->rate, ast->scale, ast->start, ast->sample_size);
374
375             switch(tag1) {
376             case MKTAG('v', 'i', 'd', 's'):
377                 codec_type = CODEC_TYPE_VIDEO;
378
379                 ast->sample_size = 0;
380                 break;
381             case MKTAG('a', 'u', 'd', 's'):
382                 codec_type = CODEC_TYPE_AUDIO;
383                 break;
384             case MKTAG('t', 'x', 't', 's'):
385                 //FIXME
386                 codec_type = CODEC_TYPE_DATA; //CODEC_TYPE_SUB ?  FIXME
387                 break;
388             default:
389                 av_log(s, AV_LOG_ERROR, "unknown stream type %X\n", tag1);
390                 goto fail;
391             }
392             ast->frame_offset= ast->cum_len;
393             url_fskip(pb, size - 12 * 4);
394             break;
395         case MKTAG('s', 't', 'r', 'f'):
396             /* stream header */
397             if (stream_index >= (unsigned)s->nb_streams || avi->dv_demux) {
398                 url_fskip(pb, size);
399             } else {
400                 st = s->streams[stream_index];
401                 switch(codec_type) {
402                 case CODEC_TYPE_VIDEO:
403                     get_le32(pb); /* size */
404                     st->codec->width = get_le32(pb);
405                     st->codec->height = get_le32(pb);
406                     get_le16(pb); /* panes */
407                     st->codec->bits_per_sample= get_le16(pb); /* depth */
408                     tag1 = get_le32(pb);
409                     get_le32(pb); /* ImageSize */
410                     get_le32(pb); /* XPelsPerMeter */
411                     get_le32(pb); /* YPelsPerMeter */
412                     get_le32(pb); /* ClrUsed */
413                     get_le32(pb); /* ClrImportant */
414
415                     if(size > 10*4 && size<(1<<30)){
416                         st->codec->extradata_size= size - 10*4;
417                         st->codec->extradata= av_malloc(st->codec->extradata_size + FF_INPUT_BUFFER_PADDING_SIZE);
418                         get_buffer(pb, st->codec->extradata, st->codec->extradata_size);
419                     }
420
421                     if(st->codec->extradata_size & 1) //FIXME check if the encoder really did this correctly
422                         get_byte(pb);
423
424                     /* Extract palette from extradata if bpp <= 8 */
425                     /* This code assumes that extradata contains only palette */
426                     /* This is true for all paletted codecs implemented in ffmpeg */
427                     if (st->codec->extradata_size && (st->codec->bits_per_sample <= 8)) {
428                         st->codec->palctrl = av_mallocz(sizeof(AVPaletteControl));
429 #ifdef WORDS_BIGENDIAN
430                         for (i = 0; i < FFMIN(st->codec->extradata_size, AVPALETTE_SIZE)/4; i++)
431                             st->codec->palctrl->palette[i] = bswap_32(((uint32_t*)st->codec->extradata)[i]);
432 #else
433                         memcpy(st->codec->palctrl->palette, st->codec->extradata,
434                                FFMIN(st->codec->extradata_size, AVPALETTE_SIZE));
435 #endif
436                         st->codec->palctrl->palette_changed = 1;
437                     }
438
439 #ifdef DEBUG
440                     print_tag("video", tag1, 0);
441 #endif
442                     st->codec->codec_type = CODEC_TYPE_VIDEO;
443                     st->codec->codec_tag = tag1;
444                     st->codec->codec_id = codec_get_id(codec_bmp_tags, tag1);
445                     st->need_parsing = 2; //only parse headers dont do slower repacketization, this is needed to get the pict type which is needed for generating correct pts
446 //                    url_fskip(pb, size - 5 * 4);
447                     break;
448                 case CODEC_TYPE_AUDIO:
449                     get_wav_header(pb, st->codec, size);
450                     if(ast->sample_size && st->codec->block_align && ast->sample_size % st->codec->block_align)
451                         av_log(s, AV_LOG_DEBUG, "invalid sample size or block align detected\n");
452                     if (size%2) /* 2-aligned (fix for Stargate SG-1 - 3x18 - Shades of Grey.avi) */
453                         url_fskip(pb, 1);
454                     /* Force parsing as several audio frames can be in
455                      * one packet. */
456                     st->need_parsing = 1;
457                     /* ADTS header is in extradata, AAC without header must be stored as exact frames, parser not needed and it will fail */
458                     if (st->codec->codec_id == CODEC_ID_AAC && st->codec->extradata_size)
459                         st->need_parsing = 0;
460                     /* AVI files with Xan DPCM audio (wrongly) declare PCM
461                      * audio in the header but have Axan as stream_code_tag. */
462                     if (st->codec->stream_codec_tag == ff_get_fourcc("Axan")){
463                         st->codec->codec_id  = CODEC_ID_XAN_DPCM;
464                         st->codec->codec_tag = 0;
465                     }
466                     break;
467                 default:
468                     st->codec->codec_type = CODEC_TYPE_DATA;
469                     st->codec->codec_id= CODEC_ID_NONE;
470                     st->codec->codec_tag= 0;
471                     url_fskip(pb, size);
472                     break;
473                 }
474             }
475             break;
476         case MKTAG('i', 'n', 'd', 'x'):
477             i= url_ftell(pb);
478             if(!url_is_streamed(pb) && !(s->flags & AVFMT_FLAG_IGNIDX)){
479                 read_braindead_odml_indx(s, 0);
480             }
481             url_fseek(pb, i+size, SEEK_SET);
482             break;
483         case MKTAG('I', 'N', 'A', 'M'):
484             avi_read_tag(pb, s->title, sizeof(s->title), size);
485             break;
486         case MKTAG('I', 'A', 'R', 'T'):
487             avi_read_tag(pb, s->author, sizeof(s->author), size);
488             break;
489         case MKTAG('I', 'C', 'O', 'P'):
490             avi_read_tag(pb, s->copyright, sizeof(s->copyright), size);
491             break;
492         case MKTAG('I', 'C', 'M', 'T'):
493             avi_read_tag(pb, s->comment, sizeof(s->comment), size);
494             break;
495         case MKTAG('I', 'G', 'N', 'R'):
496             avi_read_tag(pb, s->genre, sizeof(s->genre), size);
497             break;
498         case MKTAG('I', 'P', 'R', 'D'):
499             avi_read_tag(pb, s->album, sizeof(s->album), size);
500             break;
501         case MKTAG('I', 'P', 'R', 'T'):
502             avi_read_tag(pb, str_track, sizeof(str_track), size);
503             sscanf(str_track, "%d", &s->track);
504             break;
505         default:
506             if(size > 1000000){
507                 av_log(s, AV_LOG_ERROR, "well something went wrong during header parsing, "
508                                         "ill ignore it and try to continue anyway\n");
509                 avi->movi_list = url_ftell(pb) - 4;
510                 avi->movi_end  = url_fsize(pb);
511                 goto end_of_header;
512             }
513             /* skip tag */
514             size += (size & 1);
515             url_fskip(pb, size);
516             break;
517         }
518     }
519  end_of_header:
520     /* check stream number */
521     if (stream_index != s->nb_streams - 1) {
522     fail:
523         for(i=0;i<s->nb_streams;i++) {
524             av_freep(&s->streams[i]->codec->extradata);
525             av_freep(&s->streams[i]);
526         }
527         return -1;
528     }
529
530     if(!avi->index_loaded && !url_is_streamed(pb))
531         avi_load_index(s);
532     avi->index_loaded = 1;
533     avi->non_interleaved |= guess_ni_flag(s);
534     if(avi->non_interleaved)
535         clean_index(s);
536
537     return 0;
538 }
539
540 static int avi_read_packet(AVFormatContext *s, AVPacket *pkt)
541 {
542     AVIContext *avi = s->priv_data;
543     ByteIOContext *pb = &s->pb;
544     int n, d[8], size;
545     offset_t i, sync;
546     void* dstr;
547
548     if (ENABLE_DV_DEMUXER && avi->dv_demux) {
549         size = dv_get_packet(avi->dv_demux, pkt);
550         if (size >= 0)
551             return size;
552     }
553
554     if(avi->non_interleaved){
555         int best_stream_index = 0;
556         AVStream *best_st= NULL;
557         AVIStream *best_ast;
558         int64_t best_ts= INT64_MAX;
559         int i;
560
561         for(i=0; i<s->nb_streams; i++){
562             AVStream *st = s->streams[i];
563             AVIStream *ast = st->priv_data;
564             int64_t ts= ast->frame_offset;
565
566             if(ast->sample_size)
567                 ts /= ast->sample_size;
568             ts= av_rescale(ts, AV_TIME_BASE * (int64_t)st->time_base.num, st->time_base.den);
569
570 //            av_log(NULL, AV_LOG_DEBUG, "%"PRId64" %d/%d %"PRId64"\n", ts, st->time_base.num, st->time_base.den, ast->frame_offset);
571             if(ts < best_ts){
572                 best_ts= ts;
573                 best_st= st;
574                 best_stream_index= i;
575             }
576         }
577         best_ast = best_st->priv_data;
578         best_ts= av_rescale(best_ts, best_st->time_base.den, AV_TIME_BASE * (int64_t)best_st->time_base.num); //FIXME a little ugly
579         if(best_ast->remaining)
580             i= av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY | AVSEEK_FLAG_BACKWARD);
581         else
582             i= av_index_search_timestamp(best_st, best_ts, AVSEEK_FLAG_ANY);
583
584 //        av_log(NULL, AV_LOG_DEBUG, "%d\n", i);
585         if(i>=0){
586             int64_t pos= best_st->index_entries[i].pos;
587             pos += best_ast->packet_size - best_ast->remaining;
588             url_fseek(&s->pb, pos + 8, SEEK_SET);
589 //        av_log(NULL, AV_LOG_DEBUG, "pos=%"PRId64"\n", pos);
590
591             assert(best_ast->remaining <= best_ast->packet_size);
592
593             avi->stream_index= best_stream_index;
594             if(!best_ast->remaining)
595                 best_ast->packet_size=
596                 best_ast->remaining= best_st->index_entries[i].size;
597         }
598     }
599
600 resync:
601     if(avi->stream_index >= 0){
602         AVStream *st= s->streams[ avi->stream_index ];
603         AVIStream *ast= st->priv_data;
604         int size;
605
606         if(ast->sample_size <= 1) // minorityreport.AVI block_align=1024 sample_size=1 IMA-ADPCM
607             size= INT_MAX;
608         else if(ast->sample_size < 32)
609             size= 64*ast->sample_size;
610         else
611             size= ast->sample_size;
612
613         if(size > ast->remaining)
614             size= ast->remaining;
615         av_get_packet(pb, pkt, size);
616
617         if (ENABLE_DV_DEMUXER && avi->dv_demux) {
618             dstr = pkt->destruct;
619             size = dv_produce_packet(avi->dv_demux, pkt,
620                                     pkt->data, pkt->size);
621             pkt->destruct = dstr;
622             pkt->flags |= PKT_FLAG_KEY;
623         } else {
624             /* XXX: how to handle B frames in avi ? */
625             pkt->dts = ast->frame_offset;
626 //                pkt->dts += ast->start;
627             if(ast->sample_size)
628                 pkt->dts /= ast->sample_size;
629 //av_log(NULL, AV_LOG_DEBUG, "dts:%"PRId64" offset:%"PRId64" %d/%d smpl_siz:%d base:%d st:%d size:%d\n", pkt->dts, ast->frame_offset, ast->scale, ast->rate, ast->sample_size, AV_TIME_BASE, avi->stream_index, size);
630             pkt->stream_index = avi->stream_index;
631
632             if (st->codec->codec_type == CODEC_TYPE_VIDEO) {
633                 AVIndexEntry *e;
634                 int index;
635                 assert(st->index_entries);
636
637                 index= av_index_search_timestamp(st, pkt->dts, 0);
638                 e= &st->index_entries[index];
639
640                 if(index >= 0 && e->timestamp == ast->frame_offset){
641                     if (e->flags & AVINDEX_KEYFRAME)
642                         pkt->flags |= PKT_FLAG_KEY;
643                 }
644             } else {
645                 pkt->flags |= PKT_FLAG_KEY;
646             }
647             if(ast->sample_size)
648                 ast->frame_offset += pkt->size;
649             else
650                 ast->frame_offset++;
651         }
652         ast->remaining -= size;
653         if(!ast->remaining){
654             avi->stream_index= -1;
655             ast->packet_size= 0;
656         }
657
658         return size;
659     }
660
661     memset(d, -1, sizeof(int)*8);
662     for(i=sync=url_ftell(pb); !url_feof(pb); i++) {
663         int j;
664
665         if (i >= avi->movi_end) {
666             if (avi->is_odml) {
667                 url_fskip(pb, avi->riff_end - i);
668                 avi->riff_end = avi->movi_end = url_fsize(pb);
669             } else
670                 break;
671         }
672
673         for(j=0; j<7; j++)
674             d[j]= d[j+1];
675         d[7]= get_byte(pb);
676
677         size= d[4] + (d[5]<<8) + (d[6]<<16) + (d[7]<<24);
678
679         if(    d[2] >= '0' && d[2] <= '9'
680             && d[3] >= '0' && d[3] <= '9'){
681             n= (d[2] - '0') * 10 + (d[3] - '0');
682         }else{
683             n= 100; //invalid stream id
684         }
685 //av_log(NULL, AV_LOG_DEBUG, "%X %X %X %X %X %X %X %X %"PRId64" %d %d\n", d[0], d[1], d[2], d[3], d[4], d[5], d[6], d[7], i, size, n);
686         if(i + size > avi->movi_end || d[0]<0)
687             continue;
688
689         //parse ix##
690         if(  (d[0] == 'i' && d[1] == 'x' && n < s->nb_streams)
691         //parse JUNK
692            ||(d[0] == 'J' && d[1] == 'U' && d[2] == 'N' && d[3] == 'K')){
693             url_fskip(pb, size);
694 //av_log(NULL, AV_LOG_DEBUG, "SKIP\n");
695             goto resync;
696         }
697
698         if(    d[0] >= '0' && d[0] <= '9'
699             && d[1] >= '0' && d[1] <= '9'){
700             n= (d[0] - '0') * 10 + (d[1] - '0');
701         }else{
702             n= 100; //invalid stream id
703         }
704
705         //parse ##dc/##wb
706         if(n < s->nb_streams){
707           AVStream *st;
708           AVIStream *ast;
709           st = s->streams[n];
710           ast = st->priv_data;
711
712           if(   (st->discard >= AVDISCARD_DEFAULT && size==0)
713              /*|| (st->discard >= AVDISCARD_NONKEY && !(pkt->flags & PKT_FLAG_KEY))*/ //FIXME needs a little reordering
714              || st->discard >= AVDISCARD_ALL){
715                 if(ast->sample_size) ast->frame_offset += pkt->size;
716                 else                 ast->frame_offset++;
717                 url_fskip(pb, size);
718                 goto resync;
719           }
720
721           if(   ((ast->prefix_count<5 || sync+9 > i) && d[2]<128 && d[3]<128) ||
722                 d[2]*256+d[3] == ast->prefix /*||
723                 (d[2] == 'd' && d[3] == 'c') ||
724                 (d[2] == 'w' && d[3] == 'b')*/) {
725
726 //av_log(NULL, AV_LOG_DEBUG, "OK\n");
727             if(d[2]*256+d[3] == ast->prefix)
728                 ast->prefix_count++;
729             else{
730                 ast->prefix= d[2]*256+d[3];
731                 ast->prefix_count= 0;
732             }
733
734             avi->stream_index= n;
735             ast->packet_size= size + 8;
736             ast->remaining= size;
737
738             {
739                 uint64_t pos= url_ftell(pb) - 8;
740                 if(!st->index_entries || !st->nb_index_entries || st->index_entries[st->nb_index_entries - 1].pos < pos){
741                     av_add_index_entry(st, pos, ast->frame_offset / FFMAX(1, ast->sample_size), size, 0, AVINDEX_KEYFRAME);
742                 }
743             }
744             goto resync;
745           }
746         }
747         /* palette changed chunk */
748         if (   d[0] >= '0' && d[0] <= '9'
749             && d[1] >= '0' && d[1] <= '9'
750             && ((d[2] == 'p' && d[3] == 'c'))
751             && n < s->nb_streams && i + size <= avi->movi_end) {
752
753             AVStream *st;
754             int first, clr, flags, k, p;
755
756             st = s->streams[n];
757
758             first = get_byte(pb);
759             clr = get_byte(pb);
760             if(!clr) /* all 256 colors used */
761                 clr = 256;
762             flags = get_le16(pb);
763             p = 4;
764             for (k = first; k < clr + first; k++) {
765                 int r, g, b;
766                 r = get_byte(pb);
767                 g = get_byte(pb);
768                 b = get_byte(pb);
769                     get_byte(pb);
770                 st->codec->palctrl->palette[k] = b + (g << 8) + (r << 16);
771             }
772             st->codec->palctrl->palette_changed = 1;
773             goto resync;
774         }
775
776     }
777
778     return -1;
779 }
780
781 /* XXX: we make the implicit supposition that the position are sorted
782    for each stream */
783 static int avi_read_idx1(AVFormatContext *s, int size)
784 {
785     AVIContext *avi = s->priv_data;
786     ByteIOContext *pb = &s->pb;
787     int nb_index_entries, i;
788     AVStream *st;
789     AVIStream *ast;
790     unsigned int index, tag, flags, pos, len;
791     unsigned last_pos= -1;
792
793     nb_index_entries = size / 16;
794     if (nb_index_entries <= 0)
795         return -1;
796
797     /* read the entries and sort them in each stream component */
798     for(i = 0; i < nb_index_entries; i++) {
799         tag = get_le32(pb);
800         flags = get_le32(pb);
801         pos = get_le32(pb);
802         len = get_le32(pb);
803 #if defined(DEBUG_SEEK)
804         av_log(NULL, AV_LOG_DEBUG, "%d: tag=0x%x flags=0x%x pos=0x%x len=%d/",
805                i, tag, flags, pos, len);
806 #endif
807         if(i==0 && pos > avi->movi_list)
808             avi->movi_list= 0; //FIXME better check
809         pos += avi->movi_list;
810
811         index = ((tag & 0xff) - '0') * 10;
812         index += ((tag >> 8) & 0xff) - '0';
813         if (index >= s->nb_streams)
814             continue;
815         st = s->streams[index];
816         ast = st->priv_data;
817
818 #if defined(DEBUG_SEEK)
819         av_log(NULL, AV_LOG_DEBUG, "%d cum_len=%"PRId64"\n", len, ast->cum_len);
820 #endif
821         if(last_pos == pos)
822             avi->non_interleaved= 1;
823         else
824             av_add_index_entry(st, pos, ast->cum_len / FFMAX(1, ast->sample_size), len, 0, (flags&AVIIF_INDEX) ? AVINDEX_KEYFRAME : 0);
825         if(ast->sample_size)
826             ast->cum_len += len;
827         else
828             ast->cum_len ++;
829         last_pos= pos;
830     }
831     return 0;
832 }
833
834 static int guess_ni_flag(AVFormatContext *s){
835     int i;
836     int64_t last_start=0;
837     int64_t first_end= INT64_MAX;
838
839     for(i=0; i<s->nb_streams; i++){
840         AVStream *st = s->streams[i];
841         int n= st->nb_index_entries;
842
843         if(n <= 0)
844             continue;
845
846         if(st->index_entries[0].pos > last_start)
847             last_start= st->index_entries[0].pos;
848         if(st->index_entries[n-1].pos < first_end)
849             first_end= st->index_entries[n-1].pos;
850     }
851     return last_start > first_end;
852 }
853
854 static int avi_load_index(AVFormatContext *s)
855 {
856     AVIContext *avi = s->priv_data;
857     ByteIOContext *pb = &s->pb;
858     uint32_t tag, size;
859     offset_t pos= url_ftell(pb);
860
861     url_fseek(pb, avi->movi_end, SEEK_SET);
862 #ifdef DEBUG_SEEK
863     printf("movi_end=0x%"PRIx64"\n", avi->movi_end);
864 #endif
865     for(;;) {
866         if (url_feof(pb))
867             break;
868         tag = get_le32(pb);
869         size = get_le32(pb);
870 #ifdef DEBUG_SEEK
871         printf("tag=%c%c%c%c size=0x%x\n",
872                tag & 0xff,
873                (tag >> 8) & 0xff,
874                (tag >> 16) & 0xff,
875                (tag >> 24) & 0xff,
876                size);
877 #endif
878         switch(tag) {
879         case MKTAG('i', 'd', 'x', '1'):
880             if (avi_read_idx1(s, size) < 0)
881                 goto skip;
882             else
883                 goto the_end;
884             break;
885         default:
886         skip:
887             size += (size & 1);
888             url_fskip(pb, size);
889             break;
890         }
891     }
892  the_end:
893     url_fseek(pb, pos, SEEK_SET);
894     return 0;
895 }
896
897 static int avi_read_seek(AVFormatContext *s, int stream_index, int64_t timestamp, int flags)
898 {
899     AVIContext *avi = s->priv_data;
900     AVStream *st;
901     int i, index;
902     int64_t pos;
903
904     if (!avi->index_loaded) {
905         /* we only load the index on demand */
906         avi_load_index(s);
907         avi->index_loaded = 1;
908     }
909     assert(stream_index>= 0);
910
911     st = s->streams[stream_index];
912     index= av_index_search_timestamp(st, timestamp, flags);
913     if(index<0)
914         return -1;
915
916     /* find the position */
917     pos = st->index_entries[index].pos;
918     timestamp = st->index_entries[index].timestamp;
919
920 //    av_log(NULL, AV_LOG_DEBUG, "XX %"PRId64" %d %"PRId64"\n", timestamp, index, st->index_entries[index].timestamp);
921
922     if (ENABLE_DV_DEMUXER && avi->dv_demux) {
923         /* One and only one real stream for DV in AVI, and it has video  */
924         /* offsets. Calling with other stream indices should have failed */
925         /* the av_index_search_timestamp call above.                     */
926         assert(stream_index == 0);
927
928         /* Feed the DV video stream version of the timestamp to the */
929         /* DV demux so it can synth correct timestamps              */
930         dv_offset_reset(avi->dv_demux, timestamp);
931
932         url_fseek(&s->pb, pos, SEEK_SET);
933         avi->stream_index= -1;
934         return 0;
935     }
936
937     for(i = 0; i < s->nb_streams; i++) {
938         AVStream *st2 = s->streams[i];
939         AVIStream *ast2 = st2->priv_data;
940
941         ast2->packet_size=
942         ast2->remaining= 0;
943
944         if (st2->nb_index_entries <= 0)
945             continue;
946
947 //        assert(st2->codec->block_align);
948         assert(st2->time_base.den == ast2->rate);
949         assert(st2->time_base.num == ast2->scale);
950         index = av_index_search_timestamp(
951                 st2,
952                 av_rescale(timestamp, st2->time_base.den*(int64_t)st->time_base.num, st->time_base.den * (int64_t)st2->time_base.num),
953                 flags | AVSEEK_FLAG_BACKWARD);
954         if(index<0)
955             index=0;
956
957         if(!avi->non_interleaved){
958             while(index>0 && st2->index_entries[index].pos > pos)
959                 index--;
960             while(index+1 < st2->nb_index_entries && st2->index_entries[index].pos < pos)
961                 index++;
962         }
963
964 //        av_log(NULL, AV_LOG_DEBUG, "%"PRId64" %d %"PRId64"\n", timestamp, index, st2->index_entries[index].timestamp);
965         /* extract the current frame number */
966         ast2->frame_offset = st2->index_entries[index].timestamp;
967         if(ast2->sample_size)
968             ast2->frame_offset *=ast2->sample_size;
969     }
970
971     /* do the seek */
972     url_fseek(&s->pb, pos, SEEK_SET);
973     avi->stream_index= -1;
974     return 0;
975 }
976
977 static int avi_read_close(AVFormatContext *s)
978 {
979     int i;
980     AVIContext *avi = s->priv_data;
981
982     for(i=0;i<s->nb_streams;i++) {
983         AVStream *st = s->streams[i];
984         AVIStream *ast = st->priv_data;
985         av_free(ast);
986         av_free(st->codec->palctrl);
987     }
988
989     if (avi->dv_demux)
990         av_free(avi->dv_demux);
991
992     return 0;
993 }
994
995 static int avi_probe(AVProbeData *p)
996 {
997     /* check file header */
998     if (p->buf_size <= 32)
999         return 0;
1000     if (p->buf[0] == 'R' && p->buf[1] == 'I' &&
1001         p->buf[2] == 'F' && p->buf[3] == 'F' &&
1002         p->buf[8] == 'A' && p->buf[9] == 'V' &&
1003         p->buf[10] == 'I' && (p->buf[11] == ' ' || p->buf[11] == 0x19))
1004         return AVPROBE_SCORE_MAX;
1005     else
1006         return 0;
1007 }
1008
1009 AVInputFormat avi_demuxer = {
1010     "avi",
1011     "avi format",
1012     sizeof(AVIContext),
1013     avi_probe,
1014     avi_read_header,
1015     avi_read_packet,
1016     avi_read_close,
1017     avi_read_seek,
1018 };