419e4b809b35e535534b7202c2e2f3ead4877d9d
[ffmpeg.git] / libavformat / mov.c
1 /*
2  * MOV demuxer
3  * Copyright (c) 2001 Fabrice Bellard.
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include <limits.h>
23
24 //#define DEBUG
25
26 #include "avformat.h"
27 #include "riff.h"
28 #include "isom.h"
29 #include "dv.h"
30
31 #ifdef CONFIG_ZLIB
32 #include <zlib.h>
33 #endif
34
35 /*
36  * First version by Francois Revol revol@free.fr
37  * Seek function by Gael Chardon gael.dev@4now.net
38  *
39  * Features and limitations:
40  * - reads most of the QT files I have (at least the structure),
41  *   Sample QuickTime files with mp3 audio can be found at: http://www.3ivx.com/showcase.html
42  * - the code is quite ugly... maybe I won't do it recursive next time :-)
43  *
44  * Funny I didn't know about http://sourceforge.net/projects/qt-ffmpeg/
45  * when coding this :) (it's a writer anyway)
46  *
47  * Reference documents:
48  * http://www.geocities.com/xhelmboyx/quicktime/formats/qtm-layout.txt
49  * Apple:
50  *  http://developer.apple.com/documentation/QuickTime/QTFF/
51  *  http://developer.apple.com/documentation/QuickTime/QTFF/qtff.pdf
52  * QuickTime is a trademark of Apple (AFAIK :))
53  */
54
55 #include "qtpalette.h"
56
57
58 #undef NDEBUG
59 #include <assert.h>
60
61 /* the QuickTime file format is quite convoluted...
62  * it has lots of index tables, each indexing something in another one...
63  * Here we just use what is needed to read the chunks
64  */
65
66 typedef struct {
67     int first;
68     int count;
69     int id;
70 } MOV_stsc_t;
71
72 typedef struct {
73     uint32_t type;
74     char *path;
75 } MOV_dref_t;
76
77 typedef struct {
78     uint32_t type;
79     int64_t offset;
80     int64_t size; /* total size (excluding the size and type fields) */
81 } MOV_atom_t;
82
83 struct MOVParseTableEntry;
84
85 typedef struct MOVStreamContext {
86     ByteIOContext *pb;
87     int ffindex; /* the ffmpeg stream id */
88     int next_chunk;
89     unsigned int chunk_count;
90     int64_t *chunk_offsets;
91     unsigned int stts_count;
92     MOV_stts_t *stts_data;
93     unsigned int ctts_count;
94     MOV_stts_t *ctts_data;
95     unsigned int edit_count; /* number of 'edit' (elst atom) */
96     unsigned int sample_to_chunk_sz;
97     MOV_stsc_t *sample_to_chunk;
98     int sample_to_ctime_index;
99     int sample_to_ctime_sample;
100     unsigned int sample_size;
101     unsigned int sample_count;
102     int *sample_sizes;
103     unsigned int keyframe_count;
104     int *keyframes;
105     int time_scale;
106     int time_rate;
107     int current_sample;
108     unsigned int bytes_per_frame;
109     unsigned int samples_per_frame;
110     int dv_audio_container;
111     int pseudo_stream_id;
112     int16_t audio_cid; ///< stsd audio compression id
113     unsigned drefs_count;
114     MOV_dref_t *drefs;
115     int dref_id;
116 } MOVStreamContext;
117
118 typedef struct MOVContext {
119     AVFormatContext *fc;
120     int time_scale;
121     int64_t duration; /* duration of the longest track */
122     int found_moov; /* when both 'moov' and 'mdat' sections has been found */
123     int found_mdat; /* we suppose we have enough data to read the file */
124     AVPaletteControl palette_control;
125     DVDemuxContext *dv_demux;
126     AVFormatContext *dv_fctx;
127     int isom; /* 1 if file is ISO Media (mp4/3gp) */
128 } MOVContext;
129
130
131 /* XXX: it's the first time I make a recursive parser I think... sorry if it's ugly :P */
132
133 /* those functions parse an atom */
134 /* return code:
135  1: found what I wanted, exit
136  0: continue to parse next atom
137  -1: error occured, exit
138  */
139 /* links atom IDs to parse functions */
140 typedef struct MOVParseTableEntry {
141     uint32_t type;
142     int (*parse)(MOVContext *ctx, ByteIOContext *pb, MOV_atom_t atom);
143 } MOVParseTableEntry;
144
145 static const MOVParseTableEntry mov_default_parse_table[];
146
147 static int mov_read_default(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
148 {
149     int64_t total_size = 0;
150     MOV_atom_t a;
151     int i;
152     int err = 0;
153
154     a.offset = atom.offset;
155
156     if (atom.size < 0)
157         atom.size = INT64_MAX;
158     while(((total_size + 8) < atom.size) && !url_feof(pb) && !err) {
159         a.size = atom.size;
160         a.type=0;
161         if(atom.size >= 8) {
162             a.size = get_be32(pb);
163             a.type = get_le32(pb);
164         }
165         total_size += 8;
166         a.offset += 8;
167         dprintf(c->fc, "type: %08x  %.4s  sz: %"PRIx64"  %"PRIx64"   %"PRIx64"\n",
168                 a.type, (char*)&a.type, a.size, atom.size, total_size);
169         if (a.size == 1) { /* 64 bit extended size */
170             a.size = get_be64(pb) - 8;
171             a.offset += 8;
172             total_size += 8;
173         }
174         if (a.size == 0) {
175             a.size = atom.size - total_size;
176             if (a.size <= 8)
177                 break;
178         }
179         a.size -= 8;
180         if(a.size < 0)
181             break;
182         a.size = FFMIN(a.size, atom.size - total_size);
183
184         for (i = 0; mov_default_parse_table[i].type != 0
185              && mov_default_parse_table[i].type != a.type; i++)
186             /* empty */;
187
188         if (mov_default_parse_table[i].type == 0) { /* skip leaf atoms data */
189             url_fskip(pb, a.size);
190         } else {
191             offset_t start_pos = url_ftell(pb);
192             int64_t left;
193             err = mov_default_parse_table[i].parse(c, pb, a);
194             if (c->found_moov && c->found_mdat)
195                 break;
196             left = a.size - url_ftell(pb) + start_pos;
197             if (left > 0) /* skip garbage at atom end */
198                 url_fskip(pb, left);
199         }
200
201         a.offset += a.size;
202         total_size += a.size;
203     }
204
205     if (!err && total_size < atom.size && atom.size < 0x7ffff) {
206         url_fskip(pb, atom.size - total_size);
207     }
208
209     return err;
210 }
211
212 static int mov_read_dref(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
213 {
214     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
215     MOVStreamContext *sc = st->priv_data;
216     int entries, i, j;
217
218     get_be32(pb); // version + flags
219     entries = get_be32(pb);
220     if (entries >= UINT_MAX / sizeof(*sc->drefs))
221         return -1;
222     sc->drefs_count = entries;
223     sc->drefs = av_mallocz(entries * sizeof(*sc->drefs));
224
225     for (i = 0; i < sc->drefs_count; i++) {
226         MOV_dref_t *dref = &sc->drefs[i];
227         uint32_t size = get_be32(pb);
228         offset_t next = url_ftell(pb) + size - 4;
229
230         dref->type = get_le32(pb);
231         get_be32(pb); // version + flags
232         dprintf(c->fc, "type %.4s size %d\n", (char*)&dref->type, size);
233
234         if (dref->type == MKTAG('a','l','i','s') && size > 150) {
235             /* macintosh alias record */
236             uint16_t volume_len, len;
237             char volume[28];
238             int16_t type;
239
240             url_fskip(pb, 10);
241
242             volume_len = get_byte(pb);
243             volume_len = FFMIN(volume_len, 27);
244             get_buffer(pb, volume, 27);
245             volume[volume_len] = 0;
246             av_log(c->fc, AV_LOG_DEBUG, "volume %s, len %d\n", volume, volume_len);
247
248             url_fskip(pb, 112);
249
250             for (type = 0; type != -1 && url_ftell(pb) < next; ) {
251                 type = get_be16(pb);
252                 len = get_be16(pb);
253                 av_log(c->fc, AV_LOG_DEBUG, "type %d, len %d\n", type, len);
254                 if (len&1)
255                     len += 1;
256                 if (type == 2) { // absolute path
257                     av_free(dref->path);
258                     dref->path = av_mallocz(len+1);
259                     if (!dref->path)
260                         return AVERROR(ENOMEM);
261                     get_buffer(pb, dref->path, len);
262                     if (len > volume_len && !strncmp(dref->path, volume, volume_len)) {
263                         len -= volume_len;
264                         memmove(dref->path, dref->path+volume_len, len);
265                         dref->path[len] = 0;
266                     }
267                     for (j = 0; j < len; j++)
268                         if (dref->path[j] == ':')
269                             dref->path[j] = '/';
270                     av_log(c->fc, AV_LOG_DEBUG, "path %s\n", dref->path);
271                 } else
272                     url_fskip(pb, len);
273             }
274         }
275         url_fseek(pb, next, SEEK_SET);
276     }
277     return 0;
278 }
279
280 static int mov_read_hdlr(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
281 {
282     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
283     uint32_t type;
284     uint32_t ctype;
285
286     get_byte(pb); /* version */
287     get_be24(pb); /* flags */
288
289     /* component type */
290     ctype = get_le32(pb);
291     type = get_le32(pb); /* component subtype */
292
293     dprintf(c->fc, "ctype= %c%c%c%c (0x%08x)\n", *((char *)&ctype), ((char *)&ctype)[1],
294             ((char *)&ctype)[2], ((char *)&ctype)[3], (int) ctype);
295     dprintf(c->fc, "stype= %c%c%c%c\n",
296             *((char *)&type), ((char *)&type)[1], ((char *)&type)[2], ((char *)&type)[3]);
297     if(!ctype)
298         c->isom = 1;
299     if(type == MKTAG('v', 'i', 'd', 'e'))
300         st->codec->codec_type = CODEC_TYPE_VIDEO;
301     else if(type == MKTAG('s', 'o', 'u', 'n'))
302         st->codec->codec_type = CODEC_TYPE_AUDIO;
303     else if(type == MKTAG('m', '1', 'a', ' '))
304         st->codec->codec_id = CODEC_ID_MP2;
305     else if(type == MKTAG('s', 'u', 'b', 'p')) {
306         st->codec->codec_type = CODEC_TYPE_SUBTITLE;
307     }
308     get_be32(pb); /* component  manufacture */
309     get_be32(pb); /* component flags */
310     get_be32(pb); /* component flags mask */
311
312     if(atom.size <= 24)
313         return 0; /* nothing left to read */
314
315     url_fskip(pb, atom.size - (url_ftell(pb) - atom.offset));
316     return 0;
317 }
318
319 static int mp4_read_descr_len(ByteIOContext *pb)
320 {
321     int len = 0;
322     int count = 4;
323     while (count--) {
324         int c = get_byte(pb);
325         len = (len << 7) | (c & 0x7f);
326         if (!(c & 0x80))
327             break;
328     }
329     return len;
330 }
331
332 static int mp4_read_descr(MOVContext *c, ByteIOContext *pb, int *tag)
333 {
334     int len;
335     *tag = get_byte(pb);
336     len = mp4_read_descr_len(pb);
337     dprintf(c->fc, "MPEG4 description: tag=0x%02x len=%d\n", *tag, len);
338     return len;
339 }
340
341 #define MP4ESDescrTag                   0x03
342 #define MP4DecConfigDescrTag            0x04
343 #define MP4DecSpecificDescrTag          0x05
344
345 static int mov_read_esds(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
346 {
347     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
348     int tag, len;
349
350     get_be32(pb); /* version + flags */
351     len = mp4_read_descr(c, pb, &tag);
352     if (tag == MP4ESDescrTag) {
353         get_be16(pb); /* ID */
354         get_byte(pb); /* priority */
355     } else
356         get_be16(pb); /* ID */
357
358     len = mp4_read_descr(c, pb, &tag);
359     if (tag == MP4DecConfigDescrTag) {
360         int object_type_id = get_byte(pb);
361         get_byte(pb); /* stream type */
362         get_be24(pb); /* buffer size db */
363         get_be32(pb); /* max bitrate */
364         get_be32(pb); /* avg bitrate */
365
366         st->codec->codec_id= codec_get_id(ff_mp4_obj_type, object_type_id);
367         dprintf(c->fc, "esds object type id %d\n", object_type_id);
368         len = mp4_read_descr(c, pb, &tag);
369         if (tag == MP4DecSpecificDescrTag) {
370             dprintf(c->fc, "Specific MPEG4 header len=%d\n", len);
371             if((uint64_t)len > (1<<30))
372                 return -1;
373             st->codec->extradata = av_mallocz(len + FF_INPUT_BUFFER_PADDING_SIZE);
374             if (!st->codec->extradata)
375                 return AVERROR(ENOMEM);
376             get_buffer(pb, st->codec->extradata, len);
377             st->codec->extradata_size = len;
378             /* from mplayer */
379             if ((*st->codec->extradata >> 3) == 29) {
380                 st->codec->codec_id = CODEC_ID_MP3ON4;
381             }
382         }
383     }
384     return 0;
385 }
386
387 /* this atom contains actual media data */
388 static int mov_read_mdat(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
389 {
390     if(atom.size == 0) /* wrong one (MP4) */
391         return 0;
392     c->found_mdat=1;
393     if(c->found_moov)
394         return 1; /* found both, just go */
395     url_fskip(pb, atom.size);
396     return 0; /* now go for moov */
397 }
398
399 static int mov_read_ftyp(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
400 {
401     uint32_t type = get_le32(pb);
402
403     if (type != MKTAG('q','t',' ',' '))
404         c->isom = 1;
405     av_log(c->fc, AV_LOG_DEBUG, "ISO: File Type Major Brand: %.4s\n",(char *)&type);
406     get_be32(pb); /* minor version */
407     url_fskip(pb, atom.size - 8);
408     return 0;
409 }
410
411 /* this atom should contain all header atoms */
412 static int mov_read_moov(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
413 {
414     if (mov_read_default(c, pb, atom) < 0)
415         return -1;
416     /* we parsed the 'moov' atom, we can terminate the parsing as soon as we find the 'mdat' */
417     /* so we don't parse the whole file if over a network */
418     c->found_moov=1;
419     if(c->found_mdat)
420         return 1; /* found both, just go */
421     return 0; /* now go for mdat */
422 }
423
424
425 static int mov_read_mdhd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
426 {
427     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
428     MOVStreamContext *sc = st->priv_data;
429     int version = get_byte(pb);
430     int lang;
431
432     if (version > 1)
433         return 1; /* unsupported */
434
435     get_be24(pb); /* flags */
436     if (version == 1) {
437         get_be64(pb);
438         get_be64(pb);
439     } else {
440         get_be32(pb); /* creation time */
441         get_be32(pb); /* modification time */
442     }
443
444     sc->time_scale = get_be32(pb);
445     st->duration = (version == 1) ? get_be64(pb) : get_be32(pb); /* duration */
446
447     lang = get_be16(pb); /* language */
448     ff_mov_lang_to_iso639(lang, st->language);
449     get_be16(pb); /* quality */
450
451     return 0;
452 }
453
454 static int mov_read_mvhd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
455 {
456     int version = get_byte(pb); /* version */
457     get_be24(pb); /* flags */
458
459     if (version == 1) {
460         get_be64(pb);
461         get_be64(pb);
462     } else {
463         get_be32(pb); /* creation time */
464         get_be32(pb); /* modification time */
465     }
466     c->time_scale = get_be32(pb); /* time scale */
467
468     dprintf(c->fc, "time scale = %i\n", c->time_scale);
469
470     c->duration = (version == 1) ? get_be64(pb) : get_be32(pb); /* duration */
471     get_be32(pb); /* preferred scale */
472
473     get_be16(pb); /* preferred volume */
474
475     url_fskip(pb, 10); /* reserved */
476
477     url_fskip(pb, 36); /* display matrix */
478
479     get_be32(pb); /* preview time */
480     get_be32(pb); /* preview duration */
481     get_be32(pb); /* poster time */
482     get_be32(pb); /* selection time */
483     get_be32(pb); /* selection duration */
484     get_be32(pb); /* current time */
485     get_be32(pb); /* next track ID */
486
487     return 0;
488 }
489
490 static int mov_read_smi(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
491 {
492     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
493
494     if((uint64_t)atom.size > (1<<30))
495         return -1;
496
497     // currently SVQ3 decoder expect full STSD header - so let's fake it
498     // this should be fixed and just SMI header should be passed
499     av_free(st->codec->extradata);
500     st->codec->extradata = av_mallocz(atom.size + 0x5a + FF_INPUT_BUFFER_PADDING_SIZE);
501     if (!st->codec->extradata)
502         return AVERROR(ENOMEM);
503     st->codec->extradata_size = 0x5a + atom.size;
504     memcpy(st->codec->extradata, "SVQ3", 4); // fake
505     get_buffer(pb, st->codec->extradata + 0x5a, atom.size);
506     dprintf(c->fc, "Reading SMI %"PRId64"  %s\n", atom.size, st->codec->extradata + 0x5a);
507     return 0;
508 }
509
510 static int mov_read_enda(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
511 {
512     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
513     int little_endian = get_be16(pb);
514
515     if (little_endian) {
516         switch (st->codec->codec_id) {
517         case CODEC_ID_PCM_S24BE:
518             st->codec->codec_id = CODEC_ID_PCM_S24LE;
519             break;
520         case CODEC_ID_PCM_S32BE:
521             st->codec->codec_id = CODEC_ID_PCM_S32LE;
522             break;
523         default:
524             break;
525         }
526     }
527     return 0;
528 }
529
530 /* FIXME modify qdm2/svq3/h264 decoders to take full atom as extradata */
531 static int mov_read_extradata(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
532 {
533     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
534     uint64_t size= (uint64_t)st->codec->extradata_size + atom.size + 8 + FF_INPUT_BUFFER_PADDING_SIZE;
535     uint8_t *buf;
536     if(size > INT_MAX || (uint64_t)atom.size > INT_MAX)
537         return -1;
538     buf= av_realloc(st->codec->extradata, size);
539     if(!buf)
540         return -1;
541     st->codec->extradata= buf;
542     buf+= st->codec->extradata_size;
543     st->codec->extradata_size= size - FF_INPUT_BUFFER_PADDING_SIZE;
544     AV_WB32(       buf    , atom.size + 8);
545     AV_WL32(       buf + 4, atom.type);
546     get_buffer(pb, buf + 8, atom.size);
547     return 0;
548 }
549
550 static int mov_read_wave(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
551 {
552     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
553
554     if((uint64_t)atom.size > (1<<30))
555         return -1;
556
557     if (st->codec->codec_id == CODEC_ID_QDM2) {
558         // pass all frma atom to codec, needed at least for QDM2
559         av_free(st->codec->extradata);
560         st->codec->extradata = av_mallocz(atom.size + FF_INPUT_BUFFER_PADDING_SIZE);
561         if (!st->codec->extradata)
562             return AVERROR(ENOMEM);
563         st->codec->extradata_size = atom.size;
564         get_buffer(pb, st->codec->extradata, atom.size);
565     } else if (atom.size > 8) { /* to read frma, esds atoms */
566         if (mov_read_default(c, pb, atom) < 0)
567             return -1;
568     } else
569         url_fskip(pb, atom.size);
570     return 0;
571 }
572
573 /**
574  * This function reads atom content and puts data in extradata without tag
575  * nor size unlike mov_read_extradata.
576  */
577 static int mov_read_glbl(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
578 {
579     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
580
581     if((uint64_t)atom.size > (1<<30))
582         return -1;
583
584     av_free(st->codec->extradata);
585     st->codec->extradata = av_mallocz(atom.size + FF_INPUT_BUFFER_PADDING_SIZE);
586     if (!st->codec->extradata)
587         return AVERROR(ENOMEM);
588     st->codec->extradata_size = atom.size;
589     get_buffer(pb, st->codec->extradata, atom.size);
590     return 0;
591 }
592
593 static int mov_read_stco(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
594 {
595     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
596     MOVStreamContext *sc = st->priv_data;
597     unsigned int i, entries;
598
599     get_byte(pb); /* version */
600     get_be24(pb); /* flags */
601
602     entries = get_be32(pb);
603
604     if(entries >= UINT_MAX/sizeof(int64_t))
605         return -1;
606
607     sc->chunk_count = entries;
608     sc->chunk_offsets = av_malloc(entries * sizeof(int64_t));
609     if (!sc->chunk_offsets)
610         return -1;
611     if (atom.type == MKTAG('s', 't', 'c', 'o')) {
612         for(i=0; i<entries; i++) {
613             sc->chunk_offsets[i] = get_be32(pb);
614         }
615     } else if (atom.type == MKTAG('c', 'o', '6', '4')) {
616         for(i=0; i<entries; i++) {
617             sc->chunk_offsets[i] = get_be64(pb);
618         }
619     } else
620         return -1;
621
622     return 0;
623 }
624
625 static int mov_read_stsd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
626 {
627     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
628     MOVStreamContext *sc = st->priv_data;
629     int entries, frames_per_sample;
630     uint32_t format;
631     uint8_t codec_name[32];
632
633     /* for palette traversal */
634     unsigned int color_depth;
635     unsigned int color_start;
636     unsigned int color_count;
637     unsigned int color_end;
638     int color_index;
639     int color_dec;
640     int color_greyscale;
641     const uint8_t *color_table;
642     int j, pseudo_stream_id;
643     unsigned char r, g, b;
644
645     get_byte(pb); /* version */
646     get_be24(pb); /* flags */
647
648     entries = get_be32(pb);
649
650     for(pseudo_stream_id=0; pseudo_stream_id<entries; pseudo_stream_id++) { //Parsing Sample description table
651         enum CodecID id;
652         int dref_id;
653         MOV_atom_t a = { 0, 0, 0 };
654         offset_t start_pos = url_ftell(pb);
655         int size = get_be32(pb); /* size */
656         format = get_le32(pb); /* data format */
657
658         get_be32(pb); /* reserved */
659         get_be16(pb); /* reserved */
660         dref_id = get_be16(pb);
661
662         if (st->codec->codec_tag &&
663             (c->fc->video_codec_id ? codec_get_id(codec_movvideo_tags, format) != c->fc->video_codec_id
664                                    : st->codec->codec_tag != MKTAG('j', 'p', 'e', 'g'))
665            ){
666             /* Multiple fourcc, we skip JPEG. This is not correct, we should
667              * export it as a separate AVStream but this needs a few changes
668              * in the MOV demuxer, patch welcome. */
669             url_fskip(pb, size - (url_ftell(pb) - start_pos));
670             continue;
671         }
672         sc->pseudo_stream_id= pseudo_stream_id;
673         sc->dref_id= dref_id;
674
675         st->codec->codec_tag = format;
676         id = codec_get_id(codec_movaudio_tags, format);
677         if (id<=0 && (format&0xFFFF) == 'm' + ('s'<<8))
678             id = codec_get_id(codec_wav_tags, bswap_32(format)&0xFFFF);
679
680         if (st->codec->codec_type != CODEC_TYPE_VIDEO && id > 0) {
681             st->codec->codec_type = CODEC_TYPE_AUDIO;
682         } else if (st->codec->codec_type != CODEC_TYPE_AUDIO && /* do not overwrite codec type */
683                    format && format != MKTAG('m', 'p', '4', 's')) { /* skip old asf mpeg4 tag */
684             id = codec_get_id(codec_movvideo_tags, format);
685             if (id <= 0)
686                 id = codec_get_id(codec_bmp_tags, format);
687             if (id > 0)
688                 st->codec->codec_type = CODEC_TYPE_VIDEO;
689             else if(st->codec->codec_type == CODEC_TYPE_DATA){
690                 id = codec_get_id(ff_codec_movsubtitle_tags, format);
691                 if(id > 0)
692                     st->codec->codec_type = CODEC_TYPE_SUBTITLE;
693             }
694         }
695
696         dprintf(c->fc, "size=%d 4CC= %c%c%c%c codec_type=%d\n", size,
697                 (format >> 0) & 0xff, (format >> 8) & 0xff, (format >> 16) & 0xff,
698                 (format >> 24) & 0xff, st->codec->codec_type);
699
700         if(st->codec->codec_type==CODEC_TYPE_VIDEO) {
701             st->codec->codec_id = id;
702             get_be16(pb); /* version */
703             get_be16(pb); /* revision level */
704             get_be32(pb); /* vendor */
705             get_be32(pb); /* temporal quality */
706             get_be32(pb); /* spatial quality */
707
708             st->codec->width = get_be16(pb); /* width */
709             st->codec->height = get_be16(pb); /* height */
710
711             get_be32(pb); /* horiz resolution */
712             get_be32(pb); /* vert resolution */
713             get_be32(pb); /* data size, always 0 */
714             frames_per_sample = get_be16(pb); /* frames per samples */
715
716             dprintf(c->fc, "frames/samples = %d\n", frames_per_sample);
717
718             get_buffer(pb, codec_name, 32); /* codec name, pascal string (FIXME: true for mp4?) */
719             if (codec_name[0] <= 31) {
720                 memcpy(st->codec->codec_name, &codec_name[1],codec_name[0]);
721                 st->codec->codec_name[codec_name[0]] = 0;
722             }
723
724             st->codec->bits_per_sample = get_be16(pb); /* depth */
725             st->codec->color_table_id = get_be16(pb); /* colortable id */
726             dprintf(c->fc, "depth %d, ctab id %d\n",
727                    st->codec->bits_per_sample, st->codec->color_table_id);
728             /* figure out the palette situation */
729             color_depth = st->codec->bits_per_sample & 0x1F;
730             color_greyscale = st->codec->bits_per_sample & 0x20;
731
732             /* if the depth is 2, 4, or 8 bpp, file is palettized */
733             if ((color_depth == 2) || (color_depth == 4) ||
734                 (color_depth == 8)) {
735                 if (color_greyscale) {
736                     /* compute the greyscale palette */
737                     st->codec->bits_per_sample = color_depth;
738                     color_count = 1 << color_depth;
739                     color_index = 255;
740                     color_dec = 256 / (color_count - 1);
741                     for (j = 0; j < color_count; j++) {
742                         r = g = b = color_index;
743                         c->palette_control.palette[j] =
744                             (r << 16) | (g << 8) | (b);
745                         color_index -= color_dec;
746                         if (color_index < 0)
747                             color_index = 0;
748                     }
749                 } else if (st->codec->color_table_id & 0x08) {
750                     /* if flag bit 3 is set, use the default palette */
751                     color_count = 1 << color_depth;
752                     if (color_depth == 2)
753                         color_table = ff_qt_default_palette_4;
754                     else if (color_depth == 4)
755                         color_table = ff_qt_default_palette_16;
756                     else
757                         color_table = ff_qt_default_palette_256;
758
759                     for (j = 0; j < color_count; j++) {
760                         r = color_table[j * 4 + 0];
761                         g = color_table[j * 4 + 1];
762                         b = color_table[j * 4 + 2];
763                         c->palette_control.palette[j] =
764                             (r << 16) | (g << 8) | (b);
765                     }
766                 } else {
767                     /* load the palette from the file */
768                     color_start = get_be32(pb);
769                     color_count = get_be16(pb);
770                     color_end = get_be16(pb);
771                     if ((color_start <= 255) &&
772                         (color_end <= 255)) {
773                         for (j = color_start; j <= color_end; j++) {
774                             /* each R, G, or B component is 16 bits;
775                              * only use the top 8 bits; skip alpha bytes
776                              * up front */
777                             get_byte(pb);
778                             get_byte(pb);
779                             r = get_byte(pb);
780                             get_byte(pb);
781                             g = get_byte(pb);
782                             get_byte(pb);
783                             b = get_byte(pb);
784                             get_byte(pb);
785                             c->palette_control.palette[j] =
786                                 (r << 16) | (g << 8) | (b);
787                         }
788                     }
789                 }
790                 st->codec->palctrl = &c->palette_control;
791                 st->codec->palctrl->palette_changed = 1;
792             } else
793                 st->codec->palctrl = NULL;
794         } else if(st->codec->codec_type==CODEC_TYPE_AUDIO) {
795             int bits_per_sample;
796             uint16_t version = get_be16(pb);
797
798             st->codec->codec_id = id;
799             get_be16(pb); /* revision level */
800             get_be32(pb); /* vendor */
801
802             st->codec->channels = get_be16(pb);             /* channel count */
803             dprintf(c->fc, "audio channels %d\n", st->codec->channels);
804             st->codec->bits_per_sample = get_be16(pb);      /* sample size */
805
806             sc->audio_cid = get_be16(pb);
807             get_be16(pb); /* packet size = 0 */
808
809             st->codec->sample_rate = ((get_be32(pb) >> 16));
810
811             switch (st->codec->codec_id) {
812             case CODEC_ID_PCM_S8:
813             case CODEC_ID_PCM_U8:
814                 if (st->codec->bits_per_sample == 16)
815                     st->codec->codec_id = CODEC_ID_PCM_S16BE;
816                 break;
817             case CODEC_ID_PCM_S16LE:
818             case CODEC_ID_PCM_S16BE:
819                 if (st->codec->bits_per_sample == 8)
820                     st->codec->codec_id = CODEC_ID_PCM_S8;
821                 else if (st->codec->bits_per_sample == 24)
822                     st->codec->codec_id = CODEC_ID_PCM_S24BE;
823                 break;
824             /* set values for old format before stsd version 1 appeared */
825             case CODEC_ID_MACE3:
826                 sc->samples_per_frame = 6;
827                 sc->bytes_per_frame = 2*st->codec->channels;
828                 break;
829             case CODEC_ID_MACE6:
830                 sc->samples_per_frame = 6;
831                 sc->bytes_per_frame = 1*st->codec->channels;
832                 break;
833             case CODEC_ID_ADPCM_IMA_QT:
834                 sc->samples_per_frame = 64;
835                 sc->bytes_per_frame = 34*st->codec->channels;
836                 break;
837             default:
838                 break;
839             }
840
841             //Read QT version 1 fields. In version 0 these do not exist.
842             dprintf(c->fc, "version =%d, isom =%d\n",version,c->isom);
843             if(!c->isom) {
844                 if(version==1) {
845                     sc->samples_per_frame = get_be32(pb);
846                     get_be32(pb); /* bytes per packet */
847                     sc->bytes_per_frame = get_be32(pb);
848                     get_be32(pb); /* bytes per sample */
849                 } else if(version==2) {
850                     get_be32(pb); /* sizeof struct only */
851                     st->codec->sample_rate = av_int2dbl(get_be64(pb)); /* float 64 */
852                     st->codec->channels = get_be32(pb);
853                     get_be32(pb); /* always 0x7F000000 */
854                     get_be32(pb); /* bits per channel if sound is uncompressed */
855                     get_be32(pb); /* lcpm format specific flag */
856                     get_be32(pb); /* bytes per audio packet if constant */
857                     get_be32(pb); /* lpcm frames per audio packet if constant */
858                 }
859             }
860
861             bits_per_sample = av_get_bits_per_sample(st->codec->codec_id);
862             if (bits_per_sample) {
863                 st->codec->bits_per_sample = bits_per_sample;
864                 sc->sample_size = (bits_per_sample >> 3) * st->codec->channels;
865             }
866         } else if(st->codec->codec_type==CODEC_TYPE_SUBTITLE){
867             st->codec->codec_id= id;
868         } else {
869             /* other codec type, just skip (rtp, mp4s, tmcd ...) */
870             url_fskip(pb, size - (url_ftell(pb) - start_pos));
871         }
872         /* this will read extra atoms at the end (wave, alac, damr, avcC, SMI ...) */
873         a.size = size - (url_ftell(pb) - start_pos);
874         if (a.size > 8) {
875             if (mov_read_default(c, pb, a) < 0)
876                 return -1;
877         } else if (a.size > 0)
878             url_fskip(pb, a.size);
879     }
880
881     if(st->codec->codec_type==CODEC_TYPE_AUDIO && st->codec->sample_rate==0 && sc->time_scale>1)
882         st->codec->sample_rate= sc->time_scale;
883
884     /* special codec parameters handling */
885     switch (st->codec->codec_id) {
886 #ifdef CONFIG_DV_DEMUXER
887     case CODEC_ID_DVAUDIO:
888         c->dv_fctx = av_alloc_format_context();
889         c->dv_demux = dv_init_demux(c->dv_fctx);
890         if (!c->dv_demux) {
891             av_log(c->fc, AV_LOG_ERROR, "dv demux context init error\n");
892             return -1;
893         }
894         sc->dv_audio_container = 1;
895         st->codec->codec_id = CODEC_ID_PCM_S16LE;
896         break;
897 #endif
898     /* no ifdef since parameters are always those */
899     case CODEC_ID_AMR_WB:
900         st->codec->sample_rate= 16000;
901         st->codec->channels= 1; /* really needed */
902         break;
903     case CODEC_ID_AMR_NB:
904         st->codec->sample_rate= 8000;
905         st->codec->channels= 1; /* really needed */
906         break;
907     case CODEC_ID_MP2:
908     case CODEC_ID_MP3:
909         st->codec->codec_type = CODEC_TYPE_AUDIO; /* force type after stsd for m1a hdlr */
910         st->need_parsing = AVSTREAM_PARSE_FULL;
911         break;
912     case CODEC_ID_ADPCM_MS:
913     case CODEC_ID_ADPCM_IMA_WAV:
914         st->codec->block_align = sc->bytes_per_frame;
915         break;
916     default:
917         break;
918     }
919
920     return 0;
921 }
922
923 static int mov_read_stsc(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
924 {
925     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
926     MOVStreamContext *sc = st->priv_data;
927     unsigned int i, entries;
928
929     get_byte(pb); /* version */
930     get_be24(pb); /* flags */
931
932     entries = get_be32(pb);
933
934     if(entries >= UINT_MAX / sizeof(MOV_stsc_t))
935         return -1;
936
937     dprintf(c->fc, "track[%i].stsc.entries = %i\n", c->fc->nb_streams-1, entries);
938
939     sc->sample_to_chunk_sz = entries;
940     sc->sample_to_chunk = av_malloc(entries * sizeof(MOV_stsc_t));
941     if (!sc->sample_to_chunk)
942         return -1;
943     for(i=0; i<entries; i++) {
944         sc->sample_to_chunk[i].first = get_be32(pb);
945         sc->sample_to_chunk[i].count = get_be32(pb);
946         sc->sample_to_chunk[i].id = get_be32(pb);
947     }
948     return 0;
949 }
950
951 static int mov_read_stss(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
952 {
953     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
954     MOVStreamContext *sc = st->priv_data;
955     unsigned int i, entries;
956
957     get_byte(pb); /* version */
958     get_be24(pb); /* flags */
959
960     entries = get_be32(pb);
961
962     if(entries >= UINT_MAX / sizeof(int))
963         return -1;
964
965     sc->keyframe_count = entries;
966
967     dprintf(c->fc, "keyframe_count = %d\n", sc->keyframe_count);
968
969     sc->keyframes = av_malloc(entries * sizeof(int));
970     if (!sc->keyframes)
971         return -1;
972     for(i=0; i<entries; i++) {
973         sc->keyframes[i] = get_be32(pb);
974         //dprintf(c->fc, "keyframes[]=%d\n", sc->keyframes[i]);
975     }
976     return 0;
977 }
978
979 static int mov_read_stsz(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
980 {
981     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
982     MOVStreamContext *sc = st->priv_data;
983     unsigned int i, entries, sample_size;
984
985     get_byte(pb); /* version */
986     get_be24(pb); /* flags */
987
988     sample_size = get_be32(pb);
989     if (!sc->sample_size) /* do not overwrite value computed in stsd */
990         sc->sample_size = sample_size;
991     entries = get_be32(pb);
992     if(entries >= UINT_MAX / sizeof(int))
993         return -1;
994
995     sc->sample_count = entries;
996     if (sample_size)
997         return 0;
998
999     dprintf(c->fc, "sample_size = %d sample_count = %d\n", sc->sample_size, sc->sample_count);
1000
1001     sc->sample_sizes = av_malloc(entries * sizeof(int));
1002     if (!sc->sample_sizes)
1003         return -1;
1004     for(i=0; i<entries; i++) {
1005         sc->sample_sizes[i] = get_be32(pb);
1006         dprintf(c->fc, "sample_sizes[]=%d\n", sc->sample_sizes[i]);
1007     }
1008     return 0;
1009 }
1010
1011 static int mov_read_stts(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1012 {
1013     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
1014     MOVStreamContext *sc = st->priv_data;
1015     unsigned int i, entries;
1016     int64_t duration=0;
1017     int64_t total_sample_count=0;
1018
1019     get_byte(pb); /* version */
1020     get_be24(pb); /* flags */
1021     entries = get_be32(pb);
1022     if(entries >= UINT_MAX / sizeof(MOV_stts_t))
1023         return -1;
1024
1025     sc->stts_count = entries;
1026     sc->stts_data = av_malloc(entries * sizeof(MOV_stts_t));
1027     if (!sc->stts_data)
1028         return -1;
1029     dprintf(c->fc, "track[%i].stts.entries = %i\n", c->fc->nb_streams-1, entries);
1030
1031     sc->time_rate=0;
1032
1033     for(i=0; i<entries; i++) {
1034         int sample_duration;
1035         int sample_count;
1036
1037         sample_count=get_be32(pb);
1038         sample_duration = get_be32(pb);
1039         sc->stts_data[i].count= sample_count;
1040         sc->stts_data[i].duration= sample_duration;
1041
1042         sc->time_rate= ff_gcd(sc->time_rate, sample_duration);
1043
1044         dprintf(c->fc, "sample_count=%d, sample_duration=%d\n",sample_count,sample_duration);
1045
1046         duration+=(int64_t)sample_duration*sample_count;
1047         total_sample_count+=sample_count;
1048     }
1049
1050     st->nb_frames= total_sample_count;
1051     if(duration)
1052         st->duration= duration;
1053     return 0;
1054 }
1055
1056 static int mov_read_ctts(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1057 {
1058     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
1059     MOVStreamContext *sc = st->priv_data;
1060     unsigned int i, entries;
1061
1062     get_byte(pb); /* version */
1063     get_be24(pb); /* flags */
1064     entries = get_be32(pb);
1065     if(entries >= UINT_MAX / sizeof(MOV_stts_t))
1066         return -1;
1067
1068     sc->ctts_count = entries;
1069     sc->ctts_data = av_malloc(entries * sizeof(MOV_stts_t));
1070     if (!sc->ctts_data)
1071         return -1;
1072     dprintf(c->fc, "track[%i].ctts.entries = %i\n", c->fc->nb_streams-1, entries);
1073
1074     for(i=0; i<entries; i++) {
1075         int count    =get_be32(pb);
1076         int duration =get_be32(pb);
1077
1078         if (duration < 0) {
1079             av_log(c->fc, AV_LOG_ERROR, "negative ctts, ignoring\n");
1080             sc->ctts_count = 0;
1081             url_fskip(pb, 8 * (entries - i - 1));
1082             break;
1083         }
1084         sc->ctts_data[i].count   = count;
1085         sc->ctts_data[i].duration= duration;
1086
1087         sc->time_rate= ff_gcd(sc->time_rate, duration);
1088     }
1089     return 0;
1090 }
1091
1092 static void mov_build_index(MOVContext *mov, AVStream *st)
1093 {
1094     MOVStreamContext *sc = st->priv_data;
1095     offset_t current_offset;
1096     int64_t current_dts = 0;
1097     unsigned int stts_index = 0;
1098     unsigned int stsc_index = 0;
1099     unsigned int stss_index = 0;
1100     unsigned int i, j;
1101
1102     if (sc->sample_sizes || st->codec->codec_type == CODEC_TYPE_VIDEO ||
1103         sc->audio_cid == -2) {
1104         unsigned int current_sample = 0;
1105         unsigned int stts_sample = 0;
1106         unsigned int keyframe, sample_size;
1107         unsigned int distance = 0;
1108         int key_off = sc->keyframes && sc->keyframes[0] == 1;
1109
1110         st->nb_frames = sc->sample_count;
1111         for (i = 0; i < sc->chunk_count; i++) {
1112             current_offset = sc->chunk_offsets[i];
1113             if (stsc_index + 1 < sc->sample_to_chunk_sz &&
1114                 i + 1 == sc->sample_to_chunk[stsc_index + 1].first)
1115                 stsc_index++;
1116             for (j = 0; j < sc->sample_to_chunk[stsc_index].count; j++) {
1117                 if (current_sample >= sc->sample_count) {
1118                     av_log(mov->fc, AV_LOG_ERROR, "wrong sample count\n");
1119                     goto out;
1120                 }
1121                 keyframe = !sc->keyframe_count || current_sample+key_off == sc->keyframes[stss_index];
1122                 if (keyframe) {
1123                     distance = 0;
1124                     if (stss_index + 1 < sc->keyframe_count)
1125                         stss_index++;
1126                 }
1127                 sample_size = sc->sample_size > 0 ? sc->sample_size : sc->sample_sizes[current_sample];
1128                 dprintf(mov->fc, "AVIndex stream %d, sample %d, offset %"PRIx64", dts %"PRId64", "
1129                         "size %d, distance %d, keyframe %d\n", st->index, current_sample,
1130                         current_offset, current_dts, sample_size, distance, keyframe);
1131                 if(sc->sample_to_chunk[stsc_index].id - 1 == sc->pseudo_stream_id)
1132                     av_add_index_entry(st, current_offset, current_dts, sample_size, distance,
1133                                     keyframe ? AVINDEX_KEYFRAME : 0);
1134                 current_offset += sample_size;
1135                 assert(sc->stts_data[stts_index].duration % sc->time_rate == 0);
1136                 current_dts += sc->stts_data[stts_index].duration / sc->time_rate;
1137                 distance++;
1138                 stts_sample++;
1139                 current_sample++;
1140                 if (stts_index + 1 < sc->stts_count && stts_sample == sc->stts_data[stts_index].count) {
1141                     stts_sample = 0;
1142                     stts_index++;
1143                 }
1144             }
1145         }
1146     } else { /* read whole chunk */
1147         unsigned int chunk_samples, chunk_size, chunk_duration;
1148         unsigned int frames = 1;
1149         for (i = 0; i < sc->chunk_count; i++) {
1150             current_offset = sc->chunk_offsets[i];
1151             if (stsc_index + 1 < sc->sample_to_chunk_sz &&
1152                 i + 1 == sc->sample_to_chunk[stsc_index + 1].first)
1153                 stsc_index++;
1154             chunk_samples = sc->sample_to_chunk[stsc_index].count;
1155             /* get chunk size, beware of alaw/ulaw/mace */
1156             if (sc->samples_per_frame > 0 &&
1157                 (chunk_samples * sc->bytes_per_frame % sc->samples_per_frame == 0)) {
1158                 if (sc->samples_per_frame < 1024)
1159                     chunk_size = chunk_samples * sc->bytes_per_frame / sc->samples_per_frame;
1160                 else {
1161                     chunk_size = sc->bytes_per_frame;
1162                     frames = chunk_samples / sc->samples_per_frame;
1163                     chunk_samples = sc->samples_per_frame;
1164                 }
1165             } else if (sc->sample_size > 1 || st->codec->bits_per_sample == 8) {
1166                 chunk_size = chunk_samples * sc->sample_size;
1167             } else {
1168                 av_log(mov->fc, AV_LOG_ERROR, "could not determine chunk size, report problem\n");
1169                 goto out;
1170             }
1171             for (j = 0; j < frames; j++) {
1172                 av_add_index_entry(st, current_offset, current_dts, chunk_size, 0, AVINDEX_KEYFRAME);
1173                 /* get chunk duration */
1174                 chunk_duration = 0;
1175                 while (chunk_samples > 0) {
1176                     if (chunk_samples < sc->stts_data[stts_index].count) {
1177                         chunk_duration += sc->stts_data[stts_index].duration * chunk_samples;
1178                         sc->stts_data[stts_index].count -= chunk_samples;
1179                         break;
1180                     } else {
1181                         chunk_duration += sc->stts_data[stts_index].duration * chunk_samples;
1182                         chunk_samples -= sc->stts_data[stts_index].count;
1183                         if (stts_index + 1 < sc->stts_count)
1184                             stts_index++;
1185                     }
1186                 }
1187                 current_offset += sc->bytes_per_frame;
1188                 dprintf(mov->fc, "AVIndex stream %d, chunk %d, offset %"PRIx64", dts %"PRId64", size %d, "
1189                         "duration %d\n", st->index, i, current_offset, current_dts, chunk_size, chunk_duration);
1190                 assert(chunk_duration % sc->time_rate == 0);
1191                 current_dts += chunk_duration / sc->time_rate;
1192             }
1193         }
1194     }
1195  out:
1196     /* adjust sample count to avindex entries */
1197     sc->sample_count = st->nb_index_entries;
1198 }
1199
1200 static int mov_read_trak(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1201 {
1202     AVStream *st;
1203     MOVStreamContext *sc;
1204     int ret;
1205
1206     st = av_new_stream(c->fc, c->fc->nb_streams);
1207     if (!st) return -2;
1208     sc = av_mallocz(sizeof(MOVStreamContext));
1209     if (!sc) {
1210         av_free(st);
1211         return -1;
1212     }
1213
1214     st->priv_data = sc;
1215     st->codec->codec_type = CODEC_TYPE_DATA;
1216     st->start_time = 0; /* XXX: check */
1217
1218     if ((ret = mov_read_default(c, pb, atom)) < 0)
1219         return ret;
1220
1221     /* sanity checks */
1222     if(!sc->stts_count || !sc->chunk_count || !sc->sample_to_chunk_sz ||
1223        (!sc->sample_size && !sc->sample_count)){
1224         av_log(c->fc, AV_LOG_ERROR, "missing mandatory atoms, broken header\n");
1225         sc->sample_count = 0; //ignore track
1226         return 0;
1227     }
1228     if(!sc->time_rate)
1229         sc->time_rate=1;
1230     if(!sc->time_scale)
1231         sc->time_scale= c->time_scale;
1232     av_set_pts_info(st, 64, sc->time_rate, sc->time_scale);
1233
1234     if (st->codec->codec_type == CODEC_TYPE_AUDIO && sc->stts_count == 1)
1235         st->codec->frame_size = av_rescale(sc->time_rate, st->codec->sample_rate, sc->time_scale);
1236
1237     if(st->duration != AV_NOPTS_VALUE){
1238         assert(st->duration % sc->time_rate == 0);
1239         st->duration /= sc->time_rate;
1240     }
1241     sc->ffindex = st->index;
1242     mov_build_index(c, st);
1243
1244     if (sc->dref_id-1 < sc->drefs_count && sc->drefs[sc->dref_id-1].path) {
1245         if (url_fopen(&sc->pb, sc->drefs[sc->dref_id-1].path, URL_RDONLY) < 0)
1246             av_log(c->fc, AV_LOG_ERROR, "stream %d, error opening external essence: %s\n",
1247                    st->index, strerror(errno));
1248     } else
1249         sc->pb = c->fc->pb;
1250
1251     switch (st->codec->codec_id) {
1252 #ifdef CONFIG_H261_DECODER
1253     case CODEC_ID_H261:
1254 #endif
1255 #ifdef CONFIG_H263_DECODER
1256     case CODEC_ID_H263:
1257 #endif
1258 #ifdef CONFIG_MPEG4_DECODER
1259     case CODEC_ID_MPEG4:
1260 #endif
1261         st->codec->width= 0; /* let decoder init width/height */
1262         st->codec->height= 0;
1263         break;
1264 #ifdef CONFIG_LIBFAAD
1265     case CODEC_ID_AAC:
1266 #endif
1267 #ifdef CONFIG_VORBIS_DECODER
1268     case CODEC_ID_VORBIS:
1269 #endif
1270     case CODEC_ID_MP3ON4:
1271         st->codec->sample_rate= 0; /* let decoder init parameters properly */
1272         break;
1273     }
1274     return 0;
1275 }
1276
1277 static void mov_parse_udta_string(ByteIOContext *pb, char *str, int size)
1278 {
1279     uint16_t str_size = get_be16(pb); /* string length */;
1280
1281     get_be16(pb); /* skip language */
1282     get_buffer(pb, str, FFMIN(size, str_size));
1283 }
1284
1285 static int mov_read_udta(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1286 {
1287     uint64_t end = url_ftell(pb) + atom.size;
1288
1289     while (url_ftell(pb) + 8 < end) {
1290         uint32_t tag_size = get_be32(pb);
1291         uint32_t tag      = get_le32(pb);
1292         uint64_t next     = url_ftell(pb) + tag_size - 8;
1293
1294         if (next > end) // stop if tag_size is wrong
1295             break;
1296
1297         switch (tag) {
1298         case MKTAG(0xa9,'n','a','m'):
1299             mov_parse_udta_string(pb, c->fc->title,     sizeof(c->fc->title));
1300             break;
1301         case MKTAG(0xa9,'w','r','t'):
1302             mov_parse_udta_string(pb, c->fc->author,    sizeof(c->fc->author));
1303             break;
1304         case MKTAG(0xa9,'c','p','y'):
1305             mov_parse_udta_string(pb, c->fc->copyright, sizeof(c->fc->copyright));
1306             break;
1307         case MKTAG(0xa9,'i','n','f'):
1308             mov_parse_udta_string(pb, c->fc->comment,   sizeof(c->fc->comment));
1309             break;
1310         default:
1311             break;
1312         }
1313
1314         url_fseek(pb, next, SEEK_SET);
1315     }
1316
1317     return 0;
1318 }
1319
1320 static int mov_read_tkhd(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1321 {
1322     AVStream *st = c->fc->streams[c->fc->nb_streams-1];
1323     int version = get_byte(pb);
1324
1325     get_be24(pb); /* flags */
1326     /*
1327     MOV_TRACK_ENABLED 0x0001
1328     MOV_TRACK_IN_MOVIE 0x0002
1329     MOV_TRACK_IN_PREVIEW 0x0004
1330     MOV_TRACK_IN_POSTER 0x0008
1331     */
1332
1333     if (version == 1) {
1334         get_be64(pb);
1335         get_be64(pb);
1336     } else {
1337         get_be32(pb); /* creation time */
1338         get_be32(pb); /* modification time */
1339     }
1340     st->id = (int)get_be32(pb); /* track id (NOT 0 !)*/
1341     get_be32(pb); /* reserved */
1342     st->start_time = 0; /* check */
1343     (version == 1) ? get_be64(pb) : get_be32(pb); /* highlevel (considering edits) duration in movie timebase */
1344     get_be32(pb); /* reserved */
1345     get_be32(pb); /* reserved */
1346
1347     get_be16(pb); /* layer */
1348     get_be16(pb); /* alternate group */
1349     get_be16(pb); /* volume */
1350     get_be16(pb); /* reserved */
1351
1352     url_fskip(pb, 36); /* display matrix */
1353
1354     /* those are fixed-point */
1355     get_be32(pb); /* track width */
1356     get_be32(pb); /* track height */
1357
1358     return 0;
1359 }
1360
1361 /* this atom should be null (from specs), but some buggy files put the 'moov' atom inside it... */
1362 /* like the files created with Adobe Premiere 5.0, for samples see */
1363 /* http://graphics.tudelft.nl/~wouter/publications/soundtests/ */
1364 static int mov_read_wide(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1365 {
1366     int err;
1367
1368     if (atom.size < 8)
1369         return 0; /* continue */
1370     if (get_be32(pb) != 0) { /* 0 sized mdat atom... use the 'wide' atom size */
1371         url_fskip(pb, atom.size - 4);
1372         return 0;
1373     }
1374     atom.type = get_le32(pb);
1375     atom.offset += 8;
1376     atom.size -= 8;
1377     if (atom.type != MKTAG('m', 'd', 'a', 't')) {
1378         url_fskip(pb, atom.size);
1379         return 0;
1380     }
1381     err = mov_read_mdat(c, pb, atom);
1382     return err;
1383 }
1384
1385 static int mov_read_cmov(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1386 {
1387 #ifdef CONFIG_ZLIB
1388     ByteIOContext ctx;
1389     uint8_t *cmov_data;
1390     uint8_t *moov_data; /* uncompressed data */
1391     long cmov_len, moov_len;
1392     int ret;
1393
1394     get_be32(pb); /* dcom atom */
1395     if (get_le32(pb) != MKTAG( 'd', 'c', 'o', 'm' ))
1396         return -1;
1397     if (get_le32(pb) != MKTAG( 'z', 'l', 'i', 'b' )) {
1398         av_log(NULL, AV_LOG_ERROR, "unknown compression for cmov atom !");
1399         return -1;
1400     }
1401     get_be32(pb); /* cmvd atom */
1402     if (get_le32(pb) != MKTAG( 'c', 'm', 'v', 'd' ))
1403         return -1;
1404     moov_len = get_be32(pb); /* uncompressed size */
1405     cmov_len = atom.size - 6 * 4;
1406
1407     cmov_data = av_malloc(cmov_len);
1408     if (!cmov_data)
1409         return -1;
1410     moov_data = av_malloc(moov_len);
1411     if (!moov_data) {
1412         av_free(cmov_data);
1413         return -1;
1414     }
1415     get_buffer(pb, cmov_data, cmov_len);
1416     if(uncompress (moov_data, (uLongf *) &moov_len, (const Bytef *)cmov_data, cmov_len) != Z_OK)
1417         return -1;
1418     if(init_put_byte(&ctx, moov_data, moov_len, 0, NULL, NULL, NULL, NULL) != 0)
1419         return -1;
1420     atom.type = MKTAG( 'm', 'o', 'o', 'v' );
1421     atom.offset = 0;
1422     atom.size = moov_len;
1423 #ifdef DEBUG
1424 //    { int fd = open("/tmp/uncompheader.mov", O_WRONLY | O_CREAT); write(fd, moov_data, moov_len); close(fd); }
1425 #endif
1426     ret = mov_read_default(c, &ctx, atom);
1427     av_free(moov_data);
1428     av_free(cmov_data);
1429     return ret;
1430 #else
1431     av_log(c->fc, AV_LOG_ERROR, "this file requires zlib support compiled in\n");
1432     return -1;
1433 #endif
1434 }
1435
1436 /* edit list atom */
1437 static int mov_read_elst(MOVContext *c, ByteIOContext *pb, MOV_atom_t atom)
1438 {
1439     MOVStreamContext *sc = c->fc->streams[c->fc->nb_streams-1]->priv_data;
1440     int i, edit_count;
1441
1442     get_byte(pb); /* version */
1443     get_be24(pb); /* flags */
1444     edit_count= sc->edit_count = get_be32(pb);     /* entries */
1445
1446     for(i=0; i<edit_count; i++){
1447         int time;
1448         get_be32(pb); /* Track duration */
1449         time = get_be32(pb); /* Media time */
1450         get_be32(pb); /* Media rate */
1451         if (time != 0)
1452             av_log(c->fc, AV_LOG_WARNING, "edit list not starting at 0, "
1453                    "a/v desync might occur, patch welcome\n");
1454     }
1455     dprintf(c->fc, "track[%i].edit_count = %i\n", c->fc->nb_streams-1, sc->edit_count);
1456     return 0;
1457 }
1458
1459 static const MOVParseTableEntry mov_default_parse_table[] = {
1460 /* mp4 atoms */
1461 { MKTAG( 'c', 'o', '6', '4' ), mov_read_stco },
1462 { MKTAG( 'c', 't', 't', 's' ), mov_read_ctts }, /* composition time to sample */
1463 { MKTAG( 'd', 'i', 'n', 'f' ), mov_read_default },
1464 { MKTAG( 'd', 'r', 'e', 'f' ), mov_read_dref },
1465 { MKTAG( 'e', 'd', 't', 's' ), mov_read_default },
1466 { MKTAG( 'e', 'l', 's', 't' ), mov_read_elst },
1467 { MKTAG( 'e', 'n', 'd', 'a' ), mov_read_enda },
1468 { MKTAG( 'f', 'i', 'e', 'l' ), mov_read_extradata },
1469 { MKTAG( 'f', 't', 'y', 'p' ), mov_read_ftyp },
1470 { MKTAG( 'g', 'l', 'b', 'l' ), mov_read_glbl },
1471 { MKTAG( 'h', 'd', 'l', 'r' ), mov_read_hdlr },
1472 { MKTAG( 'j', 'p', '2', 'h' ), mov_read_extradata },
1473 { MKTAG( 'm', 'd', 'a', 't' ), mov_read_mdat },
1474 { MKTAG( 'm', 'd', 'h', 'd' ), mov_read_mdhd },
1475 { MKTAG( 'm', 'd', 'i', 'a' ), mov_read_default },
1476 { MKTAG( 'm', 'i', 'n', 'f' ), mov_read_default },
1477 { MKTAG( 'm', 'o', 'o', 'v' ), mov_read_moov },
1478 { MKTAG( 'm', 'v', 'h', 'd' ), mov_read_mvhd },
1479 { MKTAG( 'S', 'M', 'I', ' ' ), mov_read_smi }, /* Sorenson extension ??? */
1480 { MKTAG( 'a', 'l', 'a', 'c' ), mov_read_extradata }, /* alac specific atom */
1481 { MKTAG( 'a', 'v', 'c', 'C' ), mov_read_glbl },
1482 { MKTAG( 's', 't', 'b', 'l' ), mov_read_default },
1483 { MKTAG( 's', 't', 'c', 'o' ), mov_read_stco },
1484 { MKTAG( 's', 't', 's', 'c' ), mov_read_stsc },
1485 { MKTAG( 's', 't', 's', 'd' ), mov_read_stsd }, /* sample description */
1486 { MKTAG( 's', 't', 's', 's' ), mov_read_stss }, /* sync sample */
1487 { MKTAG( 's', 't', 's', 'z' ), mov_read_stsz }, /* sample size */
1488 { MKTAG( 's', 't', 't', 's' ), mov_read_stts },
1489 { MKTAG( 't', 'k', 'h', 'd' ), mov_read_tkhd }, /* track header */
1490 { MKTAG( 't', 'r', 'a', 'k' ), mov_read_trak },
1491 { MKTAG( 'u', 'd', 't', 'a' ), mov_read_udta },
1492 { MKTAG( 'w', 'a', 'v', 'e' ), mov_read_wave },
1493 { MKTAG( 'e', 's', 'd', 's' ), mov_read_esds },
1494 { MKTAG( 'w', 'i', 'd', 'e' ), mov_read_wide }, /* place holder */
1495 { MKTAG( 'c', 'm', 'o', 'v' ), mov_read_cmov },
1496 { 0, NULL }
1497 };
1498
1499 /* XXX: is it sufficient ? */
1500 static int mov_probe(AVProbeData *p)
1501 {
1502     unsigned int offset;
1503     uint32_t tag;
1504     int score = 0;
1505
1506     /* check file header */
1507     offset = 0;
1508     for(;;) {
1509         /* ignore invalid offset */
1510         if ((offset + 8) > (unsigned int)p->buf_size)
1511             return score;
1512         tag = AV_RL32(p->buf + offset + 4);
1513         switch(tag) {
1514         /* check for obvious tags */
1515         case MKTAG( 'j', 'P', ' ', ' ' ): /* jpeg 2000 signature */
1516         case MKTAG( 'm', 'o', 'o', 'v' ):
1517         case MKTAG( 'm', 'd', 'a', 't' ):
1518         case MKTAG( 'p', 'n', 'o', 't' ): /* detect movs with preview pics like ew.mov and april.mov */
1519         case MKTAG( 'u', 'd', 't', 'a' ): /* Packet Video PVAuthor adds this and a lot of more junk */
1520             return AVPROBE_SCORE_MAX;
1521         /* those are more common words, so rate then a bit less */
1522         case MKTAG( 'e', 'd', 'i', 'w' ): /* xdcam files have reverted first tags */
1523         case MKTAG( 'w', 'i', 'd', 'e' ):
1524         case MKTAG( 'f', 'r', 'e', 'e' ):
1525         case MKTAG( 'j', 'u', 'n', 'k' ):
1526         case MKTAG( 'p', 'i', 'c', 't' ):
1527             return AVPROBE_SCORE_MAX - 5;
1528         case MKTAG(0x82,0x82,0x7f,0x7d ):
1529         case MKTAG( 'f', 't', 'y', 'p' ):
1530         case MKTAG( 's', 'k', 'i', 'p' ):
1531         case MKTAG( 'u', 'u', 'i', 'd' ):
1532             offset = AV_RB32(p->buf+offset) + offset;
1533             /* if we only find those cause probedata is too small at least rate them */
1534             score = AVPROBE_SCORE_MAX - 50;
1535             break;
1536         default:
1537             /* unrecognized tag */
1538             return score;
1539         }
1540     }
1541     return score;
1542 }
1543
1544 static int mov_read_header(AVFormatContext *s, AVFormatParameters *ap)
1545 {
1546     MOVContext *mov = s->priv_data;
1547     ByteIOContext *pb = s->pb;
1548     int i, err;
1549     MOV_atom_t atom = { 0, 0, 0 };
1550
1551     mov->fc = s;
1552
1553     if(!url_is_streamed(pb)) /* .mov and .mp4 aren't streamable anyway (only progressive download if moov is before mdat) */
1554         atom.size = url_fsize(pb);
1555     else
1556         atom.size = INT64_MAX;
1557
1558     /* check MOV header */
1559     err = mov_read_default(mov, pb, atom);
1560     if (err<0 || (!mov->found_moov && !mov->found_mdat)) {
1561         av_log(s, AV_LOG_ERROR, "mov: header not found !!! (err:%d, moov:%d, mdat:%d) pos:%"PRId64"\n",
1562                 err, mov->found_moov, mov->found_mdat, url_ftell(pb));
1563         return -1;
1564     }
1565     dprintf(mov->fc, "on_parse_exit_offset=%d\n", (int) url_ftell(pb));
1566
1567     for(i=0; i<s->nb_streams; i++) {
1568         MOVStreamContext *sc = s->streams[i]->priv_data;
1569         /* Do not need those anymore. */
1570         av_freep(&sc->chunk_offsets);
1571         av_freep(&sc->sample_to_chunk);
1572         av_freep(&sc->sample_sizes);
1573         av_freep(&sc->keyframes);
1574         av_freep(&sc->stts_data);
1575     }
1576     return 0;
1577 }
1578
1579 static int mov_read_packet(AVFormatContext *s, AVPacket *pkt)
1580 {
1581     MOVContext *mov = s->priv_data;
1582     MOVStreamContext *sc = 0;
1583     AVIndexEntry *sample = 0;
1584     int64_t best_dts = INT64_MAX;
1585     int i;
1586
1587     for (i = 0; i < s->nb_streams; i++) {
1588         AVStream *st = s->streams[i];
1589         MOVStreamContext *msc = st->priv_data;
1590         if (st->discard != AVDISCARD_ALL && msc->pb && msc->current_sample < msc->sample_count) {
1591             AVIndexEntry *current_sample = &st->index_entries[msc->current_sample];
1592             int64_t dts = av_rescale(current_sample->timestamp * (int64_t)msc->time_rate,
1593                                      AV_TIME_BASE, msc->time_scale);
1594             dprintf(s, "stream %d, sample %d, dts %"PRId64"\n", i, msc->current_sample, dts);
1595             if (!sample || (url_is_streamed(s->pb) && current_sample->pos < sample->pos) ||
1596                 (!url_is_streamed(s->pb) &&
1597                  ((msc->pb != s->pb && dts < best_dts) || (msc->pb == s->pb &&
1598                  ((FFABS(best_dts - dts) <= AV_TIME_BASE && current_sample->pos < sample->pos) ||
1599                   (FFABS(best_dts - dts) > AV_TIME_BASE && dts < best_dts)))))) {
1600                 sample = current_sample;
1601                 best_dts = dts;
1602                 sc = msc;
1603             }
1604         }
1605     }
1606     if (!sample)
1607         return -1;
1608     /* must be done just before reading, to avoid infinite loop on sample */
1609     sc->current_sample++;
1610     if (url_fseek(sc->pb, sample->pos, SEEK_SET) != sample->pos) {
1611         av_log(mov->fc, AV_LOG_ERROR, "stream %d, offset 0x%"PRIx64": partial file\n",
1612                sc->ffindex, sample->pos);
1613         return -1;
1614     }
1615     av_get_packet(sc->pb, pkt, sample->size);
1616 #ifdef CONFIG_DV_DEMUXER
1617     if (mov->dv_demux && sc->dv_audio_container) {
1618         dv_produce_packet(mov->dv_demux, pkt, pkt->data, pkt->size);
1619         av_free(pkt->data);
1620         pkt->size = 0;
1621         if (dv_get_packet(mov->dv_demux, pkt) < 0)
1622             return -1;
1623     }
1624 #endif
1625     pkt->stream_index = sc->ffindex;
1626     pkt->dts = sample->timestamp;
1627     if (sc->ctts_data) {
1628         assert(sc->ctts_data[sc->sample_to_ctime_index].duration % sc->time_rate == 0);
1629         pkt->pts = pkt->dts + sc->ctts_data[sc->sample_to_ctime_index].duration / sc->time_rate;
1630         /* update ctts context */
1631         sc->sample_to_ctime_sample++;
1632         if (sc->sample_to_ctime_index < sc->ctts_count &&
1633             sc->ctts_data[sc->sample_to_ctime_index].count == sc->sample_to_ctime_sample) {
1634             sc->sample_to_ctime_index++;
1635             sc->sample_to_ctime_sample = 0;
1636         }
1637     } else {
1638         pkt->pts = pkt->dts;
1639     }
1640     pkt->flags |= sample->flags & AVINDEX_KEYFRAME ? PKT_FLAG_KEY : 0;
1641     pkt->pos = sample->pos;
1642     dprintf(s, "stream %d, pts %"PRId64", dts %"PRId64", pos 0x%"PRIx64", duration %d\n",
1643             pkt->stream_index, pkt->pts, pkt->dts, pkt->pos, pkt->duration);
1644     return 0;
1645 }
1646
1647 static int mov_seek_stream(AVStream *st, int64_t timestamp, int flags)
1648 {
1649     MOVStreamContext *sc = st->priv_data;
1650     int sample, time_sample;
1651     int i;
1652
1653     sample = av_index_search_timestamp(st, timestamp, flags);
1654     dprintf(st->codec, "stream %d, timestamp %"PRId64", sample %d\n", st->index, timestamp, sample);
1655     if (sample < 0) /* not sure what to do */
1656         return -1;
1657     sc->current_sample = sample;
1658     dprintf(st->codec, "stream %d, found sample %d\n", st->index, sc->current_sample);
1659     /* adjust ctts index */
1660     if (sc->ctts_data) {
1661         time_sample = 0;
1662         for (i = 0; i < sc->ctts_count; i++) {
1663             int next = time_sample + sc->ctts_data[i].count;
1664             if (next > sc->current_sample) {
1665                 sc->sample_to_ctime_index = i;
1666                 sc->sample_to_ctime_sample = sc->current_sample - time_sample;
1667                 break;
1668             }
1669             time_sample = next;
1670         }
1671     }
1672     return sample;
1673 }
1674
1675 static int mov_read_seek(AVFormatContext *s, int stream_index, int64_t sample_time, int flags)
1676 {
1677     AVStream *st;
1678     int64_t seek_timestamp, timestamp;
1679     int sample;
1680     int i;
1681
1682     if (stream_index >= s->nb_streams)
1683         return -1;
1684
1685     st = s->streams[stream_index];
1686     sample = mov_seek_stream(st, sample_time, flags);
1687     if (sample < 0)
1688         return -1;
1689
1690     /* adjust seek timestamp to found sample timestamp */
1691     seek_timestamp = st->index_entries[sample].timestamp;
1692
1693     for (i = 0; i < s->nb_streams; i++) {
1694         st = s->streams[i];
1695         if (stream_index == i || st->discard == AVDISCARD_ALL)
1696             continue;
1697
1698         timestamp = av_rescale_q(seek_timestamp, s->streams[stream_index]->time_base, st->time_base);
1699         mov_seek_stream(st, timestamp, flags);
1700     }
1701     return 0;
1702 }
1703
1704 static int mov_read_close(AVFormatContext *s)
1705 {
1706     int i, j;
1707     MOVContext *mov = s->priv_data;
1708     for(i=0; i<s->nb_streams; i++) {
1709         MOVStreamContext *sc = s->streams[i]->priv_data;
1710         av_freep(&sc->ctts_data);
1711         for (j=0; j<sc->drefs_count; j++)
1712             av_freep(&sc->drefs[j].path);
1713         av_freep(&sc->drefs);
1714         if (sc->pb && sc->pb != s->pb)
1715             url_fclose(sc->pb);
1716     }
1717     if(mov->dv_demux){
1718         for(i=0; i<mov->dv_fctx->nb_streams; i++){
1719             av_freep(&mov->dv_fctx->streams[i]->codec);
1720             av_freep(&mov->dv_fctx->streams[i]);
1721         }
1722         av_freep(&mov->dv_fctx);
1723         av_freep(&mov->dv_demux);
1724     }
1725     return 0;
1726 }
1727
1728 AVInputFormat mov_demuxer = {
1729     "mov,mp4,m4a,3gp,3g2,mj2",
1730     "QuickTime/MPEG4/Motion JPEG 2000 format",
1731     sizeof(MOVContext),
1732     mov_probe,
1733     mov_read_header,
1734     mov_read_packet,
1735     mov_read_close,
1736     mov_read_seek,
1737 };