mov: support timecode extraction.
[ffmpeg.git] / libavformat / mov.c
1 /*
2  * MOV demuxer
3  * Copyright (c) 2001 Fabrice Bellard
4  * Copyright (c) 2009 Baptiste Coudurier <baptiste dot coudurier at gmail dot com>
5  *
6  * This file is part of FFmpeg.
7  *
8  * FFmpeg is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * FFmpeg is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with FFmpeg; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 #include <limits.h>
24
25 //#define DEBUG
26 //#define MOV_EXPORT_ALL_METADATA
27
28 #include "libavutil/intreadwrite.h"
29 #include "libavutil/intfloat.h"
30 #include "libavutil/mathematics.h"
31 #include "libavutil/avstring.h"
32 #include "libavutil/dict.h"
33 #include "avformat.h"
34 #include "internal.h"
35 #include "avio_internal.h"
36 #include "riff.h"
37 #include "isom.h"
38 #include "libavcodec/get_bits.h"
39 #include "libavcodec/timecode.h"
40 #include "id3v1.h"
41 #include "mov_chan.h"
42
43 #if CONFIG_ZLIB
44 #include <zlib.h>
45 #endif
46
47 /*
48  * First version by Francois Revol revol@free.fr
49  * Seek function by Gael Chardon gael.dev@4now.net
50  */
51
52 #include "qtpalette.h"
53
54
55 #undef NDEBUG
56 #include <assert.h>
57
58 /* those functions parse an atom */
59 /* links atom IDs to parse functions */
60 typedef struct MOVParseTableEntry {
61     uint32_t type;
62     int (*parse)(MOVContext *ctx, AVIOContext *pb, MOVAtom atom);
63 } MOVParseTableEntry;
64
65 static const MOVParseTableEntry mov_default_parse_table[];
66
67 static int mov_metadata_track_or_disc_number(MOVContext *c, AVIOContext *pb,
68                                              unsigned len, const char *key)
69 {
70     char buf[16];
71
72     short current, total = 0;
73     avio_rb16(pb); // unknown
74     current = avio_rb16(pb);
75     if (len >= 6)
76         total = avio_rb16(pb);
77     if (!total)
78         snprintf(buf, sizeof(buf), "%d", current);
79     else
80         snprintf(buf, sizeof(buf), "%d/%d", current, total);
81     av_dict_set(&c->fc->metadata, key, buf, 0);
82
83     return 0;
84 }
85
86 static int mov_metadata_int8_bypass_padding(MOVContext *c, AVIOContext *pb,
87                                             unsigned len, const char *key)
88 {
89     char buf[16];
90
91     /* bypass padding bytes */
92     avio_r8(pb);
93     avio_r8(pb);
94     avio_r8(pb);
95
96     snprintf(buf, sizeof(buf), "%d", avio_r8(pb));
97     av_dict_set(&c->fc->metadata, key, buf, 0);
98
99     return 0;
100 }
101
102 static int mov_metadata_int8_no_padding(MOVContext *c, AVIOContext *pb,
103                                         unsigned len, const char *key)
104 {
105     char buf[16];
106
107     snprintf(buf, sizeof(buf), "%d", avio_r8(pb));
108     av_dict_set(&c->fc->metadata, key, buf, 0);
109
110     return 0;
111 }
112
113 static int mov_metadata_gnre(MOVContext *c, AVIOContext *pb,
114                              unsigned len, const char *key)
115 {
116     short genre;
117     char buf[20];
118
119     avio_r8(pb); // unknown
120
121     genre = avio_r8(pb);
122     if (genre < 1 || genre > ID3v1_GENRE_MAX)
123         return 0;
124     snprintf(buf, sizeof(buf), "%s", ff_id3v1_genre_str[genre-1]);
125     av_dict_set(&c->fc->metadata, key, buf, 0);
126
127     return 0;
128 }
129
130 static const uint32_t mac_to_unicode[128] = {
131     0x00C4,0x00C5,0x00C7,0x00C9,0x00D1,0x00D6,0x00DC,0x00E1,
132     0x00E0,0x00E2,0x00E4,0x00E3,0x00E5,0x00E7,0x00E9,0x00E8,
133     0x00EA,0x00EB,0x00ED,0x00EC,0x00EE,0x00EF,0x00F1,0x00F3,
134     0x00F2,0x00F4,0x00F6,0x00F5,0x00FA,0x00F9,0x00FB,0x00FC,
135     0x2020,0x00B0,0x00A2,0x00A3,0x00A7,0x2022,0x00B6,0x00DF,
136     0x00AE,0x00A9,0x2122,0x00B4,0x00A8,0x2260,0x00C6,0x00D8,
137     0x221E,0x00B1,0x2264,0x2265,0x00A5,0x00B5,0x2202,0x2211,
138     0x220F,0x03C0,0x222B,0x00AA,0x00BA,0x03A9,0x00E6,0x00F8,
139     0x00BF,0x00A1,0x00AC,0x221A,0x0192,0x2248,0x2206,0x00AB,
140     0x00BB,0x2026,0x00A0,0x00C0,0x00C3,0x00D5,0x0152,0x0153,
141     0x2013,0x2014,0x201C,0x201D,0x2018,0x2019,0x00F7,0x25CA,
142     0x00FF,0x0178,0x2044,0x20AC,0x2039,0x203A,0xFB01,0xFB02,
143     0x2021,0x00B7,0x201A,0x201E,0x2030,0x00C2,0x00CA,0x00C1,
144     0x00CB,0x00C8,0x00CD,0x00CE,0x00CF,0x00CC,0x00D3,0x00D4,
145     0xF8FF,0x00D2,0x00DA,0x00DB,0x00D9,0x0131,0x02C6,0x02DC,
146     0x00AF,0x02D8,0x02D9,0x02DA,0x00B8,0x02DD,0x02DB,0x02C7,
147 };
148
149 static int mov_read_mac_string(MOVContext *c, AVIOContext *pb, int len,
150                                char *dst, int dstlen)
151 {
152     char *p = dst;
153     char *end = dst+dstlen-1;
154     int i;
155
156     for (i = 0; i < len; i++) {
157         uint8_t t, c = avio_r8(pb);
158         if (c < 0x80 && p < end)
159             *p++ = c;
160         else
161             PUT_UTF8(mac_to_unicode[c-0x80], t, if (p < end) *p++ = t;);
162     }
163     *p = 0;
164     return p - dst;
165 }
166
167 static int mov_read_udta_string(MOVContext *c, AVIOContext *pb, MOVAtom atom)
168 {
169 #ifdef MOV_EXPORT_ALL_METADATA
170     char tmp_key[5];
171 #endif
172     char str[1024], key2[16], language[4] = {0};
173     const char *key = NULL;
174     uint16_t str_size, langcode = 0;
175     uint32_t data_type = 0;
176     int (*parse)(MOVContext*, AVIOContext*, unsigned, const char*) = NULL;
177
178     switch (atom.type) {
179     case MKTAG(0xa9,'n','a','m'): key = "title";     break;
180     case MKTAG(0xa9,'a','u','t'):
181     case MKTAG(0xa9,'A','R','T'): key = "artist";    break;
182     case MKTAG( 'a','A','R','T'): key = "album_artist";    break;
183     case MKTAG(0xa9,'w','r','t'): key = "composer";  break;
184     case MKTAG( 'c','p','r','t'):
185     case MKTAG(0xa9,'c','p','y'): key = "copyright"; break;
186     case MKTAG(0xa9,'g','r','p'): key = "grouping"; break;
187     case MKTAG(0xa9,'l','y','r'): key = "lyrics"; break;
188     case MKTAG(0xa9,'c','m','t'):
189     case MKTAG(0xa9,'i','n','f'): key = "comment";   break;
190     case MKTAG(0xa9,'a','l','b'): key = "album";     break;
191     case MKTAG(0xa9,'d','a','y'): key = "date";      break;
192     case MKTAG(0xa9,'g','e','n'): key = "genre";     break;
193     case MKTAG( 'g','n','r','e'): key = "genre";
194         parse = mov_metadata_gnre; break;
195     case MKTAG(0xa9,'t','o','o'):
196     case MKTAG(0xa9,'s','w','r'): key = "encoder";   break;
197     case MKTAG(0xa9,'e','n','c'): key = "encoder";   break;
198     case MKTAG( 'd','e','s','c'): key = "description";break;
199     case MKTAG( 'l','d','e','s'): key = "synopsis";  break;
200     case MKTAG( 't','v','s','h'): key = "show";      break;
201     case MKTAG( 't','v','e','n'): key = "episode_id";break;
202     case MKTAG( 't','v','n','n'): key = "network";   break;
203     case MKTAG( 't','r','k','n'): key = "track";
204         parse = mov_metadata_track_or_disc_number; break;
205     case MKTAG( 'd','i','s','k'): key = "disc";
206         parse = mov_metadata_track_or_disc_number; break;
207     case MKTAG( 't','v','e','s'): key = "episode_sort";
208         parse = mov_metadata_int8_bypass_padding; break;
209     case MKTAG( 't','v','s','n'): key = "season_number";
210         parse = mov_metadata_int8_bypass_padding; break;
211     case MKTAG( 's','t','i','k'): key = "media_type";
212         parse = mov_metadata_int8_no_padding; break;
213     case MKTAG( 'h','d','v','d'): key = "hd_video";
214         parse = mov_metadata_int8_no_padding; break;
215     case MKTAG( 'p','g','a','p'): key = "gapless_playback";
216         parse = mov_metadata_int8_no_padding; break;
217     }
218
219     if (c->itunes_metadata && atom.size > 8) {
220         int data_size = avio_rb32(pb);
221         int tag = avio_rl32(pb);
222         if (tag == MKTAG('d','a','t','a')) {
223             data_type = avio_rb32(pb); // type
224             avio_rb32(pb); // unknown
225             str_size = data_size - 16;
226             atom.size -= 16;
227         } else return 0;
228     } else if (atom.size > 4 && key && !c->itunes_metadata) {
229         str_size = avio_rb16(pb); // string length
230         langcode = avio_rb16(pb);
231         ff_mov_lang_to_iso639(langcode, language);
232         atom.size -= 4;
233     } else
234         str_size = atom.size;
235
236 #ifdef MOV_EXPORT_ALL_METADATA
237     if (!key) {
238         snprintf(tmp_key, 5, "%.4s", (char*)&atom.type);
239         key = tmp_key;
240     }
241 #endif
242
243     if (!key)
244         return 0;
245     if (atom.size < 0)
246         return -1;
247
248     str_size = FFMIN3(sizeof(str)-1, str_size, atom.size);
249
250     if (parse)
251         parse(c, pb, str_size, key);
252     else {
253         if (data_type == 3 || (data_type == 0 && langcode < 0x800)) { // MAC Encoded
254             mov_read_mac_string(c, pb, str_size, str, sizeof(str));
255         } else {
256             avio_read(pb, str, str_size);
257             str[str_size] = 0;
258         }
259         av_dict_set(&c->fc->metadata, key, str, 0);
260         if (*language && strcmp(language, "und")) {
261             snprintf(key2, sizeof(key2), "%s-%s", key, language);
262             av_dict_set(&c->fc->metadata, key2, str, 0);
263         }
264     }
265     av_dlog(c->fc, "lang \"%3s\" ", language);
266     av_dlog(c->fc, "tag \"%s\" value \"%s\" atom \"%.4s\" %d %"PRId64"\n",
267             key, str, (char*)&atom.type, str_size, atom.size);
268
269     return 0;
270 }
271
272 static int mov_read_chpl(MOVContext *c, AVIOContext *pb, MOVAtom atom)
273 {
274     int64_t start;
275     int i, nb_chapters, str_len, version;
276     char str[256+1];
277
278     if ((atom.size -= 5) < 0)
279         return 0;
280
281     version = avio_r8(pb);
282     avio_rb24(pb);
283     if (version)
284         avio_rb32(pb); // ???
285     nb_chapters = avio_r8(pb);
286
287     for (i = 0; i < nb_chapters; i++) {
288         if (atom.size < 9)
289             return 0;
290
291         start = avio_rb64(pb);
292         str_len = avio_r8(pb);
293
294         if ((atom.size -= 9+str_len) < 0)
295             return 0;
296
297         avio_read(pb, str, str_len);
298         str[str_len] = 0;
299         avpriv_new_chapter(c->fc, i, (AVRational){1,10000000}, start, AV_NOPTS_VALUE, str);
300     }
301     return 0;
302 }
303
304 static int mov_read_default(MOVContext *c, AVIOContext *pb, MOVAtom atom)
305 {
306     int64_t total_size = 0;
307     MOVAtom a;
308     int i;
309
310     if (atom.size < 0)
311         atom.size = INT64_MAX;
312     while (total_size + 8 <= atom.size && !url_feof(pb)) {
313         int (*parse)(MOVContext*, AVIOContext*, MOVAtom) = NULL;
314         a.size = atom.size;
315         a.type=0;
316         if (atom.size >= 8) {
317             a.size = avio_rb32(pb);
318             a.type = avio_rl32(pb);
319             total_size += 8;
320             if (a.size == 1) { /* 64 bit extended size */
321                 a.size = avio_rb64(pb) - 8;
322                 total_size += 8;
323             }
324         }
325         av_dlog(c->fc, "type: %08x '%.4s' parent:'%.4s' sz: %"PRId64" %"PRId64" %"PRId64"\n",
326                 a.type, (char*)&a.type, (char*)&atom.type, a.size, total_size, atom.size);
327         if (a.size == 0) {
328             a.size = atom.size - total_size + 8;
329         }
330         a.size -= 8;
331         if (a.size < 0)
332             break;
333         a.size = FFMIN(a.size, atom.size - total_size);
334
335         for (i = 0; mov_default_parse_table[i].type; i++)
336             if (mov_default_parse_table[i].type == a.type) {
337                 parse = mov_default_parse_table[i].parse;
338                 break;
339             }
340
341         // container is user data
342         if (!parse && (atom.type == MKTAG('u','d','t','a') ||
343                        atom.type == MKTAG('i','l','s','t')))
344             parse = mov_read_udta_string;
345
346         if (!parse) { /* skip leaf atoms data */
347             avio_skip(pb, a.size);
348         } else {
349             int64_t start_pos = avio_tell(pb);
350             int64_t left;
351             int err = parse(c, pb, a);
352             if (err < 0)
353                 return err;
354             if (c->found_moov && c->found_mdat &&
355                 (!pb->seekable || start_pos + a.size == avio_size(pb)))
356                 return 0;
357             left = a.size - avio_tell(pb) + start_pos;
358             if (left > 0) /* skip garbage at atom end */
359                 avio_skip(pb, left);
360         }
361
362         total_size += a.size;
363     }
364
365     if (total_size < atom.size && atom.size < 0x7ffff)
366         avio_skip(pb, atom.size - total_size);
367
368     return 0;
369 }
370
371 static int mov_read_dref(MOVContext *c, AVIOContext *pb, MOVAtom atom)
372 {
373     AVStream *st;
374     MOVStreamContext *sc;
375     int entries, i, j;
376
377     if (c->fc->nb_streams < 1)
378         return 0;
379     st = c->fc->streams[c->fc->nb_streams-1];
380     sc = st->priv_data;
381
382     avio_rb32(pb); // version + flags
383     entries = avio_rb32(pb);
384     if (entries >= UINT_MAX / sizeof(*sc->drefs))
385         return -1;
386     sc->drefs = av_mallocz(entries * sizeof(*sc->drefs));
387     if (!sc->drefs)
388         return AVERROR(ENOMEM);
389     sc->drefs_count = entries;
390
391     for (i = 0; i < sc->drefs_count; i++) {
392         MOVDref *dref = &sc->drefs[i];
393         uint32_t size = avio_rb32(pb);
394         int64_t next = avio_tell(pb) + size - 4;
395
396         if (size < 12)
397             return -1;
398
399         dref->type = avio_rl32(pb);
400         avio_rb32(pb); // version + flags
401         av_dlog(c->fc, "type %.4s size %d\n", (char*)&dref->type, size);
402
403         if (dref->type == MKTAG('a','l','i','s') && size > 150) {
404             /* macintosh alias record */
405             uint16_t volume_len, len;
406             int16_t type;
407
408             avio_skip(pb, 10);
409
410             volume_len = avio_r8(pb);
411             volume_len = FFMIN(volume_len, 27);
412             avio_read(pb, dref->volume, 27);
413             dref->volume[volume_len] = 0;
414             av_log(c->fc, AV_LOG_DEBUG, "volume %s, len %d\n", dref->volume, volume_len);
415
416             avio_skip(pb, 12);
417
418             len = avio_r8(pb);
419             len = FFMIN(len, 63);
420             avio_read(pb, dref->filename, 63);
421             dref->filename[len] = 0;
422             av_log(c->fc, AV_LOG_DEBUG, "filename %s, len %d\n", dref->filename, len);
423
424             avio_skip(pb, 16);
425
426             /* read next level up_from_alias/down_to_target */
427             dref->nlvl_from = avio_rb16(pb);
428             dref->nlvl_to   = avio_rb16(pb);
429             av_log(c->fc, AV_LOG_DEBUG, "nlvl from %d, nlvl to %d\n",
430                    dref->nlvl_from, dref->nlvl_to);
431
432             avio_skip(pb, 16);
433
434             for (type = 0; type != -1 && avio_tell(pb) < next; ) {
435                 if(url_feof(pb))
436                     return AVERROR_EOF;
437                 type = avio_rb16(pb);
438                 len = avio_rb16(pb);
439                 av_log(c->fc, AV_LOG_DEBUG, "type %d, len %d\n", type, len);
440                 if (len&1)
441                     len += 1;
442                 if (type == 2) { // absolute path
443                     av_free(dref->path);
444                     dref->path = av_mallocz(len+1);
445                     if (!dref->path)
446                         return AVERROR(ENOMEM);
447                     avio_read(pb, dref->path, len);
448                     if (len > volume_len && !strncmp(dref->path, dref->volume, volume_len)) {
449                         len -= volume_len;
450                         memmove(dref->path, dref->path+volume_len, len);
451                         dref->path[len] = 0;
452                     }
453                     for (j = 0; j < len; j++)
454                         if (dref->path[j] == ':')
455                             dref->path[j] = '/';
456                     av_log(c->fc, AV_LOG_DEBUG, "path %s\n", dref->path);
457                 } else if (type == 0) { // directory name
458                     av_free(dref->dir);
459                     dref->dir = av_malloc(len+1);
460                     if (!dref->dir)
461                         return AVERROR(ENOMEM);
462                     avio_read(pb, dref->dir, len);
463                     dref->dir[len] = 0;
464                     for (j = 0; j < len; j++)
465                         if (dref->dir[j] == ':')
466                             dref->dir[j] = '/';
467                     av_log(c->fc, AV_LOG_DEBUG, "dir %s\n", dref->dir);
468                 } else
469                     avio_skip(pb, len);
470             }
471         }
472         avio_seek(pb, next, SEEK_SET);
473     }
474     return 0;
475 }
476
477 static int mov_read_hdlr(MOVContext *c, AVIOContext *pb, MOVAtom atom)
478 {
479     AVStream *st;
480     uint32_t type;
481     uint32_t av_unused ctype;
482     int title_size;
483     char *title_str;
484
485     if (c->fc->nb_streams < 1) // meta before first trak
486         return 0;
487
488     st = c->fc->streams[c->fc->nb_streams-1];
489
490     avio_r8(pb); /* version */
491     avio_rb24(pb); /* flags */
492
493     /* component type */
494     ctype = avio_rl32(pb);
495     type = avio_rl32(pb); /* component subtype */
496
497     av_dlog(c->fc, "ctype= %.4s (0x%08x)\n", (char*)&ctype, ctype);
498     av_dlog(c->fc, "stype= %.4s\n", (char*)&type);
499
500     if     (type == MKTAG('v','i','d','e'))
501         st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
502     else if (type == MKTAG('s','o','u','n'))
503         st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
504     else if (type == MKTAG('m','1','a',' '))
505         st->codec->codec_id = CODEC_ID_MP2;
506     else if ((type == MKTAG('s','u','b','p')) || (type == MKTAG('c','l','c','p')))
507         st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
508
509     avio_rb32(pb); /* component  manufacture */
510     avio_rb32(pb); /* component flags */
511     avio_rb32(pb); /* component flags mask */
512
513     title_size = atom.size - 24;
514     if (title_size > 0) {
515         title_str = av_malloc(title_size + 1); /* Add null terminator */
516         if (!title_str)
517             return AVERROR(ENOMEM);
518         avio_read(pb, title_str, title_size);
519         title_str[title_size] = 0;
520         av_dict_set(&st->metadata, "handler_name", title_str, 0);
521         av_freep(&title_str);
522     }
523
524     return 0;
525 }
526
527 int ff_mov_read_esds(AVFormatContext *fc, AVIOContext *pb, MOVAtom atom)
528 {
529     AVStream *st;
530     int tag;
531
532     if (fc->nb_streams < 1)
533         return 0;
534     st = fc->streams[fc->nb_streams-1];
535
536     avio_rb32(pb); /* version + flags */
537     ff_mp4_read_descr(fc, pb, &tag);
538     if (tag == MP4ESDescrTag) {
539         ff_mp4_parse_es_descr(pb, NULL);
540     } else
541         avio_rb16(pb); /* ID */
542
543     ff_mp4_read_descr(fc, pb, &tag);
544     if (tag == MP4DecConfigDescrTag)
545         ff_mp4_read_dec_config_descr(fc, st, pb);
546     return 0;
547 }
548
549 static int mov_read_esds(MOVContext *c, AVIOContext *pb, MOVAtom atom)
550 {
551     return ff_mov_read_esds(c->fc, pb, atom);
552 }
553
554 static int mov_read_dac3(MOVContext *c, AVIOContext *pb, MOVAtom atom)
555 {
556     AVStream *st;
557     int ac3info, acmod, lfeon, bsmod;
558
559     if (c->fc->nb_streams < 1)
560         return 0;
561     st = c->fc->streams[c->fc->nb_streams-1];
562
563     ac3info = avio_rb24(pb);
564     bsmod = (ac3info >> 14) & 0x7;
565     acmod = (ac3info >> 11) & 0x7;
566     lfeon = (ac3info >> 10) & 0x1;
567     st->codec->channels = ((int[]){2,1,2,3,3,4,4,5})[acmod] + lfeon;
568     st->codec->audio_service_type = bsmod;
569     if (st->codec->channels > 1 && bsmod == 0x7)
570         st->codec->audio_service_type = AV_AUDIO_SERVICE_TYPE_KARAOKE;
571
572     return 0;
573 }
574
575 static int mov_read_chan(MOVContext *c, AVIOContext *pb, MOVAtom atom)
576 {
577     AVStream *st;
578     uint8_t version;
579     uint32_t flags, layout_tag, bitmap, num_descr;
580
581     if (c->fc->nb_streams < 1)
582         return 0;
583     st = c->fc->streams[c->fc->nb_streams-1];
584
585     if (atom.size < 16)
586         return 0;
587
588     version = avio_r8(pb);
589     flags   = avio_rb24(pb);
590
591     layout_tag = avio_rb32(pb);
592     bitmap     = avio_rb32(pb);
593     num_descr  = avio_rb32(pb);
594
595     if (atom.size < 16ULL + num_descr * 20ULL)
596         return 0;
597
598     av_dlog(c->fc, "chan: size=%" PRId64 " version=%u flags=%u layout=%u bitmap=%u num_descr=%u\n",
599             atom.size, version, flags, layout_tag, bitmap, num_descr);
600
601 #if 0
602     /* TODO: use the channel descriptions if the layout tag is 0 */
603     int i;
604     for (i = 0; i < num_descr; i++) {
605         uint32_t label, cflags;
606         float coords[3];
607         label     = avio_rb32(pb);          // mChannelLabel
608         cflags    = avio_rb32(pb);          // mChannelFlags
609         AV_WN32(&coords[0], avio_rl32(pb)); // mCoordinates[0]
610         AV_WN32(&coords[1], avio_rl32(pb)); // mCoordinates[1]
611         AV_WN32(&coords[2], avio_rl32(pb)); // mCoordinates[2]
612     }
613 #endif
614
615     st->codec->channel_layout = ff_mov_get_channel_layout(layout_tag, bitmap);
616
617     return 0;
618 }
619
620 static int mov_read_wfex(MOVContext *c, AVIOContext *pb, MOVAtom atom)
621 {
622     AVStream *st;
623
624     if (c->fc->nb_streams < 1)
625         return 0;
626     st = c->fc->streams[c->fc->nb_streams-1];
627
628     ff_get_wav_header(pb, st->codec, atom.size);
629
630     return 0;
631 }
632
633 static int mov_read_pasp(MOVContext *c, AVIOContext *pb, MOVAtom atom)
634 {
635     const int num = avio_rb32(pb);
636     const int den = avio_rb32(pb);
637     AVStream *st;
638
639     if (c->fc->nb_streams < 1)
640         return 0;
641     st = c->fc->streams[c->fc->nb_streams-1];
642
643     if ((st->sample_aspect_ratio.den != 1 || st->sample_aspect_ratio.num) && // default
644         (den != st->sample_aspect_ratio.den || num != st->sample_aspect_ratio.num)) {
645         av_log(c->fc, AV_LOG_WARNING,
646                "sample aspect ratio already set to %d:%d, ignoring 'pasp' atom (%d:%d)\n",
647                st->sample_aspect_ratio.num, st->sample_aspect_ratio.den,
648                num, den);
649     } else if (den != 0) {
650         st->sample_aspect_ratio.num = num;
651         st->sample_aspect_ratio.den = den;
652     }
653     return 0;
654 }
655
656 /* this atom contains actual media data */
657 static int mov_read_mdat(MOVContext *c, AVIOContext *pb, MOVAtom atom)
658 {
659     if (atom.size == 0) /* wrong one (MP4) */
660         return 0;
661     c->found_mdat=1;
662     return 0; /* now go for moov */
663 }
664
665 /* read major brand, minor version and compatible brands and store them as metadata */
666 static int mov_read_ftyp(MOVContext *c, AVIOContext *pb, MOVAtom atom)
667 {
668     uint32_t minor_ver;
669     int comp_brand_size;
670     char minor_ver_str[11]; /* 32 bit integer -> 10 digits + null */
671     char* comp_brands_str;
672     uint8_t type[5] = {0};
673
674     avio_read(pb, type, 4);
675     if (strcmp(type, "qt  "))
676         c->isom = 1;
677     av_log(c->fc, AV_LOG_DEBUG, "ISO: File Type Major Brand: %.4s\n",(char *)&type);
678     av_dict_set(&c->fc->metadata, "major_brand", type, 0);
679     minor_ver = avio_rb32(pb); /* minor version */
680     snprintf(minor_ver_str, sizeof(minor_ver_str), "%d", minor_ver);
681     av_dict_set(&c->fc->metadata, "minor_version", minor_ver_str, 0);
682
683     comp_brand_size = atom.size - 8;
684     if (comp_brand_size < 0)
685         return -1;
686     comp_brands_str = av_malloc(comp_brand_size + 1); /* Add null terminator */
687     if (!comp_brands_str)
688         return AVERROR(ENOMEM);
689     avio_read(pb, comp_brands_str, comp_brand_size);
690     comp_brands_str[comp_brand_size] = 0;
691     av_dict_set(&c->fc->metadata, "compatible_brands", comp_brands_str, 0);
692     av_freep(&comp_brands_str);
693
694     return 0;
695 }
696
697 /* this atom should contain all header atoms */
698 static int mov_read_moov(MOVContext *c, AVIOContext *pb, MOVAtom atom)
699 {
700     if (mov_read_default(c, pb, atom) < 0)
701         return -1;
702     /* we parsed the 'moov' atom, we can terminate the parsing as soon as we find the 'mdat' */
703     /* so we don't parse the whole file if over a network */
704     c->found_moov=1;
705     return 0; /* now go for mdat */
706 }
707
708 static int mov_read_moof(MOVContext *c, AVIOContext *pb, MOVAtom atom)
709 {
710     c->fragment.moof_offset = avio_tell(pb) - 8;
711     av_dlog(c->fc, "moof offset %"PRIx64"\n", c->fragment.moof_offset);
712     return mov_read_default(c, pb, atom);
713 }
714
715 static void mov_metadata_creation_time(AVDictionary **metadata, time_t time)
716 {
717     char buffer[32];
718     if (time) {
719         struct tm *ptm;
720         time -= 2082844800;  /* seconds between 1904-01-01 and Epoch */
721         ptm = gmtime(&time);
722         if (!ptm) return;
723         strftime(buffer, sizeof(buffer), "%Y-%m-%d %H:%M:%S", ptm);
724         av_dict_set(metadata, "creation_time", buffer, 0);
725     }
726 }
727
728 static int mov_read_mdhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
729 {
730     AVStream *st;
731     MOVStreamContext *sc;
732     int version;
733     char language[4] = {0};
734     unsigned lang;
735     time_t creation_time;
736
737     if (c->fc->nb_streams < 1)
738         return 0;
739     st = c->fc->streams[c->fc->nb_streams-1];
740     sc = st->priv_data;
741
742     version = avio_r8(pb);
743     if (version > 1)
744         return -1; /* unsupported */
745
746     avio_rb24(pb); /* flags */
747     if (version == 1) {
748         creation_time = avio_rb64(pb);
749         avio_rb64(pb);
750     } else {
751         creation_time = avio_rb32(pb);
752         avio_rb32(pb); /* modification time */
753     }
754     mov_metadata_creation_time(&st->metadata, creation_time);
755
756     sc->time_scale = avio_rb32(pb);
757     st->duration = (version == 1) ? avio_rb64(pb) : avio_rb32(pb); /* duration */
758
759     lang = avio_rb16(pb); /* language */
760     if (ff_mov_lang_to_iso639(lang, language))
761         av_dict_set(&st->metadata, "language", language, 0);
762     avio_rb16(pb); /* quality */
763
764     return 0;
765 }
766
767 static int mov_read_mvhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
768 {
769     time_t creation_time;
770     int version = avio_r8(pb); /* version */
771     avio_rb24(pb); /* flags */
772
773     if (version == 1) {
774         creation_time = avio_rb64(pb);
775         avio_rb64(pb);
776     } else {
777         creation_time = avio_rb32(pb);
778         avio_rb32(pb); /* modification time */
779     }
780     mov_metadata_creation_time(&c->fc->metadata, creation_time);
781     c->time_scale = avio_rb32(pb); /* time scale */
782
783     av_dlog(c->fc, "time scale = %i\n", c->time_scale);
784
785     c->duration = (version == 1) ? avio_rb64(pb) : avio_rb32(pb); /* duration */
786     avio_rb32(pb); /* preferred scale */
787
788     avio_rb16(pb); /* preferred volume */
789
790     avio_skip(pb, 10); /* reserved */
791
792     avio_skip(pb, 36); /* display matrix */
793
794     avio_rb32(pb); /* preview time */
795     avio_rb32(pb); /* preview duration */
796     avio_rb32(pb); /* poster time */
797     avio_rb32(pb); /* selection time */
798     avio_rb32(pb); /* selection duration */
799     avio_rb32(pb); /* current time */
800     avio_rb32(pb); /* next track ID */
801
802     return 0;
803 }
804
805 static int mov_read_smi(MOVContext *c, AVIOContext *pb, MOVAtom atom)
806 {
807     AVStream *st;
808
809     if (c->fc->nb_streams < 1)
810         return 0;
811     st = c->fc->streams[c->fc->nb_streams-1];
812
813     if ((uint64_t)atom.size > (1<<30))
814         return -1;
815
816     // currently SVQ3 decoder expect full STSD header - so let's fake it
817     // this should be fixed and just SMI header should be passed
818     av_free(st->codec->extradata);
819     st->codec->extradata = av_mallocz(atom.size + 0x5a + FF_INPUT_BUFFER_PADDING_SIZE);
820     if (!st->codec->extradata)
821         return AVERROR(ENOMEM);
822     st->codec->extradata_size = 0x5a + atom.size;
823     memcpy(st->codec->extradata, "SVQ3", 4); // fake
824     avio_read(pb, st->codec->extradata + 0x5a, atom.size);
825     av_dlog(c->fc, "Reading SMI %"PRId64"  %s\n", atom.size, st->codec->extradata + 0x5a);
826     return 0;
827 }
828
829 static int mov_read_enda(MOVContext *c, AVIOContext *pb, MOVAtom atom)
830 {
831     AVStream *st;
832     int little_endian;
833
834     if (c->fc->nb_streams < 1)
835         return 0;
836     st = c->fc->streams[c->fc->nb_streams-1];
837
838     little_endian = avio_rb16(pb) & 0xFF;
839     av_dlog(c->fc, "enda %d\n", little_endian);
840     if (little_endian == 1) {
841         switch (st->codec->codec_id) {
842         case CODEC_ID_PCM_S24BE:
843             st->codec->codec_id = CODEC_ID_PCM_S24LE;
844             break;
845         case CODEC_ID_PCM_S32BE:
846             st->codec->codec_id = CODEC_ID_PCM_S32LE;
847             break;
848         case CODEC_ID_PCM_F32BE:
849             st->codec->codec_id = CODEC_ID_PCM_F32LE;
850             break;
851         case CODEC_ID_PCM_F64BE:
852             st->codec->codec_id = CODEC_ID_PCM_F64LE;
853             break;
854         default:
855             break;
856         }
857     }
858     return 0;
859 }
860
861 static int mov_read_fiel(MOVContext *c, AVIOContext *pb, MOVAtom atom)
862 {
863     AVStream *st;
864     unsigned mov_field_order;
865     enum AVFieldOrder decoded_field_order = AV_FIELD_UNKNOWN;
866
867     if (c->fc->nb_streams < 1) // will happen with jp2 files
868         return 0;
869     st = c->fc->streams[c->fc->nb_streams-1];
870     if (atom.size < 2)
871         return AVERROR_INVALIDDATA;
872     mov_field_order = avio_rb16(pb);
873     if ((mov_field_order & 0xFF00) == 0x0100)
874         decoded_field_order = AV_FIELD_PROGRESSIVE;
875     else if ((mov_field_order & 0xFF00) == 0x0200) {
876         switch (mov_field_order & 0xFF) {
877         case 0x01: decoded_field_order = AV_FIELD_TT;
878                    break;
879         case 0x06: decoded_field_order = AV_FIELD_BB;
880                    break;
881         case 0x09: decoded_field_order = AV_FIELD_TB;
882                    break;
883         case 0x0E: decoded_field_order = AV_FIELD_BT;
884                    break;
885         }
886     }
887     if (decoded_field_order == AV_FIELD_UNKNOWN && mov_field_order) {
888         av_log(NULL, AV_LOG_ERROR, "Unknown MOV field order 0x%04x\n", mov_field_order);
889     }
890     st->codec->field_order = decoded_field_order;
891
892     return 0;
893 }
894
895 /* FIXME modify qdm2/svq3/h264 decoders to take full atom as extradata */
896 static int mov_read_extradata(MOVContext *c, AVIOContext *pb, MOVAtom atom,
897                               enum CodecID codec_id)
898 {
899     AVStream *st;
900     uint64_t size;
901     uint8_t *buf;
902
903     if (c->fc->nb_streams < 1) // will happen with jp2 files
904         return 0;
905     st= c->fc->streams[c->fc->nb_streams-1];
906
907     if (st->codec->codec_id != codec_id)
908         return 0; /* unexpected codec_id - don't mess with extradata */
909
910     size= (uint64_t)st->codec->extradata_size + atom.size + 8 + FF_INPUT_BUFFER_PADDING_SIZE;
911     if (size > INT_MAX || (uint64_t)atom.size > INT_MAX)
912         return -1;
913     buf= av_realloc(st->codec->extradata, size);
914     if (!buf)
915         return -1;
916     st->codec->extradata= buf;
917     buf+= st->codec->extradata_size;
918     st->codec->extradata_size= size - FF_INPUT_BUFFER_PADDING_SIZE;
919     AV_WB32(       buf    , atom.size + 8);
920     AV_WL32(       buf + 4, atom.type);
921     avio_read(pb, buf + 8, atom.size);
922     return 0;
923 }
924
925 /* wrapper functions for reading ALAC/AVS/MJPEG/MJPEG2000 extradata atoms only for those codecs */
926 static int mov_read_alac(MOVContext *c, AVIOContext *pb, MOVAtom atom)
927 {
928     return mov_read_extradata(c, pb, atom, CODEC_ID_ALAC);
929 }
930
931 static int mov_read_avss(MOVContext *c, AVIOContext *pb, MOVAtom atom)
932 {
933     return mov_read_extradata(c, pb, atom, CODEC_ID_AVS);
934 }
935
936 static int mov_read_jp2h(MOVContext *c, AVIOContext *pb, MOVAtom atom)
937 {
938     return mov_read_extradata(c, pb, atom, CODEC_ID_JPEG2000);
939 }
940
941 static int mov_read_wave(MOVContext *c, AVIOContext *pb, MOVAtom atom)
942 {
943     AVStream *st;
944
945     if (c->fc->nb_streams < 1)
946         return 0;
947     st = c->fc->streams[c->fc->nb_streams-1];
948
949     if ((uint64_t)atom.size > (1<<30))
950         return -1;
951
952     if (st->codec->codec_id == CODEC_ID_QDM2 || st->codec->codec_id == CODEC_ID_QDMC) {
953         // pass all frma atom to codec, needed at least for QDMC and QDM2
954         av_free(st->codec->extradata);
955         st->codec->extradata = av_mallocz(atom.size + FF_INPUT_BUFFER_PADDING_SIZE);
956         if (!st->codec->extradata)
957             return AVERROR(ENOMEM);
958         st->codec->extradata_size = atom.size;
959         avio_read(pb, st->codec->extradata, atom.size);
960     } else if (atom.size > 8) { /* to read frma, esds atoms */
961         if (mov_read_default(c, pb, atom) < 0)
962             return -1;
963     } else
964         avio_skip(pb, atom.size);
965     return 0;
966 }
967
968 /**
969  * This function reads atom content and puts data in extradata without tag
970  * nor size unlike mov_read_extradata.
971  */
972 static int mov_read_glbl(MOVContext *c, AVIOContext *pb, MOVAtom atom)
973 {
974     AVStream *st;
975
976     if (c->fc->nb_streams < 1)
977         return 0;
978     st = c->fc->streams[c->fc->nb_streams-1];
979
980     if ((uint64_t)atom.size > (1<<30))
981         return -1;
982
983     if (atom.size >= 10) {
984         // Broken files created by legacy versions of Libav and FFmpeg will
985         // wrap a whole fiel atom inside of a glbl atom.
986         unsigned size = avio_rb32(pb);
987         unsigned type = avio_rl32(pb);
988         avio_seek(pb, -8, SEEK_CUR);
989         if (type == MKTAG('f','i','e','l') && size == atom.size)
990             return mov_read_default(c, pb, atom);
991     }
992     av_free(st->codec->extradata);
993     st->codec->extradata = av_mallocz(atom.size + FF_INPUT_BUFFER_PADDING_SIZE);
994     if (!st->codec->extradata)
995         return AVERROR(ENOMEM);
996     st->codec->extradata_size = atom.size;
997     avio_read(pb, st->codec->extradata, atom.size);
998     return 0;
999 }
1000
1001 /**
1002  * An strf atom is a BITMAPINFOHEADER struct. This struct is 40 bytes itself,
1003  * but can have extradata appended at the end after the 40 bytes belonging
1004  * to the struct.
1005  */
1006 static int mov_read_strf(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1007 {
1008     AVStream *st;
1009
1010     if (c->fc->nb_streams < 1)
1011         return 0;
1012     if (atom.size <= 40)
1013         return 0;
1014     st = c->fc->streams[c->fc->nb_streams-1];
1015
1016     if ((uint64_t)atom.size > (1<<30))
1017         return -1;
1018
1019     av_free(st->codec->extradata);
1020     st->codec->extradata = av_mallocz(atom.size - 40 + FF_INPUT_BUFFER_PADDING_SIZE);
1021     if (!st->codec->extradata)
1022         return AVERROR(ENOMEM);
1023     st->codec->extradata_size = atom.size - 40;
1024     avio_skip(pb, 40);
1025     avio_read(pb, st->codec->extradata, atom.size - 40);
1026     return 0;
1027 }
1028
1029 static int mov_read_stco(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1030 {
1031     AVStream *st;
1032     MOVStreamContext *sc;
1033     unsigned int i, entries;
1034
1035     if (c->fc->nb_streams < 1)
1036         return 0;
1037     st = c->fc->streams[c->fc->nb_streams-1];
1038     sc = st->priv_data;
1039
1040     avio_r8(pb); /* version */
1041     avio_rb24(pb); /* flags */
1042
1043     entries = avio_rb32(pb);
1044
1045     if (!entries)
1046         return 0;
1047     if (entries >= UINT_MAX/sizeof(int64_t))
1048         return -1;
1049
1050     sc->chunk_offsets = av_malloc(entries * sizeof(int64_t));
1051     if (!sc->chunk_offsets)
1052         return AVERROR(ENOMEM);
1053     sc->chunk_count = entries;
1054
1055     if      (atom.type == MKTAG('s','t','c','o'))
1056         for (i=0; i<entries; i++)
1057             sc->chunk_offsets[i] = avio_rb32(pb);
1058     else if (atom.type == MKTAG('c','o','6','4'))
1059         for (i=0; i<entries; i++)
1060             sc->chunk_offsets[i] = avio_rb64(pb);
1061     else
1062         return -1;
1063
1064     return 0;
1065 }
1066
1067 /**
1068  * Compute codec id for 'lpcm' tag.
1069  * See CoreAudioTypes and AudioStreamBasicDescription at Apple.
1070  */
1071 enum CodecID ff_mov_get_lpcm_codec_id(int bps, int flags)
1072 {
1073     if (flags & 1) { // floating point
1074         if (flags & 2) { // big endian
1075             if      (bps == 32) return CODEC_ID_PCM_F32BE;
1076             else if (bps == 64) return CODEC_ID_PCM_F64BE;
1077         } else {
1078             if      (bps == 32) return CODEC_ID_PCM_F32LE;
1079             else if (bps == 64) return CODEC_ID_PCM_F64LE;
1080         }
1081     } else {
1082         if (flags & 2) {
1083             if      (bps == 8)
1084                 // signed integer
1085                 if (flags & 4)  return CODEC_ID_PCM_S8;
1086                 else            return CODEC_ID_PCM_U8;
1087             else if (bps == 16) return CODEC_ID_PCM_S16BE;
1088             else if (bps == 24) return CODEC_ID_PCM_S24BE;
1089             else if (bps == 32) return CODEC_ID_PCM_S32BE;
1090         } else {
1091             if      (bps == 8)
1092                 if (flags & 4)  return CODEC_ID_PCM_S8;
1093                 else            return CODEC_ID_PCM_U8;
1094             else if (bps == 16) return CODEC_ID_PCM_S16LE;
1095             else if (bps == 24) return CODEC_ID_PCM_S24LE;
1096             else if (bps == 32) return CODEC_ID_PCM_S32LE;
1097         }
1098     }
1099     return CODEC_ID_NONE;
1100 }
1101
1102 int ff_mov_read_stsd_entries(MOVContext *c, AVIOContext *pb, int entries)
1103 {
1104     AVStream *st;
1105     MOVStreamContext *sc;
1106     int j, pseudo_stream_id;
1107
1108     if (c->fc->nb_streams < 1)
1109         return 0;
1110     st = c->fc->streams[c->fc->nb_streams-1];
1111     sc = st->priv_data;
1112
1113     for (pseudo_stream_id=0; pseudo_stream_id<entries; pseudo_stream_id++) {
1114         //Parsing Sample description table
1115         enum CodecID id;
1116         int dref_id = 1;
1117         MOVAtom a = { AV_RL32("stsd") };
1118         int64_t start_pos = avio_tell(pb);
1119         int size = avio_rb32(pb); /* size */
1120         uint32_t format = avio_rl32(pb); /* data format */
1121
1122         if (size >= 16) {
1123             avio_rb32(pb); /* reserved */
1124             avio_rb16(pb); /* reserved */
1125             dref_id = avio_rb16(pb);
1126         }else if (size <= 0){
1127             av_log(c->fc, AV_LOG_ERROR, "invalid size %d in stsd\n", size);
1128             return -1;
1129         }
1130
1131         if (st->codec->codec_tag &&
1132             st->codec->codec_tag != format &&
1133             (c->fc->video_codec_id ? ff_codec_get_id(codec_movvideo_tags, format) != c->fc->video_codec_id
1134                                    : st->codec->codec_tag != MKTAG('j','p','e','g'))
1135            ){
1136             /* Multiple fourcc, we skip JPEG. This is not correct, we should
1137              * export it as a separate AVStream but this needs a few changes
1138              * in the MOV demuxer, patch welcome. */
1139         multiple_stsd:
1140             av_log(c->fc, AV_LOG_WARNING, "multiple fourcc not supported\n");
1141             avio_skip(pb, size - (avio_tell(pb) - start_pos));
1142             continue;
1143         }
1144         /* we cannot demux concatenated h264 streams because of different extradata */
1145         if (st->codec->codec_tag && st->codec->codec_tag == AV_RL32("avc1"))
1146             goto multiple_stsd;
1147         sc->pseudo_stream_id = st->codec->codec_tag ? -1 : pseudo_stream_id;
1148         sc->dref_id= dref_id;
1149
1150         st->codec->codec_tag = format;
1151         id = ff_codec_get_id(codec_movaudio_tags, format);
1152         if (id<=0 && ((format&0xFFFF) == 'm'+('s'<<8) || (format&0xFFFF) == 'T'+('S'<<8)))
1153             id = ff_codec_get_id(ff_codec_wav_tags, av_bswap32(format)&0xFFFF);
1154
1155         if (st->codec->codec_type != AVMEDIA_TYPE_VIDEO && id > 0) {
1156             st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
1157         } else if (st->codec->codec_type != AVMEDIA_TYPE_AUDIO && /* do not overwrite codec type */
1158                    format && format != MKTAG('m','p','4','s')) { /* skip old asf mpeg4 tag */
1159             id = ff_codec_get_id(codec_movvideo_tags, format);
1160             if (id <= 0)
1161                 id = ff_codec_get_id(ff_codec_bmp_tags, format);
1162             if (id > 0)
1163                 st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
1164             else if (st->codec->codec_type == AVMEDIA_TYPE_DATA){
1165                 id = ff_codec_get_id(ff_codec_movsubtitle_tags, format);
1166                 if (id > 0)
1167                     st->codec->codec_type = AVMEDIA_TYPE_SUBTITLE;
1168             }
1169         }
1170
1171         av_dlog(c->fc, "size=%d 4CC= %c%c%c%c codec_type=%d\n", size,
1172                 (format >> 0) & 0xff, (format >> 8) & 0xff, (format >> 16) & 0xff,
1173                 (format >> 24) & 0xff, st->codec->codec_type);
1174
1175         if (st->codec->codec_type==AVMEDIA_TYPE_VIDEO) {
1176             unsigned int color_depth, len;
1177             int color_greyscale;
1178
1179             st->codec->codec_id = id;
1180             avio_rb16(pb); /* version */
1181             avio_rb16(pb); /* revision level */
1182             avio_rb32(pb); /* vendor */
1183             avio_rb32(pb); /* temporal quality */
1184             avio_rb32(pb); /* spatial quality */
1185
1186             st->codec->width = avio_rb16(pb); /* width */
1187             st->codec->height = avio_rb16(pb); /* height */
1188
1189             avio_rb32(pb); /* horiz resolution */
1190             avio_rb32(pb); /* vert resolution */
1191             avio_rb32(pb); /* data size, always 0 */
1192             avio_rb16(pb); /* frames per samples */
1193
1194             len = avio_r8(pb); /* codec name, pascal string */
1195             if (len > 31)
1196                 len = 31;
1197             mov_read_mac_string(c, pb, len, st->codec->codec_name, 32);
1198             if (len < 31)
1199                 avio_skip(pb, 31 - len);
1200             /* codec_tag YV12 triggers an UV swap in rawdec.c */
1201             if (!memcmp(st->codec->codec_name, "Planar Y'CbCr 8-bit 4:2:0", 25))
1202                 st->codec->codec_tag=MKTAG('I', '4', '2', '0');
1203
1204             st->codec->bits_per_coded_sample = avio_rb16(pb); /* depth */
1205             st->codec->color_table_id = avio_rb16(pb); /* colortable id */
1206             av_dlog(c->fc, "depth %d, ctab id %d\n",
1207                    st->codec->bits_per_coded_sample, st->codec->color_table_id);
1208             /* figure out the palette situation */
1209             color_depth = st->codec->bits_per_coded_sample & 0x1F;
1210             color_greyscale = st->codec->bits_per_coded_sample & 0x20;
1211
1212             /* if the depth is 2, 4, or 8 bpp, file is palettized */
1213             if ((color_depth == 2) || (color_depth == 4) ||
1214                 (color_depth == 8)) {
1215                 /* for palette traversal */
1216                 unsigned int color_start, color_count, color_end;
1217                 unsigned char a, r, g, b;
1218
1219                 if (color_greyscale) {
1220                     int color_index, color_dec;
1221                     /* compute the greyscale palette */
1222                     st->codec->bits_per_coded_sample = color_depth;
1223                     color_count = 1 << color_depth;
1224                     color_index = 255;
1225                     color_dec = 256 / (color_count - 1);
1226                     for (j = 0; j < color_count; j++) {
1227                         if (id == CODEC_ID_CINEPAK){
1228                             r = g = b = color_count - 1 - color_index;
1229                         }else
1230                         r = g = b = color_index;
1231                         sc->palette[j] =
1232                             (0xFFU << 24) | (r << 16) | (g << 8) | (b);
1233                         color_index -= color_dec;
1234                         if (color_index < 0)
1235                             color_index = 0;
1236                     }
1237                 } else if (st->codec->color_table_id) {
1238                     const uint8_t *color_table;
1239                     /* if flag bit 3 is set, use the default palette */
1240                     color_count = 1 << color_depth;
1241                     if (color_depth == 2)
1242                         color_table = ff_qt_default_palette_4;
1243                     else if (color_depth == 4)
1244                         color_table = ff_qt_default_palette_16;
1245                     else
1246                         color_table = ff_qt_default_palette_256;
1247
1248                     for (j = 0; j < color_count; j++) {
1249                         r = color_table[j * 3 + 0];
1250                         g = color_table[j * 3 + 1];
1251                         b = color_table[j * 3 + 2];
1252                         sc->palette[j] =
1253                             (0xFFU << 24) | (r << 16) | (g << 8) | (b);
1254                     }
1255                 } else {
1256                     /* load the palette from the file */
1257                     color_start = avio_rb32(pb);
1258                     color_count = avio_rb16(pb);
1259                     color_end = avio_rb16(pb);
1260                     if ((color_start <= 255) &&
1261                         (color_end <= 255)) {
1262                         for (j = color_start; j <= color_end; j++) {
1263                             /* each A, R, G, or B component is 16 bits;
1264                              * only use the top 8 bits */
1265                             a = avio_r8(pb);
1266                             avio_r8(pb);
1267                             r = avio_r8(pb);
1268                             avio_r8(pb);
1269                             g = avio_r8(pb);
1270                             avio_r8(pb);
1271                             b = avio_r8(pb);
1272                             avio_r8(pb);
1273                             sc->palette[j] =
1274                                 (a << 24 ) | (r << 16) | (g << 8) | (b);
1275                         }
1276                     }
1277                 }
1278                 sc->has_palette = 1;
1279             }
1280         } else if (st->codec->codec_type==AVMEDIA_TYPE_AUDIO) {
1281             int bits_per_sample, flags;
1282             uint16_t version = avio_rb16(pb);
1283
1284             st->codec->codec_id = id;
1285             avio_rb16(pb); /* revision level */
1286             avio_rb32(pb); /* vendor */
1287
1288             st->codec->channels = avio_rb16(pb);             /* channel count */
1289             av_dlog(c->fc, "audio channels %d\n", st->codec->channels);
1290             st->codec->bits_per_coded_sample = avio_rb16(pb);      /* sample size */
1291
1292             sc->audio_cid = avio_rb16(pb);
1293             avio_rb16(pb); /* packet size = 0 */
1294
1295             st->codec->sample_rate = ((avio_rb32(pb) >> 16));
1296
1297             //Read QT version 1 fields. In version 0 these do not exist.
1298             av_dlog(c->fc, "version =%d, isom =%d\n",version,c->isom);
1299             if (!c->isom) {
1300                 if (version==1) {
1301                     sc->samples_per_frame = avio_rb32(pb);
1302                     avio_rb32(pb); /* bytes per packet */
1303                     sc->bytes_per_frame = avio_rb32(pb);
1304                     avio_rb32(pb); /* bytes per sample */
1305                 } else if (version==2) {
1306                     avio_rb32(pb); /* sizeof struct only */
1307                     st->codec->sample_rate = av_int2double(avio_rb64(pb)); /* float 64 */
1308                     st->codec->channels = avio_rb32(pb);
1309                     avio_rb32(pb); /* always 0x7F000000 */
1310                     st->codec->bits_per_coded_sample = avio_rb32(pb); /* bits per channel if sound is uncompressed */
1311                     flags = avio_rb32(pb); /* lpcm format specific flag */
1312                     sc->bytes_per_frame = avio_rb32(pb); /* bytes per audio packet if constant */
1313                     sc->samples_per_frame = avio_rb32(pb); /* lpcm frames per audio packet if constant */
1314                     if (format == MKTAG('l','p','c','m'))
1315                         st->codec->codec_id = ff_mov_get_lpcm_codec_id(st->codec->bits_per_coded_sample, flags);
1316                 }
1317             }
1318
1319             switch (st->codec->codec_id) {
1320             case CODEC_ID_PCM_S8:
1321             case CODEC_ID_PCM_U8:
1322                 if (st->codec->bits_per_coded_sample == 16)
1323                     st->codec->codec_id = CODEC_ID_PCM_S16BE;
1324                 break;
1325             case CODEC_ID_PCM_S16LE:
1326             case CODEC_ID_PCM_S16BE:
1327                 if (st->codec->bits_per_coded_sample == 8)
1328                     st->codec->codec_id = CODEC_ID_PCM_S8;
1329                 else if (st->codec->bits_per_coded_sample == 24)
1330                     st->codec->codec_id =
1331                         st->codec->codec_id == CODEC_ID_PCM_S16BE ?
1332                         CODEC_ID_PCM_S24BE : CODEC_ID_PCM_S24LE;
1333                 break;
1334             /* set values for old format before stsd version 1 appeared */
1335             case CODEC_ID_MACE3:
1336                 sc->samples_per_frame = 6;
1337                 sc->bytes_per_frame = 2*st->codec->channels;
1338                 break;
1339             case CODEC_ID_MACE6:
1340                 sc->samples_per_frame = 6;
1341                 sc->bytes_per_frame = 1*st->codec->channels;
1342                 break;
1343             case CODEC_ID_ADPCM_IMA_QT:
1344                 sc->samples_per_frame = 64;
1345                 sc->bytes_per_frame = 34*st->codec->channels;
1346                 break;
1347             case CODEC_ID_GSM:
1348                 sc->samples_per_frame = 160;
1349                 sc->bytes_per_frame = 33;
1350                 break;
1351             default:
1352                 break;
1353             }
1354
1355             bits_per_sample = av_get_bits_per_sample(st->codec->codec_id);
1356             if (bits_per_sample) {
1357                 st->codec->bits_per_coded_sample = bits_per_sample;
1358                 sc->sample_size = (bits_per_sample >> 3) * st->codec->channels;
1359             }
1360         } else if (st->codec->codec_type==AVMEDIA_TYPE_SUBTITLE){
1361             // ttxt stsd contains display flags, justification, background
1362             // color, fonts, and default styles, so fake an atom to read it
1363             MOVAtom fake_atom = { .size = size - (avio_tell(pb) - start_pos) };
1364             if (format != AV_RL32("mp4s")) // mp4s contains a regular esds atom
1365                 mov_read_glbl(c, pb, fake_atom);
1366             st->codec->codec_id= id;
1367             st->codec->width = sc->width;
1368             st->codec->height = sc->height;
1369         } else {
1370             if (st->codec->codec_tag == MKTAG('t','m','c','d')) {
1371                 int val;
1372                 avio_rb32(pb);       /* reserved */
1373                 val = avio_rb32(pb); /* flags */
1374                 if (val & 1)
1375                     st->codec->flags2 |= CODEC_FLAG2_DROP_FRAME_TIMECODE;
1376                 avio_rb32(pb); /* time scale */
1377                 avio_rb32(pb); /* frame duration */
1378                 st->codec->time_base.den = avio_r8(pb); /* number of frame */
1379                 st->codec->time_base.num = 1;
1380             }
1381             /* other codec type, just skip (rtp, mp4s, ...) */
1382             avio_skip(pb, size - (avio_tell(pb) - start_pos));
1383         }
1384         /* this will read extra atoms at the end (wave, alac, damr, avcC, SMI ...) */
1385         a.size = size - (avio_tell(pb) - start_pos);
1386         if (a.size > 8) {
1387             if (mov_read_default(c, pb, a) < 0)
1388                 return -1;
1389         } else if (a.size > 0)
1390             avio_skip(pb, a.size);
1391     }
1392
1393     if (st->codec->codec_type==AVMEDIA_TYPE_AUDIO && st->codec->sample_rate==0 && sc->time_scale>1)
1394         st->codec->sample_rate= sc->time_scale;
1395
1396     /* special codec parameters handling */
1397     switch (st->codec->codec_id) {
1398 #if CONFIG_DV_DEMUXER
1399     case CODEC_ID_DVAUDIO:
1400         c->dv_fctx = avformat_alloc_context();
1401         c->dv_demux = avpriv_dv_init_demux(c->dv_fctx);
1402         if (!c->dv_demux) {
1403             av_log(c->fc, AV_LOG_ERROR, "dv demux context init error\n");
1404             return -1;
1405         }
1406         sc->dv_audio_container = 1;
1407         st->codec->codec_id = CODEC_ID_PCM_S16LE;
1408         break;
1409 #endif
1410     /* no ifdef since parameters are always those */
1411     case CODEC_ID_QCELP:
1412         // force sample rate for qcelp when not stored in mov
1413         if (st->codec->codec_tag != MKTAG('Q','c','l','p'))
1414             st->codec->sample_rate = 8000;
1415         st->codec->frame_size= 160;
1416         st->codec->channels= 1; /* really needed */
1417         break;
1418     case CODEC_ID_AMR_NB:
1419         st->codec->channels= 1; /* really needed */
1420         /* force sample rate for amr, stsd in 3gp does not store sample rate */
1421         st->codec->sample_rate = 8000;
1422         /* force frame_size, too, samples_per_frame isn't always set properly */
1423         st->codec->frame_size  = 160;
1424         break;
1425     case CODEC_ID_AMR_WB:
1426         st->codec->channels    = 1;
1427         st->codec->sample_rate = 16000;
1428         st->codec->frame_size  = 320;
1429         break;
1430     case CODEC_ID_MP2:
1431     case CODEC_ID_MP3:
1432         st->codec->codec_type = AVMEDIA_TYPE_AUDIO; /* force type after stsd for m1a hdlr */
1433         st->need_parsing = AVSTREAM_PARSE_FULL;
1434         break;
1435     case CODEC_ID_GSM:
1436     case CODEC_ID_ADPCM_MS:
1437     case CODEC_ID_ADPCM_IMA_WAV:
1438         st->codec->frame_size = sc->samples_per_frame;
1439         st->codec->block_align = sc->bytes_per_frame;
1440         break;
1441     case CODEC_ID_ALAC:
1442         if (st->codec->extradata_size == 36) {
1443             st->codec->frame_size = AV_RB32(st->codec->extradata+12);
1444             st->codec->channels   = AV_RB8 (st->codec->extradata+21);
1445             st->codec->sample_rate = AV_RB32(st->codec->extradata+32);
1446         }
1447         break;
1448     case CODEC_ID_AC3:
1449         st->need_parsing = AVSTREAM_PARSE_FULL;
1450         break;
1451     case CODEC_ID_MPEG1VIDEO:
1452         st->need_parsing = AVSTREAM_PARSE_FULL;
1453         break;
1454     default:
1455         break;
1456     }
1457
1458     return 0;
1459 }
1460
1461 static int mov_read_stsd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1462 {
1463     int entries;
1464
1465     avio_r8(pb); /* version */
1466     avio_rb24(pb); /* flags */
1467     entries = avio_rb32(pb);
1468
1469     return ff_mov_read_stsd_entries(c, pb, entries);
1470 }
1471
1472 static int mov_read_stsc(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1473 {
1474     AVStream *st;
1475     MOVStreamContext *sc;
1476     unsigned int i, entries;
1477
1478     if (c->fc->nb_streams < 1)
1479         return 0;
1480     st = c->fc->streams[c->fc->nb_streams-1];
1481     sc = st->priv_data;
1482
1483     avio_r8(pb); /* version */
1484     avio_rb24(pb); /* flags */
1485
1486     entries = avio_rb32(pb);
1487
1488     av_dlog(c->fc, "track[%i].stsc.entries = %i\n", c->fc->nb_streams-1, entries);
1489
1490     if (!entries)
1491         return 0;
1492     if (entries >= UINT_MAX / sizeof(*sc->stsc_data))
1493         return -1;
1494     sc->stsc_data = av_malloc(entries * sizeof(*sc->stsc_data));
1495     if (!sc->stsc_data)
1496         return AVERROR(ENOMEM);
1497     sc->stsc_count = entries;
1498
1499     for (i=0; i<entries; i++) {
1500         sc->stsc_data[i].first = avio_rb32(pb);
1501         sc->stsc_data[i].count = avio_rb32(pb);
1502         sc->stsc_data[i].id = avio_rb32(pb);
1503     }
1504     return 0;
1505 }
1506
1507 static int mov_read_stps(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1508 {
1509     AVStream *st;
1510     MOVStreamContext *sc;
1511     unsigned i, entries;
1512
1513     if (c->fc->nb_streams < 1)
1514         return 0;
1515     st = c->fc->streams[c->fc->nb_streams-1];
1516     sc = st->priv_data;
1517
1518     avio_rb32(pb); // version + flags
1519
1520     entries = avio_rb32(pb);
1521     if (entries >= UINT_MAX / sizeof(*sc->stps_data))
1522         return -1;
1523     sc->stps_data = av_malloc(entries * sizeof(*sc->stps_data));
1524     if (!sc->stps_data)
1525         return AVERROR(ENOMEM);
1526     sc->stps_count = entries;
1527
1528     for (i = 0; i < entries; i++) {
1529         sc->stps_data[i] = avio_rb32(pb);
1530         //av_dlog(c->fc, "stps %d\n", sc->stps_data[i]);
1531     }
1532
1533     return 0;
1534 }
1535
1536 static int mov_read_stss(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1537 {
1538     AVStream *st;
1539     MOVStreamContext *sc;
1540     unsigned int i, entries;
1541
1542     if (c->fc->nb_streams < 1)
1543         return 0;
1544     st = c->fc->streams[c->fc->nb_streams-1];
1545     sc = st->priv_data;
1546
1547     avio_r8(pb); /* version */
1548     avio_rb24(pb); /* flags */
1549
1550     entries = avio_rb32(pb);
1551
1552     av_dlog(c->fc, "keyframe_count = %d\n", entries);
1553
1554     if (entries >= UINT_MAX / sizeof(int))
1555         return -1;
1556     sc->keyframes = av_malloc(entries * sizeof(int));
1557     if (!sc->keyframes)
1558         return AVERROR(ENOMEM);
1559     sc->keyframe_count = entries;
1560
1561     for (i=0; i<entries; i++) {
1562         sc->keyframes[i] = avio_rb32(pb);
1563         //av_dlog(c->fc, "keyframes[]=%d\n", sc->keyframes[i]);
1564     }
1565     return 0;
1566 }
1567
1568 static int mov_read_stsz(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1569 {
1570     AVStream *st;
1571     MOVStreamContext *sc;
1572     unsigned int i, entries, sample_size, field_size, num_bytes;
1573     GetBitContext gb;
1574     unsigned char* buf;
1575
1576     if (c->fc->nb_streams < 1)
1577         return 0;
1578     st = c->fc->streams[c->fc->nb_streams-1];
1579     sc = st->priv_data;
1580
1581     avio_r8(pb); /* version */
1582     avio_rb24(pb); /* flags */
1583
1584     if (atom.type == MKTAG('s','t','s','z')) {
1585         sample_size = avio_rb32(pb);
1586         if (!sc->sample_size) /* do not overwrite value computed in stsd */
1587             sc->sample_size = sample_size;
1588         field_size = 32;
1589     } else {
1590         sample_size = 0;
1591         avio_rb24(pb); /* reserved */
1592         field_size = avio_r8(pb);
1593     }
1594     entries = avio_rb32(pb);
1595
1596     av_dlog(c->fc, "sample_size = %d sample_count = %d\n", sc->sample_size, entries);
1597
1598     sc->sample_count = entries;
1599     if (sample_size)
1600         return 0;
1601
1602     if (field_size != 4 && field_size != 8 && field_size != 16 && field_size != 32) {
1603         av_log(c->fc, AV_LOG_ERROR, "Invalid sample field size %d\n", field_size);
1604         return -1;
1605     }
1606
1607     if (!entries)
1608         return 0;
1609     if (entries >= UINT_MAX / sizeof(int) || entries >= (UINT_MAX - 4) / field_size)
1610         return -1;
1611     sc->sample_sizes = av_malloc(entries * sizeof(int));
1612     if (!sc->sample_sizes)
1613         return AVERROR(ENOMEM);
1614
1615     num_bytes = (entries*field_size+4)>>3;
1616
1617     buf = av_malloc(num_bytes+FF_INPUT_BUFFER_PADDING_SIZE);
1618     if (!buf) {
1619         av_freep(&sc->sample_sizes);
1620         return AVERROR(ENOMEM);
1621     }
1622
1623     if (avio_read(pb, buf, num_bytes) < num_bytes) {
1624         av_freep(&sc->sample_sizes);
1625         av_free(buf);
1626         return -1;
1627     }
1628
1629     init_get_bits(&gb, buf, 8*num_bytes);
1630
1631     for (i=0; i<entries; i++)
1632         sc->sample_sizes[i] = get_bits_long(&gb, field_size);
1633
1634     av_free(buf);
1635     return 0;
1636 }
1637
1638 static int mov_read_stts(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1639 {
1640     AVStream *st;
1641     MOVStreamContext *sc;
1642     unsigned int i, entries;
1643     int64_t duration=0;
1644     int64_t total_sample_count=0;
1645
1646     if (c->fc->nb_streams < 1)
1647         return 0;
1648     st = c->fc->streams[c->fc->nb_streams-1];
1649     sc = st->priv_data;
1650
1651     avio_r8(pb); /* version */
1652     avio_rb24(pb); /* flags */
1653     entries = avio_rb32(pb);
1654
1655     av_dlog(c->fc, "track[%i].stts.entries = %i\n",
1656             c->fc->nb_streams-1, entries);
1657
1658     if (entries >= UINT_MAX / sizeof(*sc->stts_data))
1659         return -1;
1660
1661     sc->stts_data = av_malloc(entries * sizeof(*sc->stts_data));
1662     if (!sc->stts_data)
1663         return AVERROR(ENOMEM);
1664
1665     sc->stts_count = entries;
1666
1667     for (i=0; i<entries; i++) {
1668         int sample_duration;
1669         int sample_count;
1670
1671         sample_count=avio_rb32(pb);
1672         sample_duration = avio_rb32(pb);
1673         /* sample_duration < 0 is invalid based on the spec */
1674         if (sample_duration < 0) {
1675             av_log(c->fc, AV_LOG_ERROR, "Invalid SampleDelta in STTS %d\n", sample_duration);
1676             sample_duration = 1;
1677         }
1678         sc->stts_data[i].count= sample_count;
1679         sc->stts_data[i].duration= sample_duration;
1680
1681         av_dlog(c->fc, "sample_count=%d, sample_duration=%d\n",
1682                 sample_count, sample_duration);
1683
1684         duration+=(int64_t)sample_duration*sample_count;
1685         total_sample_count+=sample_count;
1686     }
1687
1688     st->nb_frames= total_sample_count;
1689     if (duration)
1690         st->duration= duration;
1691     return 0;
1692 }
1693
1694 static int mov_read_ctts(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1695 {
1696     AVStream *st;
1697     MOVStreamContext *sc;
1698     unsigned int i, entries;
1699
1700     if (c->fc->nb_streams < 1)
1701         return 0;
1702     st = c->fc->streams[c->fc->nb_streams-1];
1703     sc = st->priv_data;
1704
1705     avio_r8(pb); /* version */
1706     avio_rb24(pb); /* flags */
1707     entries = avio_rb32(pb);
1708
1709     av_dlog(c->fc, "track[%i].ctts.entries = %i\n", c->fc->nb_streams-1, entries);
1710
1711     if (!entries)
1712         return 0;
1713     if (entries >= UINT_MAX / sizeof(*sc->ctts_data))
1714         return -1;
1715     sc->ctts_data = av_malloc(entries * sizeof(*sc->ctts_data));
1716     if (!sc->ctts_data)
1717         return AVERROR(ENOMEM);
1718     sc->ctts_count = entries;
1719
1720     for (i=0; i<entries; i++) {
1721         int count    =avio_rb32(pb);
1722         int duration =avio_rb32(pb);
1723
1724         sc->ctts_data[i].count   = count;
1725         sc->ctts_data[i].duration= duration;
1726         if (duration < 0 && i+2<entries)
1727             sc->dts_shift = FFMAX(sc->dts_shift, -duration);
1728     }
1729
1730     av_dlog(c->fc, "dts shift %d\n", sc->dts_shift);
1731
1732     return 0;
1733 }
1734
1735 static void mov_build_index(MOVContext *mov, AVStream *st)
1736 {
1737     MOVStreamContext *sc = st->priv_data;
1738     int64_t current_offset;
1739     int64_t current_dts = 0;
1740     unsigned int stts_index = 0;
1741     unsigned int stsc_index = 0;
1742     unsigned int stss_index = 0;
1743     unsigned int stps_index = 0;
1744     unsigned int i, j;
1745     uint64_t stream_size = 0;
1746
1747     /* adjust first dts according to edit list */
1748     if ((sc->empty_duration || sc->start_time) && mov->time_scale > 0) {
1749         if (sc->empty_duration)
1750             sc->empty_duration = av_rescale(sc->empty_duration, sc->time_scale, mov->time_scale);
1751         sc->time_offset = sc->start_time - sc->empty_duration;
1752         current_dts = -sc->time_offset;
1753         if (sc->ctts_data && sc->stts_data &&
1754             sc->ctts_data[0].duration / FFMAX(sc->stts_data[0].duration, 1) > 16) {
1755             /* more than 16 frames delay, dts are likely wrong
1756                this happens with files created by iMovie */
1757             sc->wrong_dts = 1;
1758             st->codec->has_b_frames = 1;
1759         }
1760     }
1761
1762     /* only use old uncompressed audio chunk demuxing when stts specifies it */
1763     if (!(st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
1764           sc->stts_count == 1 && sc->stts_data[0].duration == 1)) {
1765         unsigned int current_sample = 0;
1766         unsigned int stts_sample = 0;
1767         unsigned int sample_size;
1768         unsigned int distance = 0;
1769         int key_off = sc->keyframes && sc->keyframes[0] == 1;
1770
1771         current_dts -= sc->dts_shift;
1772
1773         if (!sc->sample_count)
1774             return;
1775         if (sc->sample_count >= UINT_MAX / sizeof(*st->index_entries))
1776             return;
1777         st->index_entries = av_malloc(sc->sample_count*sizeof(*st->index_entries));
1778         if (!st->index_entries)
1779             return;
1780         st->index_entries_allocated_size = sc->sample_count*sizeof(*st->index_entries);
1781
1782         for (i = 0; i < sc->chunk_count; i++) {
1783             current_offset = sc->chunk_offsets[i];
1784             while (stsc_index + 1 < sc->stsc_count &&
1785                 i + 1 == sc->stsc_data[stsc_index + 1].first)
1786                 stsc_index++;
1787             for (j = 0; j < sc->stsc_data[stsc_index].count; j++) {
1788                 int keyframe = 0;
1789                 if (current_sample >= sc->sample_count) {
1790                     av_log(mov->fc, AV_LOG_ERROR, "wrong sample count\n");
1791                     return;
1792                 }
1793
1794                 if (!sc->keyframe_count || current_sample+key_off == sc->keyframes[stss_index]) {
1795                     keyframe = 1;
1796                     if (stss_index + 1 < sc->keyframe_count)
1797                         stss_index++;
1798                 } else if (sc->stps_count && current_sample+key_off == sc->stps_data[stps_index]) {
1799                     keyframe = 1;
1800                     if (stps_index + 1 < sc->stps_count)
1801                         stps_index++;
1802                 }
1803                 if (keyframe)
1804                     distance = 0;
1805                 sample_size = sc->sample_size > 0 ? sc->sample_size : sc->sample_sizes[current_sample];
1806                 if (sc->pseudo_stream_id == -1 ||
1807                    sc->stsc_data[stsc_index].id - 1 == sc->pseudo_stream_id) {
1808                     AVIndexEntry *e = &st->index_entries[st->nb_index_entries++];
1809                     e->pos = current_offset;
1810                     e->timestamp = current_dts;
1811                     e->size = sample_size;
1812                     e->min_distance = distance;
1813                     e->flags = keyframe ? AVINDEX_KEYFRAME : 0;
1814                     av_dlog(mov->fc, "AVIndex stream %d, sample %d, offset %"PRIx64", dts %"PRId64", "
1815                             "size %d, distance %d, keyframe %d\n", st->index, current_sample,
1816                             current_offset, current_dts, sample_size, distance, keyframe);
1817                 }
1818
1819                 current_offset += sample_size;
1820                 stream_size += sample_size;
1821                 current_dts += sc->stts_data[stts_index].duration;
1822                 distance++;
1823                 stts_sample++;
1824                 current_sample++;
1825                 if (stts_index + 1 < sc->stts_count && stts_sample == sc->stts_data[stts_index].count) {
1826                     stts_sample = 0;
1827                     stts_index++;
1828                 }
1829             }
1830         }
1831         if (st->duration > 0)
1832             st->codec->bit_rate = stream_size*8*sc->time_scale/st->duration;
1833     } else {
1834         unsigned chunk_samples, total = 0;
1835
1836         // compute total chunk count
1837         for (i = 0; i < sc->stsc_count; i++) {
1838             unsigned count, chunk_count;
1839
1840             chunk_samples = sc->stsc_data[i].count;
1841             if (i != sc->stsc_count - 1 &&
1842                 sc->samples_per_frame && chunk_samples % sc->samples_per_frame) {
1843                 av_log(mov->fc, AV_LOG_ERROR, "error unaligned chunk\n");
1844                 return;
1845             }
1846
1847             if (sc->samples_per_frame >= 160) { // gsm
1848                 count = chunk_samples / sc->samples_per_frame;
1849             } else if (sc->samples_per_frame > 1) {
1850                 unsigned samples = (1024/sc->samples_per_frame)*sc->samples_per_frame;
1851                 count = (chunk_samples+samples-1) / samples;
1852             } else {
1853                 count = (chunk_samples+1023) / 1024;
1854             }
1855
1856             if (i < sc->stsc_count - 1)
1857                 chunk_count = sc->stsc_data[i+1].first - sc->stsc_data[i].first;
1858             else
1859                 chunk_count = sc->chunk_count - (sc->stsc_data[i].first - 1);
1860             total += chunk_count * count;
1861         }
1862
1863         av_dlog(mov->fc, "chunk count %d\n", total);
1864         if (total >= UINT_MAX / sizeof(*st->index_entries))
1865             return;
1866         st->index_entries = av_malloc(total*sizeof(*st->index_entries));
1867         if (!st->index_entries)
1868             return;
1869         st->index_entries_allocated_size = total*sizeof(*st->index_entries);
1870
1871         // populate index
1872         for (i = 0; i < sc->chunk_count; i++) {
1873             current_offset = sc->chunk_offsets[i];
1874             if (stsc_index + 1 < sc->stsc_count &&
1875                 i + 1 == sc->stsc_data[stsc_index + 1].first)
1876                 stsc_index++;
1877             chunk_samples = sc->stsc_data[stsc_index].count;
1878
1879             while (chunk_samples > 0) {
1880                 AVIndexEntry *e;
1881                 unsigned size, samples;
1882
1883                 if (sc->samples_per_frame >= 160) { // gsm
1884                     samples = sc->samples_per_frame;
1885                     size = sc->bytes_per_frame;
1886                 } else {
1887                     if (sc->samples_per_frame > 1) {
1888                         samples = FFMIN((1024 / sc->samples_per_frame)*
1889                                         sc->samples_per_frame, chunk_samples);
1890                         size = (samples / sc->samples_per_frame) * sc->bytes_per_frame;
1891                     } else {
1892                         samples = FFMIN(1024, chunk_samples);
1893                         size = samples * sc->sample_size;
1894                     }
1895                 }
1896
1897                 if (st->nb_index_entries >= total) {
1898                     av_log(mov->fc, AV_LOG_ERROR, "wrong chunk count %d\n", total);
1899                     return;
1900                 }
1901                 e = &st->index_entries[st->nb_index_entries++];
1902                 e->pos = current_offset;
1903                 e->timestamp = current_dts;
1904                 e->size = size;
1905                 e->min_distance = 0;
1906                 e->flags = AVINDEX_KEYFRAME;
1907                 av_dlog(mov->fc, "AVIndex stream %d, chunk %d, offset %"PRIx64", dts %"PRId64", "
1908                         "size %d, duration %d\n", st->index, i, current_offset, current_dts,
1909                         size, samples);
1910
1911                 current_offset += size;
1912                 current_dts += samples;
1913                 chunk_samples -= samples;
1914             }
1915         }
1916     }
1917 }
1918
1919 static int mov_open_dref(AVIOContext **pb, const char *src, MOVDref *ref,
1920                          AVIOInterruptCB *int_cb)
1921 {
1922     /* try relative path, we do not try the absolute because it can leak information about our
1923        system to an attacker */
1924     if (ref->nlvl_to > 0 && ref->nlvl_from > 0) {
1925         char filename[1024];
1926         const char *src_path;
1927         int i, l;
1928
1929         /* find a source dir */
1930         src_path = strrchr(src, '/');
1931         if (src_path)
1932             src_path++;
1933         else
1934             src_path = src;
1935
1936         /* find a next level down to target */
1937         for (i = 0, l = strlen(ref->path) - 1; l >= 0; l--)
1938             if (ref->path[l] == '/') {
1939                 if (i == ref->nlvl_to - 1)
1940                     break;
1941                 else
1942                     i++;
1943             }
1944
1945         /* compose filename if next level down to target was found */
1946         if (i == ref->nlvl_to - 1 && src_path - src  < sizeof(filename)) {
1947             memcpy(filename, src, src_path - src);
1948             filename[src_path - src] = 0;
1949
1950             for (i = 1; i < ref->nlvl_from; i++)
1951                 av_strlcat(filename, "../", 1024);
1952
1953             av_strlcat(filename, ref->path + l + 1, 1024);
1954
1955             if (!avio_open2(pb, filename, AVIO_FLAG_READ, int_cb, NULL))
1956                 return 0;
1957         }
1958     }
1959
1960     return AVERROR(ENOENT);
1961 }
1962
1963 static int mov_read_trak(MOVContext *c, AVIOContext *pb, MOVAtom atom)
1964 {
1965     AVStream *st;
1966     MOVStreamContext *sc;
1967     int ret;
1968
1969     st = avformat_new_stream(c->fc, NULL);
1970     if (!st) return AVERROR(ENOMEM);
1971     st->id = c->fc->nb_streams;
1972     sc = av_mallocz(sizeof(MOVStreamContext));
1973     if (!sc) return AVERROR(ENOMEM);
1974
1975     st->priv_data = sc;
1976     st->codec->codec_type = AVMEDIA_TYPE_DATA;
1977     sc->ffindex = st->index;
1978
1979     if ((ret = mov_read_default(c, pb, atom)) < 0)
1980         return ret;
1981
1982     /* sanity checks */
1983     if (sc->chunk_count && (!sc->stts_count || !sc->stsc_count ||
1984                             (!sc->sample_size && !sc->sample_count))) {
1985         av_log(c->fc, AV_LOG_ERROR, "stream %d, missing mandatory atoms, broken header\n",
1986                st->index);
1987         return 0;
1988     }
1989
1990     if (sc->time_scale <= 0) {
1991         av_log(c->fc, AV_LOG_WARNING, "stream %d, timescale not set\n", st->index);
1992         sc->time_scale = c->time_scale;
1993         if (sc->time_scale <= 0)
1994             sc->time_scale = 1;
1995     }
1996
1997     avpriv_set_pts_info(st, 64, 1, sc->time_scale);
1998
1999     if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO &&
2000         !st->codec->frame_size && sc->stts_count == 1) {
2001         st->codec->frame_size = av_rescale(sc->stts_data[0].duration,
2002                                            st->codec->sample_rate, sc->time_scale);
2003         av_dlog(c->fc, "frame size %d\n", st->codec->frame_size);
2004     }
2005
2006     mov_build_index(c, st);
2007
2008     if (sc->dref_id-1 < sc->drefs_count && sc->drefs[sc->dref_id-1].path) {
2009         MOVDref *dref = &sc->drefs[sc->dref_id - 1];
2010         if (mov_open_dref(&sc->pb, c->fc->filename, dref, &c->fc->interrupt_callback) < 0)
2011             av_log(c->fc, AV_LOG_ERROR,
2012                    "stream %d, error opening alias: path='%s', dir='%s', "
2013                    "filename='%s', volume='%s', nlvl_from=%d, nlvl_to=%d\n",
2014                    st->index, dref->path, dref->dir, dref->filename,
2015                    dref->volume, dref->nlvl_from, dref->nlvl_to);
2016     } else
2017         sc->pb = c->fc->pb;
2018
2019     if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
2020         if (!st->sample_aspect_ratio.num &&
2021             (st->codec->width != sc->width || st->codec->height != sc->height)) {
2022             st->sample_aspect_ratio = av_d2q(((double)st->codec->height * sc->width) /
2023                                              ((double)st->codec->width * sc->height), INT_MAX);
2024         }
2025
2026         av_reduce(&st->avg_frame_rate.num, &st->avg_frame_rate.den,
2027                   sc->time_scale*st->nb_frames, st->duration, INT_MAX);
2028
2029         if (sc->stts_count == 1 || (sc->stts_count == 2 && sc->stts_data[1].count == 1))
2030             av_reduce(&st->r_frame_rate.num, &st->r_frame_rate.den,
2031                       sc->time_scale, sc->stts_data[0].duration, INT_MAX);
2032     }
2033
2034     switch (st->codec->codec_id) {
2035 #if CONFIG_H261_DECODER
2036     case CODEC_ID_H261:
2037 #endif
2038 #if CONFIG_H263_DECODER
2039     case CODEC_ID_H263:
2040 #endif
2041 #if CONFIG_H264_DECODER
2042     case CODEC_ID_H264:
2043 #endif
2044 #if CONFIG_MPEG4_DECODER
2045     case CODEC_ID_MPEG4:
2046 #endif
2047         st->codec->width = 0; /* let decoder init width/height */
2048         st->codec->height= 0;
2049         break;
2050     }
2051
2052     /* Do not need those anymore. */
2053     av_freep(&sc->chunk_offsets);
2054     av_freep(&sc->stsc_data);
2055     av_freep(&sc->sample_sizes);
2056     av_freep(&sc->keyframes);
2057     av_freep(&sc->stts_data);
2058     av_freep(&sc->stps_data);
2059
2060     return 0;
2061 }
2062
2063 static int mov_read_ilst(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2064 {
2065     int ret;
2066     c->itunes_metadata = 1;
2067     ret = mov_read_default(c, pb, atom);
2068     c->itunes_metadata = 0;
2069     return ret;
2070 }
2071
2072 static int mov_read_meta(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2073 {
2074     while (atom.size > 8) {
2075         uint32_t tag = avio_rl32(pb);
2076         atom.size -= 4;
2077         if (tag == MKTAG('h','d','l','r')) {
2078             avio_seek(pb, -8, SEEK_CUR);
2079             atom.size += 8;
2080             return mov_read_default(c, pb, atom);
2081         }
2082     }
2083     return 0;
2084 }
2085
2086 static int mov_read_tkhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2087 {
2088     int i;
2089     int width;
2090     int height;
2091     int64_t disp_transform[2];
2092     int display_matrix[3][2];
2093     AVStream *st;
2094     MOVStreamContext *sc;
2095     int version;
2096
2097     if (c->fc->nb_streams < 1)
2098         return 0;
2099     st = c->fc->streams[c->fc->nb_streams-1];
2100     sc = st->priv_data;
2101
2102     version = avio_r8(pb);
2103     avio_rb24(pb); /* flags */
2104     /*
2105     MOV_TRACK_ENABLED 0x0001
2106     MOV_TRACK_IN_MOVIE 0x0002
2107     MOV_TRACK_IN_PREVIEW 0x0004
2108     MOV_TRACK_IN_POSTER 0x0008
2109     */
2110
2111     if (version == 1) {
2112         avio_rb64(pb);
2113         avio_rb64(pb);
2114     } else {
2115         avio_rb32(pb); /* creation time */
2116         avio_rb32(pb); /* modification time */
2117     }
2118     st->id = (int)avio_rb32(pb); /* track id (NOT 0 !)*/
2119     avio_rb32(pb); /* reserved */
2120
2121     /* highlevel (considering edits) duration in movie timebase */
2122     (version == 1) ? avio_rb64(pb) : avio_rb32(pb);
2123     avio_rb32(pb); /* reserved */
2124     avio_rb32(pb); /* reserved */
2125
2126     avio_rb16(pb); /* layer */
2127     avio_rb16(pb); /* alternate group */
2128     avio_rb16(pb); /* volume */
2129     avio_rb16(pb); /* reserved */
2130
2131     //read in the display matrix (outlined in ISO 14496-12, Section 6.2.2)
2132     // they're kept in fixed point format through all calculations
2133     // ignore u,v,z b/c we don't need the scale factor to calc aspect ratio
2134     for (i = 0; i < 3; i++) {
2135         display_matrix[i][0] = avio_rb32(pb);   // 16.16 fixed point
2136         display_matrix[i][1] = avio_rb32(pb);   // 16.16 fixed point
2137         avio_rb32(pb);           // 2.30 fixed point (not used)
2138     }
2139
2140     width = avio_rb32(pb);       // 16.16 fixed point track width
2141     height = avio_rb32(pb);      // 16.16 fixed point track height
2142     sc->width = width >> 16;
2143     sc->height = height >> 16;
2144
2145     if (display_matrix[0][0] == -65536 && display_matrix[1][1] == -65536) {
2146          av_dict_set(&st->metadata, "rotate", "180", 0);
2147     }
2148
2149     // transform the display width/height according to the matrix
2150     // skip this if the display matrix is the default identity matrix
2151     // or if it is rotating the picture, ex iPhone 3GS
2152     // to keep the same scale, use [width height 1<<16]
2153     if (width && height &&
2154         ((display_matrix[0][0] != 65536  ||
2155           display_matrix[1][1] != 65536) &&
2156          !display_matrix[0][1] &&
2157          !display_matrix[1][0] &&
2158          !display_matrix[2][0] && !display_matrix[2][1])) {
2159         for (i = 0; i < 2; i++)
2160             disp_transform[i] =
2161                 (int64_t)  width  * display_matrix[0][i] +
2162                 (int64_t)  height * display_matrix[1][i] +
2163                 ((int64_t) display_matrix[2][i] << 16);
2164
2165         //sample aspect ratio is new width/height divided by old width/height
2166         st->sample_aspect_ratio = av_d2q(
2167             ((double) disp_transform[0] * height) /
2168             ((double) disp_transform[1] * width), INT_MAX);
2169     }
2170     return 0;
2171 }
2172
2173 static int mov_read_tfhd(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2174 {
2175     MOVFragment *frag = &c->fragment;
2176     MOVTrackExt *trex = NULL;
2177     int flags, track_id, i;
2178
2179     avio_r8(pb); /* version */
2180     flags = avio_rb24(pb);
2181
2182     track_id = avio_rb32(pb);
2183     if (!track_id)
2184         return -1;
2185     frag->track_id = track_id;
2186     for (i = 0; i < c->trex_count; i++)
2187         if (c->trex_data[i].track_id == frag->track_id) {
2188             trex = &c->trex_data[i];
2189             break;
2190         }
2191     if (!trex) {
2192         av_log(c->fc, AV_LOG_ERROR, "could not find corresponding trex\n");
2193         return -1;
2194     }
2195
2196     if (flags & 0x01) frag->base_data_offset = avio_rb64(pb);
2197     else              frag->base_data_offset = frag->moof_offset;
2198     if (flags & 0x02) frag->stsd_id          = avio_rb32(pb);
2199     else              frag->stsd_id          = trex->stsd_id;
2200
2201     frag->duration = flags & 0x08 ? avio_rb32(pb) : trex->duration;
2202     frag->size     = flags & 0x10 ? avio_rb32(pb) : trex->size;
2203     frag->flags    = flags & 0x20 ? avio_rb32(pb) : trex->flags;
2204     av_dlog(c->fc, "frag flags 0x%x\n", frag->flags);
2205     return 0;
2206 }
2207
2208 static int mov_read_chap(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2209 {
2210     c->chapter_track = avio_rb32(pb);
2211     return 0;
2212 }
2213
2214 static int mov_read_trex(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2215 {
2216     MOVTrackExt *trex;
2217
2218     if ((uint64_t)c->trex_count+1 >= UINT_MAX / sizeof(*c->trex_data))
2219         return -1;
2220     trex = av_realloc(c->trex_data, (c->trex_count+1)*sizeof(*c->trex_data));
2221     if (!trex)
2222         return AVERROR(ENOMEM);
2223     c->trex_data = trex;
2224     trex = &c->trex_data[c->trex_count++];
2225     avio_r8(pb); /* version */
2226     avio_rb24(pb); /* flags */
2227     trex->track_id = avio_rb32(pb);
2228     trex->stsd_id  = avio_rb32(pb);
2229     trex->duration = avio_rb32(pb);
2230     trex->size     = avio_rb32(pb);
2231     trex->flags    = avio_rb32(pb);
2232     return 0;
2233 }
2234
2235 static int mov_read_trun(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2236 {
2237     MOVFragment *frag = &c->fragment;
2238     AVStream *st = NULL;
2239     MOVStreamContext *sc;
2240     MOVStts *ctts_data;
2241     uint64_t offset;
2242     int64_t dts;
2243     int data_offset = 0;
2244     unsigned entries, first_sample_flags = frag->flags;
2245     int flags, distance, i;
2246
2247     for (i = 0; i < c->fc->nb_streams; i++) {
2248         if (c->fc->streams[i]->id == frag->track_id) {
2249             st = c->fc->streams[i];
2250             break;
2251         }
2252     }
2253     if (!st) {
2254         av_log(c->fc, AV_LOG_ERROR, "could not find corresponding track id %d\n", frag->track_id);
2255         return -1;
2256     }
2257     sc = st->priv_data;
2258     if (sc->pseudo_stream_id+1 != frag->stsd_id)
2259         return 0;
2260     avio_r8(pb); /* version */
2261     flags = avio_rb24(pb);
2262     entries = avio_rb32(pb);
2263     av_dlog(c->fc, "flags 0x%x entries %d\n", flags, entries);
2264
2265     /* Always assume the presence of composition time offsets.
2266      * Without this assumption, for instance, we cannot deal with a track in fragmented movies that meet the following.
2267      *  1) in the initial movie, there are no samples.
2268      *  2) in the first movie fragment, there is only one sample without composition time offset.
2269      *  3) in the subsequent movie fragments, there are samples with composition time offset. */
2270     if (!sc->ctts_count && sc->sample_count)
2271     {
2272         /* Complement ctts table if moov atom doesn't have ctts atom. */
2273         ctts_data = av_malloc(sizeof(*sc->ctts_data));
2274         if (!ctts_data)
2275             return AVERROR(ENOMEM);
2276         sc->ctts_data = ctts_data;
2277         sc->ctts_data[sc->ctts_count].count = sc->sample_count;
2278         sc->ctts_data[sc->ctts_count].duration = 0;
2279         sc->ctts_count++;
2280     }
2281     if ((uint64_t)entries+sc->ctts_count >= UINT_MAX/sizeof(*sc->ctts_data))
2282         return -1;
2283     ctts_data = av_realloc(sc->ctts_data,
2284                            (entries+sc->ctts_count)*sizeof(*sc->ctts_data));
2285     if (!ctts_data)
2286         return AVERROR(ENOMEM);
2287     sc->ctts_data = ctts_data;
2288
2289     if (flags & 0x001) data_offset        = avio_rb32(pb);
2290     if (flags & 0x004) first_sample_flags = avio_rb32(pb);
2291     dts = st->duration - sc->time_offset;
2292     offset = frag->base_data_offset + data_offset;
2293     distance = 0;
2294     av_dlog(c->fc, "first sample flags 0x%x\n", first_sample_flags);
2295     for (i = 0; i < entries; i++) {
2296         unsigned sample_size = frag->size;
2297         int sample_flags = i ? frag->flags : first_sample_flags;
2298         unsigned sample_duration = frag->duration;
2299         int keyframe;
2300
2301         if (flags & 0x100) sample_duration = avio_rb32(pb);
2302         if (flags & 0x200) sample_size     = avio_rb32(pb);
2303         if (flags & 0x400) sample_flags    = avio_rb32(pb);
2304         sc->ctts_data[sc->ctts_count].count = 1;
2305         sc->ctts_data[sc->ctts_count].duration = (flags & 0x800) ? avio_rb32(pb) : 0;
2306         sc->ctts_count++;
2307         if ((keyframe = st->codec->codec_type == AVMEDIA_TYPE_AUDIO ||
2308              (flags & 0x004 && !i && !sample_flags) || sample_flags & 0x2000000))
2309             distance = 0;
2310         av_add_index_entry(st, offset, dts, sample_size, distance,
2311                            keyframe ? AVINDEX_KEYFRAME : 0);
2312         av_dlog(c->fc, "AVIndex stream %d, sample %d, offset %"PRIx64", dts %"PRId64", "
2313                 "size %d, distance %d, keyframe %d\n", st->index, sc->sample_count+i,
2314                 offset, dts, sample_size, distance, keyframe);
2315         distance++;
2316         dts += sample_duration;
2317         offset += sample_size;
2318     }
2319     frag->moof_offset = offset;
2320     st->duration = dts + sc->time_offset;
2321     return 0;
2322 }
2323
2324 /* this atom should be null (from specs), but some buggy files put the 'moov' atom inside it... */
2325 /* like the files created with Adobe Premiere 5.0, for samples see */
2326 /* http://graphics.tudelft.nl/~wouter/publications/soundtests/ */
2327 static int mov_read_wide(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2328 {
2329     int err;
2330
2331     if (atom.size < 8)
2332         return 0; /* continue */
2333     if (avio_rb32(pb) != 0) { /* 0 sized mdat atom... use the 'wide' atom size */
2334         avio_skip(pb, atom.size - 4);
2335         return 0;
2336     }
2337     atom.type = avio_rl32(pb);
2338     atom.size -= 8;
2339     if (atom.type != MKTAG('m','d','a','t')) {
2340         avio_skip(pb, atom.size);
2341         return 0;
2342     }
2343     err = mov_read_mdat(c, pb, atom);
2344     return err;
2345 }
2346
2347 static int mov_read_cmov(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2348 {
2349 #if CONFIG_ZLIB
2350     AVIOContext ctx;
2351     uint8_t *cmov_data;
2352     uint8_t *moov_data; /* uncompressed data */
2353     long cmov_len, moov_len;
2354     int ret = -1;
2355
2356     avio_rb32(pb); /* dcom atom */
2357     if (avio_rl32(pb) != MKTAG('d','c','o','m'))
2358         return -1;
2359     if (avio_rl32(pb) != MKTAG('z','l','i','b')) {
2360         av_log(c->fc, AV_LOG_ERROR, "unknown compression for cmov atom !");
2361         return -1;
2362     }
2363     avio_rb32(pb); /* cmvd atom */
2364     if (avio_rl32(pb) != MKTAG('c','m','v','d'))
2365         return -1;
2366     moov_len = avio_rb32(pb); /* uncompressed size */
2367     cmov_len = atom.size - 6 * 4;
2368
2369     cmov_data = av_malloc(cmov_len);
2370     if (!cmov_data)
2371         return AVERROR(ENOMEM);
2372     moov_data = av_malloc(moov_len);
2373     if (!moov_data) {
2374         av_free(cmov_data);
2375         return AVERROR(ENOMEM);
2376     }
2377     avio_read(pb, cmov_data, cmov_len);
2378     if (uncompress (moov_data, (uLongf *) &moov_len, (const Bytef *)cmov_data, cmov_len) != Z_OK)
2379         goto free_and_return;
2380     if (ffio_init_context(&ctx, moov_data, moov_len, 0, NULL, NULL, NULL, NULL) != 0)
2381         goto free_and_return;
2382     atom.type = MKTAG('m','o','o','v');
2383     atom.size = moov_len;
2384     ret = mov_read_default(c, &ctx, atom);
2385 free_and_return:
2386     av_free(moov_data);
2387     av_free(cmov_data);
2388     return ret;
2389 #else
2390     av_log(c->fc, AV_LOG_ERROR, "this file requires zlib support compiled in\n");
2391     return -1;
2392 #endif
2393 }
2394
2395 /* edit list atom */
2396 static int mov_read_elst(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2397 {
2398     MOVStreamContext *sc;
2399     int i, edit_count, version, edit_start_index = 0;
2400
2401     if (c->fc->nb_streams < 1)
2402         return 0;
2403     sc = c->fc->streams[c->fc->nb_streams-1]->priv_data;
2404
2405     version = avio_r8(pb); /* version */
2406     avio_rb24(pb); /* flags */
2407     edit_count = avio_rb32(pb); /* entries */
2408
2409     if ((uint64_t)edit_count*12+8 > atom.size)
2410         return -1;
2411
2412     for (i=0; i<edit_count; i++){
2413         int64_t time;
2414         int64_t duration;
2415         if (version == 1) {
2416             duration = avio_rb64(pb);
2417             time     = avio_rb64(pb);
2418         } else {
2419             duration = avio_rb32(pb); /* segment duration */
2420             time     = (int32_t)avio_rb32(pb); /* media time */
2421         }
2422         avio_rb32(pb); /* Media rate */
2423         if (i == 0 && time == -1) {
2424             sc->empty_duration = duration;
2425             edit_start_index = 1;
2426         } else if (i == edit_start_index && time >= 0)
2427             sc->start_time = time;
2428     }
2429
2430     if (edit_count > 1)
2431         av_log(c->fc, AV_LOG_WARNING, "multiple edit list entries, "
2432                "a/v desync might occur, patch welcome\n");
2433
2434     av_dlog(c->fc, "track[%i].edit_count = %i\n", c->fc->nb_streams-1, edit_count);
2435     return 0;
2436 }
2437
2438 static int mov_read_chan2(MOVContext *c, AVIOContext *pb, MOVAtom atom)
2439 {
2440     if (atom.size < 16)
2441         return 0;
2442     avio_skip(pb, 4);
2443     ff_mov_read_chan(c->fc, atom.size - 4, c->fc->streams[0]->codec);
2444     return 0;
2445 }
2446
2447 static const MOVParseTableEntry mov_default_parse_table[] = {
2448 { MKTAG('a','v','s','s'), mov_read_avss },
2449 { MKTAG('c','h','p','l'), mov_read_chpl },
2450 { MKTAG('c','o','6','4'), mov_read_stco },
2451 { MKTAG('c','t','t','s'), mov_read_ctts }, /* composition time to sample */
2452 { MKTAG('d','i','n','f'), mov_read_default },
2453 { MKTAG('d','r','e','f'), mov_read_dref },
2454 { MKTAG('e','d','t','s'), mov_read_default },
2455 { MKTAG('e','l','s','t'), mov_read_elst },
2456 { MKTAG('e','n','d','a'), mov_read_enda },
2457 { MKTAG('f','i','e','l'), mov_read_fiel },
2458 { MKTAG('f','t','y','p'), mov_read_ftyp },
2459 { MKTAG('g','l','b','l'), mov_read_glbl },
2460 { MKTAG('h','d','l','r'), mov_read_hdlr },
2461 { MKTAG('i','l','s','t'), mov_read_ilst },
2462 { MKTAG('j','p','2','h'), mov_read_jp2h },
2463 { MKTAG('m','d','a','t'), mov_read_mdat },
2464 { MKTAG('m','d','h','d'), mov_read_mdhd },
2465 { MKTAG('m','d','i','a'), mov_read_default },
2466 { MKTAG('m','e','t','a'), mov_read_meta },
2467 { MKTAG('m','i','n','f'), mov_read_default },
2468 { MKTAG('m','o','o','f'), mov_read_moof },
2469 { MKTAG('m','o','o','v'), mov_read_moov },
2470 { MKTAG('m','v','e','x'), mov_read_default },
2471 { MKTAG('m','v','h','d'), mov_read_mvhd },
2472 { MKTAG('S','M','I',' '), mov_read_smi }, /* Sorenson extension ??? */
2473 { MKTAG('a','l','a','c'), mov_read_alac }, /* alac specific atom */
2474 { MKTAG('a','v','c','C'), mov_read_glbl },
2475 { MKTAG('p','a','s','p'), mov_read_pasp },
2476 { MKTAG('s','t','b','l'), mov_read_default },
2477 { MKTAG('s','t','c','o'), mov_read_stco },
2478 { MKTAG('s','t','p','s'), mov_read_stps },
2479 { MKTAG('s','t','r','f'), mov_read_strf },
2480 { MKTAG('s','t','s','c'), mov_read_stsc },
2481 { MKTAG('s','t','s','d'), mov_read_stsd }, /* sample description */
2482 { MKTAG('s','t','s','s'), mov_read_stss }, /* sync sample */
2483 { MKTAG('s','t','s','z'), mov_read_stsz }, /* sample size */
2484 { MKTAG('s','t','t','s'), mov_read_stts },
2485 { MKTAG('s','t','z','2'), mov_read_stsz }, /* compact sample size */
2486 { MKTAG('t','k','h','d'), mov_read_tkhd }, /* track header */
2487 { MKTAG('t','f','h','d'), mov_read_tfhd }, /* track fragment header */
2488 { MKTAG('t','r','a','k'), mov_read_trak },
2489 { MKTAG('t','r','a','f'), mov_read_default },
2490 { MKTAG('t','r','e','f'), mov_read_default },
2491 { MKTAG('c','h','a','p'), mov_read_chap },
2492 { MKTAG('t','r','e','x'), mov_read_trex },
2493 { MKTAG('t','r','u','n'), mov_read_trun },
2494 { MKTAG('u','d','t','a'), mov_read_default },
2495 { MKTAG('w','a','v','e'), mov_read_wave },
2496 { MKTAG('e','s','d','s'), mov_read_esds },
2497 { MKTAG('d','a','c','3'), mov_read_dac3 }, /* AC-3 info */
2498 { MKTAG('w','i','d','e'), mov_read_wide }, /* place holder */
2499 { MKTAG('w','f','e','x'), mov_read_wfex },
2500 { MKTAG('c','m','o','v'), mov_read_cmov },
2501 { MKTAG('c','h','a','n'), mov_read_chan }, /* channel layout */
2502 { 0, NULL }
2503 };
2504
2505 static int mov_probe(AVProbeData *p)
2506 {
2507     unsigned int offset;
2508     uint32_t tag;
2509     int score = 0;
2510
2511     /* check file header */
2512     offset = 0;
2513     for (;;) {
2514         /* ignore invalid offset */
2515         if ((offset + 8) > (unsigned int)p->buf_size)
2516             return score;
2517         tag = AV_RL32(p->buf + offset + 4);
2518         switch(tag) {
2519         /* check for obvious tags */
2520         case MKTAG('j','P',' ',' '): /* jpeg 2000 signature */
2521         case MKTAG('m','o','o','v'):
2522         case MKTAG('m','d','a','t'):
2523         case MKTAG('p','n','o','t'): /* detect movs with preview pics like ew.mov and april.mov */
2524         case MKTAG('u','d','t','a'): /* Packet Video PVAuthor adds this and a lot of more junk */
2525         case MKTAG('f','t','y','p'):
2526             return AVPROBE_SCORE_MAX;
2527         /* those are more common words, so rate then a bit less */
2528         case MKTAG('e','d','i','w'): /* xdcam files have reverted first tags */
2529         case MKTAG('w','i','d','e'):
2530         case MKTAG('f','r','e','e'):
2531         case MKTAG('j','u','n','k'):
2532         case MKTAG('p','i','c','t'):
2533             return AVPROBE_SCORE_MAX - 5;
2534         case MKTAG(0x82,0x82,0x7f,0x7d):
2535         case MKTAG('s','k','i','p'):
2536         case MKTAG('u','u','i','d'):
2537         case MKTAG('p','r','f','l'):
2538             offset = AV_RB32(p->buf+offset) + offset;
2539             /* if we only find those cause probedata is too small at least rate them */
2540             score = AVPROBE_SCORE_MAX - 50;
2541             break;
2542         default:
2543             /* unrecognized tag */
2544             return score;
2545         }
2546     }
2547 }
2548
2549 // must be done after parsing all trak because there's no order requirement
2550 static void mov_read_chapters(AVFormatContext *s)
2551 {
2552     MOVContext *mov = s->priv_data;
2553     AVStream *st = NULL;
2554     MOVStreamContext *sc;
2555     int64_t cur_pos;
2556     int i;
2557
2558     for (i = 0; i < s->nb_streams; i++)
2559         if (s->streams[i]->id == mov->chapter_track) {
2560             st = s->streams[i];
2561             break;
2562         }
2563     if (!st) {
2564         av_log(s, AV_LOG_ERROR, "Referenced QT chapter track not found\n");
2565         return;
2566     }
2567
2568     st->discard = AVDISCARD_ALL;
2569     sc = st->priv_data;
2570     cur_pos = avio_tell(sc->pb);
2571
2572     for (i = 0; i < st->nb_index_entries; i++) {
2573         AVIndexEntry *sample = &st->index_entries[i];
2574         int64_t end = i+1 < st->nb_index_entries ? st->index_entries[i+1].timestamp : st->duration;
2575         uint8_t *title;
2576         uint16_t ch;
2577         int len, title_len;
2578
2579         if (avio_seek(sc->pb, sample->pos, SEEK_SET) != sample->pos) {
2580             av_log(s, AV_LOG_ERROR, "Chapter %d not found in file\n", i);
2581             goto finish;
2582         }
2583
2584         // the first two bytes are the length of the title
2585         len = avio_rb16(sc->pb);
2586         if (len > sample->size-2)
2587             continue;
2588         title_len = 2*len + 1;
2589         if (!(title = av_mallocz(title_len)))
2590             goto finish;
2591
2592         // The samples could theoretically be in any encoding if there's an encd
2593         // atom following, but in practice are only utf-8 or utf-16, distinguished
2594         // instead by the presence of a BOM
2595         if (!len) {
2596             title[0] = 0;
2597         } else {
2598             ch = avio_rb16(sc->pb);
2599             if (ch == 0xfeff)
2600                 avio_get_str16be(sc->pb, len, title, title_len);
2601             else if (ch == 0xfffe)
2602                 avio_get_str16le(sc->pb, len, title, title_len);
2603             else {
2604                 AV_WB16(title, ch);
2605                 if (len == 1 || len == 2)
2606                     title[len] = 0;
2607                 else
2608                     get_strz(sc->pb, title + 2, len - 1);
2609             }
2610         }
2611
2612         avpriv_new_chapter(s, i, st->time_base, sample->timestamp, end, title);
2613         av_freep(&title);
2614     }
2615 finish:
2616     avio_seek(sc->pb, cur_pos, SEEK_SET);
2617 }
2618
2619 static int parse_timecode_in_framenum_format(AVFormatContext *s, AVStream *st,
2620                                              uint32_t value)
2621 {
2622     char buf[16];
2623     struct ff_timecode tc = {
2624         .drop  = st->codec->flags2 & CODEC_FLAG2_DROP_FRAME_TIMECODE,
2625         .rate  = (AVRational){st->codec->time_base.den,
2626                               st->codec->time_base.num},
2627     };
2628
2629     if (avpriv_check_timecode_rate(s, tc.rate, tc.drop) < 0)
2630         return AVERROR(EINVAL);
2631     av_dict_set(&st->metadata, "timecode",
2632                 avpriv_timecode_to_string(buf, &tc, value), 0);
2633     return 0;
2634 }
2635
2636 static int mov_read_timecode_track(AVFormatContext *s, AVStream *st)
2637 {
2638     MOVStreamContext *sc = st->priv_data;
2639     int64_t cur_pos = avio_tell(sc->pb);
2640     uint32_t value;
2641
2642     if (!st->nb_index_entries)
2643         return -1;
2644
2645     avio_seek(sc->pb, st->index_entries->pos, SEEK_SET);
2646     value = avio_rb32(s->pb);
2647
2648     /* Assume Counter flag is set to 1 in tmcd track (even though it is likely
2649      * not the case) and thus assume "frame number format" instead of QT one.
2650      * No sample with tmcd track can be found with a QT timecode at the moment,
2651      * despite what the tmcd track "suggests" (Counter flag set to 0 means QT
2652      * format). */
2653     parse_timecode_in_framenum_format(s, st, value);
2654
2655     avio_seek(sc->pb, cur_pos, SEEK_SET);
2656     return 0;
2657 }
2658
2659 static int mov_read_header(AVFormatContext *s, AVFormatParameters *ap)
2660 {
2661     MOVContext *mov = s->priv_data;
2662     AVIOContext *pb = s->pb;
2663     int err;
2664     MOVAtom atom = { AV_RL32("root") };
2665
2666     mov->fc = s;
2667     /* .mov and .mp4 aren't streamable anyway (only progressive download if moov is before mdat) */
2668     if (pb->seekable)
2669         atom.size = avio_size(pb);
2670     else
2671         atom.size = INT64_MAX;
2672
2673     /* check MOV header */
2674     if ((err = mov_read_default(mov, pb, atom)) < 0) {
2675         av_log(s, AV_LOG_ERROR, "error reading header: %d\n", err);
2676         return err;
2677     }
2678     if (!mov->found_moov) {
2679         av_log(s, AV_LOG_ERROR, "moov atom not found\n");
2680         return -1;
2681     }
2682     av_dlog(mov->fc, "on_parse_exit_offset=%"PRId64"\n", avio_tell(pb));
2683
2684     if (pb->seekable) {
2685         int i;
2686         if (mov->chapter_track > 0)
2687             mov_read_chapters(s);
2688         for (i = 0; i < s->nb_streams; i++)
2689             if (s->streams[i]->codec->codec_tag == AV_RL32("tmcd"))
2690                 mov_read_timecode_track(s, s->streams[i]);
2691     }
2692
2693     return 0;
2694 }
2695
2696 static AVIndexEntry *mov_find_next_sample(AVFormatContext *s, AVStream **st)
2697 {
2698     AVIndexEntry *sample = NULL;
2699     int64_t best_dts = INT64_MAX;
2700     int i;
2701     for (i = 0; i < s->nb_streams; i++) {
2702         AVStream *avst = s->streams[i];
2703         MOVStreamContext *msc = avst->priv_data;
2704         if (msc->pb && msc->current_sample < avst->nb_index_entries) {
2705             AVIndexEntry *current_sample = &avst->index_entries[msc->current_sample];
2706             int64_t dts = av_rescale(current_sample->timestamp, AV_TIME_BASE, msc->time_scale);
2707             av_dlog(s, "stream %d, sample %d, dts %"PRId64"\n", i, msc->current_sample, dts);
2708             if (!sample || (!s->pb->seekable && current_sample->pos < sample->pos) ||
2709                 (s->pb->seekable &&
2710                  ((msc->pb != s->pb && dts < best_dts) || (msc->pb == s->pb &&
2711                  ((FFABS(best_dts - dts) <= AV_TIME_BASE && current_sample->pos < sample->pos) ||
2712                   (FFABS(best_dts - dts) > AV_TIME_BASE && dts < best_dts)))))) {
2713                 sample = current_sample;
2714                 best_dts = dts;
2715                 *st = avst;
2716             }
2717         }
2718     }
2719     return sample;
2720 }
2721
2722 static int mov_read_packet(AVFormatContext *s, AVPacket *pkt)
2723 {
2724     MOVContext *mov = s->priv_data;
2725     MOVStreamContext *sc;
2726     AVIndexEntry *sample;
2727     AVStream *st = NULL;
2728     int ret;
2729  retry:
2730     sample = mov_find_next_sample(s, &st);
2731     if (!sample) {
2732         mov->found_mdat = 0;
2733         if (s->pb->seekable||
2734             mov_read_default(mov, s->pb, (MOVAtom){ AV_RL32("root"), INT64_MAX }) < 0 ||
2735             url_feof(s->pb))
2736             return AVERROR_EOF;
2737         av_dlog(s, "read fragments, offset 0x%"PRIx64"\n", avio_tell(s->pb));
2738         goto retry;
2739     }
2740     sc = st->priv_data;
2741     /* must be done just before reading, to avoid infinite loop on sample */
2742     sc->current_sample++;
2743
2744     if (st->discard != AVDISCARD_ALL) {
2745         if (avio_seek(sc->pb, sample->pos, SEEK_SET) != sample->pos) {
2746             av_log(mov->fc, AV_LOG_ERROR, "stream %d, offset 0x%"PRIx64": partial file\n",
2747                    sc->ffindex, sample->pos);
2748             return -1;
2749         }
2750         ret = av_get_packet(sc->pb, pkt, sample->size);
2751         if (ret < 0)
2752             return ret;
2753         if (sc->has_palette) {
2754             uint8_t *pal;
2755
2756             pal = av_packet_new_side_data(pkt, AV_PKT_DATA_PALETTE, AVPALETTE_SIZE);
2757             if (!pal) {
2758                 av_log(mov->fc, AV_LOG_ERROR, "Cannot append palette to packet\n");
2759             } else {
2760                 memcpy(pal, sc->palette, AVPALETTE_SIZE);
2761                 sc->has_palette = 0;
2762             }
2763         }
2764 #if CONFIG_DV_DEMUXER
2765         if (mov->dv_demux && sc->dv_audio_container) {
2766             avpriv_dv_produce_packet(mov->dv_demux, pkt, pkt->data, pkt->size, pkt->pos);
2767             av_free(pkt->data);
2768             pkt->size = 0;
2769             ret = avpriv_dv_get_packet(mov->dv_demux, pkt);
2770             if (ret < 0)
2771                 return ret;
2772         }
2773 #endif
2774     }
2775
2776     pkt->stream_index = sc->ffindex;
2777     pkt->dts = sample->timestamp;
2778     if (sc->ctts_data) {
2779         pkt->pts = pkt->dts + sc->dts_shift + sc->ctts_data[sc->ctts_index].duration;
2780         /* update ctts context */
2781         sc->ctts_sample++;
2782         if (sc->ctts_index < sc->ctts_count &&
2783             sc->ctts_data[sc->ctts_index].count == sc->ctts_sample) {
2784             sc->ctts_index++;
2785             sc->ctts_sample = 0;
2786         }
2787         if (sc->wrong_dts)
2788             pkt->dts = AV_NOPTS_VALUE;
2789     } else {
2790         int64_t next_dts = (sc->current_sample < st->nb_index_entries) ?
2791             st->index_entries[sc->current_sample].timestamp : st->duration;
2792         pkt->duration = next_dts - pkt->dts;
2793         pkt->pts = pkt->dts;
2794     }
2795     if (st->discard == AVDISCARD_ALL)
2796         goto retry;
2797     pkt->flags |= sample->flags & AVINDEX_KEYFRAME ? AV_PKT_FLAG_KEY : 0;
2798     pkt->pos = sample->pos;
2799     av_dlog(s, "stream %d, pts %"PRId64", dts %"PRId64", pos 0x%"PRIx64", duration %d\n",
2800             pkt->stream_index, pkt->pts, pkt->dts, pkt->pos, pkt->duration);
2801     return 0;
2802 }
2803
2804 static int mov_seek_stream(AVFormatContext *s, AVStream *st, int64_t timestamp, int flags)
2805 {
2806     MOVStreamContext *sc = st->priv_data;
2807     int sample, time_sample;
2808     int i;
2809
2810     sample = av_index_search_timestamp(st, timestamp, flags);
2811     av_dlog(s, "stream %d, timestamp %"PRId64", sample %d\n", st->index, timestamp, sample);
2812     if (sample < 0 && st->nb_index_entries && timestamp < st->index_entries[0].timestamp)
2813         sample = 0;
2814     if (sample < 0) /* not sure what to do */
2815         return -1;
2816     sc->current_sample = sample;
2817     av_dlog(s, "stream %d, found sample %d\n", st->index, sc->current_sample);
2818     /* adjust ctts index */
2819     if (sc->ctts_data) {
2820         time_sample = 0;
2821         for (i = 0; i < sc->ctts_count; i++) {
2822             int next = time_sample + sc->ctts_data[i].count;
2823             if (next > sc->current_sample) {
2824                 sc->ctts_index = i;
2825                 sc->ctts_sample = sc->current_sample - time_sample;
2826                 break;
2827             }
2828             time_sample = next;
2829         }
2830     }
2831     return sample;
2832 }
2833
2834 static int mov_read_seek(AVFormatContext *s, int stream_index, int64_t sample_time, int flags)
2835 {
2836     AVStream *st;
2837     int64_t seek_timestamp, timestamp;
2838     int sample;
2839     int i;
2840
2841     if (stream_index >= s->nb_streams)
2842         return -1;
2843     if (sample_time < 0)
2844         sample_time = 0;
2845
2846     st = s->streams[stream_index];
2847     sample = mov_seek_stream(s, st, sample_time, flags);
2848     if (sample < 0)
2849         return -1;
2850
2851     /* adjust seek timestamp to found sample timestamp */
2852     seek_timestamp = st->index_entries[sample].timestamp;
2853
2854     for (i = 0; i < s->nb_streams; i++) {
2855         st = s->streams[i];
2856         if (stream_index == i)
2857             continue;
2858
2859         timestamp = av_rescale_q(seek_timestamp, s->streams[stream_index]->time_base, st->time_base);
2860         mov_seek_stream(s, st, timestamp, flags);
2861     }
2862     return 0;
2863 }
2864
2865 static int mov_read_close(AVFormatContext *s)
2866 {
2867     MOVContext *mov = s->priv_data;
2868     int i, j;
2869
2870     for (i = 0; i < s->nb_streams; i++) {
2871         AVStream *st = s->streams[i];
2872         MOVStreamContext *sc = st->priv_data;
2873
2874         av_freep(&sc->ctts_data);
2875         for (j = 0; j < sc->drefs_count; j++) {
2876             av_freep(&sc->drefs[j].path);
2877             av_freep(&sc->drefs[j].dir);
2878         }
2879         av_freep(&sc->drefs);
2880         if (sc->pb && sc->pb != s->pb)
2881             avio_close(sc->pb);
2882     }
2883
2884     if (mov->dv_demux) {
2885         for (i = 0; i < mov->dv_fctx->nb_streams; i++) {
2886             av_freep(&mov->dv_fctx->streams[i]->codec);
2887             av_freep(&mov->dv_fctx->streams[i]);
2888         }
2889         av_freep(&mov->dv_fctx);
2890         av_freep(&mov->dv_demux);
2891     }
2892
2893     av_freep(&mov->trex_data);
2894
2895     return 0;
2896 }
2897
2898 AVInputFormat ff_mov_demuxer = {
2899     .name           = "mov,mp4,m4a,3gp,3g2,mj2",
2900     .long_name      = NULL_IF_CONFIG_SMALL("QuickTime/MPEG-4/Motion JPEG 2000 format"),
2901     .priv_data_size = sizeof(MOVContext),
2902     .read_probe     = mov_probe,
2903     .read_header    = mov_read_header,
2904     .read_packet    = mov_read_packet,
2905     .read_close     = mov_read_close,
2906     .read_seek      = mov_read_seek,
2907 };