movenc: Allow writing a DASH sidx atom at the start of files
[ffmpeg.git] / libavformat / movenc.c
1 /*
2  * MOV, 3GP, MP4 muxer
3  * Copyright (c) 2003 Thomas Raivio
4  * Copyright (c) 2004 Gildas Bazin <gbazin at videolan dot org>
5  * Copyright (c) 2009 Baptiste Coudurier <baptiste dot coudurier at gmail dot com>
6  *
7  * This file is part of Libav.
8  *
9  * Libav is free software; you can redistribute it and/or
10  * modify it under the terms of the GNU Lesser General Public
11  * License as published by the Free Software Foundation; either
12  * version 2.1 of the License, or (at your option) any later version.
13  *
14  * Libav is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
17  * Lesser General Public License for more details.
18  *
19  * You should have received a copy of the GNU Lesser General Public
20  * License along with Libav; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
22  */
23
24 #include <stdint.h>
25 #include <inttypes.h>
26
27 #include "movenc.h"
28 #include "avformat.h"
29 #include "avio_internal.h"
30 #include "riff.h"
31 #include "avio.h"
32 #include "isom.h"
33 #include "avc.h"
34 #include "libavcodec/get_bits.h"
35 #include "libavcodec/put_bits.h"
36 #include "libavcodec/vc1_common.h"
37 #include "internal.h"
38 #include "libavutil/avstring.h"
39 #include "libavutil/intfloat.h"
40 #include "libavutil/mathematics.h"
41 #include "libavutil/opt.h"
42 #include "libavutil/dict.h"
43 #include "hevc.h"
44 #include "rtpenc.h"
45 #include "mov_chan.h"
46
47 #undef NDEBUG
48 #include <assert.h>
49
50 static const AVOption options[] = {
51     { "movflags", "MOV muxer flags", offsetof(MOVMuxContext, flags), AV_OPT_TYPE_FLAGS, {.i64 = 0}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
52     { "rtphint", "Add RTP hint tracks", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_RTP_HINT}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
53     { "empty_moov", "Make the initial moov atom empty", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_EMPTY_MOOV}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
54     { "frag_keyframe", "Fragment at video keyframes", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_KEYFRAME}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
55     { "separate_moof", "Write separate moof/mdat atoms for each track", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_SEPARATE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
56     { "frag_custom", "Flush fragments on caller requests", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FRAG_CUSTOM}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
57     { "isml", "Create a live smooth streaming feed (for pushing to a publishing point)", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_ISML}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
58     { "faststart", "Run a second pass to put the index (moov atom) at the beginning of the file", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_FASTSTART}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
59     { "omit_tfhd_offset", "Omit the base data offset in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_OMIT_TFHD_OFFSET}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
60     { "disable_chpl", "Disable Nero chapter atom", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DISABLE_CHPL}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
61     { "default_base_moof", "Set the default-base-is-moof flag in tfhd atoms", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DEFAULT_BASE_MOOF}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
62     { "dash", "Write DASH compatible fragmented MP4", 0, AV_OPT_TYPE_CONST, {.i64 = FF_MOV_FLAG_DASH}, INT_MIN, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM, "movflags" },
63     FF_RTP_FLAG_OPTS(MOVMuxContext, rtp_flags),
64     { "skip_iods", "Skip writing iods atom.", offsetof(MOVMuxContext, iods_skip), AV_OPT_TYPE_INT, {.i64 = 0}, 0, 1, AV_OPT_FLAG_ENCODING_PARAM},
65     { "iods_audio_profile", "iods audio profile atom.", offsetof(MOVMuxContext, iods_audio_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
66     { "iods_video_profile", "iods video profile atom.", offsetof(MOVMuxContext, iods_video_profile), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 255, AV_OPT_FLAG_ENCODING_PARAM},
67     { "frag_duration", "Maximum fragment duration", offsetof(MOVMuxContext, max_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
68     { "min_frag_duration", "Minimum fragment duration", offsetof(MOVMuxContext, min_fragment_duration), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
69     { "frag_size", "Maximum fragment size", offsetof(MOVMuxContext, max_fragment_size), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
70     { "ism_lookahead", "Number of lookahead entries for ISM files", offsetof(MOVMuxContext, ism_lookahead), AV_OPT_TYPE_INT, {.i64 = 0}, 0, INT_MAX, AV_OPT_FLAG_ENCODING_PARAM},
71     { "brand",    "Override major brand", offsetof(MOVMuxContext, major_brand),   AV_OPT_TYPE_STRING, {.str = NULL}, .flags = AV_OPT_FLAG_ENCODING_PARAM },
72     { "use_editlist", "use edit list", offsetof(MOVMuxContext, use_editlist), AV_OPT_TYPE_INT, {.i64 = -1}, -1, 1, AV_OPT_FLAG_ENCODING_PARAM},
73     { NULL },
74 };
75
76 #define MOV_CLASS(flavor)\
77 static const AVClass flavor ## _muxer_class = {\
78     .class_name = #flavor " muxer",\
79     .item_name  = av_default_item_name,\
80     .option     = options,\
81     .version    = LIBAVUTIL_VERSION_INT,\
82 };
83
84 static int utf8len(const uint8_t *b)
85 {
86     int len = 0;
87     int val;
88     while (*b) {
89         GET_UTF8(val, *b++, return -1;)
90         len++;
91     }
92     return len;
93 }
94
95 //FIXME support 64 bit variant with wide placeholders
96 static int64_t update_size(AVIOContext *pb, int64_t pos)
97 {
98     int64_t curpos = avio_tell(pb);
99     avio_seek(pb, pos, SEEK_SET);
100     avio_wb32(pb, curpos - pos); /* rewrite size */
101     avio_seek(pb, curpos, SEEK_SET);
102
103     return curpos - pos;
104 }
105
106 static int co64_required(const MOVTrack *track)
107 {
108     if (track->entry > 0 && track->cluster[track->entry - 1].pos + track->data_offset > UINT32_MAX)
109         return 1;
110     return 0;
111 }
112
113 /* Chunk offset atom */
114 static int mov_write_stco_tag(AVIOContext *pb, MOVTrack *track)
115 {
116     int i;
117     int mode64 = co64_required(track); // use 32 bit size variant if possible
118     int64_t pos = avio_tell(pb);
119     avio_wb32(pb, 0); /* size */
120     if (mode64) {
121         ffio_wfourcc(pb, "co64");
122     } else
123         ffio_wfourcc(pb, "stco");
124     avio_wb32(pb, 0); /* version & flags */
125     avio_wb32(pb, track->entry); /* entry count */
126     for (i = 0; i < track->entry; i++) {
127         if (mode64 == 1)
128             avio_wb64(pb, track->cluster[i].pos + track->data_offset);
129         else
130             avio_wb32(pb, track->cluster[i].pos + track->data_offset);
131     }
132     return update_size(pb, pos);
133 }
134
135 /* Sample size atom */
136 static int mov_write_stsz_tag(AVIOContext *pb, MOVTrack *track)
137 {
138     int equalChunks = 1;
139     int i, j, entries = 0, tst = -1, oldtst = -1;
140
141     int64_t pos = avio_tell(pb);
142     avio_wb32(pb, 0); /* size */
143     ffio_wfourcc(pb, "stsz");
144     avio_wb32(pb, 0); /* version & flags */
145
146     for (i = 0; i < track->entry; i++) {
147         tst = track->cluster[i].size / track->cluster[i].entries;
148         if (oldtst != -1 && tst != oldtst)
149             equalChunks = 0;
150         oldtst = tst;
151         entries += track->cluster[i].entries;
152     }
153     if (equalChunks && track->entry) {
154         int sSize = track->entry ? track->cluster[0].size / track->cluster[0].entries : 0;
155         sSize = FFMAX(1, sSize); // adpcm mono case could make sSize == 0
156         avio_wb32(pb, sSize); // sample size
157         avio_wb32(pb, entries); // sample count
158     } else {
159         avio_wb32(pb, 0); // sample size
160         avio_wb32(pb, entries); // sample count
161         for (i = 0; i < track->entry; i++) {
162             for (j = 0; j < track->cluster[i].entries; j++) {
163                 avio_wb32(pb, track->cluster[i].size /
164                           track->cluster[i].entries);
165             }
166         }
167     }
168     return update_size(pb, pos);
169 }
170
171 /* Sample to chunk atom */
172 static int mov_write_stsc_tag(AVIOContext *pb, MOVTrack *track)
173 {
174     int index = 0, oldval = -1, i;
175     int64_t entryPos, curpos;
176
177     int64_t pos = avio_tell(pb);
178     avio_wb32(pb, 0); /* size */
179     ffio_wfourcc(pb, "stsc");
180     avio_wb32(pb, 0); // version & flags
181     entryPos = avio_tell(pb);
182     avio_wb32(pb, track->entry); // entry count
183     for (i = 0; i < track->entry; i++) {
184         if (oldval != track->cluster[i].samples_in_chunk) {
185             avio_wb32(pb, i + 1); // first chunk
186             avio_wb32(pb, track->cluster[i].samples_in_chunk); // samples per chunk
187             avio_wb32(pb, 0x1); // sample description index
188             oldval = track->cluster[i].samples_in_chunk;
189             index++;
190         }
191     }
192     curpos = avio_tell(pb);
193     avio_seek(pb, entryPos, SEEK_SET);
194     avio_wb32(pb, index); // rewrite size
195     avio_seek(pb, curpos, SEEK_SET);
196
197     return update_size(pb, pos);
198 }
199
200 /* Sync sample atom */
201 static int mov_write_stss_tag(AVIOContext *pb, MOVTrack *track, uint32_t flag)
202 {
203     int64_t curpos, entryPos;
204     int i, index = 0;
205     int64_t pos = avio_tell(pb);
206     avio_wb32(pb, 0); // size
207     ffio_wfourcc(pb, flag == MOV_SYNC_SAMPLE ? "stss" : "stps");
208     avio_wb32(pb, 0); // version & flags
209     entryPos = avio_tell(pb);
210     avio_wb32(pb, track->entry); // entry count
211     for (i = 0; i < track->entry; i++) {
212         if (track->cluster[i].flags & flag) {
213             avio_wb32(pb, i + 1);
214             index++;
215         }
216     }
217     curpos = avio_tell(pb);
218     avio_seek(pb, entryPos, SEEK_SET);
219     avio_wb32(pb, index); // rewrite size
220     avio_seek(pb, curpos, SEEK_SET);
221     return update_size(pb, pos);
222 }
223
224 static int mov_write_amr_tag(AVIOContext *pb, MOVTrack *track)
225 {
226     avio_wb32(pb, 0x11); /* size */
227     if (track->mode == MODE_MOV) ffio_wfourcc(pb, "samr");
228     else                         ffio_wfourcc(pb, "damr");
229     ffio_wfourcc(pb, "FFMP");
230     avio_w8(pb, 0); /* decoder version */
231
232     avio_wb16(pb, 0x81FF); /* Mode set (all modes for AMR_NB) */
233     avio_w8(pb, 0x00); /* Mode change period (no restriction) */
234     avio_w8(pb, 0x01); /* Frames per sample */
235     return 0x11;
236 }
237
238 static int mov_write_ac3_tag(AVIOContext *pb, MOVTrack *track)
239 {
240     GetBitContext gbc;
241     PutBitContext pbc;
242     uint8_t buf[3];
243     int fscod, bsid, bsmod, acmod, lfeon, frmsizecod;
244
245     if (track->vos_len < 7)
246         return -1;
247
248     avio_wb32(pb, 11);
249     ffio_wfourcc(pb, "dac3");
250
251     init_get_bits(&gbc, track->vos_data + 4, (track->vos_len - 4) * 8);
252     fscod      = get_bits(&gbc, 2);
253     frmsizecod = get_bits(&gbc, 6);
254     bsid       = get_bits(&gbc, 5);
255     bsmod      = get_bits(&gbc, 3);
256     acmod      = get_bits(&gbc, 3);
257     if (acmod == 2) {
258         skip_bits(&gbc, 2); // dsurmod
259     } else {
260         if ((acmod & 1) && acmod != 1)
261             skip_bits(&gbc, 2); // cmixlev
262         if (acmod & 4)
263             skip_bits(&gbc, 2); // surmixlev
264     }
265     lfeon = get_bits1(&gbc);
266
267     init_put_bits(&pbc, buf, sizeof(buf));
268     put_bits(&pbc, 2, fscod);
269     put_bits(&pbc, 5, bsid);
270     put_bits(&pbc, 3, bsmod);
271     put_bits(&pbc, 3, acmod);
272     put_bits(&pbc, 1, lfeon);
273     put_bits(&pbc, 5, frmsizecod >> 1); // bit_rate_code
274     put_bits(&pbc, 5, 0); // reserved
275
276     flush_put_bits(&pbc);
277     avio_write(pb, buf, sizeof(buf));
278
279     return 11;
280 }
281
282 /**
283  * This function writes extradata "as is".
284  * Extradata must be formatted like a valid atom (with size and tag).
285  */
286 static int mov_write_extradata_tag(AVIOContext *pb, MOVTrack *track)
287 {
288     avio_write(pb, track->enc->extradata, track->enc->extradata_size);
289     return track->enc->extradata_size;
290 }
291
292 static void put_descr(AVIOContext *pb, int tag, unsigned int size)
293 {
294     int i = 3;
295     avio_w8(pb, tag);
296     for (; i > 0; i--)
297         avio_w8(pb, (size >> (7 * i)) | 0x80);
298     avio_w8(pb, size & 0x7F);
299 }
300
301 static int mov_write_esds_tag(AVIOContext *pb, MOVTrack *track) // Basic
302 {
303     int64_t pos = avio_tell(pb);
304     int decoder_specific_info_len = track->vos_len ? 5 + track->vos_len : 0;
305
306     avio_wb32(pb, 0); // size
307     ffio_wfourcc(pb, "esds");
308     avio_wb32(pb, 0); // Version
309
310     // ES descriptor
311     put_descr(pb, 0x03, 3 + 5+13 + decoder_specific_info_len + 5+1);
312     avio_wb16(pb, track->track_id);
313     avio_w8(pb, 0x00); // flags (= no flags)
314
315     // DecoderConfig descriptor
316     put_descr(pb, 0x04, 13 + decoder_specific_info_len);
317
318     // Object type indication
319     if ((track->enc->codec_id == AV_CODEC_ID_MP2 ||
320          track->enc->codec_id == AV_CODEC_ID_MP3) &&
321         track->enc->sample_rate > 24000)
322         avio_w8(pb, 0x6B); // 11172-3
323     else
324         avio_w8(pb, ff_codec_get_tag(ff_mp4_obj_type, track->enc->codec_id));
325
326     // the following fields is made of 6 bits to identify the streamtype (4 for video, 5 for audio)
327     // plus 1 bit to indicate upstream and 1 bit set to 1 (reserved)
328     if (track->enc->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
329         avio_w8(pb, (0x38 << 2) | 1); // flags (= NeroSubpicStream)
330     else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO)
331         avio_w8(pb, 0x15); // flags (= Audiostream)
332     else
333         avio_w8(pb, 0x11); // flags (= Visualstream)
334
335     avio_wb24(pb, track->enc->rc_buffer_size >> 3); // Buffersize DB
336
337     avio_wb32(pb, FFMAX(track->enc->bit_rate, track->enc->rc_max_rate)); // maxbitrate (FIXME should be max rate in any 1 sec window)
338     if (track->enc->rc_max_rate != track->enc->rc_min_rate ||
339         track->enc->rc_min_rate == 0)
340         avio_wb32(pb, 0); // vbr
341     else
342         avio_wb32(pb, track->enc->rc_max_rate); // avg bitrate
343
344     if (track->vos_len) {
345         // DecoderSpecific info descriptor
346         put_descr(pb, 0x05, track->vos_len);
347         avio_write(pb, track->vos_data, track->vos_len);
348     }
349
350     // SL descriptor
351     put_descr(pb, 0x06, 1);
352     avio_w8(pb, 0x02);
353     return update_size(pb, pos);
354 }
355
356 static int mov_write_ms_tag(AVIOContext *pb, MOVTrack *track)
357 {
358     int64_t pos = avio_tell(pb);
359     avio_wb32(pb, 0);
360     avio_wl32(pb, track->tag); // store it byteswapped
361     track->enc->codec_tag = av_bswap16(track->tag >> 16);
362     ff_put_wav_header(pb, track->enc);
363     return update_size(pb, pos);
364 }
365
366 static int mov_write_wfex_tag(AVIOContext *pb, MOVTrack *track)
367 {
368     int64_t pos = avio_tell(pb);
369     avio_wb32(pb, 0);
370     ffio_wfourcc(pb, "wfex");
371     ff_put_wav_header(pb, track->enc);
372     return update_size(pb, pos);
373 }
374
375 static int mov_write_chan_tag(AVIOContext *pb, MOVTrack *track)
376 {
377     uint32_t layout_tag, bitmap;
378     int64_t pos = avio_tell(pb);
379
380     layout_tag = ff_mov_get_channel_layout_tag(track->enc->codec_id,
381                                                track->enc->channel_layout,
382                                                &bitmap);
383     if (!layout_tag) {
384         av_log(track->enc, AV_LOG_WARNING, "not writing 'chan' tag due to "
385                "lack of channel information\n");
386         return 0;
387     }
388
389     avio_wb32(pb, 0);           // Size
390     ffio_wfourcc(pb, "chan");   // Type
391     avio_w8(pb, 0);             // Version
392     avio_wb24(pb, 0);           // Flags
393     avio_wb32(pb, layout_tag);  // mChannelLayoutTag
394     avio_wb32(pb, bitmap);      // mChannelBitmap
395     avio_wb32(pb, 0);           // mNumberChannelDescriptions
396
397     return update_size(pb, pos);
398 }
399
400 static int mov_write_wave_tag(AVIOContext *pb, MOVTrack *track)
401 {
402     int64_t pos = avio_tell(pb);
403
404     avio_wb32(pb, 0);     /* size */
405     ffio_wfourcc(pb, "wave");
406
407     avio_wb32(pb, 12);    /* size */
408     ffio_wfourcc(pb, "frma");
409     avio_wl32(pb, track->tag);
410
411     if (track->enc->codec_id == AV_CODEC_ID_AAC) {
412         /* useless atom needed by mplayer, ipod, not needed by quicktime */
413         avio_wb32(pb, 12); /* size */
414         ffio_wfourcc(pb, "mp4a");
415         avio_wb32(pb, 0);
416         mov_write_esds_tag(pb, track);
417     } else if (track->enc->codec_id == AV_CODEC_ID_AMR_NB) {
418         mov_write_amr_tag(pb, track);
419     } else if (track->enc->codec_id == AV_CODEC_ID_AC3) {
420         mov_write_ac3_tag(pb, track);
421     } else if (track->enc->codec_id == AV_CODEC_ID_ALAC) {
422         mov_write_extradata_tag(pb, track);
423     } else if (track->enc->codec_id == AV_CODEC_ID_ADPCM_MS ||
424                track->enc->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV) {
425         mov_write_ms_tag(pb, track);
426     }
427
428     avio_wb32(pb, 8);     /* size */
429     avio_wb32(pb, 0);     /* null tag */
430
431     return update_size(pb, pos);
432 }
433
434 static int mov_write_dvc1_structs(MOVTrack *track, uint8_t *buf)
435 {
436     uint8_t *unescaped;
437     const uint8_t *start, *next, *end = track->vos_data + track->vos_len;
438     int unescaped_size, seq_found = 0;
439     int level = 0, interlace = 0;
440     int packet_seq   = track->vc1_info.packet_seq;
441     int packet_entry = track->vc1_info.packet_entry;
442     int slices       = track->vc1_info.slices;
443     PutBitContext pbc;
444
445     if (track->start_dts == AV_NOPTS_VALUE) {
446         /* No packets written yet, vc1_info isn't authoritative yet. */
447         /* Assume inline sequence and entry headers. This will be
448          * overwritten at the end if the file is seekable. */
449         packet_seq = packet_entry = 1;
450     }
451
452     unescaped = av_mallocz(track->vos_len + FF_INPUT_BUFFER_PADDING_SIZE);
453     if (!unescaped)
454         return AVERROR(ENOMEM);
455     start = find_next_marker(track->vos_data, end);
456     for (next = start; next < end; start = next) {
457         GetBitContext gb;
458         int size;
459         next = find_next_marker(start + 4, end);
460         size = next - start - 4;
461         if (size <= 0)
462             continue;
463         unescaped_size = vc1_unescape_buffer(start + 4, size, unescaped);
464         init_get_bits(&gb, unescaped, 8 * unescaped_size);
465         if (AV_RB32(start) == VC1_CODE_SEQHDR) {
466             int profile = get_bits(&gb, 2);
467             if (profile != PROFILE_ADVANCED) {
468                 av_free(unescaped);
469                 return AVERROR(ENOSYS);
470             }
471             seq_found = 1;
472             level = get_bits(&gb, 3);
473             /* chromaformat, frmrtq_postproc, bitrtq_postproc, postprocflag,
474              * width, height */
475             skip_bits_long(&gb, 2 + 3 + 5 + 1 + 2*12);
476             skip_bits(&gb, 1); /* broadcast */
477             interlace = get_bits1(&gb);
478             skip_bits(&gb, 4); /* tfcntrflag, finterpflag, reserved, psf */
479         }
480     }
481     if (!seq_found) {
482         av_free(unescaped);
483         return AVERROR(ENOSYS);
484     }
485
486     init_put_bits(&pbc, buf, 7);
487     /* VC1DecSpecStruc */
488     put_bits(&pbc, 4, 12); /* profile - advanced */
489     put_bits(&pbc, 3, level);
490     put_bits(&pbc, 1, 0); /* reserved */
491     /* VC1AdvDecSpecStruc */
492     put_bits(&pbc, 3, level);
493     put_bits(&pbc, 1, 0); /* cbr */
494     put_bits(&pbc, 6, 0); /* reserved */
495     put_bits(&pbc, 1, !interlace); /* no interlace */
496     put_bits(&pbc, 1, !packet_seq); /* no multiple seq */
497     put_bits(&pbc, 1, !packet_entry); /* no multiple entry */
498     put_bits(&pbc, 1, !slices); /* no slice code */
499     put_bits(&pbc, 1, 0); /* no bframe */
500     put_bits(&pbc, 1, 0); /* reserved */
501
502     /* framerate */
503     if (track->st->avg_frame_rate.num > 0 && track->st->avg_frame_rate.den > 0)
504         put_bits32(&pbc, track->st->avg_frame_rate.num / track->st->avg_frame_rate.den);
505     else
506         put_bits32(&pbc, 0xffffffff);
507
508     flush_put_bits(&pbc);
509
510     av_free(unescaped);
511
512     return 0;
513 }
514
515 static int mov_write_dvc1_tag(AVIOContext *pb, MOVTrack *track)
516 {
517     uint8_t buf[7] = { 0 };
518     int ret;
519
520     if ((ret = mov_write_dvc1_structs(track, buf)) < 0)
521         return ret;
522
523     avio_wb32(pb, track->vos_len + 8 + sizeof(buf));
524     ffio_wfourcc(pb, "dvc1");
525     track->vc1_info.struct_offset = avio_tell(pb);
526     avio_write(pb, buf, sizeof(buf));
527     avio_write(pb, track->vos_data, track->vos_len);
528
529     return 0;
530 }
531
532 static int mov_write_glbl_tag(AVIOContext *pb, MOVTrack *track)
533 {
534     avio_wb32(pb, track->vos_len + 8);
535     ffio_wfourcc(pb, "glbl");
536     avio_write(pb, track->vos_data, track->vos_len);
537     return 8 + track->vos_len;
538 }
539
540 /**
541  * Compute flags for 'lpcm' tag.
542  * See CoreAudioTypes and AudioStreamBasicDescription at Apple.
543  */
544 static int mov_get_lpcm_flags(enum AVCodecID codec_id)
545 {
546     switch (codec_id) {
547     case AV_CODEC_ID_PCM_F32BE:
548     case AV_CODEC_ID_PCM_F64BE:
549         return 11;
550     case AV_CODEC_ID_PCM_F32LE:
551     case AV_CODEC_ID_PCM_F64LE:
552         return 9;
553     case AV_CODEC_ID_PCM_U8:
554         return 10;
555     case AV_CODEC_ID_PCM_S16BE:
556     case AV_CODEC_ID_PCM_S24BE:
557     case AV_CODEC_ID_PCM_S32BE:
558         return 14;
559     case AV_CODEC_ID_PCM_S8:
560     case AV_CODEC_ID_PCM_S16LE:
561     case AV_CODEC_ID_PCM_S24LE:
562     case AV_CODEC_ID_PCM_S32LE:
563         return 12;
564     default:
565         return 0;
566     }
567 }
568
569 static int get_cluster_duration(MOVTrack *track, int cluster_idx)
570 {
571     int64_t next_dts;
572
573     if (cluster_idx >= track->entry)
574         return 0;
575
576     if (cluster_idx + 1 == track->entry)
577         next_dts = track->track_duration + track->start_dts;
578     else
579         next_dts = track->cluster[cluster_idx + 1].dts;
580
581     return next_dts - track->cluster[cluster_idx].dts;
582 }
583
584 static int get_samples_per_packet(MOVTrack *track)
585 {
586     int i, first_duration;
587
588     /* use 1 for raw PCM */
589     if (!track->audio_vbr)
590         return 1;
591
592     /* check to see if duration is constant for all clusters */
593     if (!track->entry)
594         return 0;
595     first_duration = get_cluster_duration(track, 0);
596     for (i = 1; i < track->entry; i++) {
597         if (get_cluster_duration(track, i) != first_duration)
598             return 0;
599     }
600     return first_duration;
601 }
602
603 static int mov_write_audio_tag(AVIOContext *pb, MOVTrack *track)
604 {
605     int64_t pos = avio_tell(pb);
606     int version = 0;
607     uint32_t tag = track->tag;
608
609     if (track->mode == MODE_MOV) {
610         if (mov_get_lpcm_flags(track->enc->codec_id))
611             tag = AV_RL32("lpcm");
612         version = 2;
613     }
614
615     avio_wb32(pb, 0); /* size */
616     avio_wl32(pb, tag); // store it byteswapped
617     avio_wb32(pb, 0); /* Reserved */
618     avio_wb16(pb, 0); /* Reserved */
619     avio_wb16(pb, 1); /* Data-reference index, XXX  == 1 */
620
621     /* SoundDescription */
622     avio_wb16(pb, version); /* Version */
623     avio_wb16(pb, 0); /* Revision level */
624     avio_wb32(pb, 0); /* Reserved */
625
626     if (version == 2) {
627         avio_wb16(pb, 3);
628         avio_wb16(pb, 16);
629         avio_wb16(pb, 0xfffe);
630         avio_wb16(pb, 0);
631         avio_wb32(pb, 0x00010000);
632         avio_wb32(pb, 72);
633         avio_wb64(pb, av_double2int(track->enc->sample_rate));
634         avio_wb32(pb, track->enc->channels);
635         avio_wb32(pb, 0x7F000000);
636         avio_wb32(pb, av_get_bits_per_sample(track->enc->codec_id));
637         avio_wb32(pb, mov_get_lpcm_flags(track->enc->codec_id));
638         avio_wb32(pb, track->sample_size);
639         avio_wb32(pb, get_samples_per_packet(track));
640     } else {
641         /* reserved for mp4/3gp */
642         avio_wb16(pb, 2);
643         avio_wb16(pb, 16);
644         avio_wb16(pb, 0);
645
646         avio_wb16(pb, 0); /* packet size (= 0) */
647         avio_wb16(pb, track->enc->sample_rate <= UINT16_MAX ?
648                       track->enc->sample_rate : 0);
649         avio_wb16(pb, 0); /* Reserved */
650     }
651
652     if (track->mode == MODE_MOV &&
653         (track->enc->codec_id == AV_CODEC_ID_AAC           ||
654          track->enc->codec_id == AV_CODEC_ID_AC3           ||
655          track->enc->codec_id == AV_CODEC_ID_AMR_NB        ||
656          track->enc->codec_id == AV_CODEC_ID_ALAC          ||
657          track->enc->codec_id == AV_CODEC_ID_ADPCM_MS      ||
658          track->enc->codec_id == AV_CODEC_ID_ADPCM_IMA_WAV))
659         mov_write_wave_tag(pb, track);
660     else if (track->tag == MKTAG('m','p','4','a'))
661         mov_write_esds_tag(pb, track);
662     else if (track->enc->codec_id == AV_CODEC_ID_AMR_NB)
663         mov_write_amr_tag(pb, track);
664     else if (track->enc->codec_id == AV_CODEC_ID_AC3)
665         mov_write_ac3_tag(pb, track);
666     else if (track->enc->codec_id == AV_CODEC_ID_ALAC)
667         mov_write_extradata_tag(pb, track);
668     else if (track->enc->codec_id == AV_CODEC_ID_WMAPRO)
669         mov_write_wfex_tag(pb, track);
670     else if (track->vos_len > 0)
671         mov_write_glbl_tag(pb, track);
672
673     if (track->mode == MODE_MOV && track->enc->codec_type == AVMEDIA_TYPE_AUDIO)
674         mov_write_chan_tag(pb, track);
675
676     return update_size(pb, pos);
677 }
678
679 static int mov_write_d263_tag(AVIOContext *pb)
680 {
681     avio_wb32(pb, 0xf); /* size */
682     ffio_wfourcc(pb, "d263");
683     ffio_wfourcc(pb, "FFMP");
684     avio_w8(pb, 0); /* decoder version */
685     /* FIXME use AVCodecContext level/profile, when encoder will set values */
686     avio_w8(pb, 0xa); /* level */
687     avio_w8(pb, 0); /* profile */
688     return 0xf;
689 }
690
691 /* TODO: No idea about these values */
692 static int mov_write_svq3_tag(AVIOContext *pb)
693 {
694     avio_wb32(pb, 0x15);
695     ffio_wfourcc(pb, "SMI ");
696     ffio_wfourcc(pb, "SEQH");
697     avio_wb32(pb, 0x5);
698     avio_wb32(pb, 0xe2c0211d);
699     avio_wb32(pb, 0xc0000000);
700     avio_w8(pb, 0);
701     return 0x15;
702 }
703
704 static int mov_write_avcc_tag(AVIOContext *pb, MOVTrack *track)
705 {
706     int64_t pos = avio_tell(pb);
707
708     avio_wb32(pb, 0);
709     ffio_wfourcc(pb, "avcC");
710     ff_isom_write_avcc(pb, track->vos_data, track->vos_len);
711     return update_size(pb, pos);
712 }
713
714 static int mov_write_hvcc_tag(AVIOContext *pb, MOVTrack *track)
715 {
716     int64_t pos = avio_tell(pb);
717
718     avio_wb32(pb, 0);
719     ffio_wfourcc(pb, "hvcC");
720     ff_isom_write_hvcc(pb, track->vos_data, track->vos_len, 0);
721     return update_size(pb, pos);
722 }
723
724 /* also used by all avid codecs (dv, imx, meridien) and their variants */
725 static int mov_write_avid_tag(AVIOContext *pb, MOVTrack *track)
726 {
727     int i;
728     avio_wb32(pb, 24); /* size */
729     ffio_wfourcc(pb, "ACLR");
730     ffio_wfourcc(pb, "ACLR");
731     ffio_wfourcc(pb, "0001");
732     avio_wb32(pb, 2); /* yuv range: full 1 / normal 2 */
733     avio_wb32(pb, 0); /* unknown */
734
735     avio_wb32(pb, 24); /* size */
736     ffio_wfourcc(pb, "APRG");
737     ffio_wfourcc(pb, "APRG");
738     ffio_wfourcc(pb, "0001");
739     avio_wb32(pb, 1); /* unknown */
740     avio_wb32(pb, 0); /* unknown */
741
742     avio_wb32(pb, 120); /* size */
743     ffio_wfourcc(pb, "ARES");
744     ffio_wfourcc(pb, "ARES");
745     ffio_wfourcc(pb, "0001");
746     avio_wb32(pb, AV_RB32(track->vos_data + 0x28)); /* dnxhd cid, some id ? */
747     avio_wb32(pb, track->enc->width);
748     /* values below are based on samples created with quicktime and avid codecs */
749     if (track->vos_data[5] & 2) { // interlaced
750         avio_wb32(pb, track->enc->height / 2);
751         avio_wb32(pb, 2); /* unknown */
752         avio_wb32(pb, 0); /* unknown */
753         avio_wb32(pb, 4); /* unknown */
754     } else {
755         avio_wb32(pb, track->enc->height);
756         avio_wb32(pb, 1); /* unknown */
757         avio_wb32(pb, 0); /* unknown */
758         if (track->enc->height == 1080)
759             avio_wb32(pb, 5); /* unknown */
760         else
761             avio_wb32(pb, 6); /* unknown */
762     }
763     /* padding */
764     for (i = 0; i < 10; i++)
765         avio_wb64(pb, 0);
766
767     /* extra padding for stsd needed */
768     avio_wb32(pb, 0);
769     return 0;
770 }
771
772 static int mp4_get_codec_tag(AVFormatContext *s, MOVTrack *track)
773 {
774     int tag = track->enc->codec_tag;
775
776     if (!ff_codec_get_tag(ff_mp4_obj_type, track->enc->codec_id))
777         return 0;
778
779     if      (track->enc->codec_id == AV_CODEC_ID_H264)      tag = MKTAG('a','v','c','1');
780     else if (track->enc->codec_id == AV_CODEC_ID_HEVC)      tag = MKTAG('h','e','v','1');
781     else if (track->enc->codec_id == AV_CODEC_ID_AC3)       tag = MKTAG('a','c','-','3');
782     else if (track->enc->codec_id == AV_CODEC_ID_DIRAC)     tag = MKTAG('d','r','a','c');
783     else if (track->enc->codec_id == AV_CODEC_ID_MOV_TEXT)  tag = MKTAG('t','x','3','g');
784     else if (track->enc->codec_id == AV_CODEC_ID_VC1)       tag = MKTAG('v','c','-','1');
785     else if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO)  tag = MKTAG('m','p','4','v');
786     else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO)  tag = MKTAG('m','p','4','a');
787     else if (track->enc->codec_id == AV_CODEC_ID_DVD_SUBTITLE)  tag = MKTAG('m','p','4','s');
788
789     return tag;
790 }
791
792 static const AVCodecTag codec_ipod_tags[] = {
793     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
794     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
795     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
796     { AV_CODEC_ID_ALAC,     MKTAG('a','l','a','c') },
797     { AV_CODEC_ID_AC3,      MKTAG('a','c','-','3') },
798     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
799     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','e','x','t') },
800     { AV_CODEC_ID_NONE, 0 },
801 };
802
803 static int ipod_get_codec_tag(AVFormatContext *s, MOVTrack *track)
804 {
805     int tag = track->enc->codec_tag;
806
807     // keep original tag for subs, ipod supports both formats
808     if (!(track->enc->codec_type == AVMEDIA_TYPE_SUBTITLE &&
809           (tag == MKTAG('t', 'x', '3', 'g') ||
810            tag == MKTAG('t', 'e', 'x', 't'))))
811         tag = ff_codec_get_tag(codec_ipod_tags, track->enc->codec_id);
812
813     if (!av_match_ext(s->filename, "m4a") && !av_match_ext(s->filename, "m4v"))
814         av_log(s, AV_LOG_WARNING, "Warning, extension is not .m4a nor .m4v "
815                "Quicktime/Ipod might not play the file\n");
816
817     return tag;
818 }
819
820 static int mov_get_dv_codec_tag(AVFormatContext *s, MOVTrack *track)
821 {
822     int tag;
823
824     if (track->enc->width == 720) /* SD */
825         if (track->enc->height == 480) /* NTSC */
826             if  (track->enc->pix_fmt == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','n');
827             else                                            tag = MKTAG('d','v','c',' ');
828         else if (track->enc->pix_fmt == AV_PIX_FMT_YUV422P) tag = MKTAG('d','v','5','p');
829         else if (track->enc->pix_fmt == AV_PIX_FMT_YUV420P) tag = MKTAG('d','v','c','p');
830         else                                                tag = MKTAG('d','v','p','p');
831     else if (track->enc->height == 720) /* HD 720 line */
832         if  (track->st->time_base.den == 50)                tag = MKTAG('d','v','h','q');
833         else                                                tag = MKTAG('d','v','h','p');
834     else if (track->enc->height == 1080) /* HD 1080 line */
835         if  (track->st->time_base.den == 25)                tag = MKTAG('d','v','h','5');
836         else                                                tag = MKTAG('d','v','h','6');
837     else {
838         av_log(s, AV_LOG_ERROR, "unsupported height for dv codec\n");
839         return 0;
840     }
841
842     return tag;
843 }
844
845 static const struct {
846     enum AVPixelFormat pix_fmt;
847     uint32_t tag;
848     unsigned bps;
849 } mov_pix_fmt_tags[] = {
850     { AV_PIX_FMT_YUYV422, MKTAG('y','u','v','s'),  0 },
851     { AV_PIX_FMT_UYVY422, MKTAG('2','v','u','y'),  0 },
852     { AV_PIX_FMT_RGB555BE,MKTAG('r','a','w',' '), 16 },
853     { AV_PIX_FMT_RGB555LE,MKTAG('L','5','5','5'), 16 },
854     { AV_PIX_FMT_RGB565LE,MKTAG('L','5','6','5'), 16 },
855     { AV_PIX_FMT_RGB565BE,MKTAG('B','5','6','5'), 16 },
856     { AV_PIX_FMT_GRAY16BE,MKTAG('b','1','6','g'), 16 },
857     { AV_PIX_FMT_RGB24,   MKTAG('r','a','w',' '), 24 },
858     { AV_PIX_FMT_BGR24,   MKTAG('2','4','B','G'), 24 },
859     { AV_PIX_FMT_ARGB,    MKTAG('r','a','w',' '), 32 },
860     { AV_PIX_FMT_BGRA,    MKTAG('B','G','R','A'), 32 },
861     { AV_PIX_FMT_RGBA,    MKTAG('R','G','B','A'), 32 },
862     { AV_PIX_FMT_ABGR,    MKTAG('A','B','G','R'), 32 },
863     { AV_PIX_FMT_RGB48BE, MKTAG('b','4','8','r'), 48 },
864 };
865
866 static int mov_get_rawvideo_codec_tag(AVFormatContext *s, MOVTrack *track)
867 {
868     int tag = track->enc->codec_tag;
869     int i;
870
871     for (i = 0; i < FF_ARRAY_ELEMS(mov_pix_fmt_tags); i++) {
872         if (track->enc->pix_fmt == mov_pix_fmt_tags[i].pix_fmt) {
873             tag = mov_pix_fmt_tags[i].tag;
874             track->enc->bits_per_coded_sample = mov_pix_fmt_tags[i].bps;
875             break;
876         }
877     }
878
879     return tag;
880 }
881
882 static int mov_get_codec_tag(AVFormatContext *s, MOVTrack *track)
883 {
884     int tag = track->enc->codec_tag;
885
886     if (!tag || (s->strict_std_compliance >= FF_COMPLIANCE_NORMAL &&
887                  (track->enc->codec_id == AV_CODEC_ID_DVVIDEO ||
888                   track->enc->codec_id == AV_CODEC_ID_RAWVIDEO ||
889                   track->enc->codec_id == AV_CODEC_ID_H263 ||
890                   av_get_bits_per_sample(track->enc->codec_id)))) { // pcm audio
891         if (track->enc->codec_id == AV_CODEC_ID_DVVIDEO)
892             tag = mov_get_dv_codec_tag(s, track);
893         else if (track->enc->codec_id == AV_CODEC_ID_RAWVIDEO)
894             tag = mov_get_rawvideo_codec_tag(s, track);
895         else if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO) {
896             tag = ff_codec_get_tag(ff_codec_movvideo_tags, track->enc->codec_id);
897             if (!tag) { // if no mac fcc found, try with Microsoft tags
898                 tag = ff_codec_get_tag(ff_codec_bmp_tags, track->enc->codec_id);
899                 if (tag)
900                     av_log(s, AV_LOG_WARNING, "Using MS style video codec tag, "
901                            "the file may be unplayable!\n");
902             }
903         } else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO) {
904             tag = ff_codec_get_tag(ff_codec_movaudio_tags, track->enc->codec_id);
905             if (!tag) { // if no mac fcc found, try with Microsoft tags
906                 int ms_tag = ff_codec_get_tag(ff_codec_wav_tags, track->enc->codec_id);
907                 if (ms_tag) {
908                     tag = MKTAG('m', 's', ((ms_tag >> 8) & 0xff), (ms_tag & 0xff));
909                     av_log(s, AV_LOG_WARNING, "Using MS style audio codec tag, "
910                            "the file may be unplayable!\n");
911                 }
912             }
913         } else if (track->enc->codec_type == AVMEDIA_TYPE_SUBTITLE)
914             tag = ff_codec_get_tag(ff_codec_movsubtitle_tags, track->enc->codec_id);
915     }
916
917     return tag;
918 }
919
920 static const AVCodecTag codec_3gp_tags[] = {
921     { AV_CODEC_ID_H263,     MKTAG('s','2','6','3') },
922     { AV_CODEC_ID_H264,     MKTAG('a','v','c','1') },
923     { AV_CODEC_ID_MPEG4,    MKTAG('m','p','4','v') },
924     { AV_CODEC_ID_AAC,      MKTAG('m','p','4','a') },
925     { AV_CODEC_ID_AMR_NB,   MKTAG('s','a','m','r') },
926     { AV_CODEC_ID_AMR_WB,   MKTAG('s','a','w','b') },
927     { AV_CODEC_ID_MOV_TEXT, MKTAG('t','x','3','g') },
928     { AV_CODEC_ID_NONE, 0 },
929 };
930
931 static const AVCodecTag codec_f4v_tags[] = {
932     { AV_CODEC_ID_MP3,    MKTAG('.','m','p','3') },
933     { AV_CODEC_ID_AAC,    MKTAG('m','p','4','a') },
934     { AV_CODEC_ID_H264,   MKTAG('a','v','c','1') },
935     { AV_CODEC_ID_VP6A,   MKTAG('V','P','6','A') },
936     { AV_CODEC_ID_VP6F,   MKTAG('V','P','6','F') },
937     { AV_CODEC_ID_NONE, 0 },
938 };
939
940 static int mov_find_codec_tag(AVFormatContext *s, MOVTrack *track)
941 {
942     int tag;
943
944     if (track->mode == MODE_MP4 || track->mode == MODE_PSP)
945         tag = mp4_get_codec_tag(s, track);
946     else if (track->mode == MODE_ISM) {
947         tag = mp4_get_codec_tag(s, track);
948         if (!tag && track->enc->codec_id == AV_CODEC_ID_WMAPRO)
949             tag = MKTAG('w', 'm', 'a', ' ');
950     } else if (track->mode == MODE_IPOD)
951         tag = ipod_get_codec_tag(s, track);
952     else if (track->mode & MODE_3GP)
953         tag = ff_codec_get_tag(codec_3gp_tags, track->enc->codec_id);
954     else if (track->mode == MODE_F4V)
955         tag = ff_codec_get_tag(codec_f4v_tags, track->enc->codec_id);
956     else
957         tag = mov_get_codec_tag(s, track);
958
959     return tag;
960 }
961
962 /** Write uuid atom.
963  * Needed to make file play in iPods running newest firmware
964  * goes after avcC atom in moov.trak.mdia.minf.stbl.stsd.avc1
965  */
966 static int mov_write_uuid_tag_ipod(AVIOContext *pb)
967 {
968     avio_wb32(pb, 28);
969     ffio_wfourcc(pb, "uuid");
970     avio_wb32(pb, 0x6b6840f2);
971     avio_wb32(pb, 0x5f244fc5);
972     avio_wb32(pb, 0xba39a51b);
973     avio_wb32(pb, 0xcf0323f3);
974     avio_wb32(pb, 0x0);
975     return 28;
976 }
977
978 static const uint16_t fiel_data[] = {
979     0x0000, 0x0100, 0x0201, 0x0206, 0x0209, 0x020e
980 };
981
982 static int mov_write_fiel_tag(AVIOContext *pb, MOVTrack *track)
983 {
984     unsigned mov_field_order = 0;
985     if (track->enc->field_order < FF_ARRAY_ELEMS(fiel_data))
986         mov_field_order = fiel_data[track->enc->field_order];
987     else
988         return 0;
989     avio_wb32(pb, 10);
990     ffio_wfourcc(pb, "fiel");
991     avio_wb16(pb, mov_field_order);
992     return 10;
993 }
994
995 static int mov_write_subtitle_tag(AVIOContext *pb, MOVTrack *track)
996 {
997     int64_t pos = avio_tell(pb);
998     avio_wb32(pb, 0);    /* size */
999     avio_wl32(pb, track->tag); // store it byteswapped
1000     avio_wb32(pb, 0);    /* Reserved */
1001     avio_wb16(pb, 0);    /* Reserved */
1002     avio_wb16(pb, 1);    /* Data-reference index */
1003
1004     if (track->enc->codec_id == AV_CODEC_ID_DVD_SUBTITLE)
1005         mov_write_esds_tag(pb, track);
1006     else if (track->enc->extradata_size)
1007         avio_write(pb, track->enc->extradata, track->enc->extradata_size);
1008
1009     return update_size(pb, pos);
1010 }
1011
1012 static int mov_write_pasp_tag(AVIOContext *pb, MOVTrack *track)
1013 {
1014     AVRational sar;
1015     av_reduce(&sar.num, &sar.den, track->enc->sample_aspect_ratio.num,
1016               track->enc->sample_aspect_ratio.den, INT_MAX);
1017
1018     avio_wb32(pb, 16);
1019     ffio_wfourcc(pb, "pasp");
1020     avio_wb32(pb, sar.num);
1021     avio_wb32(pb, sar.den);
1022     return 16;
1023 }
1024
1025 static int mov_write_video_tag(AVIOContext *pb, MOVTrack *track)
1026 {
1027     AVDictionaryEntry *encoder;
1028     int64_t pos = avio_tell(pb);
1029     char compressor_name[32] = { 0 };
1030
1031     avio_wb32(pb, 0); /* size */
1032     avio_wl32(pb, track->tag); // store it byteswapped
1033     avio_wb32(pb, 0); /* Reserved */
1034     avio_wb16(pb, 0); /* Reserved */
1035     avio_wb16(pb, 1); /* Data-reference index */
1036
1037     avio_wb16(pb, 0); /* Codec stream version */
1038     avio_wb16(pb, 0); /* Codec stream revision (=0) */
1039     if (track->mode == MODE_MOV) {
1040         ffio_wfourcc(pb, "FFMP"); /* Vendor */
1041         if (track->enc->codec_id == AV_CODEC_ID_RAWVIDEO) {
1042             avio_wb32(pb, 0); /* Temporal Quality */
1043             avio_wb32(pb, 0x400); /* Spatial Quality = lossless*/
1044         } else {
1045             avio_wb32(pb, 0x200); /* Temporal Quality = normal */
1046             avio_wb32(pb, 0x200); /* Spatial Quality = normal */
1047         }
1048     } else {
1049         avio_wb32(pb, 0); /* Reserved */
1050         avio_wb32(pb, 0); /* Reserved */
1051         avio_wb32(pb, 0); /* Reserved */
1052     }
1053     avio_wb16(pb, track->enc->width); /* Video width */
1054     avio_wb16(pb, track->height); /* Video height */
1055     avio_wb32(pb, 0x00480000); /* Horizontal resolution 72dpi */
1056     avio_wb32(pb, 0x00480000); /* Vertical resolution 72dpi */
1057     avio_wb32(pb, 0); /* Data size (= 0) */
1058     avio_wb16(pb, 1); /* Frame count (= 1) */
1059
1060     /* FIXME not sure, ISO 14496-1 draft where it shall be set to 0 */
1061     if (track->mode == MODE_MOV &&
1062         (encoder = av_dict_get(track->st->metadata, "encoder", NULL, 0)))
1063         av_strlcpy(compressor_name, encoder->value, 32);
1064     avio_w8(pb, strlen(compressor_name));
1065     avio_write(pb, compressor_name, 31);
1066
1067     if (track->mode == MODE_MOV && track->enc->bits_per_coded_sample)
1068         avio_wb16(pb, track->enc->bits_per_coded_sample);
1069     else
1070         avio_wb16(pb, 0x18); /* Reserved */
1071     avio_wb16(pb, 0xffff); /* Reserved */
1072     if (track->tag == MKTAG('m','p','4','v'))
1073         mov_write_esds_tag(pb, track);
1074     else if (track->enc->codec_id == AV_CODEC_ID_H263)
1075         mov_write_d263_tag(pb);
1076     else if (track->enc->codec_id == AV_CODEC_ID_SVQ3)
1077         mov_write_svq3_tag(pb);
1078     else if (track->enc->codec_id == AV_CODEC_ID_DNXHD)
1079         mov_write_avid_tag(pb, track);
1080     else if (track->enc->codec_id == AV_CODEC_ID_HEVC)
1081         mov_write_hvcc_tag(pb, track);
1082     else if (track->enc->codec_id == AV_CODEC_ID_H264) {
1083         mov_write_avcc_tag(pb, track);
1084         if (track->mode == MODE_IPOD)
1085             mov_write_uuid_tag_ipod(pb);
1086     } else if (track->enc->field_order != AV_FIELD_UNKNOWN)
1087         mov_write_fiel_tag(pb, track);
1088     else if (track->enc->codec_id == AV_CODEC_ID_VC1 && track->vos_len > 0)
1089         mov_write_dvc1_tag(pb, track);
1090     else if (track->enc->codec_id == AV_CODEC_ID_VP6F ||
1091              track->enc->codec_id == AV_CODEC_ID_VP6A) {
1092         /* Don't write any potential extradata here - the cropping
1093          * is signalled via the normal width/height fields. */
1094     } else if (track->vos_len > 0)
1095         mov_write_glbl_tag(pb, track);
1096
1097     if (track->enc->sample_aspect_ratio.den && track->enc->sample_aspect_ratio.num &&
1098         track->enc->sample_aspect_ratio.den != track->enc->sample_aspect_ratio.num) {
1099         mov_write_pasp_tag(pb, track);
1100     }
1101
1102     return update_size(pb, pos);
1103 }
1104
1105 static int mov_write_rtp_tag(AVIOContext *pb, MOVTrack *track)
1106 {
1107     int64_t pos = avio_tell(pb);
1108     avio_wb32(pb, 0); /* size */
1109     ffio_wfourcc(pb, "rtp ");
1110     avio_wb32(pb, 0); /* Reserved */
1111     avio_wb16(pb, 0); /* Reserved */
1112     avio_wb16(pb, 1); /* Data-reference index */
1113
1114     avio_wb16(pb, 1); /* Hint track version */
1115     avio_wb16(pb, 1); /* Highest compatible version */
1116     avio_wb32(pb, track->max_packet_size); /* Max packet size */
1117
1118     avio_wb32(pb, 12); /* size */
1119     ffio_wfourcc(pb, "tims");
1120     avio_wb32(pb, track->timescale);
1121
1122     return update_size(pb, pos);
1123 }
1124
1125 static int mov_write_tmcd_tag(AVIOContext *pb, MOVTrack *track)
1126 {
1127     int64_t pos = avio_tell(pb);
1128
1129     avio_wb32(pb, 0); /* size */
1130     ffio_wfourcc(pb, "tmcd");               /* Data format */
1131     avio_wb32(pb, 0);                       /* Reserved */
1132     avio_wb32(pb, 1);                       /* Data reference index */
1133     if (track->enc->extradata_size)
1134         avio_write(pb, track->enc->extradata, track->enc->extradata_size);
1135     return update_size(pb, pos);
1136 }
1137
1138 static int mov_write_stsd_tag(AVIOContext *pb, MOVTrack *track)
1139 {
1140     int64_t pos = avio_tell(pb);
1141     avio_wb32(pb, 0); /* size */
1142     ffio_wfourcc(pb, "stsd");
1143     avio_wb32(pb, 0); /* version & flags */
1144     avio_wb32(pb, 1); /* entry count */
1145     if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO)
1146         mov_write_video_tag(pb, track);
1147     else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO)
1148         mov_write_audio_tag(pb, track);
1149     else if (track->enc->codec_type == AVMEDIA_TYPE_SUBTITLE)
1150         mov_write_subtitle_tag(pb, track);
1151     else if (track->enc->codec_tag == MKTAG('r','t','p',' '))
1152         mov_write_rtp_tag(pb, track);
1153     else if (track->enc->codec_tag == MKTAG('t','m','c','d'))
1154         mov_write_tmcd_tag(pb, track);
1155     return update_size(pb, pos);
1156 }
1157
1158 static int mov_write_ctts_tag(AVIOContext *pb, MOVTrack *track)
1159 {
1160     MOVStts *ctts_entries;
1161     uint32_t entries = 0;
1162     uint32_t atom_size;
1163     int i;
1164
1165     ctts_entries = av_malloc((track->entry + 1) * sizeof(*ctts_entries)); /* worst case */
1166     ctts_entries[0].count = 1;
1167     ctts_entries[0].duration = track->cluster[0].cts;
1168     for (i = 1; i < track->entry; i++) {
1169         if (track->cluster[i].cts == ctts_entries[entries].duration) {
1170             ctts_entries[entries].count++; /* compress */
1171         } else {
1172             entries++;
1173             ctts_entries[entries].duration = track->cluster[i].cts;
1174             ctts_entries[entries].count = 1;
1175         }
1176     }
1177     entries++; /* last one */
1178     atom_size = 16 + (entries * 8);
1179     avio_wb32(pb, atom_size); /* size */
1180     ffio_wfourcc(pb, "ctts");
1181     avio_wb32(pb, 0); /* version & flags */
1182     avio_wb32(pb, entries); /* entry count */
1183     for (i = 0; i < entries; i++) {
1184         avio_wb32(pb, ctts_entries[i].count);
1185         avio_wb32(pb, ctts_entries[i].duration);
1186     }
1187     av_free(ctts_entries);
1188     return atom_size;
1189 }
1190
1191 /* Time to sample atom */
1192 static int mov_write_stts_tag(AVIOContext *pb, MOVTrack *track)
1193 {
1194     MOVStts *stts_entries;
1195     uint32_t entries = -1;
1196     uint32_t atom_size;
1197     int i;
1198
1199     if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO && !track->audio_vbr) {
1200         stts_entries = av_malloc(sizeof(*stts_entries)); /* one entry */
1201         stts_entries[0].count = track->sample_count;
1202         stts_entries[0].duration = 1;
1203         entries = 1;
1204     } else {
1205         stts_entries = track->entry ?
1206                        av_malloc(track->entry * sizeof(*stts_entries)) : /* worst case */
1207                        NULL;
1208         for (i = 0; i < track->entry; i++) {
1209             int duration = get_cluster_duration(track, i);
1210             if (i && duration == stts_entries[entries].duration) {
1211                 stts_entries[entries].count++; /* compress */
1212             } else {
1213                 entries++;
1214                 stts_entries[entries].duration = duration;
1215                 stts_entries[entries].count = 1;
1216             }
1217         }
1218         entries++; /* last one */
1219     }
1220     atom_size = 16 + (entries * 8);
1221     avio_wb32(pb, atom_size); /* size */
1222     ffio_wfourcc(pb, "stts");
1223     avio_wb32(pb, 0); /* version & flags */
1224     avio_wb32(pb, entries); /* entry count */
1225     for (i = 0; i < entries; i++) {
1226         avio_wb32(pb, stts_entries[i].count);
1227         avio_wb32(pb, stts_entries[i].duration);
1228     }
1229     av_free(stts_entries);
1230     return atom_size;
1231 }
1232
1233 static int mov_write_dref_tag(AVIOContext *pb)
1234 {
1235     avio_wb32(pb, 28); /* size */
1236     ffio_wfourcc(pb, "dref");
1237     avio_wb32(pb, 0); /* version & flags */
1238     avio_wb32(pb, 1); /* entry count */
1239
1240     avio_wb32(pb, 0xc); /* size */
1241     ffio_wfourcc(pb, "url ");
1242     avio_wb32(pb, 1); /* version & flags */
1243
1244     return 28;
1245 }
1246
1247 static int mov_write_stbl_tag(AVIOContext *pb, MOVTrack *track)
1248 {
1249     int64_t pos = avio_tell(pb);
1250     avio_wb32(pb, 0); /* size */
1251     ffio_wfourcc(pb, "stbl");
1252     mov_write_stsd_tag(pb, track);
1253     mov_write_stts_tag(pb, track);
1254     if ((track->enc->codec_type == AVMEDIA_TYPE_VIDEO ||
1255          track->enc->codec_tag == MKTAG('r','t','p',' ')) &&
1256         track->has_keyframes && track->has_keyframes < track->entry)
1257         mov_write_stss_tag(pb, track, MOV_SYNC_SAMPLE);
1258     if (track->mode == MODE_MOV && track->flags & MOV_TRACK_STPS)
1259         mov_write_stss_tag(pb, track, MOV_PARTIAL_SYNC_SAMPLE);
1260     if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO &&
1261         track->flags & MOV_TRACK_CTTS)
1262         mov_write_ctts_tag(pb, track);
1263     mov_write_stsc_tag(pb, track);
1264     mov_write_stsz_tag(pb, track);
1265     mov_write_stco_tag(pb, track);
1266     return update_size(pb, pos);
1267 }
1268
1269 static int mov_write_dinf_tag(AVIOContext *pb)
1270 {
1271     int64_t pos = avio_tell(pb);
1272     avio_wb32(pb, 0); /* size */
1273     ffio_wfourcc(pb, "dinf");
1274     mov_write_dref_tag(pb);
1275     return update_size(pb, pos);
1276 }
1277
1278 static int mov_write_nmhd_tag(AVIOContext *pb)
1279 {
1280     avio_wb32(pb, 12);
1281     ffio_wfourcc(pb, "nmhd");
1282     avio_wb32(pb, 0);
1283     return 12;
1284 }
1285
1286 static int mov_write_gmhd_tag(AVIOContext *pb)
1287 {
1288     avio_wb32(pb, 0x20);   /* size */
1289     ffio_wfourcc(pb, "gmhd");
1290     avio_wb32(pb, 0x18);   /* gmin size */
1291     ffio_wfourcc(pb, "gmin");/* generic media info */
1292     avio_wb32(pb, 0);      /* version & flags */
1293     avio_wb16(pb, 0x40);   /* graphics mode = */
1294     avio_wb16(pb, 0x8000); /* opColor (r?) */
1295     avio_wb16(pb, 0x8000); /* opColor (g?) */
1296     avio_wb16(pb, 0x8000); /* opColor (b?) */
1297     avio_wb16(pb, 0);      /* balance */
1298     avio_wb16(pb, 0);      /* reserved */
1299     return 0x20;
1300 }
1301
1302 static int mov_write_smhd_tag(AVIOContext *pb)
1303 {
1304     avio_wb32(pb, 16); /* size */
1305     ffio_wfourcc(pb, "smhd");
1306     avio_wb32(pb, 0); /* version & flags */
1307     avio_wb16(pb, 0); /* reserved (balance, normally = 0) */
1308     avio_wb16(pb, 0); /* reserved */
1309     return 16;
1310 }
1311
1312 static int mov_write_vmhd_tag(AVIOContext *pb)
1313 {
1314     avio_wb32(pb, 0x14); /* size (always 0x14) */
1315     ffio_wfourcc(pb, "vmhd");
1316     avio_wb32(pb, 0x01); /* version & flags */
1317     avio_wb64(pb, 0); /* reserved (graphics mode = copy) */
1318     return 0x14;
1319 }
1320
1321 static int is_clcp_track(MOVTrack *track)
1322 {
1323     return track->tag == MKTAG('c','7','0','8') ||
1324            track->tag == MKTAG('c','6','0','8');
1325 }
1326
1327 static int mov_write_hdlr_tag(AVIOContext *pb, MOVTrack *track)
1328 {
1329     const char *hdlr, *descr = NULL, *hdlr_type = NULL;
1330     int64_t pos = avio_tell(pb);
1331
1332     hdlr      = "dhlr";
1333     hdlr_type = "url ";
1334     descr     = "DataHandler";
1335
1336     if (track) {
1337         hdlr = (track->mode == MODE_MOV) ? "mhlr" : "\0\0\0\0";
1338         if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO) {
1339             hdlr_type = "vide";
1340             descr     = "VideoHandler";
1341         } else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO) {
1342             hdlr_type = "soun";
1343             descr     = "SoundHandler";
1344         } else if (track->enc->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1345             if (track->tag == MKTAG('t','x','3','g')) {
1346                 hdlr_type = "sbtl";
1347             } else if (track->tag == MKTAG('m','p','4','s')) {
1348                 hdlr_type = "subp";
1349             } else if (is_clcp_track(track)) {
1350                 hdlr_type = "clcp";
1351             } else {
1352                 hdlr_type = "text";
1353             }
1354             descr = "SubtitleHandler";
1355         } else if (track->enc->codec_tag == MKTAG('r','t','p',' ')) {
1356             hdlr_type = "hint";
1357             descr     = "HintHandler";
1358         } else if (track->enc->codec_tag == MKTAG('t','m','c','d')) {
1359             hdlr_type = "tmcd";
1360             descr = "TimeCodeHandler";
1361         } else {
1362             char tag_buf[32];
1363             av_get_codec_tag_string(tag_buf, sizeof(tag_buf),
1364                                     track->enc->codec_tag);
1365
1366             av_log(track->enc, AV_LOG_WARNING,
1367                    "Unknown hldr_type for %s / 0x%04X, writing dummy values\n",
1368                    tag_buf, track->enc->codec_tag);
1369         }
1370         if (track->st) {
1371             // hdlr.name is used by some players to identify the content title
1372             // of the track. So if an alternate handler description is
1373             // specified, use it.
1374             AVDictionaryEntry *t;
1375             t = av_dict_get(track->st->metadata, "handler", NULL, 0);
1376             if (t && utf8len(t->value))
1377                 descr = t->value;
1378         }
1379     }
1380
1381     avio_wb32(pb, 0); /* size */
1382     ffio_wfourcc(pb, "hdlr");
1383     avio_wb32(pb, 0); /* Version & flags */
1384     avio_write(pb, hdlr, 4); /* handler */
1385     ffio_wfourcc(pb, hdlr_type); /* handler type */
1386     avio_wb32(pb, 0); /* reserved */
1387     avio_wb32(pb, 0); /* reserved */
1388     avio_wb32(pb, 0); /* reserved */
1389     if (!track || track->mode == MODE_MOV)
1390         avio_w8(pb, strlen(descr)); /* pascal string */
1391     avio_write(pb, descr, strlen(descr)); /* handler description */
1392     if (track && track->mode != MODE_MOV)
1393         avio_w8(pb, 0); /* c string */
1394     return update_size(pb, pos);
1395 }
1396
1397 static int mov_write_hmhd_tag(AVIOContext *pb)
1398 {
1399     /* This atom must be present, but leaving the values at zero
1400      * seems harmless. */
1401     avio_wb32(pb, 28); /* size */
1402     ffio_wfourcc(pb, "hmhd");
1403     avio_wb32(pb, 0); /* version, flags */
1404     avio_wb16(pb, 0); /* maxPDUsize */
1405     avio_wb16(pb, 0); /* avgPDUsize */
1406     avio_wb32(pb, 0); /* maxbitrate */
1407     avio_wb32(pb, 0); /* avgbitrate */
1408     avio_wb32(pb, 0); /* reserved */
1409     return 28;
1410 }
1411
1412 static int mov_write_minf_tag(AVIOContext *pb, MOVTrack *track)
1413 {
1414     int64_t pos = avio_tell(pb);
1415     avio_wb32(pb, 0); /* size */
1416     ffio_wfourcc(pb, "minf");
1417     if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO)
1418         mov_write_vmhd_tag(pb);
1419     else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO)
1420         mov_write_smhd_tag(pb);
1421     else if (track->enc->codec_type == AVMEDIA_TYPE_SUBTITLE) {
1422         if (track->tag == MKTAG('t','e','x','t') || is_clcp_track(track)) {
1423             mov_write_gmhd_tag(pb);
1424         } else {
1425             mov_write_nmhd_tag(pb);
1426         }
1427     } else if (track->tag == MKTAG('r','t','p',' ')) {
1428         mov_write_hmhd_tag(pb);
1429     } else if (track->tag == MKTAG('t','m','c','d')) {
1430         mov_write_gmhd_tag(pb);
1431     }
1432     if (track->mode == MODE_MOV) /* FIXME: Why do it for MODE_MOV only ? */
1433         mov_write_hdlr_tag(pb, NULL);
1434     mov_write_dinf_tag(pb);
1435     mov_write_stbl_tag(pb, track);
1436     return update_size(pb, pos);
1437 }
1438
1439 static int mov_write_mdhd_tag(AVIOContext *pb, MOVMuxContext *mov,
1440                               MOVTrack *track)
1441 {
1442     int version = track->track_duration < INT32_MAX ? 0 : 1;
1443
1444     if (track->mode == MODE_ISM)
1445         version = 1;
1446
1447     (version == 1) ? avio_wb32(pb, 44) : avio_wb32(pb, 32); /* size */
1448     ffio_wfourcc(pb, "mdhd");
1449     avio_w8(pb, version);
1450     avio_wb24(pb, 0); /* flags */
1451     if (version == 1) {
1452         avio_wb64(pb, track->time);
1453         avio_wb64(pb, track->time);
1454     } else {
1455         avio_wb32(pb, track->time); /* creation time */
1456         avio_wb32(pb, track->time); /* modification time */
1457     }
1458     avio_wb32(pb, track->timescale); /* time scale (sample rate for audio) */
1459     if (!track->entry && mov->mode == MODE_ISM)
1460         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
1461     else if (!track->entry)
1462         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
1463     else
1464         (version == 1) ? avio_wb64(pb, track->track_duration) : avio_wb32(pb, track->track_duration); /* duration */
1465     avio_wb16(pb, track->language); /* language */
1466     avio_wb16(pb, 0); /* reserved (quality) */
1467
1468     if (version != 0 && track->mode == MODE_MOV) {
1469         av_log(NULL, AV_LOG_ERROR,
1470                "FATAL error, file duration too long for timebase, this file will not be\n"
1471                "playable with quicktime. Choose a different timebase or a different\n"
1472                "container format\n");
1473     }
1474
1475     return 32;
1476 }
1477
1478 static int mov_write_mdia_tag(AVIOContext *pb, MOVMuxContext *mov,
1479                               MOVTrack *track)
1480 {
1481     int64_t pos = avio_tell(pb);
1482     avio_wb32(pb, 0); /* size */
1483     ffio_wfourcc(pb, "mdia");
1484     mov_write_mdhd_tag(pb, mov, track);
1485     mov_write_hdlr_tag(pb, track);
1486     mov_write_minf_tag(pb, track);
1487     return update_size(pb, pos);
1488 }
1489
1490 static int mov_write_tkhd_tag(AVIOContext *pb, MOVMuxContext *mov,
1491                               MOVTrack *track, AVStream *st)
1492 {
1493     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
1494                                       track->timescale, AV_ROUND_UP);
1495     int version = duration < INT32_MAX ? 0 : 1;
1496     int flags   = MOV_TKHD_FLAG_IN_MOVIE;
1497     int group   = 0;
1498
1499
1500     if (st) {
1501         if (mov->per_stream_grouping)
1502             group = st->index;
1503         else
1504             group = st->codec->codec_type;
1505     }
1506
1507     if (track->flags & MOV_TRACK_ENABLED)
1508         flags |= MOV_TKHD_FLAG_ENABLED;
1509
1510     if (track->mode == MODE_ISM)
1511         version = 1;
1512
1513     (version == 1) ? avio_wb32(pb, 104) : avio_wb32(pb, 92); /* size */
1514     ffio_wfourcc(pb, "tkhd");
1515     avio_w8(pb, version);
1516     avio_wb24(pb, flags);
1517     if (version == 1) {
1518         avio_wb64(pb, track->time);
1519         avio_wb64(pb, track->time);
1520     } else {
1521         avio_wb32(pb, track->time); /* creation time */
1522         avio_wb32(pb, track->time); /* modification time */
1523     }
1524     avio_wb32(pb, track->track_id); /* track-id */
1525     avio_wb32(pb, 0); /* reserved */
1526     if (!track->entry && mov->mode == MODE_ISM)
1527         (version == 1) ? avio_wb64(pb, UINT64_C(0xffffffffffffffff)) : avio_wb32(pb, 0xffffffff);
1528     else if (!track->entry)
1529         (version == 1) ? avio_wb64(pb, 0) : avio_wb32(pb, 0);
1530     else
1531         (version == 1) ? avio_wb64(pb, duration) : avio_wb32(pb, duration);
1532
1533     avio_wb32(pb, 0); /* reserved */
1534     avio_wb32(pb, 0); /* reserved */
1535     avio_wb16(pb, 0); /* layer */
1536     avio_wb16(pb, group); /* alternate group) */
1537     /* Volume, only for audio */
1538     if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO)
1539         avio_wb16(pb, 0x0100);
1540     else
1541         avio_wb16(pb, 0);
1542     avio_wb16(pb, 0); /* reserved */
1543
1544     /* Matrix structure */
1545     avio_wb32(pb, 0x00010000); /* reserved */
1546     avio_wb32(pb, 0x0); /* reserved */
1547     avio_wb32(pb, 0x0); /* reserved */
1548     avio_wb32(pb, 0x0); /* reserved */
1549     avio_wb32(pb, 0x00010000); /* reserved */
1550     avio_wb32(pb, 0x0); /* reserved */
1551     avio_wb32(pb, 0x0); /* reserved */
1552     avio_wb32(pb, 0x0); /* reserved */
1553     avio_wb32(pb, 0x40000000); /* reserved */
1554
1555     /* Track width and height, for visual only */
1556     if (st && (track->enc->codec_type == AVMEDIA_TYPE_VIDEO ||
1557                track->enc->codec_type == AVMEDIA_TYPE_SUBTITLE)) {
1558         if (track->mode == MODE_MOV) {
1559             avio_wb32(pb, track->enc->width << 16);
1560             avio_wb32(pb, track->height << 16);
1561         } else {
1562             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
1563             if (!sample_aspect_ratio || track->height != track->enc->height)
1564                 sample_aspect_ratio = 1;
1565             avio_wb32(pb, sample_aspect_ratio * track->enc->width * 0x10000);
1566             avio_wb32(pb, track->height * 0x10000);
1567         }
1568     } else {
1569         avio_wb32(pb, 0);
1570         avio_wb32(pb, 0);
1571     }
1572     return 0x5c;
1573 }
1574
1575 static int mov_write_tapt_tag(AVIOContext *pb, MOVTrack *track)
1576 {
1577     int32_t width = av_rescale(track->enc->sample_aspect_ratio.num, track->enc->width,
1578                                track->enc->sample_aspect_ratio.den);
1579
1580     int64_t pos = avio_tell(pb);
1581
1582     avio_wb32(pb, 0); /* size */
1583     ffio_wfourcc(pb, "tapt");
1584
1585     avio_wb32(pb, 20);
1586     ffio_wfourcc(pb, "clef");
1587     avio_wb32(pb, 0);
1588     avio_wb32(pb, width << 16);
1589     avio_wb32(pb, track->enc->height << 16);
1590
1591     avio_wb32(pb, 20);
1592     ffio_wfourcc(pb, "prof");
1593     avio_wb32(pb, 0);
1594     avio_wb32(pb, width << 16);
1595     avio_wb32(pb, track->enc->height << 16);
1596
1597     avio_wb32(pb, 20);
1598     ffio_wfourcc(pb, "enof");
1599     avio_wb32(pb, 0);
1600     avio_wb32(pb, track->enc->width << 16);
1601     avio_wb32(pb, track->enc->height << 16);
1602
1603     return update_size(pb, pos);
1604 }
1605
1606 // This box seems important for the psp playback ... without it the movie seems to hang
1607 static int mov_write_edts_tag(AVIOContext *pb, MOVMuxContext *mov,
1608                               MOVTrack *track)
1609 {
1610     int64_t duration = av_rescale_rnd(track->track_duration, MOV_TIMESCALE,
1611                                       track->timescale, AV_ROUND_UP);
1612     int version = duration < INT32_MAX ? 0 : 1;
1613     int entry_size, entry_count, size;
1614     int64_t delay, start_ct = track->cluster[0].cts;
1615     delay = av_rescale_rnd(track->cluster[0].dts + start_ct, MOV_TIMESCALE,
1616                            track->timescale, AV_ROUND_DOWN);
1617     version |= delay < INT32_MAX ? 0 : 1;
1618
1619     entry_size = (version == 1) ? 20 : 12;
1620     entry_count = 1 + (delay > 0);
1621     size = 24 + entry_count * entry_size;
1622
1623     /* write the atom data */
1624     avio_wb32(pb, size);
1625     ffio_wfourcc(pb, "edts");
1626     avio_wb32(pb, size - 8);
1627     ffio_wfourcc(pb, "elst");
1628     avio_w8(pb, version);
1629     avio_wb24(pb, 0); /* flags */
1630
1631     avio_wb32(pb, entry_count);
1632     if (delay > 0) { /* add an empty edit to delay presentation */
1633         /* In the positive delay case, the delay includes the cts
1634          * offset, and the second edit list entry below trims out
1635          * the same amount from the actual content. This makes sure
1636          * that the offsetted last sample is included in the edit
1637          * list duration as well. */
1638         if (version == 1) {
1639             avio_wb64(pb, delay);
1640             avio_wb64(pb, -1);
1641         } else {
1642             avio_wb32(pb, delay);
1643             avio_wb32(pb, -1);
1644         }
1645         avio_wb32(pb, 0x00010000);
1646     } else {
1647         /* Avoid accidentally ending up with start_ct = -1 which has got a
1648          * special meaning. Normally start_ct should end up positive or zero
1649          * here, but use FFMIN in case dts is a a small positive integer
1650          * rounded to 0 when represented in MOV_TIMESCALE units. */
1651         start_ct  = -FFMIN(track->cluster[0].dts, 0);
1652         /* Note, this delay is calculated from the pts of the first sample,
1653          * ensuring that we don't reduce the duration for cases with
1654          * dts<0 pts=0. */
1655         duration += delay;
1656     }
1657
1658     /* For fragmented files, we don't know the full length yet. Setting
1659      * duration to 0 allows us to only specify the offset, including
1660      * the rest of the content (from all future fragments) without specifying
1661      * an explicit duration. */
1662     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
1663         duration = 0;
1664
1665     /* duration */
1666     if (version == 1) {
1667         avio_wb64(pb, duration);
1668         avio_wb64(pb, start_ct);
1669     } else {
1670         avio_wb32(pb, duration);
1671         avio_wb32(pb, start_ct);
1672     }
1673     avio_wb32(pb, 0x00010000);
1674     return size;
1675 }
1676
1677 static int mov_write_tref_tag(AVIOContext *pb, MOVTrack *track)
1678 {
1679     avio_wb32(pb, 20);   // size
1680     ffio_wfourcc(pb, "tref");
1681     avio_wb32(pb, 12);   // size (subatom)
1682     avio_wl32(pb, track->tref_tag);
1683     avio_wb32(pb, track->tref_id);
1684     return 20;
1685 }
1686
1687 // goes at the end of each track!  ... Critical for PSP playback ("Incompatible data" without it)
1688 static int mov_write_uuid_tag_psp(AVIOContext *pb, MOVTrack *mov)
1689 {
1690     avio_wb32(pb, 0x34); /* size ... reports as 28 in mp4box! */
1691     ffio_wfourcc(pb, "uuid");
1692     ffio_wfourcc(pb, "USMT");
1693     avio_wb32(pb, 0x21d24fce);
1694     avio_wb32(pb, 0xbb88695c);
1695     avio_wb32(pb, 0xfac9c740);
1696     avio_wb32(pb, 0x1c);     // another size here!
1697     ffio_wfourcc(pb, "MTDT");
1698     avio_wb32(pb, 0x00010012);
1699     avio_wb32(pb, 0x0a);
1700     avio_wb32(pb, 0x55c40000);
1701     avio_wb32(pb, 0x1);
1702     avio_wb32(pb, 0x0);
1703     return 0x34;
1704 }
1705
1706 static int mov_write_udta_sdp(AVIOContext *pb, MOVTrack *track)
1707 {
1708     AVFormatContext *ctx = track->rtp_ctx;
1709     char buf[1000] = "";
1710     int len;
1711
1712     ff_sdp_write_media(buf, sizeof(buf), ctx->streams[0], track->src_track,
1713                        NULL, NULL, 0, 0, ctx);
1714     av_strlcatf(buf, sizeof(buf), "a=control:streamid=%d\r\n", track->track_id);
1715     len = strlen(buf);
1716
1717     avio_wb32(pb, len + 24);
1718     ffio_wfourcc(pb, "udta");
1719     avio_wb32(pb, len + 16);
1720     ffio_wfourcc(pb, "hnti");
1721     avio_wb32(pb, len + 8);
1722     ffio_wfourcc(pb, "sdp ");
1723     avio_write(pb, buf, len);
1724     return len + 24;
1725 }
1726
1727 static int mov_write_track_metadata(AVIOContext *pb, AVStream *st,
1728                                     const char *tag, const char *str)
1729 {
1730     int64_t pos = avio_tell(pb);
1731     AVDictionaryEntry *t = av_dict_get(st->metadata, str, NULL, 0);
1732     if (!t || !utf8len(t->value))
1733         return 0;
1734
1735     avio_wb32(pb, 0);   /* size */
1736     ffio_wfourcc(pb, tag); /* type */
1737     avio_write(pb, t->value, strlen(t->value)); /* UTF8 string value */
1738     return update_size(pb, pos);
1739 }
1740
1741 static int mov_write_track_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
1742                                     AVStream *st)
1743 {
1744     AVIOContext *pb_buf;
1745     int ret, size;
1746     uint8_t *buf;
1747
1748     if (!st || mov->fc->flags & AVFMT_FLAG_BITEXACT)
1749         return 0;
1750
1751     ret = avio_open_dyn_buf(&pb_buf);
1752     if (ret < 0)
1753         return ret;
1754
1755     if (mov->mode & MODE_MP4)
1756         mov_write_track_metadata(pb_buf, st, "name", "title");
1757
1758     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
1759         avio_wb32(pb, size + 8);
1760         ffio_wfourcc(pb, "udta");
1761         avio_write(pb, buf, size);
1762     }
1763     av_free(buf);
1764
1765     return 0;
1766 }
1767
1768 static int mov_write_trak_tag(AVIOContext *pb, MOVMuxContext *mov,
1769                               MOVTrack *track, AVStream *st)
1770 {
1771     int64_t pos = avio_tell(pb);
1772     avio_wb32(pb, 0); /* size */
1773     ffio_wfourcc(pb, "trak");
1774     mov_write_tkhd_tag(pb, mov, track, st);
1775     if (track->entry &&
1776         (track->mode == MODE_PSP || track->flags & MOV_TRACK_CTTS ||
1777         track->cluster[0].dts || is_clcp_track(track))) {
1778         if (mov->use_editlist)
1779             mov_write_edts_tag(pb, mov, track);  // PSP Movies require edts box
1780         else if ((track->entry && track->cluster[0].dts) || track->mode == MODE_PSP || is_clcp_track(track))
1781             av_log(mov->fc, AV_LOG_WARNING,
1782                    "Not writing any edit list even though one would have been required\n");
1783     }
1784     if (track->tref_tag)
1785         mov_write_tref_tag(pb, track);
1786     mov_write_mdia_tag(pb, mov, track);
1787     if (track->mode == MODE_PSP)
1788         mov_write_uuid_tag_psp(pb, track); // PSP Movies require this uuid box
1789     if (track->tag == MKTAG('r','t','p',' '))
1790         mov_write_udta_sdp(pb, track);
1791     if (track->mode == MODE_MOV) {
1792         if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO) {
1793             double sample_aspect_ratio = av_q2d(st->sample_aspect_ratio);
1794             if ((0.0 != sample_aspect_ratio && 1.0 != sample_aspect_ratio)) {
1795                 mov_write_tapt_tag(pb, track);
1796             }
1797         }
1798         if (is_clcp_track(track)) {
1799             mov_write_tapt_tag(pb, track);
1800         }
1801     }
1802     mov_write_track_udta_tag(pb, mov, st);
1803     return update_size(pb, pos);
1804 }
1805
1806 static int mov_write_iods_tag(AVIOContext *pb, MOVMuxContext *mov)
1807 {
1808     int i, has_audio = 0, has_video = 0;
1809     int64_t pos = avio_tell(pb);
1810     int audio_profile = mov->iods_audio_profile;
1811     int video_profile = mov->iods_video_profile;
1812     for (i = 0; i < mov->nb_streams; i++) {
1813         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_EMPTY_MOOV) {
1814             has_audio |= mov->tracks[i].enc->codec_type == AVMEDIA_TYPE_AUDIO;
1815             has_video |= mov->tracks[i].enc->codec_type == AVMEDIA_TYPE_VIDEO;
1816         }
1817     }
1818     if (audio_profile < 0)
1819         audio_profile = 0xFF - has_audio;
1820     if (video_profile < 0)
1821         video_profile = 0xFF - has_video;
1822     avio_wb32(pb, 0x0); /* size */
1823     ffio_wfourcc(pb, "iods");
1824     avio_wb32(pb, 0);    /* version & flags */
1825     put_descr(pb, 0x10, 7);
1826     avio_wb16(pb, 0x004f);
1827     avio_w8(pb, 0xff);
1828     avio_w8(pb, 0xff);
1829     avio_w8(pb, audio_profile);
1830     avio_w8(pb, video_profile);
1831     avio_w8(pb, 0xff);
1832     return update_size(pb, pos);
1833 }
1834
1835 static int mov_write_trex_tag(AVIOContext *pb, MOVTrack *track)
1836 {
1837     avio_wb32(pb, 0x20); /* size */
1838     ffio_wfourcc(pb, "trex");
1839     avio_wb32(pb, 0);   /* version & flags */
1840     avio_wb32(pb, track->track_id); /* track ID */
1841     avio_wb32(pb, 1);   /* default sample description index */
1842     avio_wb32(pb, 0);   /* default sample duration */
1843     avio_wb32(pb, 0);   /* default sample size */
1844     avio_wb32(pb, 0);   /* default sample flags */
1845     return 0;
1846 }
1847
1848 static int mov_write_mvex_tag(AVIOContext *pb, MOVMuxContext *mov)
1849 {
1850     int64_t pos = avio_tell(pb);
1851     int i;
1852     avio_wb32(pb, 0x0); /* size */
1853     ffio_wfourcc(pb, "mvex");
1854     for (i = 0; i < mov->nb_streams; i++)
1855         mov_write_trex_tag(pb, &mov->tracks[i]);
1856     return update_size(pb, pos);
1857 }
1858
1859 static int mov_write_mvhd_tag(AVIOContext *pb, MOVMuxContext *mov)
1860 {
1861     int max_track_id = 1, i;
1862     int64_t max_track_len_temp, max_track_len = 0;
1863     int version;
1864
1865     for (i = 0; i < mov->nb_streams; i++) {
1866         if (mov->tracks[i].entry > 0 && mov->tracks[i].timescale) {
1867             max_track_len_temp = av_rescale_rnd(mov->tracks[i].track_duration,
1868                                                 MOV_TIMESCALE,
1869                                                 mov->tracks[i].timescale,
1870                                                 AV_ROUND_UP);
1871             if (max_track_len < max_track_len_temp)
1872                 max_track_len = max_track_len_temp;
1873             if (max_track_id < mov->tracks[i].track_id)
1874                 max_track_id = mov->tracks[i].track_id;
1875         }
1876     }
1877
1878     version = max_track_len < UINT32_MAX ? 0 : 1;
1879     (version == 1) ? avio_wb32(pb, 120) : avio_wb32(pb, 108); /* size */
1880     ffio_wfourcc(pb, "mvhd");
1881     avio_w8(pb, version);
1882     avio_wb24(pb, 0); /* flags */
1883     if (version == 1) {
1884         avio_wb64(pb, mov->time);
1885         avio_wb64(pb, mov->time);
1886     } else {
1887         avio_wb32(pb, mov->time); /* creation time */
1888         avio_wb32(pb, mov->time); /* modification time */
1889     }
1890     avio_wb32(pb, MOV_TIMESCALE);
1891     (version == 1) ? avio_wb64(pb, max_track_len) : avio_wb32(pb, max_track_len); /* duration of longest track */
1892
1893     avio_wb32(pb, 0x00010000); /* reserved (preferred rate) 1.0 = normal */
1894     avio_wb16(pb, 0x0100); /* reserved (preferred volume) 1.0 = normal */
1895     avio_wb16(pb, 0); /* reserved */
1896     avio_wb32(pb, 0); /* reserved */
1897     avio_wb32(pb, 0); /* reserved */
1898
1899     /* Matrix structure */
1900     avio_wb32(pb, 0x00010000); /* reserved */
1901     avio_wb32(pb, 0x0); /* reserved */
1902     avio_wb32(pb, 0x0); /* reserved */
1903     avio_wb32(pb, 0x0); /* reserved */
1904     avio_wb32(pb, 0x00010000); /* reserved */
1905     avio_wb32(pb, 0x0); /* reserved */
1906     avio_wb32(pb, 0x0); /* reserved */
1907     avio_wb32(pb, 0x0); /* reserved */
1908     avio_wb32(pb, 0x40000000); /* reserved */
1909
1910     avio_wb32(pb, 0); /* reserved (preview time) */
1911     avio_wb32(pb, 0); /* reserved (preview duration) */
1912     avio_wb32(pb, 0); /* reserved (poster time) */
1913     avio_wb32(pb, 0); /* reserved (selection time) */
1914     avio_wb32(pb, 0); /* reserved (selection duration) */
1915     avio_wb32(pb, 0); /* reserved (current time) */
1916     avio_wb32(pb, max_track_id + 1); /* Next track id */
1917     return 0x6c;
1918 }
1919
1920 static int mov_write_itunes_hdlr_tag(AVIOContext *pb, MOVMuxContext *mov,
1921                                      AVFormatContext *s)
1922 {
1923     avio_wb32(pb, 33); /* size */
1924     ffio_wfourcc(pb, "hdlr");
1925     avio_wb32(pb, 0);
1926     avio_wb32(pb, 0);
1927     ffio_wfourcc(pb, "mdir");
1928     ffio_wfourcc(pb, "appl");
1929     avio_wb32(pb, 0);
1930     avio_wb32(pb, 0);
1931     avio_w8(pb, 0);
1932     return 33;
1933 }
1934
1935 /* helper function to write a data tag with the specified string as data */
1936 static int mov_write_string_data_tag(AVIOContext *pb, const char *data, int lang, int long_style)
1937 {
1938     if (long_style) {
1939         int size = 16 + strlen(data);
1940         avio_wb32(pb, size); /* size */
1941         ffio_wfourcc(pb, "data");
1942         avio_wb32(pb, 1);
1943         avio_wb32(pb, 0);
1944         avio_write(pb, data, strlen(data));
1945         return size;
1946     } else {
1947         if (!lang)
1948             lang = ff_mov_iso639_to_lang("und", 1);
1949         avio_wb16(pb, strlen(data)); /* string length */
1950         avio_wb16(pb, lang);
1951         avio_write(pb, data, strlen(data));
1952         return strlen(data) + 4;
1953     }
1954 }
1955
1956 static int mov_write_string_tag(AVIOContext *pb, const char *name,
1957                                 const char *value, int lang, int long_style)
1958 {
1959     int size = 0;
1960     if (value && value[0]) {
1961         int64_t pos = avio_tell(pb);
1962         avio_wb32(pb, 0); /* size */
1963         ffio_wfourcc(pb, name);
1964         mov_write_string_data_tag(pb, value, lang, long_style);
1965         size = update_size(pb, pos);
1966     }
1967     return size;
1968 }
1969
1970 static int mov_write_string_metadata(AVFormatContext *s, AVIOContext *pb,
1971                                      const char *name, const char *tag,
1972                                      int long_style)
1973 {
1974     int l, lang = 0, len, len2;
1975     AVDictionaryEntry *t, *t2 = NULL;
1976     char tag2[16];
1977
1978     if (!(t = av_dict_get(s->metadata, tag, NULL, 0)))
1979         return 0;
1980
1981     len = strlen(t->key);
1982     snprintf(tag2, sizeof(tag2), "%s-", tag);
1983     while ((t2 = av_dict_get(s->metadata, tag2, t2, AV_DICT_IGNORE_SUFFIX))) {
1984         len2 = strlen(t2->key);
1985         if (len2 == len + 4 && !strcmp(t->value, t2->value)
1986             && (l = ff_mov_iso639_to_lang(&t2->key[len2 - 3], 1)) >= 0) {
1987             lang = l;
1988             break;
1989         }
1990     }
1991     return mov_write_string_tag(pb, name, t->value, lang, long_style);
1992 }
1993
1994 /* iTunes track number */
1995 static int mov_write_trkn_tag(AVIOContext *pb, MOVMuxContext *mov,
1996                               AVFormatContext *s)
1997 {
1998     AVDictionaryEntry *t = av_dict_get(s->metadata, "track", NULL, 0);
1999     int size = 0, track = t ? atoi(t->value) : 0;
2000     if (track) {
2001         avio_wb32(pb, 32); /* size */
2002         ffio_wfourcc(pb, "trkn");
2003         avio_wb32(pb, 24); /* size */
2004         ffio_wfourcc(pb, "data");
2005         avio_wb32(pb, 0);        // 8 bytes empty
2006         avio_wb32(pb, 0);
2007         avio_wb16(pb, 0);        // empty
2008         avio_wb16(pb, track);    // track number
2009         avio_wb16(pb, 0);        // total track number
2010         avio_wb16(pb, 0);        // empty
2011         size = 32;
2012     }
2013     return size;
2014 }
2015
2016 /* iTunes meta data list */
2017 static int mov_write_ilst_tag(AVIOContext *pb, MOVMuxContext *mov,
2018                               AVFormatContext *s)
2019 {
2020     int64_t pos = avio_tell(pb);
2021     avio_wb32(pb, 0); /* size */
2022     ffio_wfourcc(pb, "ilst");
2023     mov_write_string_metadata(s, pb, "\251nam", "title"    , 1);
2024     mov_write_string_metadata(s, pb, "\251ART", "artist"   , 1);
2025     mov_write_string_metadata(s, pb, "aART", "album_artist", 1);
2026     mov_write_string_metadata(s, pb, "\251wrt", "composer" , 1);
2027     mov_write_string_metadata(s, pb, "\251alb", "album"    , 1);
2028     mov_write_string_metadata(s, pb, "\251day", "date"     , 1);
2029     if (!mov_write_string_metadata(s, pb, "\251too", "encoding_tool", 1))
2030         mov_write_string_tag(pb, "\251too", LIBAVFORMAT_IDENT, 0, 1);
2031     mov_write_string_metadata(s, pb, "\251cmt", "comment"  , 1);
2032     mov_write_string_metadata(s, pb, "\251gen", "genre"    , 1);
2033     mov_write_string_metadata(s, pb, "\251cpy", "copyright", 1);
2034     mov_write_string_metadata(s, pb, "\251grp", "grouping" , 1);
2035     mov_write_string_metadata(s, pb, "\251lyr", "lyrics"   , 1);
2036     mov_write_string_metadata(s, pb, "desc",    "description",1);
2037     mov_write_string_metadata(s, pb, "ldes",    "synopsis" , 1);
2038     mov_write_string_metadata(s, pb, "tvsh",    "show"     , 1);
2039     mov_write_string_metadata(s, pb, "tven",    "episode_id",1);
2040     mov_write_string_metadata(s, pb, "tvnn",    "network"  , 1);
2041     mov_write_trkn_tag(pb, mov, s);
2042     return update_size(pb, pos);
2043 }
2044
2045 /* iTunes meta data tag */
2046 static int mov_write_meta_tag(AVIOContext *pb, MOVMuxContext *mov,
2047                               AVFormatContext *s)
2048 {
2049     int size = 0;
2050     int64_t pos = avio_tell(pb);
2051     avio_wb32(pb, 0); /* size */
2052     ffio_wfourcc(pb, "meta");
2053     avio_wb32(pb, 0);
2054     mov_write_itunes_hdlr_tag(pb, mov, s);
2055     mov_write_ilst_tag(pb, mov, s);
2056     size = update_size(pb, pos);
2057     return size;
2058 }
2059
2060 static int ascii_to_wc(AVIOContext *pb, const uint8_t *b)
2061 {
2062     int val;
2063     while (*b) {
2064         GET_UTF8(val, *b++, return -1;)
2065         avio_wb16(pb, val);
2066     }
2067     avio_wb16(pb, 0x00);
2068     return 0;
2069 }
2070
2071 static uint16_t language_code(const char *str)
2072 {
2073     return (((str[0] - 0x60) & 0x1F) << 10) +
2074            (((str[1] - 0x60) & 0x1F) <<  5) +
2075            (( str[2] - 0x60) & 0x1F);
2076 }
2077
2078 static int mov_write_3gp_udta_tag(AVIOContext *pb, AVFormatContext *s,
2079                                   const char *tag, const char *str)
2080 {
2081     int64_t pos = avio_tell(pb);
2082     AVDictionaryEntry *t = av_dict_get(s->metadata, str, NULL, 0);
2083     if (!t || !utf8len(t->value))
2084         return 0;
2085     avio_wb32(pb, 0);   /* size */
2086     ffio_wfourcc(pb, tag); /* type */
2087     avio_wb32(pb, 0);   /* version + flags */
2088     if (!strcmp(tag, "yrrc"))
2089         avio_wb16(pb, atoi(t->value));
2090     else {
2091         avio_wb16(pb, language_code("eng")); /* language */
2092         avio_write(pb, t->value, strlen(t->value) + 1); /* UTF8 string value */
2093         if (!strcmp(tag, "albm") &&
2094             (t = av_dict_get(s->metadata, "track", NULL, 0)))
2095             avio_w8(pb, atoi(t->value));
2096     }
2097     return update_size(pb, pos);
2098 }
2099
2100 static int mov_write_chpl_tag(AVIOContext *pb, AVFormatContext *s)
2101 {
2102     int64_t pos = avio_tell(pb);
2103     int i, nb_chapters = FFMIN(s->nb_chapters, 255);
2104
2105     avio_wb32(pb, 0);            // size
2106     ffio_wfourcc(pb, "chpl");
2107     avio_wb32(pb, 0x01000000);   // version + flags
2108     avio_wb32(pb, 0);            // unknown
2109     avio_w8(pb, nb_chapters);
2110
2111     for (i = 0; i < nb_chapters; i++) {
2112         AVChapter *c = s->chapters[i];
2113         AVDictionaryEntry *t;
2114         avio_wb64(pb, av_rescale_q(c->start, c->time_base, (AVRational){1,10000000}));
2115
2116         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
2117             int len = FFMIN(strlen(t->value), 255);
2118             avio_w8(pb, len);
2119             avio_write(pb, t->value, len);
2120         } else
2121             avio_w8(pb, 0);
2122     }
2123     return update_size(pb, pos);
2124 }
2125
2126 static int mov_write_udta_tag(AVIOContext *pb, MOVMuxContext *mov,
2127                               AVFormatContext *s)
2128 {
2129     AVIOContext *pb_buf;
2130     int ret, size;
2131     uint8_t *buf;
2132
2133     if (s->flags & AVFMT_FLAG_BITEXACT)
2134         return 0;
2135
2136     ret = avio_open_dyn_buf(&pb_buf);
2137     if (ret < 0)
2138         return ret;
2139
2140     if (mov->mode & MODE_3GP) {
2141         mov_write_3gp_udta_tag(pb_buf, s, "perf", "artist");
2142         mov_write_3gp_udta_tag(pb_buf, s, "titl", "title");
2143         mov_write_3gp_udta_tag(pb_buf, s, "auth", "author");
2144         mov_write_3gp_udta_tag(pb_buf, s, "gnre", "genre");
2145         mov_write_3gp_udta_tag(pb_buf, s, "dscp", "comment");
2146         mov_write_3gp_udta_tag(pb_buf, s, "albm", "album");
2147         mov_write_3gp_udta_tag(pb_buf, s, "cprt", "copyright");
2148         mov_write_3gp_udta_tag(pb_buf, s, "yrrc", "date");
2149     } else if (mov->mode == MODE_MOV) { // the title field breaks gtkpod with mp4 and my suspicion is that stuff is not valid in mp4
2150         mov_write_string_metadata(s, pb_buf, "\251ART", "artist",      0);
2151         mov_write_string_metadata(s, pb_buf, "\251nam", "title",       0);
2152         mov_write_string_metadata(s, pb_buf, "\251aut", "author",      0);
2153         mov_write_string_metadata(s, pb_buf, "\251alb", "album",       0);
2154         mov_write_string_metadata(s, pb_buf, "\251day", "date",        0);
2155         mov_write_string_metadata(s, pb_buf, "\251swr", "encoder",     0);
2156         mov_write_string_metadata(s, pb_buf, "\251des", "comment",     0);
2157         mov_write_string_metadata(s, pb_buf, "\251gen", "genre",       0);
2158         mov_write_string_metadata(s, pb_buf, "\251cpy", "copyright",   0);
2159     } else {
2160         /* iTunes meta data */
2161         mov_write_meta_tag(pb_buf, mov, s);
2162     }
2163
2164     if (s->nb_chapters && !(mov->flags & FF_MOV_FLAG_DISABLE_CHPL))
2165         mov_write_chpl_tag(pb_buf, s);
2166
2167     if ((size = avio_close_dyn_buf(pb_buf, &buf)) > 0) {
2168         avio_wb32(pb, size + 8);
2169         ffio_wfourcc(pb, "udta");
2170         avio_write(pb, buf, size);
2171     }
2172     av_free(buf);
2173
2174     return 0;
2175 }
2176
2177 static void mov_write_psp_udta_tag(AVIOContext *pb,
2178                                    const char *str, const char *lang, int type)
2179 {
2180     int len = utf8len(str) + 1;
2181     if (len <= 0)
2182         return;
2183     avio_wb16(pb, len * 2 + 10);        /* size */
2184     avio_wb32(pb, type);                /* type */
2185     avio_wb16(pb, language_code(lang)); /* language */
2186     avio_wb16(pb, 0x01);                /* ? */
2187     ascii_to_wc(pb, str);
2188 }
2189
2190 static int mov_write_uuidusmt_tag(AVIOContext *pb, AVFormatContext *s)
2191 {
2192     AVDictionaryEntry *title = av_dict_get(s->metadata, "title", NULL, 0);
2193     int64_t pos, pos2;
2194
2195     if (title) {
2196         pos = avio_tell(pb);
2197         avio_wb32(pb, 0); /* size placeholder*/
2198         ffio_wfourcc(pb, "uuid");
2199         ffio_wfourcc(pb, "USMT");
2200         avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
2201         avio_wb32(pb, 0xbb88695c);
2202         avio_wb32(pb, 0xfac9c740);
2203
2204         pos2 = avio_tell(pb);
2205         avio_wb32(pb, 0); /* size placeholder*/
2206         ffio_wfourcc(pb, "MTDT");
2207         avio_wb16(pb, 4);
2208
2209         // ?
2210         avio_wb16(pb, 0x0C);                 /* size */
2211         avio_wb32(pb, 0x0B);                 /* type */
2212         avio_wb16(pb, language_code("und")); /* language */
2213         avio_wb16(pb, 0x0);                  /* ? */
2214         avio_wb16(pb, 0x021C);               /* data */
2215
2216         mov_write_psp_udta_tag(pb, LIBAVCODEC_IDENT,      "eng", 0x04);
2217         mov_write_psp_udta_tag(pb, title->value,          "eng", 0x01);
2218         mov_write_psp_udta_tag(pb, "2006/04/01 11:11:11", "und", 0x03);
2219
2220         update_size(pb, pos2);
2221         return update_size(pb, pos);
2222     }
2223
2224     return 0;
2225 }
2226
2227 static int mov_write_moov_tag(AVIOContext *pb, MOVMuxContext *mov,
2228                               AVFormatContext *s)
2229 {
2230     int i;
2231     int64_t pos = avio_tell(pb);
2232     avio_wb32(pb, 0); /* size placeholder*/
2233     ffio_wfourcc(pb, "moov");
2234
2235     for (i = 0; i < mov->nb_streams; i++) {
2236         if (mov->tracks[i].entry <= 0 && !(mov->flags & FF_MOV_FLAG_FRAGMENT))
2237             continue;
2238
2239         mov->tracks[i].time     = mov->time;
2240         mov->tracks[i].track_id = i + 1;
2241     }
2242
2243     if (mov->chapter_track)
2244         for (i = 0; i < s->nb_streams; i++) {
2245             mov->tracks[i].tref_tag = MKTAG('c','h','a','p');
2246             mov->tracks[i].tref_id  = mov->tracks[mov->chapter_track].track_id;
2247         }
2248     for (i = 0; i < mov->nb_streams; i++) {
2249         if (mov->tracks[i].tag == MKTAG('r','t','p',' ')) {
2250             mov->tracks[i].tref_tag = MKTAG('h','i','n','t');
2251             mov->tracks[i].tref_id =
2252                 mov->tracks[mov->tracks[i].src_track].track_id;
2253         }
2254     }
2255
2256     mov_write_mvhd_tag(pb, mov);
2257     if (mov->mode != MODE_MOV && !mov->iods_skip)
2258         mov_write_iods_tag(pb, mov);
2259     for (i = 0; i < mov->nb_streams; i++) {
2260         if (mov->tracks[i].entry > 0 || mov->flags & FF_MOV_FLAG_FRAGMENT) {
2261             mov_write_trak_tag(pb, mov, &(mov->tracks[i]), i < s->nb_streams ? s->streams[i] : NULL);
2262         }
2263     }
2264     if (mov->flags & FF_MOV_FLAG_FRAGMENT)
2265         mov_write_mvex_tag(pb, mov); /* QuickTime requires trak to precede this */
2266
2267     if (mov->mode == MODE_PSP)
2268         mov_write_uuidusmt_tag(pb, s);
2269     else
2270         mov_write_udta_tag(pb, mov, s);
2271
2272     return update_size(pb, pos);
2273 }
2274
2275 static void param_write_int(AVIOContext *pb, const char *name, int value)
2276 {
2277     avio_printf(pb, "<param name=\"%s\" value=\"%d\" valuetype=\"data\"/>\n", name, value);
2278 }
2279
2280 static void param_write_string(AVIOContext *pb, const char *name, const char *value)
2281 {
2282     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, value);
2283 }
2284
2285 static void param_write_hex(AVIOContext *pb, const char *name, const uint8_t *value, int len)
2286 {
2287     char buf[150];
2288     len = FFMIN(sizeof(buf) / 2 - 1, len);
2289     ff_data_to_hex(buf, value, len, 0);
2290     buf[2 * len] = '\0';
2291     avio_printf(pb, "<param name=\"%s\" value=\"%s\" valuetype=\"data\"/>\n", name, buf);
2292 }
2293
2294 static int mov_write_isml_manifest(AVIOContext *pb, MOVMuxContext *mov)
2295 {
2296     int64_t pos = avio_tell(pb);
2297     int i;
2298     const uint8_t uuid[] = {
2299         0xa5, 0xd4, 0x0b, 0x30, 0xe8, 0x14, 0x11, 0xdd,
2300         0xba, 0x2f, 0x08, 0x00, 0x20, 0x0c, 0x9a, 0x66
2301     };
2302
2303     avio_wb32(pb, 0);
2304     ffio_wfourcc(pb, "uuid");
2305     avio_write(pb, uuid, sizeof(uuid));
2306     avio_wb32(pb, 0);
2307
2308     avio_printf(pb, "<?xml version=\"1.0\" encoding=\"utf-8\"?>\n");
2309     avio_printf(pb, "<smil xmlns=\"http://www.w3.org/2001/SMIL20/Language\">\n");
2310     avio_printf(pb, "<head>\n");
2311     avio_printf(pb, "<meta name=\"creator\" content=\"%s\" />\n",
2312                     LIBAVFORMAT_IDENT);
2313     avio_printf(pb, "</head>\n");
2314     avio_printf(pb, "<body>\n");
2315     avio_printf(pb, "<switch>\n");
2316     for (i = 0; i < mov->nb_streams; i++) {
2317         MOVTrack *track = &mov->tracks[i];
2318         const char *type;
2319         /* track->track_id is initialized in write_moov, and thus isn't known
2320          * here yet */
2321         int track_id = i + 1;
2322
2323         if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO) {
2324             type = "video";
2325         } else if (track->enc->codec_type == AVMEDIA_TYPE_AUDIO) {
2326             type = "audio";
2327         } else {
2328             continue;
2329         }
2330         avio_printf(pb, "<%s systemBitrate=\"%d\">\n", type,
2331                                                        track->enc->bit_rate);
2332         param_write_int(pb, "systemBitrate", track->enc->bit_rate);
2333         param_write_int(pb, "trackID", track_id);
2334         if (track->enc->codec_type == AVMEDIA_TYPE_VIDEO) {
2335             if (track->enc->codec_id == AV_CODEC_ID_H264) {
2336                 uint8_t *ptr;
2337                 int size = track->enc->extradata_size;
2338                 if (!ff_avc_write_annexb_extradata(track->enc->extradata, &ptr,
2339                                                    &size)) {
2340                     param_write_hex(pb, "CodecPrivateData",
2341                                     ptr ? ptr : track->enc->extradata,
2342                                     size);
2343                     av_free(ptr);
2344                 }
2345                 param_write_string(pb, "FourCC", "H264");
2346             } else if (track->enc->codec_id == AV_CODEC_ID_VC1) {
2347                 param_write_string(pb, "FourCC", "WVC1");
2348                 param_write_hex(pb, "CodecPrivateData", track->enc->extradata,
2349                                 track->enc->extradata_size);
2350             }
2351             param_write_int(pb, "MaxWidth", track->enc->width);
2352             param_write_int(pb, "MaxHeight", track->enc->height);
2353             param_write_int(pb, "DisplayWidth", track->enc->width);
2354             param_write_int(pb, "DisplayHeight", track->enc->height);
2355         } else {
2356             if (track->enc->codec_id == AV_CODEC_ID_AAC) {
2357                 param_write_string(pb, "FourCC", "AACL");
2358             } else if (track->enc->codec_id == AV_CODEC_ID_WMAPRO) {
2359                 param_write_string(pb, "FourCC", "WMAP");
2360             }
2361             param_write_hex(pb, "CodecPrivateData", track->enc->extradata,
2362                             track->enc->extradata_size);
2363             param_write_int(pb, "AudioTag", ff_codec_get_tag(ff_codec_wav_tags,
2364                                                              track->enc->codec_id));
2365             param_write_int(pb, "Channels", track->enc->channels);
2366             param_write_int(pb, "SamplingRate", track->enc->sample_rate);
2367             param_write_int(pb, "BitsPerSample", 16);
2368             param_write_int(pb, "PacketSize", track->enc->block_align ?
2369                                               track->enc->block_align : 4);
2370         }
2371         avio_printf(pb, "</%s>\n", type);
2372     }
2373     avio_printf(pb, "</switch>\n");
2374     avio_printf(pb, "</body>\n");
2375     avio_printf(pb, "</smil>\n");
2376
2377     return update_size(pb, pos);
2378 }
2379
2380 static int mov_write_mfhd_tag(AVIOContext *pb, MOVMuxContext *mov)
2381 {
2382     avio_wb32(pb, 16);
2383     ffio_wfourcc(pb, "mfhd");
2384     avio_wb32(pb, 0);
2385     avio_wb32(pb, mov->fragments);
2386     return 0;
2387 }
2388
2389 static int mov_write_tfhd_tag(AVIOContext *pb, MOVMuxContext *mov,
2390                               MOVTrack *track, int64_t moof_offset)
2391 {
2392     int64_t pos = avio_tell(pb);
2393     uint32_t flags = MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
2394                      MOV_TFHD_BASE_DATA_OFFSET;
2395     if (!track->entry) {
2396         flags |= MOV_TFHD_DURATION_IS_EMPTY;
2397     } else {
2398         flags |= MOV_TFHD_DEFAULT_FLAGS;
2399     }
2400     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET)
2401         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
2402     if (mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) {
2403         flags &= ~MOV_TFHD_BASE_DATA_OFFSET;
2404         flags |= MOV_TFHD_DEFAULT_BASE_IS_MOOF;
2405     }
2406
2407     /* Don't set a default sample size, the silverlight player refuses
2408      * to play files with that set. Don't set a default sample duration,
2409      * WMP freaks out if it is set. Don't set a base data offset, PIFF
2410      * file format says it MUST NOT be set. */
2411     if (track->mode == MODE_ISM)
2412         flags &= ~(MOV_TFHD_DEFAULT_SIZE | MOV_TFHD_DEFAULT_DURATION |
2413                    MOV_TFHD_BASE_DATA_OFFSET);
2414
2415     avio_wb32(pb, 0); /* size placeholder */
2416     ffio_wfourcc(pb, "tfhd");
2417     avio_w8(pb, 0); /* version */
2418     avio_wb24(pb, flags);
2419
2420     avio_wb32(pb, track->track_id); /* track-id */
2421     if (flags & MOV_TFHD_BASE_DATA_OFFSET)
2422         avio_wb64(pb, moof_offset);
2423     if (flags & MOV_TFHD_DEFAULT_DURATION) {
2424         track->default_duration = get_cluster_duration(track, 0);
2425         avio_wb32(pb, track->default_duration);
2426     }
2427     if (flags & MOV_TFHD_DEFAULT_SIZE) {
2428         track->default_size = track->entry ? track->cluster[0].size : 1;
2429         avio_wb32(pb, track->default_size);
2430     } else
2431         track->default_size = -1;
2432
2433     if (flags & MOV_TFHD_DEFAULT_FLAGS) {
2434         track->default_sample_flags =
2435             track->enc->codec_type == AVMEDIA_TYPE_VIDEO ?
2436             (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC) :
2437             MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO;
2438         avio_wb32(pb, track->default_sample_flags);
2439     }
2440
2441     return update_size(pb, pos);
2442 }
2443
2444 static uint32_t get_sample_flags(MOVTrack *track, MOVIentry *entry)
2445 {
2446     return entry->flags & MOV_SYNC_SAMPLE ? MOV_FRAG_SAMPLE_FLAG_DEPENDS_NO :
2447            (MOV_FRAG_SAMPLE_FLAG_DEPENDS_YES | MOV_FRAG_SAMPLE_FLAG_IS_NON_SYNC);
2448 }
2449
2450 static int mov_write_trun_tag(AVIOContext *pb, MOVMuxContext *mov,
2451                               MOVTrack *track, int moof_size)
2452 {
2453     int64_t pos = avio_tell(pb);
2454     uint32_t flags = MOV_TRUN_DATA_OFFSET;
2455     int i;
2456
2457     for (i = 0; i < track->entry; i++) {
2458         if (get_cluster_duration(track, i) != track->default_duration)
2459             flags |= MOV_TRUN_SAMPLE_DURATION;
2460         if (track->cluster[i].size != track->default_size)
2461             flags |= MOV_TRUN_SAMPLE_SIZE;
2462         if (i > 0 && get_sample_flags(track, &track->cluster[i]) != track->default_sample_flags)
2463             flags |= MOV_TRUN_SAMPLE_FLAGS;
2464     }
2465     if (!(flags & MOV_TRUN_SAMPLE_FLAGS))
2466         flags |= MOV_TRUN_FIRST_SAMPLE_FLAGS;
2467     if (track->flags & MOV_TRACK_CTTS)
2468         flags |= MOV_TRUN_SAMPLE_CTS;
2469
2470     avio_wb32(pb, 0); /* size placeholder */
2471     ffio_wfourcc(pb, "trun");
2472     avio_w8(pb, 0); /* version */
2473     avio_wb24(pb, flags);
2474
2475     avio_wb32(pb, track->entry); /* sample count */
2476     if (mov->flags & FF_MOV_FLAG_OMIT_TFHD_OFFSET &&
2477         !(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF) &&
2478         !mov->first_trun)
2479         avio_wb32(pb, 0); /* Later tracks follow immediately after the previous one */
2480     else
2481         avio_wb32(pb, moof_size + 8 + track->data_offset +
2482                       track->cluster[0].pos); /* data offset */
2483     if (flags & MOV_TRUN_FIRST_SAMPLE_FLAGS)
2484         avio_wb32(pb, get_sample_flags(track, &track->cluster[0]));
2485
2486     for (i = 0; i < track->entry; i++) {
2487         if (flags & MOV_TRUN_SAMPLE_DURATION)
2488             avio_wb32(pb, get_cluster_duration(track, i));
2489         if (flags & MOV_TRUN_SAMPLE_SIZE)
2490             avio_wb32(pb, track->cluster[i].size);
2491         if (flags & MOV_TRUN_SAMPLE_FLAGS)
2492             avio_wb32(pb, get_sample_flags(track, &track->cluster[i]));
2493         if (flags & MOV_TRUN_SAMPLE_CTS)
2494             avio_wb32(pb, track->cluster[i].cts);
2495     }
2496
2497     mov->first_trun = 0;
2498     return update_size(pb, pos);
2499 }
2500
2501 static int mov_write_tfxd_tag(AVIOContext *pb, MOVTrack *track)
2502 {
2503     int64_t pos = avio_tell(pb);
2504     const uint8_t uuid[] = {
2505         0x6d, 0x1d, 0x9b, 0x05, 0x42, 0xd5, 0x44, 0xe6,
2506         0x80, 0xe2, 0x14, 0x1d, 0xaf, 0xf7, 0x57, 0xb2
2507     };
2508
2509     avio_wb32(pb, 0); /* size placeholder */
2510     ffio_wfourcc(pb, "uuid");
2511     avio_write(pb, uuid, sizeof(uuid));
2512     avio_w8(pb, 1);
2513     avio_wb24(pb, 0);
2514     avio_wb64(pb, track->frag_start);
2515     avio_wb64(pb, track->start_dts + track->track_duration -
2516                   track->cluster[0].dts);
2517
2518     return update_size(pb, pos);
2519 }
2520
2521 static int mov_write_tfrf_tag(AVIOContext *pb, MOVMuxContext *mov,
2522                               MOVTrack *track, int entry)
2523 {
2524     int n = track->nb_frag_info - 1 - entry, i;
2525     int size = 8 + 16 + 4 + 1 + 16*n;
2526     const uint8_t uuid[] = {
2527         0xd4, 0x80, 0x7e, 0xf2, 0xca, 0x39, 0x46, 0x95,
2528         0x8e, 0x54, 0x26, 0xcb, 0x9e, 0x46, 0xa7, 0x9f
2529     };
2530
2531     if (entry < 0)
2532         return 0;
2533
2534     avio_seek(pb, track->frag_info[entry].tfrf_offset, SEEK_SET);
2535     avio_wb32(pb, size);
2536     ffio_wfourcc(pb, "uuid");
2537     avio_write(pb, uuid, sizeof(uuid));
2538     avio_w8(pb, 1);
2539     avio_wb24(pb, 0);
2540     avio_w8(pb, n);
2541     for (i = 0; i < n; i++) {
2542         int index = entry + 1 + i;
2543         avio_wb64(pb, track->frag_info[index].time);
2544         avio_wb64(pb, track->frag_info[index].duration);
2545     }
2546     if (n < mov->ism_lookahead) {
2547         int free_size = 16 * (mov->ism_lookahead - n);
2548         avio_wb32(pb, free_size);
2549         ffio_wfourcc(pb, "free");
2550         for (i = 0; i < free_size - 8; i++)
2551             avio_w8(pb, 0);
2552     }
2553
2554     return 0;
2555 }
2556
2557 static int mov_write_tfrf_tags(AVIOContext *pb, MOVMuxContext *mov,
2558                                MOVTrack *track)
2559 {
2560     int64_t pos = avio_tell(pb);
2561     int i;
2562     for (i = 0; i < mov->ism_lookahead; i++) {
2563         /* Update the tfrf tag for the last ism_lookahead fragments,
2564          * nb_frag_info - 1 is the next fragment to be written. */
2565         mov_write_tfrf_tag(pb, mov, track, track->nb_frag_info - 2 - i);
2566     }
2567     avio_seek(pb, pos, SEEK_SET);
2568     return 0;
2569 }
2570
2571 static int mov_add_tfra_entries(AVIOContext *pb, MOVMuxContext *mov, int tracks,
2572                                 int size)
2573 {
2574     int i;
2575     for (i = 0; i < mov->nb_streams; i++) {
2576         MOVTrack *track = &mov->tracks[i];
2577         MOVFragmentInfo *info;
2578         if ((tracks >= 0 && i != tracks) || !track->entry)
2579             continue;
2580         track->nb_frag_info++;
2581         if (track->nb_frag_info >= track->frag_info_capacity) {
2582             unsigned new_capacity = track->nb_frag_info + MOV_FRAG_INFO_ALLOC_INCREMENT;
2583             if (av_reallocp_array(&track->frag_info,
2584                                   new_capacity,
2585                                   sizeof(*track->frag_info)))
2586                 return AVERROR(ENOMEM);
2587             track->frag_info_capacity = new_capacity;
2588         }
2589         info = &track->frag_info[track->nb_frag_info - 1];
2590         info->offset   = avio_tell(pb);
2591         info->size     = size;
2592         // Try to recreate the original pts for the first packet
2593         // from the fields we have stored
2594         info->time     = track->start_dts + track->frag_start +
2595                          track->cluster[0].cts;
2596         // If the pts is less than zero, we will have trimmed
2597         // away parts of the media track using an edit list,
2598         // and the corresponding start presentation time is zero.
2599         if (info->time < 0)
2600             info->time = 0;
2601         info->duration = track->start_dts + track->track_duration -
2602                          track->cluster[0].dts;
2603         info->tfrf_offset = 0;
2604         mov_write_tfrf_tags(pb, mov, track);
2605     }
2606     return 0;
2607 }
2608
2609 static int mov_write_tfdt_tag(AVIOContext *pb, MOVTrack *track)
2610 {
2611     int64_t pos = avio_tell(pb);
2612
2613     avio_wb32(pb, 0); /* size */
2614     ffio_wfourcc(pb, "tfdt");
2615     avio_w8(pb, 1); /* version */
2616     avio_wb24(pb, 0);
2617     avio_wb64(pb, track->frag_start);
2618     return update_size(pb, pos);
2619 }
2620
2621 static int mov_write_traf_tag(AVIOContext *pb, MOVMuxContext *mov,
2622                               MOVTrack *track, int64_t moof_offset,
2623                               int moof_size)
2624 {
2625     int64_t pos = avio_tell(pb);
2626     avio_wb32(pb, 0); /* size placeholder */
2627     ffio_wfourcc(pb, "traf");
2628
2629     mov_write_tfhd_tag(pb, mov, track, moof_offset);
2630     if (mov->mode != MODE_ISM)
2631         mov_write_tfdt_tag(pb, track);
2632     mov_write_trun_tag(pb, mov, track, moof_size);
2633     if (mov->mode == MODE_ISM) {
2634         mov_write_tfxd_tag(pb, track);
2635
2636         if (mov->ism_lookahead) {
2637             int i, size = 16 + 4 + 1 + 16 * mov->ism_lookahead;
2638
2639             if (track->nb_frag_info > 0) {
2640                 MOVFragmentInfo *info = &track->frag_info[track->nb_frag_info - 1];
2641                 if (!info->tfrf_offset)
2642                     info->tfrf_offset = avio_tell(pb);
2643             }
2644             avio_wb32(pb, 8 + size);
2645             ffio_wfourcc(pb, "free");
2646             for (i = 0; i < size; i++)
2647                 avio_w8(pb, 0);
2648         }
2649     }
2650
2651     return update_size(pb, pos);
2652 }
2653
2654 static int mov_write_moof_tag_internal(AVIOContext *pb, MOVMuxContext *mov,
2655                                        int tracks, int moof_size)
2656 {
2657     int64_t pos = avio_tell(pb);
2658     int i;
2659
2660     avio_wb32(pb, 0); /* size placeholder */
2661     ffio_wfourcc(pb, "moof");
2662     mov->first_trun = 1;
2663
2664     mov_write_mfhd_tag(pb, mov);
2665     for (i = 0; i < mov->nb_streams; i++) {
2666         MOVTrack *track = &mov->tracks[i];
2667         if (tracks >= 0 && i != tracks)
2668             continue;
2669         if (!track->entry)
2670             continue;
2671         mov_write_traf_tag(pb, mov, track, pos, moof_size);
2672     }
2673
2674     return update_size(pb, pos);
2675 }
2676
2677 static int mov_write_sidx_tag(AVIOContext *pb,
2678                               MOVTrack *track, int ref_size, int total_sidx_size)
2679 {
2680     int64_t pos = avio_tell(pb), offset_pos, end_pos;
2681     int64_t presentation_time, duration, offset;
2682     int starts_with_SAP, i, entries;
2683
2684     if (track->entry) {
2685         entries = 1;
2686         presentation_time = track->start_dts + track->frag_start +
2687                             track->cluster[0].cts;
2688         duration = track->start_dts + track->track_duration -
2689                    track->cluster[0].dts;
2690         starts_with_SAP = track->cluster[0].flags & MOV_SYNC_SAMPLE;
2691     } else {
2692         entries = track->nb_frag_info;
2693         presentation_time = track->frag_info[0].time;
2694     }
2695
2696     // pts<0 should be cut away using edts
2697     if (presentation_time < 0)
2698         presentation_time = 0;
2699
2700     avio_wb32(pb, 0); /* size */
2701     ffio_wfourcc(pb, "sidx");
2702     avio_w8(pb, 1); /* version */
2703     avio_wb24(pb, 0);
2704     avio_wb32(pb, track->track_id); /* reference_ID */
2705     avio_wb32(pb, track->timescale); /* timescale */
2706     avio_wb64(pb, presentation_time); /* earliest_presentation_time */
2707     offset_pos = avio_tell(pb);
2708     avio_wb64(pb, 0); /* first_offset (offset to referenced moof) */
2709     avio_wb16(pb, 0); /* reserved */
2710
2711     avio_wb16(pb, entries); /* reference_count */
2712     for (i = 0; i < entries; i++) {
2713         if (!track->entry) {
2714             if (i > 1 && track->frag_info[i].offset != track->frag_info[i - 1].offset + track->frag_info[i - 1].size) {
2715                av_log(NULL, AV_LOG_ERROR, "Non-consecutive fragments, writing incorrect sidx\n");
2716             }
2717             duration = track->frag_info[i].duration;
2718             ref_size = track->frag_info[i].size;
2719             starts_with_SAP = 1;
2720         }
2721         avio_wb32(pb, (0 << 31) | (ref_size & 0x7fffffff)); /* reference_type (0 = media) | referenced_size */
2722         avio_wb32(pb, duration); /* subsegment_duration */
2723         avio_wb32(pb, (starts_with_SAP << 31) | (0 << 28) | 0); /* starts_with_SAP | SAP_type | SAP_delta_time */
2724     }
2725
2726     end_pos = avio_tell(pb);
2727     offset = pos + total_sidx_size - end_pos;
2728     avio_seek(pb, offset_pos, SEEK_SET);
2729     avio_wb64(pb, offset);
2730     avio_seek(pb, end_pos, SEEK_SET);
2731     return update_size(pb, pos);
2732 }
2733
2734 static int mov_write_sidx_tags(AVIOContext *pb, MOVMuxContext *mov,
2735                                int tracks, int ref_size)
2736 {
2737     int i, round, ret;
2738     AVIOContext *avio_buf;
2739     int total_size = 0;
2740     for (round = 0; round < 2; round++) {
2741         // First run one round to calculate the total size of all
2742         // sidx atoms.
2743         // This would be much simpler if we'd only write one sidx
2744         // atom, for the first track in the moof.
2745         if (round == 0) {
2746             if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
2747                 return ret;
2748         } else {
2749             avio_buf = pb;
2750         }
2751         for (i = 0; i < mov->nb_streams; i++) {
2752             MOVTrack *track = &mov->tracks[i];
2753             if (tracks >= 0 && i != tracks)
2754                 continue;
2755             // When writing a sidx for the full file, entry is 0, but
2756             // we want to include all tracks. ref_size is 0 in this case,
2757             // since we read it from frag_info instead.
2758             if (!track->entry && ref_size > 0)
2759                 continue;
2760             total_size -= mov_write_sidx_tag(avio_buf, track, ref_size,
2761                                              total_size);
2762         }
2763         if (round == 0)
2764             total_size = ffio_close_null_buf(avio_buf);
2765     }
2766     return 0;
2767 }
2768
2769 static int mov_write_moof_tag(AVIOContext *pb, MOVMuxContext *mov, int tracks,
2770                               int64_t mdat_size)
2771 {
2772     AVIOContext *avio_buf;
2773     int ret, moof_size;
2774
2775     if ((ret = ffio_open_null_buf(&avio_buf)) < 0)
2776         return ret;
2777     mov_write_moof_tag_internal(avio_buf, mov, tracks, 0);
2778     moof_size = ffio_close_null_buf(avio_buf);
2779
2780     if (mov->flags & FF_MOV_FLAG_DASH && !(mov->flags & FF_MOV_FLAG_FASTSTART))
2781         mov_write_sidx_tags(pb, mov, tracks, moof_size + 8 + mdat_size);
2782
2783     if ((ret = mov_add_tfra_entries(pb, mov, tracks, moof_size + 8 + mdat_size)) < 0)
2784         return ret;
2785
2786     return mov_write_moof_tag_internal(pb, mov, tracks, moof_size);
2787 }
2788
2789 static int mov_write_tfra_tag(AVIOContext *pb, MOVTrack *track)
2790 {
2791     int64_t pos = avio_tell(pb);
2792     int i;
2793
2794     avio_wb32(pb, 0); /* size placeholder */
2795     ffio_wfourcc(pb, "tfra");
2796     avio_w8(pb, 1); /* version */
2797     avio_wb24(pb, 0);
2798
2799     avio_wb32(pb, track->track_id);
2800     avio_wb32(pb, 0); /* length of traf/trun/sample num */
2801     avio_wb32(pb, track->nb_frag_info);
2802     for (i = 0; i < track->nb_frag_info; i++) {
2803         avio_wb64(pb, track->frag_info[i].time);
2804         avio_wb64(pb, track->frag_info[i].offset + track->data_offset);
2805         avio_w8(pb, 1); /* traf number */
2806         avio_w8(pb, 1); /* trun number */
2807         avio_w8(pb, 1); /* sample number */
2808     }
2809
2810     return update_size(pb, pos);
2811 }
2812
2813 static int mov_write_mfra_tag(AVIOContext *pb, MOVMuxContext *mov)
2814 {
2815     int64_t pos = avio_tell(pb);
2816     int i;
2817
2818     avio_wb32(pb, 0); /* size placeholder */
2819     ffio_wfourcc(pb, "mfra");
2820     /* An empty mfra atom is enough to indicate to the publishing point that
2821      * the stream has ended. */
2822     if (mov->flags & FF_MOV_FLAG_ISML)
2823         return update_size(pb, pos);
2824
2825     for (i = 0; i < mov->nb_streams; i++) {
2826         MOVTrack *track = &mov->tracks[i];
2827         if (track->nb_frag_info)
2828             mov_write_tfra_tag(pb, track);
2829     }
2830
2831     avio_wb32(pb, 16);
2832     ffio_wfourcc(pb, "mfro");
2833     avio_wb32(pb, 0); /* version + flags */
2834     avio_wb32(pb, avio_tell(pb) + 4 - pos);
2835
2836     return update_size(pb, pos);
2837 }
2838
2839 static int mov_write_mdat_tag(AVIOContext *pb, MOVMuxContext *mov)
2840 {
2841     avio_wb32(pb, 8);    // placeholder for extended size field (64 bit)
2842     ffio_wfourcc(pb, mov->mode == MODE_MOV ? "wide" : "free");
2843
2844     mov->mdat_pos = avio_tell(pb);
2845     avio_wb32(pb, 0); /* size placeholder*/
2846     ffio_wfourcc(pb, "mdat");
2847     return 0;
2848 }
2849
2850 /* TODO: This needs to be more general */
2851 static int mov_write_ftyp_tag(AVIOContext *pb, AVFormatContext *s)
2852 {
2853     MOVMuxContext *mov = s->priv_data;
2854     int64_t pos = avio_tell(pb);
2855     int has_h264 = 0, has_video = 0;
2856     int minor = 0x200;
2857     int i;
2858
2859     for (i = 0; i < s->nb_streams; i++) {
2860         AVStream *st = s->streams[i];
2861         if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO)
2862             has_video = 1;
2863         if (st->codec->codec_id == AV_CODEC_ID_H264)
2864             has_h264 = 1;
2865     }
2866
2867     avio_wb32(pb, 0); /* size */
2868     ffio_wfourcc(pb, "ftyp");
2869
2870     if (mov->major_brand && strlen(mov->major_brand) >= 4)
2871         ffio_wfourcc(pb, mov->major_brand);
2872     else if (mov->mode == MODE_3GP) {
2873         ffio_wfourcc(pb, has_h264 ? "3gp6"  : "3gp4");
2874         minor =     has_h264 ?   0x100 :   0x200;
2875     } else if (mov->mode & MODE_3G2) {
2876         ffio_wfourcc(pb, has_h264 ? "3g2b"  : "3g2a");
2877         minor =     has_h264 ? 0x20000 : 0x10000;
2878     } else if (mov->mode == MODE_PSP)
2879         ffio_wfourcc(pb, "MSNV");
2880     else if (mov->mode == MODE_MP4 && mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)
2881         ffio_wfourcc(pb, "iso5"); // Required when using default-base-is-moof
2882     else if (mov->mode == MODE_MP4)
2883         ffio_wfourcc(pb, "isom");
2884     else if (mov->mode == MODE_IPOD)
2885         ffio_wfourcc(pb, has_video ? "M4V ":"M4A ");
2886     else if (mov->mode == MODE_ISM)
2887         ffio_wfourcc(pb, "isml");
2888     else if (mov->mode == MODE_F4V)
2889         ffio_wfourcc(pb, "f4v ");
2890     else
2891         ffio_wfourcc(pb, "qt  ");
2892
2893     avio_wb32(pb, minor);
2894
2895     if (mov->mode == MODE_MOV)
2896         ffio_wfourcc(pb, "qt  ");
2897     else if (mov->mode == MODE_ISM) {
2898         ffio_wfourcc(pb, "piff");
2899     } else if (!(mov->flags & FF_MOV_FLAG_DEFAULT_BASE_MOOF)) {
2900         ffio_wfourcc(pb, "isom");
2901         ffio_wfourcc(pb, "iso2");
2902         if (has_h264)
2903             ffio_wfourcc(pb, "avc1");
2904     }
2905
2906     // We add tfdt atoms when fragmenting, signal this with the iso6 compatible
2907     // brand. This is compatible with users that don't understand tfdt.
2908     if (mov->flags & FF_MOV_FLAG_FRAGMENT && mov->mode != MODE_ISM)
2909         ffio_wfourcc(pb, "iso6");
2910
2911     if (mov->mode == MODE_3GP)
2912         ffio_wfourcc(pb, has_h264 ? "3gp6":"3gp4");
2913     else if (mov->mode & MODE_3G2)
2914         ffio_wfourcc(pb, has_h264 ? "3g2b":"3g2a");
2915     else if (mov->mode == MODE_PSP)
2916         ffio_wfourcc(pb, "MSNV");
2917     else if (mov->mode == MODE_MP4)
2918         ffio_wfourcc(pb, "mp41");
2919
2920     if (mov->flags & FF_MOV_FLAG_DASH && mov->flags & FF_MOV_FLAG_FASTSTART)
2921         ffio_wfourcc(pb, "dash");
2922
2923     return update_size(pb, pos);
2924 }
2925
2926 static void mov_write_uuidprof_tag(AVIOContext *pb, AVFormatContext *s)
2927 {
2928     AVStream       *video_st    = s->streams[0];
2929     AVCodecContext *video_codec = s->streams[0]->codec;
2930     AVCodecContext *audio_codec = s->streams[1]->codec;
2931     int audio_rate = audio_codec->sample_rate;
2932     // TODO: should be avg_frame_rate
2933     int frame_rate = ((video_st->time_base.den) * (0x10000)) / (video_st->time_base.num);
2934     int audio_kbitrate = audio_codec->bit_rate / 1000;
2935     int video_kbitrate = FFMIN(video_codec->bit_rate / 1000, 800 - audio_kbitrate);
2936
2937     avio_wb32(pb, 0x94); /* size */
2938     ffio_wfourcc(pb, "uuid");
2939     ffio_wfourcc(pb, "PROF");
2940
2941     avio_wb32(pb, 0x21d24fce); /* 96 bit UUID */
2942     avio_wb32(pb, 0xbb88695c);
2943     avio_wb32(pb, 0xfac9c740);
2944
2945     avio_wb32(pb, 0x0);  /* ? */
2946     avio_wb32(pb, 0x3);  /* 3 sections ? */
2947
2948     avio_wb32(pb, 0x14); /* size */
2949     ffio_wfourcc(pb, "FPRF");
2950     avio_wb32(pb, 0x0);  /* ? */
2951     avio_wb32(pb, 0x0);  /* ? */
2952     avio_wb32(pb, 0x0);  /* ? */
2953
2954     avio_wb32(pb, 0x2c);  /* size */
2955     ffio_wfourcc(pb, "APRF"); /* audio */
2956     avio_wb32(pb, 0x0);
2957     avio_wb32(pb, 0x2);   /* TrackID */
2958     ffio_wfourcc(pb, "mp4a");
2959     avio_wb32(pb, 0x20f);
2960     avio_wb32(pb, 0x0);
2961     avio_wb32(pb, audio_kbitrate);
2962     avio_wb32(pb, audio_kbitrate);
2963     avio_wb32(pb, audio_rate);
2964     avio_wb32(pb, audio_codec->channels);
2965
2966     avio_wb32(pb, 0x34);  /* size */
2967     ffio_wfourcc(pb, "VPRF");   /* video */
2968     avio_wb32(pb, 0x0);
2969     avio_wb32(pb, 0x1);    /* TrackID */
2970     if (video_codec->codec_id == AV_CODEC_ID_H264) {
2971         ffio_wfourcc(pb, "avc1");
2972         avio_wb16(pb, 0x014D);
2973         avio_wb16(pb, 0x0015);
2974     } else {
2975         ffio_wfourcc(pb, "mp4v");
2976         avio_wb16(pb, 0x0000);
2977         avio_wb16(pb, 0x0103);
2978     }
2979     avio_wb32(pb, 0x0);
2980     avio_wb32(pb, video_kbitrate);
2981     avio_wb32(pb, video_kbitrate);
2982     avio_wb32(pb, frame_rate);
2983     avio_wb32(pb, frame_rate);
2984     avio_wb16(pb, video_codec->width);
2985     avio_wb16(pb, video_codec->height);
2986     avio_wb32(pb, 0x010001); /* ? */
2987 }
2988
2989 static int mov_parse_mpeg2_frame(AVPacket *pkt, uint32_t *flags)
2990 {
2991     uint32_t c = -1;
2992     int i, closed_gop = 0;
2993
2994     for (i = 0; i < pkt->size - 4; i++) {
2995         c = (c << 8) + pkt->data[i];
2996         if (c == 0x1b8) { // gop
2997             closed_gop = pkt->data[i + 4] >> 6 & 0x01;
2998         } else if (c == 0x100) { // pic
2999             int temp_ref = (pkt->data[i + 1] << 2) | (pkt->data[i + 2] >> 6);
3000             if (!temp_ref || closed_gop) // I picture is not reordered
3001                 *flags = MOV_SYNC_SAMPLE;
3002             else
3003                 *flags = MOV_PARTIAL_SYNC_SAMPLE;
3004             break;
3005         }
3006     }
3007     return 0;
3008 }
3009
3010 static void mov_parse_vc1_frame(AVPacket *pkt, MOVTrack *trk, int fragment)
3011 {
3012     const uint8_t *start, *next, *end = pkt->data + pkt->size;
3013     int seq = 0, entry = 0;
3014     int key = pkt->flags & AV_PKT_FLAG_KEY;
3015     start = find_next_marker(pkt->data, end);
3016     for (next = start; next < end; start = next) {
3017         next = find_next_marker(start + 4, end);
3018         switch (AV_RB32(start)) {
3019         case VC1_CODE_SEQHDR:
3020             seq = 1;
3021             break;
3022         case VC1_CODE_ENTRYPOINT:
3023             entry = 1;
3024             break;
3025         case VC1_CODE_SLICE:
3026             trk->vc1_info.slices = 1;
3027             break;
3028         }
3029     }
3030     if (!trk->entry && !fragment) {
3031         /* First packet in first fragment */
3032         trk->vc1_info.first_packet_seq   = seq;
3033         trk->vc1_info.first_packet_entry = entry;
3034     } else if ((seq && !trk->vc1_info.packet_seq) ||
3035                (entry && !trk->vc1_info.packet_entry)) {
3036         int i;
3037         for (i = 0; i < trk->entry; i++)
3038             trk->cluster[i].flags &= ~MOV_SYNC_SAMPLE;
3039         trk->has_keyframes = 0;
3040         if (seq)
3041             trk->vc1_info.packet_seq = 1;
3042         if (entry)
3043             trk->vc1_info.packet_entry = 1;
3044         if (!fragment) {
3045             /* First fragment */
3046             if ((!seq   || trk->vc1_info.first_packet_seq) &&
3047                 (!entry || trk->vc1_info.first_packet_entry)) {
3048                 /* First packet had the same headers as this one, readd the
3049                  * sync sample flag. */
3050                 trk->cluster[0].flags |= MOV_SYNC_SAMPLE;
3051                 trk->has_keyframes = 1;
3052             }
3053         }
3054     }
3055     if (trk->vc1_info.packet_seq && trk->vc1_info.packet_entry)
3056         key = seq && entry;
3057     else if (trk->vc1_info.packet_seq)
3058         key = seq;
3059     else if (trk->vc1_info.packet_entry)
3060         key = entry;
3061     if (key) {
3062         trk->cluster[trk->entry].flags |= MOV_SYNC_SAMPLE;
3063         trk->has_keyframes++;
3064     }
3065 }
3066
3067 static int mov_flush_fragment(AVFormatContext *s)
3068 {
3069     MOVMuxContext *mov = s->priv_data;
3070     int i, first_track = -1;
3071     int64_t mdat_size = 0;
3072
3073     if (!(mov->flags & FF_MOV_FLAG_FRAGMENT))
3074         return 0;
3075
3076     if (!(mov->flags & FF_MOV_FLAG_EMPTY_MOOV) && mov->fragments == 0) {
3077         int64_t pos = avio_tell(s->pb);
3078         int ret;
3079         AVIOContext *moov_buf;
3080         uint8_t *buf;
3081         int buf_size;
3082
3083         for (i = 0; i < mov->nb_streams; i++)
3084             if (!mov->tracks[i].entry)
3085                 break;
3086         /* Don't write the initial moov unless all tracks have data */
3087         if (i < mov->nb_streams)
3088             return 0;
3089
3090         if ((ret = ffio_open_null_buf(&moov_buf)) < 0)
3091             return ret;
3092         mov_write_moov_tag(moov_buf, mov, s);
3093         buf_size = ffio_close_null_buf(moov_buf);
3094         for (i = 0; i < mov->nb_streams; i++)
3095             mov->tracks[i].data_offset = pos + buf_size + 8;
3096
3097         mov_write_moov_tag(s->pb, mov, s);
3098
3099         buf_size = avio_close_dyn_buf(mov->mdat_buf, &buf);
3100         mov->mdat_buf = NULL;
3101         avio_wb32(s->pb, buf_size + 8);
3102         ffio_wfourcc(s->pb, "mdat");
3103         avio_write(s->pb, buf, buf_size);
3104         av_free(buf);
3105
3106         mov->fragments++;
3107         mov->mdat_size = 0;
3108         for (i = 0; i < mov->nb_streams; i++) {
3109             if (mov->tracks[i].entry)
3110                 mov->tracks[i].frag_start += mov->tracks[i].start_dts +
3111                                              mov->tracks[i].track_duration -
3112                                              mov->tracks[i].cluster[0].dts;
3113             mov->tracks[i].entry = 0;
3114         }
3115         avio_flush(s->pb);
3116         return 0;
3117     }
3118
3119     for (i = 0; i < mov->nb_streams; i++) {
3120         MOVTrack *track = &mov->tracks[i];
3121         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF)
3122             track->data_offset = 0;
3123         else
3124             track->data_offset = mdat_size;
3125         if (!track->mdat_buf)
3126             continue;
3127         mdat_size += avio_tell(track->mdat_buf);
3128         if (first_track < 0)
3129             first_track = i;
3130     }
3131
3132     if (!mdat_size)
3133         return 0;
3134
3135     for (i = 0; i < mov->nb_streams; i++) {
3136         MOVTrack *track = &mov->tracks[i];
3137         int buf_size, write_moof = 1, moof_tracks = -1;
3138         uint8_t *buf;
3139         int64_t duration = 0;
3140
3141         if (track->entry)
3142             duration = track->start_dts + track->track_duration -
3143                        track->cluster[0].dts;
3144         if (mov->flags & FF_MOV_FLAG_SEPARATE_MOOF) {
3145             if (!track->mdat_buf)
3146                 continue;
3147             mdat_size = avio_tell(track->mdat_buf);
3148             moof_tracks = i;
3149         } else {
3150             write_moof = i == first_track;
3151         }
3152
3153         if (write_moof) {
3154             avio_flush(s->pb);
3155
3156             mov_write_moof_tag(s->pb, mov, moof_tracks, mdat_size);
3157             mov->fragments++;
3158
3159             avio_wb32(s->pb, mdat_size + 8);
3160             ffio_wfourcc(s->pb, "mdat");
3161         }
3162
3163         if (track->entry)
3164             track->frag_start += duration;
3165         track->entry = 0;
3166         if (!track->mdat_buf)
3167             continue;
3168         buf_size = avio_close_dyn_buf(track->mdat_buf, &buf);
3169         track->mdat_buf = NULL;
3170
3171         avio_write(s->pb, buf, buf_size);
3172         av_free(buf);
3173     }
3174
3175     mov->mdat_size = 0;
3176
3177     avio_flush(s->pb);
3178     return 0;
3179 }
3180
3181 int ff_mov_write_packet(AVFormatContext *s, AVPacket *pkt)
3182 {
3183     MOVMuxContext *mov = s->priv_data;
3184     AVIOContext *pb = s->pb;
3185     MOVTrack *trk = &mov->tracks[pkt->stream_index];
3186     AVCodecContext *enc = trk->enc;
3187     unsigned int samples_in_chunk = 0;
3188     int size = pkt->size, ret = 0;
3189     uint8_t *reformatted_data = NULL;
3190
3191     if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
3192         int ret;
3193         if (mov->fragments > 0) {
3194             if (!trk->mdat_buf) {
3195                 if ((ret = avio_open_dyn_buf(&trk->mdat_buf)) < 0)
3196                     return ret;
3197             }
3198             pb = trk->mdat_buf;
3199         } else {
3200             if (!mov->mdat_buf) {
3201                 if ((ret = avio_open_dyn_buf(&mov->mdat_buf)) < 0)
3202                     return ret;
3203             }
3204             pb = mov->mdat_buf;
3205         }
3206     }
3207
3208     if (enc->codec_id == AV_CODEC_ID_AMR_NB) {
3209         /* We must find out how many AMR blocks there are in one packet */
3210         static uint16_t packed_size[16] =
3211             {13, 14, 16, 18, 20, 21, 27, 32, 6, 0, 0, 0, 0, 0, 0, 1};
3212         int len = 0;
3213
3214         while (len < size && samples_in_chunk < 100) {
3215             len += packed_size[(pkt->data[len] >> 3) & 0x0F];
3216             samples_in_chunk++;
3217         }
3218         if (samples_in_chunk > 1) {
3219             av_log(s, AV_LOG_ERROR, "fatal error, input is not a single packet, implement a AVParser for it\n");
3220             return -1;
3221         }
3222     } else if (trk->sample_size)
3223         samples_in_chunk = size / trk->sample_size;
3224     else
3225         samples_in_chunk = 1;
3226
3227     /* copy extradata if it exists */
3228     if (trk->vos_len == 0 && enc->extradata_size > 0) {
3229         trk->vos_len  = enc->extradata_size;
3230         trk->vos_data = av_malloc(trk->vos_len);
3231         memcpy(trk->vos_data, enc->extradata, trk->vos_len);
3232     }
3233
3234     if (enc->codec_id == AV_CODEC_ID_H264 && trk->vos_len > 0 && *(uint8_t *)trk->vos_data != 1) {
3235         /* from x264 or from bytestream h264 */
3236         /* nal reformating needed */
3237         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
3238             ff_avc_parse_nal_units_buf(pkt->data, &reformatted_data,
3239                                        &size);
3240             avio_write(pb, reformatted_data, size);
3241         } else {
3242             size = ff_avc_parse_nal_units(pb, pkt->data, pkt->size);
3243         }
3244     } else if (enc->codec_id == AV_CODEC_ID_HEVC && trk->vos_len > 6 &&
3245                (AV_RB24(trk->vos_data) == 1 || AV_RB32(trk->vos_data) == 1)) {
3246         /* extradata is Annex B, assume the bitstream is too and convert it */
3247         if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams) {
3248             ff_hevc_annexb2mp4_buf(pkt->data, &reformatted_data, &size, 0, NULL);
3249             avio_write(pb, reformatted_data, size);
3250         } else {
3251             size = ff_hevc_annexb2mp4(pb, pkt->data, pkt->size, 0, NULL);
3252         }
3253     } else {
3254         avio_write(pb, pkt->data, size);
3255     }
3256
3257     if ((enc->codec_id == AV_CODEC_ID_DNXHD ||
3258          enc->codec_id == AV_CODEC_ID_AC3) && !trk->vos_len) {
3259         /* copy frame to create needed atoms */
3260         trk->vos_len  = size;
3261         trk->vos_data = av_malloc(size);
3262         if (!trk->vos_data) {
3263             ret = AVERROR(ENOMEM);
3264             goto err;
3265         }
3266         memcpy(trk->vos_data, pkt->data, size);
3267     }
3268
3269     if (trk->entry >= trk->cluster_capacity) {
3270         unsigned new_capacity = 2 * (trk->entry + MOV_INDEX_CLUSTER_SIZE);
3271         if (av_reallocp_array(&trk->cluster, new_capacity,
3272                               sizeof(*trk->cluster))) {
3273             ret = AVERROR(ENOMEM);
3274             goto err;
3275         }
3276         trk->cluster_capacity = new_capacity;
3277     }
3278
3279     trk->cluster[trk->entry].pos              = avio_tell(pb) - size;
3280     trk->cluster[trk->entry].samples_in_chunk = samples_in_chunk;
3281     trk->cluster[trk->entry].size             = size;
3282     trk->cluster[trk->entry].entries          = samples_in_chunk;
3283     trk->cluster[trk->entry].dts              = pkt->dts;
3284     if (!trk->entry && trk->start_dts != AV_NOPTS_VALUE) {
3285         /* First packet of a new fragment. We already wrote the duration
3286          * of the last packet of the previous fragment based on track_duration,
3287          * which might not exactly match our dts. Therefore adjust the dts
3288          * of this packet to be what the previous packets duration implies. */
3289         trk->cluster[trk->entry].dts = trk->start_dts + trk->track_duration;
3290     }
3291     if (!trk->entry && trk->start_dts == AV_NOPTS_VALUE && !mov->use_editlist &&
3292         s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO) {
3293         /* Not using edit lists and shifting the first track to start from zero.
3294          * If the other streams start from a later timestamp, we won't be able
3295          * to signal the difference in starting time without an edit list.
3296          * Thus move the timestamp for this first sample to 0, increasing
3297          * its duration instead. */
3298         trk->cluster[trk->entry].dts = trk->start_dts = 0;
3299     }
3300     if (trk->start_dts == AV_NOPTS_VALUE) {
3301         trk->start_dts = pkt->dts;
3302         if (pkt->dts && mov->flags & FF_MOV_FLAG_EMPTY_MOOV)
3303             av_log(s, AV_LOG_WARNING,
3304                    "Track %d starts with a nonzero dts %"PRId64". This "
3305                    "currently isn't handled correctly in combination with "
3306                    "empty_moov.\n", pkt->stream_index, pkt->dts);
3307     }
3308     trk->track_duration = pkt->dts - trk->start_dts + pkt->duration;
3309
3310     if (pkt->pts == AV_NOPTS_VALUE) {
3311         av_log(s, AV_LOG_WARNING, "pts has no value\n");
3312         pkt->pts = pkt->dts;
3313     }
3314     if (pkt->dts != pkt->pts)
3315         trk->flags |= MOV_TRACK_CTTS;
3316     trk->cluster[trk->entry].cts   = pkt->pts - pkt->dts;
3317     trk->cluster[trk->entry].flags = 0;
3318     if (enc->codec_id == AV_CODEC_ID_VC1) {
3319         mov_parse_vc1_frame(pkt, trk, mov->fragments);
3320     } else if (pkt->flags & AV_PKT_FLAG_KEY) {
3321         if (mov->mode == MODE_MOV && enc->codec_id == AV_CODEC_ID_MPEG2VIDEO &&
3322             trk->entry > 0) { // force sync sample for the first key frame
3323             mov_parse_mpeg2_frame(pkt, &trk->cluster[trk->entry].flags);
3324             if (trk->cluster[trk->entry].flags & MOV_PARTIAL_SYNC_SAMPLE)
3325                 trk->flags |= MOV_TRACK_STPS;
3326         } else {
3327             trk->cluster[trk->entry].flags = MOV_SYNC_SAMPLE;
3328         }
3329         if (trk->cluster[trk->entry].flags & MOV_SYNC_SAMPLE)
3330             trk->has_keyframes++;
3331     }
3332     trk->entry++;
3333     trk->sample_count += samples_in_chunk;
3334     mov->mdat_size    += size;
3335
3336     if (trk->hint_track >= 0 && trk->hint_track < mov->nb_streams)
3337         ff_mov_add_hinted_packet(s, pkt, trk->hint_track, trk->entry,
3338                                  reformatted_data, size);
3339
3340 err:
3341     av_free(reformatted_data);
3342     return ret;
3343 }
3344
3345 static int mov_write_packet(AVFormatContext *s, AVPacket *pkt)
3346 {
3347     if (!pkt) {
3348         mov_flush_fragment(s);
3349         return 1;
3350     } else {
3351         MOVMuxContext *mov = s->priv_data;
3352         MOVTrack *trk = &mov->tracks[pkt->stream_index];
3353         AVCodecContext *enc = trk->enc;
3354         int64_t frag_duration = 0;
3355         int size = pkt->size;
3356
3357         if (!pkt->size)
3358             return 0;             /* Discard 0 sized packets */
3359
3360         if (trk->entry)
3361             frag_duration = av_rescale_q(pkt->dts - trk->cluster[0].dts,
3362                                          s->streams[pkt->stream_index]->time_base,
3363                                          AV_TIME_BASE_Q);
3364         if ((mov->max_fragment_duration &&
3365              frag_duration >= mov->max_fragment_duration) ||
3366              (mov->max_fragment_size && mov->mdat_size + size >= mov->max_fragment_size) ||
3367              (mov->flags & FF_MOV_FLAG_FRAG_KEYFRAME &&
3368               enc->codec_type == AVMEDIA_TYPE_VIDEO &&
3369               trk->entry && pkt->flags & AV_PKT_FLAG_KEY)) {
3370             if (frag_duration >= mov->min_fragment_duration)
3371                 mov_flush_fragment(s);
3372         }
3373
3374         return ff_mov_write_packet(s, pkt);
3375     }
3376 }
3377
3378 // QuickTime chapters involve an additional text track with the chapter names
3379 // as samples, and a tref pointing from the other tracks to the chapter one.
3380 static int mov_create_chapter_track(AVFormatContext *s, int tracknum)
3381 {
3382     MOVMuxContext *mov = s->priv_data;
3383     MOVTrack *track = &mov->tracks[tracknum];
3384     AVPacket pkt = { .stream_index = tracknum, .flags = AV_PKT_FLAG_KEY };
3385     int i, len;
3386     // These properties are required to make QT recognize the chapter track
3387     uint8_t chapter_properties[43] = { 0, 0, 0, 0, 0, 0, 0, 1, };
3388
3389     track->mode = mov->mode;
3390     track->tag = MKTAG('t','e','x','t');
3391     track->timescale = MOV_TIMESCALE;
3392     track->enc = avcodec_alloc_context3(NULL);
3393     if (!track->enc)
3394         return AVERROR(ENOMEM);
3395     track->enc->codec_type = AVMEDIA_TYPE_SUBTITLE;
3396     track->enc->extradata = av_malloc(sizeof(chapter_properties));
3397     if (!track->enc->extradata)
3398         return AVERROR(ENOMEM);
3399     track->enc->extradata_size = sizeof(chapter_properties);
3400     memcpy(track->enc->extradata, chapter_properties, sizeof(chapter_properties));
3401
3402     for (i = 0; i < s->nb_chapters; i++) {
3403         AVChapter *c = s->chapters[i];
3404         AVDictionaryEntry *t;
3405
3406         int64_t end = av_rescale_q(c->end, c->time_base, (AVRational){1,MOV_TIMESCALE});
3407         pkt.pts = pkt.dts = av_rescale_q(c->start, c->time_base, (AVRational){1,MOV_TIMESCALE});
3408         pkt.duration = end - pkt.dts;
3409
3410         if ((t = av_dict_get(c->metadata, "title", NULL, 0))) {
3411             const char encd[12] = {
3412                 0x00, 0x00, 0x00, 0x0C,
3413                 'e',  'n',  'c',  'd',
3414                 0x00, 0x00, 0x01, 0x00 };
3415             len      = strlen(t->value);
3416             pkt.size = len + 2 + 12;
3417             pkt.data = av_malloc(pkt.size);
3418             if (!pkt.data)
3419                 return AVERROR(ENOMEM);
3420             AV_WB16(pkt.data, len);
3421             memcpy(pkt.data + 2, t->value, len);
3422             memcpy(pkt.data + len + 2, encd, sizeof(encd));
3423             ff_mov_write_packet(s, &pkt);
3424             av_freep(&pkt.data);
3425         }
3426     }
3427
3428     return 0;
3429 }
3430
3431 /*
3432  * st->disposition controls the "enabled" flag in the tkhd tag.
3433  * QuickTime will not play a track if it is not enabled.  So make sure
3434  * that one track of each type (audio, video, subtitle) is enabled.
3435  *
3436  * Subtitles are special.  For audio and video, setting "enabled" also
3437  * makes the track "default" (i.e. it is rendered when played). For
3438  * subtitles, an "enabled" subtitle is not rendered by default, but
3439  * if no subtitle is enabled, the subtitle menu in QuickTime will be
3440  * empty!
3441  */
3442 static void enable_tracks(AVFormatContext *s)
3443 {
3444     MOVMuxContext *mov = s->priv_data;
3445     int i;
3446     int enabled[AVMEDIA_TYPE_NB];
3447     int first[AVMEDIA_TYPE_NB];
3448
3449     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
3450         enabled[i] = 0;
3451         first[i] = -1;
3452     }
3453
3454     for (i = 0; i < s->nb_streams; i++) {
3455         AVStream *st = s->streams[i];
3456
3457         if (st->codec->codec_type <= AVMEDIA_TYPE_UNKNOWN ||
3458             st->codec->codec_type >= AVMEDIA_TYPE_NB)
3459             continue;
3460
3461         if (first[st->codec->codec_type] < 0)
3462             first[st->codec->codec_type] = i;
3463         if (st->disposition & AV_DISPOSITION_DEFAULT) {
3464             mov->tracks[i].flags |= MOV_TRACK_ENABLED;
3465             enabled[st->codec->codec_type]++;
3466         }
3467     }
3468
3469     for (i = 0; i < AVMEDIA_TYPE_NB; i++) {
3470         switch (i) {
3471         case AVMEDIA_TYPE_VIDEO:
3472         case AVMEDIA_TYPE_AUDIO:
3473         case AVMEDIA_TYPE_SUBTITLE:
3474             if (enabled[i] > 1)
3475                 mov->per_stream_grouping = 1;
3476             if (!enabled[i] && first[i] >= 0)
3477                 mov->tracks[first[i]].flags |= MOV_TRACK_ENABLED;
3478             break;
3479         }
3480     }
3481 }
3482
3483 static void mov_free(AVFormatContext *s)
3484 {
3485     MOVMuxContext *mov = s->priv_data;
3486     int i;
3487
3488     if (mov->chapter_track) {
3489         if (mov->tracks[mov->chapter_track].enc)
3490             av_free(mov->tracks[mov->chapter_track].enc->extradata);
3491         av_freep(&mov->tracks[mov->chapter_track].enc);
3492     }
3493
3494     for (i = 0; i < mov->nb_streams; i++) {
3495         if (mov->tracks[i].tag == MKTAG('r','t','p',' '))
3496             ff_mov_close_hinting(&mov->tracks[i]);
3497         av_freep(&mov->tracks[i].cluster);
3498         av_freep(&mov->tracks[i].frag_info);
3499
3500         if (mov->tracks[i].vos_len)
3501             av_free(mov->tracks[i].vos_data);
3502     }
3503
3504     av_freep(&mov->tracks);
3505 }
3506
3507 static uint32_t rgb_to_yuv(uint32_t rgb)
3508 {
3509     uint8_t r, g, b;
3510     int y, cb, cr;
3511
3512     r = (rgb >> 16) & 0xFF;
3513     g = (rgb >>  8) & 0xFF;
3514     b = (rgb      ) & 0xFF;
3515
3516     y  = av_clip_uint8( 16. +  0.257 * r + 0.504 * g + 0.098 * b);
3517     cb = av_clip_uint8(128. -  0.148 * r - 0.291 * g + 0.439 * b);
3518     cr = av_clip_uint8(128. +  0.439 * r - 0.368 * g - 0.071 * b);
3519
3520     return (y << 16) | (cr << 8) | cb;
3521 }
3522
3523 static int mov_create_dvd_sub_decoder_specific_info(MOVTrack *track,
3524                                                     AVStream *st)
3525 {
3526     int i, width = 720, height = 480;
3527     int have_palette = 0, have_size = 0;
3528     uint32_t palette[16];
3529     char *cur = st->codec->extradata;
3530
3531     while (cur && *cur) {
3532         if (strncmp("palette:", cur, 8) == 0) {
3533             int i, count;
3534             count = sscanf(cur + 8,
3535                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3536                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3537                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32", "
3538                 "%06"PRIx32", %06"PRIx32", %06"PRIx32", %06"PRIx32"",
3539                 &palette[ 0], &palette[ 1], &palette[ 2], &palette[ 3],
3540                 &palette[ 4], &palette[ 5], &palette[ 6], &palette[ 7],
3541                 &palette[ 8], &palette[ 9], &palette[10], &palette[11],
3542                 &palette[12], &palette[13], &palette[14], &palette[15]);
3543
3544             for (i = 0; i < count; i++) {
3545                 palette[i] = rgb_to_yuv(palette[i]);
3546             }
3547             have_palette = 1;
3548         } else if (!strncmp("size:", cur, 5)) {
3549             sscanf(cur + 5, "%dx%d", &width, &height);
3550             have_size = 1;
3551         }
3552         if (have_palette && have_size)
3553             break;
3554         cur += strcspn(cur, "\n\r");
3555         cur += strspn(cur, "\n\r");
3556     }
3557     if (have_palette) {
3558         track->vos_data = av_malloc(16*4);
3559         if (!track->vos_data)
3560             return AVERROR(ENOMEM);
3561         for (i = 0; i < 16; i++) {
3562             AV_WB32(track->vos_data + i * 4, palette[i]);
3563         }
3564         track->vos_len = 16 * 4;
3565     }
3566     st->codec->width = width;
3567     st->codec->height = track->height = height;
3568
3569     return 0;
3570 }
3571
3572 static int mov_write_header(AVFormatContext *s)
3573 {
3574     AVIOContext *pb = s->pb;
3575     MOVMuxContext *mov = s->priv_data;
3576     AVDictionaryEntry *t;
3577     int i, hint_track = 0;
3578
3579     mov->fc = s;
3580
3581     /* Default mode == MP4 */
3582     mov->mode = MODE_MP4;
3583
3584     if (s->oformat) {
3585         if (!strcmp("3gp", s->oformat->name)) mov->mode = MODE_3GP;
3586         else if (!strcmp("3g2", s->oformat->name)) mov->mode = MODE_3GP|MODE_3G2;
3587         else if (!strcmp("mov", s->oformat->name)) mov->mode = MODE_MOV;
3588         else if (!strcmp("psp", s->oformat->name)) mov->mode = MODE_PSP;
3589         else if (!strcmp("ipod",s->oformat->name)) mov->mode = MODE_IPOD;
3590         else if (!strcmp("ismv",s->oformat->name)) mov->mode = MODE_ISM;
3591         else if (!strcmp("f4v", s->oformat->name)) mov->mode = MODE_F4V;
3592     }
3593
3594     /* Set the FRAGMENT flag if any of the fragmentation methods are
3595      * enabled. */
3596     if (mov->max_fragment_duration || mov->max_fragment_size ||
3597         mov->flags & (FF_MOV_FLAG_EMPTY_MOOV |
3598                       FF_MOV_FLAG_FRAG_KEYFRAME |
3599                       FF_MOV_FLAG_FRAG_CUSTOM))
3600         mov->flags |= FF_MOV_FLAG_FRAGMENT;
3601
3602     /* Set other implicit flags immediately */
3603     if (mov->mode == MODE_ISM)
3604         mov->flags |= FF_MOV_FLAG_EMPTY_MOOV | FF_MOV_FLAG_SEPARATE_MOOF |
3605                       FF_MOV_FLAG_FRAGMENT;
3606     if (mov->flags & FF_MOV_FLAG_DASH)
3607         mov->flags |= FF_MOV_FLAG_FRAGMENT | FF_MOV_FLAG_EMPTY_MOOV |
3608                       FF_MOV_FLAG_DEFAULT_BASE_MOOF;
3609
3610     if (mov->use_editlist < 0) {
3611         mov->use_editlist = 1;
3612         if (mov->flags & FF_MOV_FLAG_FRAGMENT) {
3613             // If we can avoid needing an edit list by shifting the
3614             // tracks, prefer that over (trying to) write edit lists
3615             // in fragmented output.
3616             if (s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO ||
3617                 s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_MAKE_ZERO)
3618                 mov->use_editlist = 0;
3619         }
3620     }
3621     if (mov->flags & FF_MOV_FLAG_EMPTY_MOOV && mov->use_editlist)
3622         av_log(s, AV_LOG_WARNING, "No meaningful edit list will be written when using empty_moov\n");
3623
3624     if (!mov->use_editlist && s->avoid_negative_ts == AVFMT_AVOID_NEG_TS_AUTO)
3625         s->avoid_negative_ts = AVFMT_AVOID_NEG_TS_MAKE_ZERO;
3626
3627     /* Non-seekable output is ok if using fragmentation. If ism_lookahead
3628      * is enabled, we don't support non-seekable output at all. */
3629     if (!s->pb->seekable &&
3630         (!(mov->flags & FF_MOV_FLAG_FRAGMENT) || mov->ism_lookahead)) {
3631         av_log(s, AV_LOG_ERROR, "muxer does not support non seekable output\n");
3632         return AVERROR(EINVAL);
3633     }
3634
3635
3636     mov_write_ftyp_tag(pb,s);
3637     if (mov->mode == MODE_PSP) {
3638         if (s->nb_streams != 2) {
3639             av_log(s, AV_LOG_ERROR, "PSP mode need one video and one audio stream\n");
3640             return AVERROR(EINVAL);
3641         }
3642         mov_write_uuidprof_tag(pb, s);
3643     }
3644
3645     mov->nb_streams = s->nb_streams;
3646     if (mov->mode & (MODE_MP4|MODE_MOV|MODE_IPOD) && s->nb_chapters)
3647         mov->chapter_track = mov->nb_streams++;
3648
3649     if (mov->flags & FF_MOV_FLAG_RTP_HINT) {
3650         /* Add hint tracks for each audio and video stream */
3651         hint_track = mov->nb_streams;
3652         for (i = 0; i < s->nb_streams; i++) {
3653             AVStream *st = s->streams[i];
3654             if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO ||
3655                 st->codec->codec_type == AVMEDIA_TYPE_AUDIO) {
3656                 mov->nb_streams++;
3657             }
3658         }
3659     }
3660
3661     // Reserve an extra stream for chapters for the case where chapters
3662     // are written in the trailer
3663     mov->tracks = av_mallocz((mov->nb_streams + 1) * sizeof(*mov->tracks));
3664     if (!mov->tracks)
3665         return AVERROR(ENOMEM);
3666
3667     for (i = 0; i < s->nb_streams; i++) {
3668         AVStream *st= s->streams[i];
3669         MOVTrack *track= &mov->tracks[i];
3670         AVDictionaryEntry *lang = av_dict_get(st->metadata, "language", NULL,0);
3671
3672         track->st  = st;
3673         track->enc = st->codec;
3674         track->language = ff_mov_iso639_to_lang(lang?lang->value:"und", mov->mode!=MODE_MOV);
3675         if (track->language < 0)
3676             track->language = 0;
3677         track->mode = mov->mode;
3678         track->tag  = mov_find_codec_tag(s, track);
3679         if (!track->tag) {
3680             av_log(s, AV_LOG_ERROR, "track %d: could not find tag, "
3681                    "codec not currently supported in container\n", i);
3682             goto error;
3683         }
3684         /* If hinting of this track is enabled by a later hint track,
3685          * this is updated. */
3686         track->hint_track = -1;
3687         track->start_dts  = AV_NOPTS_VALUE;
3688         if (st->codec->codec_type == AVMEDIA_TYPE_VIDEO) {
3689             if (track->tag == MKTAG('m','x','3','p') || track->tag == MKTAG('m','x','3','n') ||
3690                 track->tag == MKTAG('m','x','4','p') || track->tag == MKTAG('m','x','4','n') ||
3691                 track->tag == MKTAG('m','x','5','p') || track->tag == MKTAG('m','x','5','n')) {
3692                 if (st->codec->width != 720 || (st->codec->height != 608 && st->codec->height != 512)) {
3693                     av_log(s, AV_LOG_ERROR, "D-10/IMX must use 720x608 or 720x512 video resolution\n");
3694                     goto error;
3695                 }
3696                 track->height = track->tag >> 24 == 'n' ? 486 : 576;
3697             }
3698             track->timescale = st->time_base.den;
3699             if (track->mode == MODE_MOV && track->timescale > 100000)
3700                 av_log(s, AV_LOG_WARNING,
3701                        "WARNING codec timebase is very high. If duration is too long,\n"
3702                        "file may not be playable by quicktime. Specify a shorter timebase\n"
3703                        "or choose different container.\n");
3704         } else if (st->codec->codec_type == AVMEDIA_TYPE_AUDIO) {
3705             track->timescale = st->codec->sample_rate;
3706             /* set sample_size for PCM and ADPCM */
3707             if (av_get_bits_per_sample(st->codec->codec_id) ||
3708                 st->codec->codec_id == AV_CODEC_ID_ILBC) {
3709                 if (!st->codec->block_align) {
3710                     av_log(s, AV_LOG_ERROR, "track %d: codec block align is not set\n", i);
3711                     goto error;
3712                 }
3713                 track->sample_size = st->codec->block_align;
3714             }
3715             /* set audio_vbr for compressed audio */
3716             if (av_get_bits_per_sample(st->codec->codec_id) < 8) {
3717                 track->audio_vbr = 1;
3718             }
3719             if (track->mode != MODE_MOV &&
3720                 track->enc->codec_id == AV_CODEC_ID_MP3 && track->timescale < 16000) {
3721                 av_log(s, AV_LOG_ERROR, "track %d: muxing mp3 at %dhz is not supported\n",
3722                        i, track->enc->sample_rate);
3723                 goto error;
3724             }
3725         } else if (st->codec->codec_type == AVMEDIA_TYPE_SUBTITLE) {
3726             track->timescale = st->time_base.den;
3727         } else if (st->codec->codec_type == AVMEDIA_TYPE_DATA) {
3728             track->timescale = st->time_base.den;
3729         }
3730         if (!track->height)
3731             track->height = st->codec->height;
3732         /* The ism specific timescale isn't mandatory, but is assumed by
3733          * some tools, such as mp4split. */
3734         if (mov->mode == MODE_ISM)
3735             track->timescale = 10000000;