In mpegts muxer, search for h264 aud nal, it might not be the first nal.
[ffmpeg.git] / libavformat / mpegtsenc.c
1 /*
2  * MPEG2 transport stream (aka DVB) muxer
3  * Copyright (c) 2003 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "libavutil/bswap.h"
23 #include "libavutil/crc.h"
24 #include "libavcodec/mpegvideo.h"
25 #include "avformat.h"
26 #include "mpegts.h"
27
28 /* write DVB SI sections */
29
30 /*********************************************/
31 /* mpegts section writer */
32
33 typedef struct MpegTSSection {
34     int pid;
35     int cc;
36     void (*write_packet)(struct MpegTSSection *s, const uint8_t *packet);
37     void *opaque;
38 } MpegTSSection;
39
40 typedef struct MpegTSService {
41     MpegTSSection pmt; /* MPEG2 pmt table context */
42     int sid;           /* service ID */
43     char *name;
44     char *provider_name;
45     int pcr_pid;
46     int pcr_packet_count;
47     int pcr_packet_period;
48 } MpegTSService;
49
50 typedef struct MpegTSWrite {
51     MpegTSSection pat; /* MPEG2 pat table */
52     MpegTSSection sdt; /* MPEG2 sdt table context */
53     MpegTSService **services;
54     int sdt_packet_count;
55     int sdt_packet_period;
56     int pat_packet_count;
57     int pat_packet_period;
58     int nb_services;
59     int onid;
60     int tsid;
61     uint64_t cur_pcr;
62     int mux_rate; ///< set to 1 when VBR
63 } MpegTSWrite;
64
65 /* NOTE: 4 bytes must be left at the end for the crc32 */
66 static void mpegts_write_section(MpegTSSection *s, uint8_t *buf, int len)
67 {
68     MpegTSWrite *ts = ((AVFormatContext*)s->opaque)->priv_data;
69     unsigned int crc;
70     unsigned char packet[TS_PACKET_SIZE];
71     const unsigned char *buf_ptr;
72     unsigned char *q;
73     int first, b, len1, left;
74
75     crc = bswap_32(av_crc(av_crc_get_table(AV_CRC_32_IEEE), -1, buf, len - 4));
76     buf[len - 4] = (crc >> 24) & 0xff;
77     buf[len - 3] = (crc >> 16) & 0xff;
78     buf[len - 2] = (crc >> 8) & 0xff;
79     buf[len - 1] = (crc) & 0xff;
80
81     /* send each packet */
82     buf_ptr = buf;
83     while (len > 0) {
84         first = (buf == buf_ptr);
85         q = packet;
86         *q++ = 0x47;
87         b = (s->pid >> 8);
88         if (first)
89             b |= 0x40;
90         *q++ = b;
91         *q++ = s->pid;
92         s->cc = (s->cc + 1) & 0xf;
93         *q++ = 0x10 | s->cc;
94         if (first)
95             *q++ = 0; /* 0 offset */
96         len1 = TS_PACKET_SIZE - (q - packet);
97         if (len1 > len)
98             len1 = len;
99         memcpy(q, buf_ptr, len1);
100         q += len1;
101         /* add known padding data */
102         left = TS_PACKET_SIZE - (q - packet);
103         if (left > 0)
104             memset(q, 0xff, left);
105
106         s->write_packet(s, packet);
107
108         buf_ptr += len1;
109         len -= len1;
110
111         ts->cur_pcr += TS_PACKET_SIZE*8*90000LL/ts->mux_rate;
112     }
113 }
114
115 static inline void put16(uint8_t **q_ptr, int val)
116 {
117     uint8_t *q;
118     q = *q_ptr;
119     *q++ = val >> 8;
120     *q++ = val;
121     *q_ptr = q;
122 }
123
124 static int mpegts_write_section1(MpegTSSection *s, int tid, int id,
125                           int version, int sec_num, int last_sec_num,
126                           uint8_t *buf, int len)
127 {
128     uint8_t section[1024], *q;
129     unsigned int tot_len;
130
131     tot_len = 3 + 5 + len + 4;
132     /* check if not too big */
133     if (tot_len > 1024)
134         return -1;
135
136     q = section;
137     *q++ = tid;
138     put16(&q, 0xb000 | (len + 5 + 4)); /* 5 byte header + 4 byte CRC */
139     put16(&q, id);
140     *q++ = 0xc1 | (version << 1); /* current_next_indicator = 1 */
141     *q++ = sec_num;
142     *q++ = last_sec_num;
143     memcpy(q, buf, len);
144
145     mpegts_write_section(s, section, tot_len);
146     return 0;
147 }
148
149 /*********************************************/
150 /* mpegts writer */
151
152 #define DEFAULT_PMT_START_PID   0x1000
153 #define DEFAULT_START_PID       0x0100
154 #define DEFAULT_PROVIDER_NAME   "FFmpeg"
155 #define DEFAULT_SERVICE_NAME    "Service01"
156
157 /* default network id, transport stream and service identifiers */
158 #define DEFAULT_ONID            0x0001
159 #define DEFAULT_TSID            0x0001
160 #define DEFAULT_SID             0x0001
161
162 /* a PES packet header is generated every DEFAULT_PES_HEADER_FREQ packets */
163 #define DEFAULT_PES_HEADER_FREQ 16
164 #define DEFAULT_PES_PAYLOAD_SIZE ((DEFAULT_PES_HEADER_FREQ - 1) * 184 + 170)
165
166 /* we retransmit the SI info at this rate */
167 #define SDT_RETRANS_TIME 500
168 #define PAT_RETRANS_TIME 100
169 #define PCR_RETRANS_TIME 20
170
171 typedef struct MpegTSWriteStream {
172     struct MpegTSService *service;
173     int pid; /* stream associated pid */
174     int cc;
175     int payload_index;
176     int first_pts_check; ///< first pts check needed
177     int64_t payload_pts;
178     int64_t payload_dts;
179     uint8_t payload[DEFAULT_PES_PAYLOAD_SIZE];
180 } MpegTSWriteStream;
181
182 static void mpegts_write_pat(AVFormatContext *s)
183 {
184     MpegTSWrite *ts = s->priv_data;
185     MpegTSService *service;
186     uint8_t data[1012], *q;
187     int i;
188
189     q = data;
190     for(i = 0; i < ts->nb_services; i++) {
191         service = ts->services[i];
192         put16(&q, service->sid);
193         put16(&q, 0xe000 | service->pmt.pid);
194     }
195     mpegts_write_section1(&ts->pat, PAT_TID, ts->tsid, 0, 0, 0,
196                           data, q - data);
197 }
198
199 static void mpegts_write_pmt(AVFormatContext *s, MpegTSService *service)
200 {
201     //    MpegTSWrite *ts = s->priv_data;
202     uint8_t data[1012], *q, *desc_length_ptr, *program_info_length_ptr;
203     int val, stream_type, i;
204
205     q = data;
206     put16(&q, 0xe000 | service->pcr_pid);
207
208     program_info_length_ptr = q;
209     q += 2; /* patched after */
210
211     /* put program info here */
212
213     val = 0xf000 | (q - program_info_length_ptr - 2);
214     program_info_length_ptr[0] = val >> 8;
215     program_info_length_ptr[1] = val;
216
217     for(i = 0; i < s->nb_streams; i++) {
218         AVStream *st = s->streams[i];
219         MpegTSWriteStream *ts_st = st->priv_data;
220         AVMetadataTag *lang = av_metadata_get(st->metadata, "language", NULL,0);
221         switch(st->codec->codec_id) {
222         case CODEC_ID_MPEG1VIDEO:
223         case CODEC_ID_MPEG2VIDEO:
224             stream_type = STREAM_TYPE_VIDEO_MPEG2;
225             break;
226         case CODEC_ID_MPEG4:
227             stream_type = STREAM_TYPE_VIDEO_MPEG4;
228             break;
229         case CODEC_ID_H264:
230             stream_type = STREAM_TYPE_VIDEO_H264;
231             break;
232         case CODEC_ID_DIRAC:
233             stream_type = STREAM_TYPE_VIDEO_DIRAC;
234             break;
235         case CODEC_ID_MP2:
236         case CODEC_ID_MP3:
237             stream_type = STREAM_TYPE_AUDIO_MPEG1;
238             break;
239         case CODEC_ID_AAC:
240             stream_type = STREAM_TYPE_AUDIO_AAC;
241             break;
242         case CODEC_ID_AC3:
243             stream_type = STREAM_TYPE_AUDIO_AC3;
244             break;
245         default:
246             stream_type = STREAM_TYPE_PRIVATE_DATA;
247             break;
248         }
249         *q++ = stream_type;
250         put16(&q, 0xe000 | ts_st->pid);
251         desc_length_ptr = q;
252         q += 2; /* patched after */
253
254         /* write optional descriptors here */
255         switch(st->codec->codec_type) {
256         case CODEC_TYPE_AUDIO:
257             if (lang && strlen(lang->value) == 3) {
258                 *q++ = 0x0a; /* ISO 639 language descriptor */
259                 *q++ = 4;
260                 *q++ = lang->value[0];
261                 *q++ = lang->value[1];
262                 *q++ = lang->value[2];
263                 *q++ = 0; /* undefined type */
264             }
265             break;
266         case CODEC_TYPE_SUBTITLE:
267             {
268                 const char *language;
269                 language = lang && strlen(lang->value)==3 ? lang->value : "eng";
270                 *q++ = 0x59;
271                 *q++ = 8;
272                 *q++ = language[0];
273                 *q++ = language[1];
274                 *q++ = language[2];
275                 *q++ = 0x10; /* normal subtitles (0x20 = if hearing pb) */
276                 put16(&q, 1); /* page id */
277                 put16(&q, 1); /* ancillary page id */
278             }
279             break;
280         case CODEC_TYPE_VIDEO:
281             if (stream_type == STREAM_TYPE_VIDEO_DIRAC) {
282                 *q++ = 0x05; /*MPEG-2 registration descriptor*/
283                 *q++ = 4;
284                 *q++ = 'd';
285                 *q++ = 'r';
286                 *q++ = 'a';
287                 *q++ = 'c';
288             }
289             break;
290         }
291
292         val = 0xf000 | (q - desc_length_ptr - 2);
293         desc_length_ptr[0] = val >> 8;
294         desc_length_ptr[1] = val;
295     }
296     mpegts_write_section1(&service->pmt, PMT_TID, service->sid, 0, 0, 0,
297                           data, q - data);
298 }
299
300 /* NOTE: str == NULL is accepted for an empty string */
301 static void putstr8(uint8_t **q_ptr, const char *str)
302 {
303     uint8_t *q;
304     int len;
305
306     q = *q_ptr;
307     if (!str)
308         len = 0;
309     else
310         len = strlen(str);
311     *q++ = len;
312     memcpy(q, str, len);
313     q += len;
314     *q_ptr = q;
315 }
316
317 static void mpegts_write_sdt(AVFormatContext *s)
318 {
319     MpegTSWrite *ts = s->priv_data;
320     MpegTSService *service;
321     uint8_t data[1012], *q, *desc_list_len_ptr, *desc_len_ptr;
322     int i, running_status, free_ca_mode, val;
323
324     q = data;
325     put16(&q, ts->onid);
326     *q++ = 0xff;
327     for(i = 0; i < ts->nb_services; i++) {
328         service = ts->services[i];
329         put16(&q, service->sid);
330         *q++ = 0xfc | 0x00; /* currently no EIT info */
331         desc_list_len_ptr = q;
332         q += 2;
333         running_status = 4; /* running */
334         free_ca_mode = 0;
335
336         /* write only one descriptor for the service name and provider */
337         *q++ = 0x48;
338         desc_len_ptr = q;
339         q++;
340         *q++ = 0x01; /* digital television service */
341         putstr8(&q, service->provider_name);
342         putstr8(&q, service->name);
343         desc_len_ptr[0] = q - desc_len_ptr - 1;
344
345         /* fill descriptor length */
346         val = (running_status << 13) | (free_ca_mode << 12) |
347             (q - desc_list_len_ptr - 2);
348         desc_list_len_ptr[0] = val >> 8;
349         desc_list_len_ptr[1] = val;
350     }
351     mpegts_write_section1(&ts->sdt, SDT_TID, ts->tsid, 0, 0, 0,
352                           data, q - data);
353 }
354
355 static MpegTSService *mpegts_add_service(MpegTSWrite *ts,
356                                          int sid,
357                                          const char *provider_name,
358                                          const char *name)
359 {
360     MpegTSService *service;
361
362     service = av_mallocz(sizeof(MpegTSService));
363     if (!service)
364         return NULL;
365     service->pmt.pid = DEFAULT_PMT_START_PID + ts->nb_services - 1;
366     service->sid = sid;
367     service->provider_name = av_strdup(provider_name);
368     service->name = av_strdup(name);
369     service->pcr_pid = 0x1fff;
370     dynarray_add(&ts->services, &ts->nb_services, service);
371     return service;
372 }
373
374 static void section_write_packet(MpegTSSection *s, const uint8_t *packet)
375 {
376     AVFormatContext *ctx = s->opaque;
377     put_buffer(ctx->pb, packet, TS_PACKET_SIZE);
378 }
379
380 static int mpegts_write_header(AVFormatContext *s)
381 {
382     MpegTSWrite *ts = s->priv_data;
383     MpegTSWriteStream *ts_st;
384     MpegTSService *service;
385     AVStream *st, *pcr_st = NULL;
386     AVMetadataTag *title;
387     int i;
388     const char *service_name;
389
390     ts->tsid = DEFAULT_TSID;
391     ts->onid = DEFAULT_ONID;
392     /* allocate a single DVB service */
393     title = av_metadata_get(s->metadata, "title", NULL, 0);
394     service_name = title ? title->value : DEFAULT_SERVICE_NAME;
395     service = mpegts_add_service(ts, DEFAULT_SID,
396                                  DEFAULT_PROVIDER_NAME, service_name);
397     service->pmt.write_packet = section_write_packet;
398     service->pmt.opaque = s;
399     service->pmt.cc = 15;
400
401     ts->pat.pid = PAT_PID;
402     ts->pat.cc = 15; // Initialize at 15 so that it wraps and be equal to 0 for the first packet we write
403     ts->pat.write_packet = section_write_packet;
404     ts->pat.opaque = s;
405
406     ts->sdt.pid = SDT_PID;
407     ts->sdt.cc = 15;
408     ts->sdt.write_packet = section_write_packet;
409     ts->sdt.opaque = s;
410
411     /* assign pids to each stream */
412     for(i = 0;i < s->nb_streams; i++) {
413         st = s->streams[i];
414         ts_st = av_mallocz(sizeof(MpegTSWriteStream));
415         if (!ts_st)
416             goto fail;
417         st->priv_data = ts_st;
418         ts_st->service = service;
419         ts_st->pid = DEFAULT_START_PID + i;
420         ts_st->payload_pts = AV_NOPTS_VALUE;
421         ts_st->payload_dts = AV_NOPTS_VALUE;
422         ts_st->first_pts_check = 1;
423         ts_st->cc = 15;
424         /* update PCR pid by using the first video stream */
425         if (st->codec->codec_type == CODEC_TYPE_VIDEO &&
426             service->pcr_pid == 0x1fff) {
427             service->pcr_pid = ts_st->pid;
428             pcr_st = st;
429         }
430     }
431
432     /* if no video stream, use the first stream as PCR */
433     if (service->pcr_pid == 0x1fff && s->nb_streams > 0) {
434         pcr_st = s->streams[0];
435         ts_st = pcr_st->priv_data;
436         service->pcr_pid = ts_st->pid;
437     }
438
439     ts->mux_rate = s->mux_rate ? s->mux_rate : 1;
440
441     if (ts->mux_rate > 1) {
442     service->pcr_packet_period = (ts->mux_rate * PCR_RETRANS_TIME) /
443         (TS_PACKET_SIZE * 8 * 1000);
444     ts->sdt_packet_period      = (ts->mux_rate * SDT_RETRANS_TIME) /
445         (TS_PACKET_SIZE * 8 * 1000);
446     ts->pat_packet_period      = (ts->mux_rate * PAT_RETRANS_TIME) /
447         (TS_PACKET_SIZE * 8 * 1000);
448
449     ts->cur_pcr = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
450     } else {
451         /* Arbitrary values, PAT/PMT could be written on key frames */
452         ts->sdt_packet_period = 200;
453         ts->pat_packet_period = 40;
454         if (pcr_st->codec->codec_type == CODEC_TYPE_AUDIO) {
455             if (!pcr_st->codec->frame_size) {
456                 av_log(s, AV_LOG_WARNING, "frame size not set\n");
457                 service->pcr_packet_period =
458                     pcr_st->codec->sample_rate/(10*512);
459             } else {
460                 service->pcr_packet_period =
461                     pcr_st->codec->sample_rate/(10*pcr_st->codec->frame_size);
462             }
463         } else {
464             // max delta PCR 0.1s
465             service->pcr_packet_period =
466                 pcr_st->codec->time_base.den/(10*pcr_st->codec->time_base.num);
467         }
468     }
469
470     // output a PCR as soon as possible
471     service->pcr_packet_count = service->pcr_packet_period;
472     ts->pat_packet_count = ts->pat_packet_period-1;
473     ts->sdt_packet_count = ts->sdt_packet_period-1;
474
475     av_log(s, AV_LOG_INFO,
476            "muxrate %d bps, pcr every %d pkts, "
477            "sdt every %d, pat/pmt every %d pkts\n",
478            ts->mux_rate, service->pcr_packet_period,
479            ts->sdt_packet_period, ts->pat_packet_period);
480
481
482     put_flush_packet(s->pb);
483
484     return 0;
485
486  fail:
487     for(i = 0;i < s->nb_streams; i++) {
488         st = s->streams[i];
489         av_free(st->priv_data);
490     }
491     return -1;
492 }
493
494 /* send SDT, PAT and PMT tables regulary */
495 static void retransmit_si_info(AVFormatContext *s)
496 {
497     MpegTSWrite *ts = s->priv_data;
498     int i;
499
500     if (++ts->sdt_packet_count == ts->sdt_packet_period) {
501         ts->sdt_packet_count = 0;
502         mpegts_write_sdt(s);
503     }
504     if (++ts->pat_packet_count == ts->pat_packet_period) {
505         ts->pat_packet_count = 0;
506         mpegts_write_pat(s);
507         for(i = 0; i < ts->nb_services; i++) {
508             mpegts_write_pmt(s, ts->services[i]);
509         }
510     }
511 }
512
513 /* Write a single null transport stream packet */
514 static void mpegts_insert_null_packet(AVFormatContext *s)
515 {
516     MpegTSWrite *ts = s->priv_data;
517     uint8_t *q;
518     uint8_t buf[TS_PACKET_SIZE];
519
520     q = buf;
521     *q++ = 0x47;
522     *q++ = 0x00 | 0x1f;
523     *q++ = 0xff;
524     *q++ = 0x10;
525     memset(q, 0x0FF, TS_PACKET_SIZE - (q - buf));
526     put_buffer(s->pb, buf, TS_PACKET_SIZE);
527     ts->cur_pcr += TS_PACKET_SIZE*8*90000LL/ts->mux_rate;
528 }
529
530 /* Write a single transport stream packet with a PCR and no payload */
531 static void mpegts_insert_pcr_only(AVFormatContext *s, AVStream *st)
532 {
533     MpegTSWrite *ts = s->priv_data;
534     MpegTSWriteStream *ts_st = st->priv_data;
535     uint8_t *q;
536     uint64_t pcr = ts->cur_pcr;
537     uint8_t buf[TS_PACKET_SIZE];
538
539     q = buf;
540     *q++ = 0x47;
541     *q++ = ts_st->pid >> 8;
542     *q++ = ts_st->pid;
543     *q++ = 0x20 | ts_st->cc;   /* Adaptation only */
544     /* Continuity Count field does not increment (see 13818-1 section 2.4.3.3) */
545     *q++ = TS_PACKET_SIZE - 5; /* Adaptation Field Length */
546     *q++ = 0x10;               /* Adaptation flags: PCR present */
547
548     /* PCR coded into 6 bytes */
549     *q++ = pcr >> 25;
550     *q++ = pcr >> 17;
551     *q++ = pcr >> 9;
552     *q++ = pcr >> 1;
553     *q++ = (pcr & 1) << 7;
554     *q++ = 0;
555
556     /* stuffing bytes */
557     memset(q, 0xFF, TS_PACKET_SIZE - (q - buf));
558     put_buffer(s->pb, buf, TS_PACKET_SIZE);
559     ts->cur_pcr += TS_PACKET_SIZE*8*90000LL/ts->mux_rate;
560 }
561
562 static void write_pts(uint8_t *q, int fourbits, int64_t pts)
563 {
564     int val;
565
566     val = fourbits << 4 | (((pts >> 30) & 0x07) << 1) | 1;
567     *q++ = val;
568     val = (((pts >> 15) & 0x7fff) << 1) | 1;
569     *q++ = val >> 8;
570     *q++ = val;
571     val = (((pts) & 0x7fff) << 1) | 1;
572     *q++ = val >> 8;
573     *q++ = val;
574 }
575
576 /* Add a pes header to the front of payload, and segment into an integer number of
577  * ts packets. The final ts packet is padded using an over-sized adaptation header
578  * to exactly fill the last ts packet.
579  * NOTE: 'payload' contains a complete PES payload.
580  */
581 static void mpegts_write_pes(AVFormatContext *s, AVStream *st,
582                              const uint8_t *payload, int payload_size,
583                              int64_t pts, int64_t dts)
584 {
585     MpegTSWriteStream *ts_st = st->priv_data;
586     MpegTSWrite *ts = s->priv_data;
587     uint8_t buf[TS_PACKET_SIZE];
588     uint8_t *q;
589     int val, is_start, len, header_len, write_pcr, private_code, flags;
590     int afc_len, stuffing_len;
591     int64_t pcr = -1; /* avoid warning */
592     int64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
593
594     is_start = 1;
595     while (payload_size > 0) {
596         retransmit_si_info(s);
597
598         write_pcr = 0;
599         if (ts_st->pid == ts_st->service->pcr_pid) {
600             if (ts->mux_rate > 1 || is_start) // VBR pcr period is based on frames
601                 ts_st->service->pcr_packet_count++;
602             if (ts_st->service->pcr_packet_count >=
603                 ts_st->service->pcr_packet_period) {
604                 ts_st->service->pcr_packet_count = 0;
605                 write_pcr = 1;
606             }
607         }
608
609         if (ts->mux_rate > 1 && dts != AV_NOPTS_VALUE &&
610             (dts - (int64_t)ts->cur_pcr) > delay) {
611             /* pcr insert gets priority over null packet insert */
612             if (write_pcr)
613                 mpegts_insert_pcr_only(s, st);
614             else
615                 mpegts_insert_null_packet(s);
616             continue; /* recalculate write_pcr and possibly retransmit si_info */
617         }
618
619         /* prepare packet header */
620         q = buf;
621         *q++ = 0x47;
622         val = (ts_st->pid >> 8);
623         if (is_start)
624             val |= 0x40;
625         *q++ = val;
626         *q++ = ts_st->pid;
627         ts_st->cc = (ts_st->cc + 1) & 0xf;
628         *q++ = 0x10 | ts_st->cc | (write_pcr ? 0x20 : 0);
629         if (write_pcr) {
630             // add 11, pcr references the last byte of program clock reference base
631             if (ts->mux_rate > 1)
632                 pcr = ts->cur_pcr + (4+7)*8*90000LL / ts->mux_rate;
633             else
634                 pcr = dts - delay;
635             if (dts != AV_NOPTS_VALUE && dts < pcr)
636                 av_log(s, AV_LOG_WARNING, "dts < pcr, TS is invalid\n");
637             *q++ = 7; /* AFC length */
638             *q++ = 0x10; /* flags: PCR present */
639             *q++ = pcr >> 25;
640             *q++ = pcr >> 17;
641             *q++ = pcr >> 9;
642             *q++ = pcr >> 1;
643             *q++ = (pcr & 1) << 7;
644             *q++ = 0;
645         }
646         if (is_start) {
647             int pes_extension = 0;
648             /* write PES header */
649             *q++ = 0x00;
650             *q++ = 0x00;
651             *q++ = 0x01;
652             private_code = 0;
653             if (st->codec->codec_type == CODEC_TYPE_VIDEO) {
654                 if (st->codec->codec_id == CODEC_ID_DIRAC) {
655                     *q++ = 0xfd;
656                 } else
657                     *q++ = 0xe0;
658             } else if (st->codec->codec_type == CODEC_TYPE_AUDIO &&
659                        (st->codec->codec_id == CODEC_ID_MP2 ||
660                         st->codec->codec_id == CODEC_ID_MP3)) {
661                 *q++ = 0xc0;
662             } else {
663                 *q++ = 0xbd;
664                 if (st->codec->codec_type == CODEC_TYPE_SUBTITLE) {
665                     private_code = 0x20;
666                 }
667             }
668             header_len = 0;
669             flags = 0;
670             if (pts != AV_NOPTS_VALUE) {
671                 header_len += 5;
672                 flags |= 0x80;
673             }
674             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
675                 header_len += 5;
676                 flags |= 0x40;
677             }
678             if (st->codec->codec_type == CODEC_TYPE_VIDEO &&
679                 st->codec->codec_id == CODEC_ID_DIRAC) {
680                 /* set PES_extension_flag */
681                 pes_extension = 1;
682                 flags |= 0x01;
683
684                 /*
685                 * One byte for PES2 extension flag +
686                 * one byte for extension length +
687                 * one byte for extension id
688                 */
689                 header_len += 3;
690             }
691             len = payload_size + header_len + 3;
692             if (private_code != 0)
693                 len++;
694             if (len > 0xffff)
695                 len = 0;
696             *q++ = len >> 8;
697             *q++ = len;
698             val = 0x80;
699             /* data alignment indicator is required for subtitle data */
700             if (st->codec->codec_type == CODEC_TYPE_SUBTITLE)
701                 val |= 0x04;
702             *q++ = val;
703             *q++ = flags;
704             *q++ = header_len;
705             if (pts != AV_NOPTS_VALUE) {
706                 write_pts(q, flags >> 6, pts);
707                 q += 5;
708             }
709             if (dts != AV_NOPTS_VALUE && pts != AV_NOPTS_VALUE && dts != pts) {
710                 write_pts(q, 1, dts);
711                 q += 5;
712             }
713             if (pes_extension && st->codec->codec_id == CODEC_ID_DIRAC) {
714                 flags = 0x01;  /* set PES_extension_flag_2 */
715                 *q++ = flags;
716                 *q++ = 0x80 | 0x01;  /* marker bit + extension length */
717                 /*
718                 * Set the stream id extension flag bit to 0 and
719                 * write the extended stream id
720                 */
721                 *q++ = 0x00 | 0x60;
722             }
723             if (private_code != 0)
724                 *q++ = private_code;
725             is_start = 0;
726         }
727         /* header size */
728         header_len = q - buf;
729         /* data len */
730         len = TS_PACKET_SIZE - header_len;
731         if (len > payload_size)
732             len = payload_size;
733         stuffing_len = TS_PACKET_SIZE - header_len - len;
734         if (stuffing_len > 0) {
735             /* add stuffing with AFC */
736             if (buf[3] & 0x20) {
737                 /* stuffing already present: increase its size */
738                 afc_len = buf[4] + 1;
739                 memmove(buf + 4 + afc_len + stuffing_len,
740                         buf + 4 + afc_len,
741                         header_len - (4 + afc_len));
742                 buf[4] += stuffing_len;
743                 memset(buf + 4 + afc_len, 0xff, stuffing_len);
744             } else {
745                 /* add stuffing */
746                 memmove(buf + 4 + stuffing_len, buf + 4, header_len - 4);
747                 buf[3] |= 0x20;
748                 buf[4] = stuffing_len - 1;
749                 if (stuffing_len >= 2) {
750                     buf[5] = 0x00;
751                     memset(buf + 6, 0xff, stuffing_len - 2);
752                 }
753             }
754         }
755         memcpy(buf + TS_PACKET_SIZE - len, payload, len);
756         payload += len;
757         payload_size -= len;
758         put_buffer(s->pb, buf, TS_PACKET_SIZE);
759         ts->cur_pcr += TS_PACKET_SIZE*8*90000LL/ts->mux_rate;
760     }
761     put_flush_packet(s->pb);
762 }
763
764 static int mpegts_write_packet(AVFormatContext *s, AVPacket *pkt)
765 {
766     AVStream *st = s->streams[pkt->stream_index];
767     int size = pkt->size;
768     uint8_t *buf= pkt->data;
769     uint8_t *data= NULL;
770     MpegTSWriteStream *ts_st = st->priv_data;
771     const uint64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE)*2;
772     int64_t dts = AV_NOPTS_VALUE, pts = AV_NOPTS_VALUE;
773
774     if (pkt->pts != AV_NOPTS_VALUE)
775         pts = pkt->pts + delay;
776     if (pkt->dts != AV_NOPTS_VALUE)
777         dts = pkt->dts + delay;
778
779     if (ts_st->first_pts_check && pts == AV_NOPTS_VALUE) {
780         av_log(s, AV_LOG_ERROR, "first pts value must set\n");
781         return -1;
782     }
783     ts_st->first_pts_check = 0;
784
785     if (st->codec->codec_id == CODEC_ID_H264) {
786         const uint8_t *p = buf, *buf_end = p+size;
787         uint32_t state = -1;
788
789         if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001) {
790             av_log(s, AV_LOG_ERROR, "h264 bitstream malformated, "
791                    "no startcode found, use -vbsf h264_mp4toannexb\n");
792             return -1;
793         }
794
795         do {
796             p = ff_find_start_code(p, buf_end, &state);
797             //av_log(s, AV_LOG_INFO, "nal %d\n", state & 0x1f);
798         } while (p < buf_end && (state & 0x1f) != 9 &&
799                  (state & 0x1f) != 5 && (state & 0x1f) != 1);
800
801         if ((state & 0x1f) != 9) { // AUD NAL
802             data = av_malloc(pkt->size+6);
803             if (!data)
804                 return -1;
805             memcpy(data+6, pkt->data, pkt->size);
806             AV_WB32(data, 0x00000001);
807             data[4] = 0x09;
808             data[5] = 0xe0; // any slice type
809             buf  = data;
810             size = pkt->size+6;
811         }
812     }
813
814     if (st->codec->codec_type != CODEC_TYPE_AUDIO) {
815         // for video and subtitle, write a single pes packet
816         mpegts_write_pes(s, st, buf, size, pts, dts);
817         av_free(data);
818         return 0;
819     }
820
821     if (ts_st->payload_index + size > DEFAULT_PES_PAYLOAD_SIZE) {
822         mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_index,
823                          ts_st->payload_pts, ts_st->payload_dts);
824         ts_st->payload_index = 0;
825     }
826
827     if (!ts_st->payload_index) {
828         ts_st->payload_pts = pts;
829         ts_st->payload_dts = dts;
830     }
831
832     memcpy(ts_st->payload + ts_st->payload_index, buf, size);
833     ts_st->payload_index += size;
834
835     return 0;
836 }
837
838 static int mpegts_write_end(AVFormatContext *s)
839 {
840     MpegTSWrite *ts = s->priv_data;
841     MpegTSWriteStream *ts_st;
842     MpegTSService *service;
843     AVStream *st;
844     int i;
845
846     /* flush current packets */
847     for(i = 0; i < s->nb_streams; i++) {
848         st = s->streams[i];
849         ts_st = st->priv_data;
850         if (ts_st->payload_index > 0) {
851             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_index,
852                              ts_st->payload_pts, ts_st->payload_dts);
853         }
854     }
855     put_flush_packet(s->pb);
856
857     for(i = 0; i < ts->nb_services; i++) {
858         service = ts->services[i];
859         av_freep(&service->provider_name);
860         av_freep(&service->name);
861         av_free(service);
862     }
863     av_free(ts->services);
864
865     return 0;
866 }
867
868 AVOutputFormat mpegts_muxer = {
869     "mpegts",
870     NULL_IF_CONFIG_SMALL("MPEG-2 transport stream format"),
871     "video/x-mpegts",
872     "ts,m2t",
873     sizeof(MpegTSWrite),
874     CODEC_ID_MP2,
875     CODEC_ID_MPEG2VIDEO,
876     mpegts_write_header,
877     mpegts_write_packet,
878     mpegts_write_end,
879 };