add aud nal unit if not present in h264 bitstream
[ffmpeg.git] / libavformat / mpegtsenc.c
1 /*
2  * MPEG2 transport stream (aka DVB) muxer
3  * Copyright (c) 2003 Fabrice Bellard.
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "libavutil/bswap.h"
23 #include "libavutil/crc.h"
24 #include "libavcodec/mpegvideo.h"
25 #include "avformat.h"
26 #include "mpegts.h"
27
28 /* write DVB SI sections */
29
30 /*********************************************/
31 /* mpegts section writer */
32
33 typedef struct MpegTSSection {
34     int pid;
35     int cc;
36     void (*write_packet)(struct MpegTSSection *s, const uint8_t *packet);
37     void *opaque;
38 } MpegTSSection;
39
40 typedef struct MpegTSService {
41     MpegTSSection pmt; /* MPEG2 pmt table context */
42     int sid;           /* service ID */
43     char *name;
44     char *provider_name;
45     int pcr_pid;
46     int pcr_packet_count;
47     int pcr_packet_freq;
48 } MpegTSService;
49
50 typedef struct MpegTSWrite {
51     MpegTSSection pat; /* MPEG2 pat table */
52     MpegTSSection sdt; /* MPEG2 sdt table context */
53     MpegTSService **services;
54     int sdt_packet_count;
55     int sdt_packet_freq;
56     int pat_packet_count;
57     int pat_packet_freq;
58     int nb_services;
59     int onid;
60     int tsid;
61     uint64_t cur_pcr;
62     int mux_rate;
63 } MpegTSWrite;
64
65 /* NOTE: 4 bytes must be left at the end for the crc32 */
66 static void mpegts_write_section(MpegTSSection *s, uint8_t *buf, int len)
67 {
68     MpegTSWrite *ts = ((AVFormatContext*)s->opaque)->priv_data;
69     unsigned int crc;
70     unsigned char packet[TS_PACKET_SIZE];
71     const unsigned char *buf_ptr;
72     unsigned char *q;
73     int first, b, len1, left;
74
75     crc = bswap_32(av_crc(av_crc_get_table(AV_CRC_32_IEEE), -1, buf, len - 4));
76     buf[len - 4] = (crc >> 24) & 0xff;
77     buf[len - 3] = (crc >> 16) & 0xff;
78     buf[len - 2] = (crc >> 8) & 0xff;
79     buf[len - 1] = (crc) & 0xff;
80
81     /* send each packet */
82     buf_ptr = buf;
83     while (len > 0) {
84         first = (buf == buf_ptr);
85         q = packet;
86         *q++ = 0x47;
87         b = (s->pid >> 8);
88         if (first)
89             b |= 0x40;
90         *q++ = b;
91         *q++ = s->pid;
92         *q++ = 0x10 | s->cc;
93         s->cc = (s->cc + 1) & 0xf;
94         if (first)
95             *q++ = 0; /* 0 offset */
96         len1 = TS_PACKET_SIZE - (q - packet);
97         if (len1 > len)
98             len1 = len;
99         memcpy(q, buf_ptr, len1);
100         q += len1;
101         /* add known padding data */
102         left = TS_PACKET_SIZE - (q - packet);
103         if (left > 0)
104             memset(q, 0xff, left);
105
106         s->write_packet(s, packet);
107
108         buf_ptr += len1;
109         len -= len1;
110
111         ts->cur_pcr += TS_PACKET_SIZE*8*90000LL/ts->mux_rate;
112     }
113 }
114
115 static inline void put16(uint8_t **q_ptr, int val)
116 {
117     uint8_t *q;
118     q = *q_ptr;
119     *q++ = val >> 8;
120     *q++ = val;
121     *q_ptr = q;
122 }
123
124 static int mpegts_write_section1(MpegTSSection *s, int tid, int id,
125                           int version, int sec_num, int last_sec_num,
126                           uint8_t *buf, int len)
127 {
128     uint8_t section[1024], *q;
129     unsigned int tot_len;
130
131     tot_len = 3 + 5 + len + 4;
132     /* check if not too big */
133     if (tot_len > 1024)
134         return -1;
135
136     q = section;
137     *q++ = tid;
138     put16(&q, 0xb000 | (len + 5 + 4)); /* 5 byte header + 4 byte CRC */
139     put16(&q, id);
140     *q++ = 0xc1 | (version << 1); /* current_next_indicator = 1 */
141     *q++ = sec_num;
142     *q++ = last_sec_num;
143     memcpy(q, buf, len);
144
145     mpegts_write_section(s, section, tot_len);
146     return 0;
147 }
148
149 /*********************************************/
150 /* mpegts writer */
151
152 #define DEFAULT_PMT_START_PID   0x1000
153 #define DEFAULT_START_PID       0x0100
154 #define DEFAULT_PROVIDER_NAME   "FFmpeg"
155 #define DEFAULT_SERVICE_NAME    "Service01"
156
157 /* default network id, transport stream and service identifiers */
158 #define DEFAULT_ONID            0x0001
159 #define DEFAULT_TSID            0x0001
160 #define DEFAULT_SID             0x0001
161
162 /* a PES packet header is generated every DEFAULT_PES_HEADER_FREQ packets */
163 #define DEFAULT_PES_HEADER_FREQ 16
164 #define DEFAULT_PES_PAYLOAD_SIZE ((DEFAULT_PES_HEADER_FREQ - 1) * 184 + 170)
165
166 /* we retransmit the SI info at this rate */
167 #define SDT_RETRANS_TIME 500
168 #define PAT_RETRANS_TIME 100
169 #define PCR_RETRANS_TIME 20
170
171 typedef struct MpegTSWriteStream {
172     struct MpegTSService *service;
173     int pid; /* stream associated pid */
174     int cc;
175     int payload_index;
176     int64_t payload_pts;
177     int64_t payload_dts;
178     uint8_t payload[DEFAULT_PES_PAYLOAD_SIZE];
179 } MpegTSWriteStream;
180
181 static void mpegts_write_pat(AVFormatContext *s)
182 {
183     MpegTSWrite *ts = s->priv_data;
184     MpegTSService *service;
185     uint8_t data[1012], *q;
186     int i;
187
188     q = data;
189     for(i = 0; i < ts->nb_services; i++) {
190         service = ts->services[i];
191         put16(&q, service->sid);
192         put16(&q, 0xe000 | service->pmt.pid);
193     }
194     mpegts_write_section1(&ts->pat, PAT_TID, ts->tsid, 0, 0, 0,
195                           data, q - data);
196 }
197
198 static void mpegts_write_pmt(AVFormatContext *s, MpegTSService *service)
199 {
200     //    MpegTSWrite *ts = s->priv_data;
201     uint8_t data[1012], *q, *desc_length_ptr, *program_info_length_ptr;
202     int val, stream_type, i;
203
204     q = data;
205     put16(&q, 0xe000 | service->pcr_pid);
206
207     program_info_length_ptr = q;
208     q += 2; /* patched after */
209
210     /* put program info here */
211
212     val = 0xf000 | (q - program_info_length_ptr - 2);
213     program_info_length_ptr[0] = val >> 8;
214     program_info_length_ptr[1] = val;
215
216     for(i = 0; i < s->nb_streams; i++) {
217         AVStream *st = s->streams[i];
218         MpegTSWriteStream *ts_st = st->priv_data;
219         switch(st->codec->codec_id) {
220         case CODEC_ID_MPEG1VIDEO:
221         case CODEC_ID_MPEG2VIDEO:
222             stream_type = STREAM_TYPE_VIDEO_MPEG2;
223             break;
224         case CODEC_ID_MPEG4:
225             stream_type = STREAM_TYPE_VIDEO_MPEG4;
226             break;
227         case CODEC_ID_H264:
228             stream_type = STREAM_TYPE_VIDEO_H264;
229             break;
230         case CODEC_ID_DIRAC:
231             stream_type = STREAM_TYPE_VIDEO_DIRAC;
232             break;
233         case CODEC_ID_MP2:
234         case CODEC_ID_MP3:
235             stream_type = STREAM_TYPE_AUDIO_MPEG1;
236             break;
237         case CODEC_ID_AAC:
238             stream_type = STREAM_TYPE_AUDIO_AAC;
239             break;
240         case CODEC_ID_AC3:
241             stream_type = STREAM_TYPE_AUDIO_AC3;
242             break;
243         default:
244             stream_type = STREAM_TYPE_PRIVATE_DATA;
245             break;
246         }
247         *q++ = stream_type;
248         put16(&q, 0xe000 | ts_st->pid);
249         desc_length_ptr = q;
250         q += 2; /* patched after */
251
252         /* write optional descriptors here */
253         switch(st->codec->codec_type) {
254         case CODEC_TYPE_AUDIO:
255             if (strlen(st->language) == 3) {
256                 *q++ = 0x0a; /* ISO 639 language descriptor */
257                 *q++ = 4;
258                 *q++ = st->language[0];
259                 *q++ = st->language[1];
260                 *q++ = st->language[2];
261                 *q++ = 0; /* undefined type */
262             }
263             break;
264         case CODEC_TYPE_SUBTITLE:
265             {
266                 const char *language;
267                 language = st->language;
268                 if (strlen(language) != 3)
269                     language = "eng";
270                 *q++ = 0x59;
271                 *q++ = 8;
272                 *q++ = language[0];
273                 *q++ = language[1];
274                 *q++ = language[2];
275                 *q++ = 0x10; /* normal subtitles (0x20 = if hearing pb) */
276                 put16(&q, 1); /* page id */
277                 put16(&q, 1); /* ancillary page id */
278             }
279             break;
280         case CODEC_TYPE_VIDEO:
281             if (stream_type == STREAM_TYPE_VIDEO_DIRAC) {
282                 *q++ = 0x05; /*MPEG-2 registration descriptor*/
283                 *q++ = 4;
284                 *q++ = 'd';
285                 *q++ = 'r';
286                 *q++ = 'a';
287                 *q++ = 'c';
288             }
289             break;
290         }
291
292         val = 0xf000 | (q - desc_length_ptr - 2);
293         desc_length_ptr[0] = val >> 8;
294         desc_length_ptr[1] = val;
295     }
296     mpegts_write_section1(&service->pmt, PMT_TID, service->sid, 0, 0, 0,
297                           data, q - data);
298 }
299
300 /* NOTE: str == NULL is accepted for an empty string */
301 static void putstr8(uint8_t **q_ptr, const char *str)
302 {
303     uint8_t *q;
304     int len;
305
306     q = *q_ptr;
307     if (!str)
308         len = 0;
309     else
310         len = strlen(str);
311     *q++ = len;
312     memcpy(q, str, len);
313     q += len;
314     *q_ptr = q;
315 }
316
317 static void mpegts_write_sdt(AVFormatContext *s)
318 {
319     MpegTSWrite *ts = s->priv_data;
320     MpegTSService *service;
321     uint8_t data[1012], *q, *desc_list_len_ptr, *desc_len_ptr;
322     int i, running_status, free_ca_mode, val;
323
324     q = data;
325     put16(&q, ts->onid);
326     *q++ = 0xff;
327     for(i = 0; i < ts->nb_services; i++) {
328         service = ts->services[i];
329         put16(&q, service->sid);
330         *q++ = 0xfc | 0x00; /* currently no EIT info */
331         desc_list_len_ptr = q;
332         q += 2;
333         running_status = 4; /* running */
334         free_ca_mode = 0;
335
336         /* write only one descriptor for the service name and provider */
337         *q++ = 0x48;
338         desc_len_ptr = q;
339         q++;
340         *q++ = 0x01; /* digital television service */
341         putstr8(&q, service->provider_name);
342         putstr8(&q, service->name);
343         desc_len_ptr[0] = q - desc_len_ptr - 1;
344
345         /* fill descriptor length */
346         val = (running_status << 13) | (free_ca_mode << 12) |
347             (q - desc_list_len_ptr - 2);
348         desc_list_len_ptr[0] = val >> 8;
349         desc_list_len_ptr[1] = val;
350     }
351     mpegts_write_section1(&ts->sdt, SDT_TID, ts->tsid, 0, 0, 0,
352                           data, q - data);
353 }
354
355 static MpegTSService *mpegts_add_service(MpegTSWrite *ts,
356                                          int sid,
357                                          const char *provider_name,
358                                          const char *name)
359 {
360     MpegTSService *service;
361
362     service = av_mallocz(sizeof(MpegTSService));
363     if (!service)
364         return NULL;
365     service->pmt.pid = DEFAULT_PMT_START_PID + ts->nb_services - 1;
366     service->sid = sid;
367     service->provider_name = av_strdup(provider_name);
368     service->name = av_strdup(name);
369     service->pcr_pid = 0x1fff;
370     dynarray_add(&ts->services, &ts->nb_services, service);
371     return service;
372 }
373
374 static void section_write_packet(MpegTSSection *s, const uint8_t *packet)
375 {
376     AVFormatContext *ctx = s->opaque;
377     put_buffer(ctx->pb, packet, TS_PACKET_SIZE);
378 }
379
380 static int mpegts_write_header(AVFormatContext *s)
381 {
382     MpegTSWrite *ts = s->priv_data;
383     MpegTSWriteStream *ts_st;
384     MpegTSService *service;
385     AVStream *st;
386     int i, total_bit_rate;
387     const char *service_name;
388     uint64_t sdt_size, pat_pmt_size, pos;
389
390     ts->tsid = DEFAULT_TSID;
391     ts->onid = DEFAULT_ONID;
392     /* allocate a single DVB service */
393     service_name = s->title;
394     if (service_name[0] == '\0')
395         service_name = DEFAULT_SERVICE_NAME;
396     service = mpegts_add_service(ts, DEFAULT_SID,
397                                  DEFAULT_PROVIDER_NAME, service_name);
398     service->pmt.write_packet = section_write_packet;
399     service->pmt.opaque = s;
400
401     ts->pat.pid = PAT_PID;
402     ts->pat.cc = 0;
403     ts->pat.write_packet = section_write_packet;
404     ts->pat.opaque = s;
405
406     ts->sdt.pid = SDT_PID;
407     ts->sdt.cc = 0;
408     ts->sdt.write_packet = section_write_packet;
409     ts->sdt.opaque = s;
410
411     /* assign pids to each stream */
412     total_bit_rate = 0;
413     for(i = 0;i < s->nb_streams; i++) {
414         st = s->streams[i];
415         ts_st = av_mallocz(sizeof(MpegTSWriteStream));
416         if (!ts_st)
417             goto fail;
418         st->priv_data = ts_st;
419         ts_st->service = service;
420         ts_st->pid = DEFAULT_START_PID + i;
421         ts_st->payload_pts = AV_NOPTS_VALUE;
422         ts_st->payload_dts = AV_NOPTS_VALUE;
423         /* update PCR pid by using the first video stream */
424         if (st->codec->codec_type == CODEC_TYPE_VIDEO &&
425             service->pcr_pid == 0x1fff)
426             service->pcr_pid = ts_st->pid;
427         total_bit_rate += st->codec->bit_rate;
428     }
429
430     /* if no video stream, use the first stream as PCR */
431     if (service->pcr_pid == 0x1fff && s->nb_streams > 0) {
432         ts_st = s->streams[0]->priv_data;
433         service->pcr_pid = ts_st->pid;
434     }
435
436     if (total_bit_rate <= 8 * 1024)
437         total_bit_rate = 8 * 1024;
438     service->pcr_packet_freq = (total_bit_rate * PCR_RETRANS_TIME) /
439         (TS_PACKET_SIZE * 8 * 1000);
440     ts->sdt_packet_freq = (total_bit_rate * SDT_RETRANS_TIME) /
441         (TS_PACKET_SIZE * 8 * 1000);
442     ts->pat_packet_freq = (total_bit_rate * PAT_RETRANS_TIME) /
443         (TS_PACKET_SIZE * 8 * 1000);
444
445     ts->mux_rate = 1; // avoid div by 0
446
447     /* write info at the start of the file, so that it will be fast to
448        find them */
449     pos = url_ftell(s->pb);
450     mpegts_write_sdt(s);
451     sdt_size = url_ftell(s->pb) - pos;
452     pos = url_ftell(s->pb);
453     mpegts_write_pat(s);
454     for(i = 0; i < ts->nb_services; i++) {
455         mpegts_write_pmt(s, ts->services[i]);
456     }
457     pat_pmt_size = url_ftell(s->pb) - pos;
458
459     total_bit_rate +=
460         total_bit_rate * 25 / (8 * DEFAULT_PES_PAYLOAD_SIZE) + /* PES header size */
461         total_bit_rate * 4 / (8 * TS_PACKET_SIZE) +            /* TS  header size */
462         SDT_RETRANS_TIME * sdt_size +                          /* SDT size */
463         PAT_RETRANS_TIME * pat_pmt_size +                      /* PAT+PMT size */
464         PCR_RETRANS_TIME * 8;                                  /* PCR size */
465
466     av_log(s, AV_LOG_DEBUG, "muxrate %d freq sdt %d pat %d\n",
467            total_bit_rate, ts->sdt_packet_freq, ts->pat_packet_freq);
468
469     if (s->mux_rate)
470         ts->mux_rate = s->mux_rate;
471     else
472         ts->mux_rate = total_bit_rate;
473
474     // adjust pcr
475     ts->cur_pcr /= ts->mux_rate;
476
477     put_flush_packet(s->pb);
478
479     return 0;
480
481  fail:
482     for(i = 0;i < s->nb_streams; i++) {
483         st = s->streams[i];
484         av_free(st->priv_data);
485     }
486     return -1;
487 }
488
489 /* send SDT, PAT and PMT tables regulary */
490 static void retransmit_si_info(AVFormatContext *s)
491 {
492     MpegTSWrite *ts = s->priv_data;
493     int i;
494
495     if (++ts->sdt_packet_count == ts->sdt_packet_freq) {
496         ts->sdt_packet_count = 0;
497         mpegts_write_sdt(s);
498     }
499     if (++ts->pat_packet_count == ts->pat_packet_freq) {
500         ts->pat_packet_count = 0;
501         mpegts_write_pat(s);
502         for(i = 0; i < ts->nb_services; i++) {
503             mpegts_write_pmt(s, ts->services[i]);
504         }
505     }
506 }
507
508 static void write_pts(uint8_t *q, int fourbits, int64_t pts)
509 {
510     int val;
511
512     val = fourbits << 4 | (((pts >> 30) & 0x07) << 1) | 1;
513     *q++ = val;
514     val = (((pts >> 15) & 0x7fff) << 1) | 1;
515     *q++ = val >> 8;
516     *q++ = val;
517     val = (((pts) & 0x7fff) << 1) | 1;
518     *q++ = val >> 8;
519     *q++ = val;
520 }
521
522 /* NOTE: pes_data contains all the PES packet */
523 static void mpegts_write_pes(AVFormatContext *s, AVStream *st,
524                              const uint8_t *payload, int payload_size,
525                              int64_t pts, int64_t dts)
526 {
527     MpegTSWriteStream *ts_st = st->priv_data;
528     MpegTSWrite *ts = s->priv_data;
529     uint8_t buf[TS_PACKET_SIZE];
530     uint8_t *q;
531     int val, is_start, len, header_len, write_pcr, private_code, flags;
532     int afc_len, stuffing_len;
533     int64_t pcr = -1; /* avoid warning */
534
535     is_start = 1;
536     while (payload_size > 0) {
537         retransmit_si_info(s);
538
539         write_pcr = 0;
540         if (ts_st->pid == ts_st->service->pcr_pid) {
541             ts_st->service->pcr_packet_count++;
542             if (ts_st->service->pcr_packet_count >=
543                 ts_st->service->pcr_packet_freq) {
544                 ts_st->service->pcr_packet_count = 0;
545                 write_pcr = 1;
546             }
547         }
548
549         /* prepare packet header */
550         q = buf;
551         *q++ = 0x47;
552         val = (ts_st->pid >> 8);
553         if (is_start)
554             val |= 0x40;
555         *q++ = val;
556         *q++ = ts_st->pid;
557         *q++ = 0x10 | ts_st->cc | (write_pcr ? 0x20 : 0);
558         ts_st->cc = (ts_st->cc + 1) & 0xf;
559         if (write_pcr) {
560             // add 11, pcr references the last byte of program clock reference base
561             pcr = ts->cur_pcr + (4+7)*8*90000LL / ts->mux_rate;
562             if (dts != AV_NOPTS_VALUE && dts < pcr)
563                 av_log(s, AV_LOG_WARNING, "dts < pcr, TS is invalid\n");
564             *q++ = 7; /* AFC length */
565             *q++ = 0x10; /* flags: PCR present */
566             *q++ = pcr >> 25;
567             *q++ = pcr >> 17;
568             *q++ = pcr >> 9;
569             *q++ = pcr >> 1;
570             *q++ = (pcr & 1) << 7;
571             *q++ = 0;
572         }
573         if (is_start) {
574             int pes_extension = 0;
575             /* write PES header */
576             *q++ = 0x00;
577             *q++ = 0x00;
578             *q++ = 0x01;
579             private_code = 0;
580             if (st->codec->codec_type == CODEC_TYPE_VIDEO) {
581                 if (st->codec->codec_id == CODEC_ID_DIRAC) {
582                     *q++ = 0xfd;
583                 } else
584                     *q++ = 0xe0;
585             } else if (st->codec->codec_type == CODEC_TYPE_AUDIO &&
586                        (st->codec->codec_id == CODEC_ID_MP2 ||
587                         st->codec->codec_id == CODEC_ID_MP3)) {
588                 *q++ = 0xc0;
589             } else {
590                 *q++ = 0xbd;
591                 if (st->codec->codec_type == CODEC_TYPE_SUBTITLE) {
592                     private_code = 0x20;
593                 }
594             }
595             header_len = 0;
596             flags = 0;
597             if (pts != AV_NOPTS_VALUE) {
598                 header_len += 5;
599                 flags |= 0x80;
600             }
601             if (dts != AV_NOPTS_VALUE && dts != pts) {
602                 header_len += 5;
603                 flags |= 0x40;
604             }
605             if (st->codec->codec_type == CODEC_TYPE_VIDEO &&
606                 st->codec->codec_id == CODEC_ID_DIRAC) {
607                 /* set PES_extension_flag */
608                 pes_extension = 1;
609                 flags |= 0x01;
610
611                 /*
612                 * One byte for PES2 extension flag +
613                 * one byte for extension length +
614                 * one byte for extension id
615                 */
616                 header_len += 3;
617             }
618             len = payload_size + header_len + 3;
619             if (private_code != 0)
620                 len++;
621             *q++ = len >> 8;
622             *q++ = len;
623             val = 0x80;
624             /* data alignment indicator is required for subtitle data */
625             if (st->codec->codec_type == CODEC_TYPE_SUBTITLE)
626                 val |= 0x04;
627             *q++ = val;
628             *q++ = flags;
629             *q++ = header_len;
630             if (pts != AV_NOPTS_VALUE) {
631                 write_pts(q, flags >> 6, pts);
632                 q += 5;
633             }
634             if (dts != AV_NOPTS_VALUE && dts != pts) {
635                 write_pts(q, 1, dts);
636                 q += 5;
637             }
638             if (pes_extension && st->codec->codec_id == CODEC_ID_DIRAC) {
639                 flags = 0x01;  /* set PES_extension_flag_2 */
640                 *q++ = flags;
641                 *q++ = 0x80 | 0x01;  /* marker bit + extension length */
642                 /*
643                 * Set the stream id extension flag bit to 0 and
644                 * write the extended stream id
645                 */
646                 *q++ = 0x00 | 0x60;
647             }
648             if (private_code != 0)
649                 *q++ = private_code;
650             is_start = 0;
651         }
652         /* header size */
653         header_len = q - buf;
654         /* data len */
655         len = TS_PACKET_SIZE - header_len;
656         if (len > payload_size)
657             len = payload_size;
658         stuffing_len = TS_PACKET_SIZE - header_len - len;
659         if (stuffing_len > 0) {
660             /* add stuffing with AFC */
661             if (buf[3] & 0x20) {
662                 /* stuffing already present: increase its size */
663                 afc_len = buf[4] + 1;
664                 memmove(buf + 4 + afc_len + stuffing_len,
665                         buf + 4 + afc_len,
666                         header_len - (4 + afc_len));
667                 buf[4] += stuffing_len;
668                 memset(buf + 4 + afc_len, 0xff, stuffing_len);
669             } else {
670                 /* add stuffing */
671                 memmove(buf + 4 + stuffing_len, buf + 4, header_len - 4);
672                 buf[3] |= 0x20;
673                 buf[4] = stuffing_len - 1;
674                 if (stuffing_len >= 2) {
675                     buf[5] = 0x00;
676                     memset(buf + 6, 0xff, stuffing_len - 2);
677                 }
678             }
679         }
680         memcpy(buf + TS_PACKET_SIZE - len, payload, len);
681         payload += len;
682         payload_size -= len;
683         put_buffer(s->pb, buf, TS_PACKET_SIZE);
684         ts->cur_pcr += TS_PACKET_SIZE*8*90000LL/ts->mux_rate;
685     }
686     put_flush_packet(s->pb);
687 }
688
689 static int mpegts_write_packet(AVFormatContext *s, AVPacket *pkt)
690 {
691     AVStream *st = s->streams[pkt->stream_index];
692     int size= pkt->size;
693     uint8_t *buf= pkt->data;
694     uint8_t *data= NULL;
695     MpegTSWriteStream *ts_st = st->priv_data;
696     int len, max_payload_size;
697     const uint8_t *access_unit_index = NULL;
698     const uint64_t delay = av_rescale(s->max_delay, 90000, AV_TIME_BASE);
699
700     if (st->codec->codec_type == CODEC_TYPE_SUBTITLE) {
701         /* for subtitle, a single PES packet must be generated */
702         mpegts_write_pes(s, st, buf, size, pkt->pts, AV_NOPTS_VALUE);
703         return 0;
704     }
705
706     if (st->codec->codec_id == CODEC_ID_DIRAC) {
707         /* for Dirac, a single PES packet must be generated */
708         mpegts_write_pes(s, st, buf, size, pkt->pts, pkt->dts);
709         return 0;
710     }
711     max_payload_size = DEFAULT_PES_PAYLOAD_SIZE;
712     if (st->codec->codec_id == CODEC_ID_MPEG2VIDEO ||
713         st->codec->codec_id == CODEC_ID_MPEG1VIDEO) {
714         const uint8_t *p = pkt->data;
715         const uint8_t *end = pkt->data+pkt->size;
716         uint32_t state = -1;
717         while (p < end) {
718             p = ff_find_start_code(p, end, &state);
719             if (state == PICTURE_START_CODE) {
720                 access_unit_index = p - 4;
721                 break;
722             }
723         }
724     } if (st->codec->codec_id == CODEC_ID_H264) {
725         if (pkt->size < 5 || AV_RB32(pkt->data) != 0x0000001) {
726             av_log(s, AV_LOG_ERROR, "h264 bitstream malformated\n");
727             return -1;
728         }
729         if (pkt->data[4] != 0x09) { // AUD NAL
730             data = av_malloc(pkt->size+6);
731             if (!data)
732                 return -1;
733             memcpy(data+6, pkt->data, pkt->size);
734             AV_WB32(data, 0x00000001);
735             data[4] = 0x09;
736             data[5] = 0xe0; // any slice type
737             buf  = data;
738             size = pkt->size+6;
739         }
740         access_unit_index = buf;
741     } else {
742         access_unit_index = pkt->data;
743     }
744
745     if (!access_unit_index) {
746         av_log(s, AV_LOG_ERROR, "error, could not find access unit start\n");
747         return -1;
748     }
749
750     while (size > 0) {
751         len = max_payload_size - ts_st->payload_index;
752         if (len > size)
753             len = size;
754         memcpy(ts_st->payload + ts_st->payload_index, buf, len);
755         buf += len;
756         size -= len;
757         ts_st->payload_index += len;
758         if (access_unit_index && access_unit_index < buf &&
759             ts_st->payload_pts == AV_NOPTS_VALUE &&
760             ts_st->payload_dts == AV_NOPTS_VALUE) {
761             ts_st->payload_dts = pkt->dts + delay;
762             ts_st->payload_pts = pkt->pts + delay;
763         }
764         if (ts_st->payload_index >= max_payload_size) {
765             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_index,
766                              ts_st->payload_pts, ts_st->payload_dts);
767             ts_st->payload_pts = AV_NOPTS_VALUE;
768             ts_st->payload_dts = AV_NOPTS_VALUE;
769             ts_st->payload_index = 0;
770             access_unit_index = NULL; // unset access unit to avoid setting pts/dts again
771         }
772     }
773
774     av_free(data);
775
776     return 0;
777 }
778
779 static int mpegts_write_end(AVFormatContext *s)
780 {
781     MpegTSWrite *ts = s->priv_data;
782     MpegTSWriteStream *ts_st;
783     MpegTSService *service;
784     AVStream *st;
785     int i;
786
787     /* flush current packets */
788     for(i = 0; i < s->nb_streams; i++) {
789         st = s->streams[i];
790         ts_st = st->priv_data;
791         if (ts_st->payload_index > 0) {
792             mpegts_write_pes(s, st, ts_st->payload, ts_st->payload_index,
793                              ts_st->payload_pts, ts_st->payload_dts);
794         }
795     }
796     put_flush_packet(s->pb);
797
798     for(i = 0; i < ts->nb_services; i++) {
799         service = ts->services[i];
800         av_freep(&service->provider_name);
801         av_freep(&service->name);
802         av_free(service);
803     }
804     av_free(ts->services);
805
806     return 0;
807 }
808
809 AVOutputFormat mpegts_muxer = {
810     "mpegts",
811     NULL_IF_CONFIG_SMALL("MPEG-2 transport stream format"),
812     "video/x-mpegts",
813     "ts,m2t",
814     sizeof(MpegTSWrite),
815     CODEC_ID_MP2,
816     CODEC_ID_MPEG2VIDEO,
817     mpegts_write_header,
818     mpegts_write_packet,
819     mpegts_write_end,
820 };