print reg desc in a more friendly way
[ffmpeg.git] / libavformat / mpegts.c
1 /*
2  * MPEG2 transport stream (aka DVB) demuxer
3  * Copyright (c) 2002-2003 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 //#define DEBUG
23 //#define DEBUG_SEEK
24
25 #include "libavutil/crc.h"
26 #include "libavutil/intreadwrite.h"
27 #include "libavcodec/bytestream.h"
28 #include "avformat.h"
29 #include "mpegts.h"
30 #include "internal.h"
31
32 /* 1.0 second at 24Mbit/s */
33 #define MAX_SCAN_PACKETS 32000
34
35 /* maximum size in which we look for synchronisation if
36    synchronisation is lost */
37 #define MAX_RESYNC_SIZE 4096
38
39 #define MAX_PES_PAYLOAD 200*1024
40
41 typedef struct PESContext PESContext;
42
43 static PESContext* add_pes_stream(MpegTSContext *ts, int pid, int pcr_pid, int stream_type);
44
45 enum MpegTSFilterType {
46     MPEGTS_PES,
47     MPEGTS_SECTION,
48 };
49
50 typedef struct MpegTSFilter MpegTSFilter;
51
52 typedef int PESCallback(MpegTSFilter *f, const uint8_t *buf, int len, int is_start, int64_t pos);
53
54 typedef struct MpegTSPESFilter {
55     PESCallback *pes_cb;
56     void *opaque;
57 } MpegTSPESFilter;
58
59 typedef void SectionCallback(MpegTSFilter *f, const uint8_t *buf, int len);
60
61 typedef void SetServiceCallback(void *opaque, int ret);
62
63 typedef struct MpegTSSectionFilter {
64     int section_index;
65     int section_h_size;
66     uint8_t *section_buf;
67     unsigned int check_crc:1;
68     unsigned int end_of_section_reached:1;
69     SectionCallback *section_cb;
70     void *opaque;
71 } MpegTSSectionFilter;
72
73 struct MpegTSFilter {
74     int pid;
75     int last_cc; /* last cc code (-1 if first packet) */
76     enum MpegTSFilterType type;
77     union {
78         MpegTSPESFilter pes_filter;
79         MpegTSSectionFilter section_filter;
80     } u;
81 };
82
83 #define MAX_PIDS_PER_PROGRAM 64
84 struct Program {
85     unsigned int id; //program id/service id
86     unsigned int nb_pids;
87     unsigned int pids[MAX_PIDS_PER_PROGRAM];
88 };
89
90 struct MpegTSContext {
91     /* user data */
92     AVFormatContext *stream;
93     /** raw packet size, including FEC if present            */
94     int raw_packet_size;
95
96     int pos47;
97
98     /** if true, all pids are analyzed to find streams       */
99     int auto_guess;
100
101     /** compute exact PCR for each transport stream packet   */
102     int mpeg2ts_compute_pcr;
103
104     int64_t cur_pcr;    /**< used to estimate the exact PCR  */
105     int pcr_incr;       /**< used to estimate the exact PCR  */
106
107     /* data needed to handle file based ts */
108     /** stop parsing loop                                    */
109     int stop_parse;
110     /** packet containing Audio/Video data                   */
111     AVPacket *pkt;
112     /** to detect seek                                       */
113     int64_t last_pos;
114
115     /******************************************/
116     /* private mpegts data */
117     /* scan context */
118     /** structure to keep track of Program->pids mapping     */
119     unsigned int nb_prg;
120     struct Program *prg;
121
122
123     /** filters for various streams specified by PMT + for the PAT and PMT */
124     MpegTSFilter *pids[NB_PID_MAX];
125 };
126
127 /* TS stream handling */
128
129 enum MpegTSState {
130     MPEGTS_HEADER = 0,
131     MPEGTS_PESHEADER_FILL,
132     MPEGTS_PAYLOAD,
133     MPEGTS_SKIP,
134 };
135
136 /* enough for PES header + length */
137 #define PES_START_SIZE 9
138 #define MAX_PES_HEADER_SIZE (9 + 255)
139
140 struct PESContext {
141     int pid;
142     int pcr_pid; /**< if -1 then all packets containing PCR are considered */
143     int stream_type;
144     MpegTSContext *ts;
145     AVFormatContext *stream;
146     AVStream *st;
147     enum MpegTSState state;
148     /* used to get the format */
149     int data_index;
150     int total_size;
151     int pes_header_size;
152     int64_t pts, dts;
153     int64_t ts_packet_pos; /**< position of first TS packet of this PES packet */
154     uint8_t header[MAX_PES_HEADER_SIZE];
155     uint8_t *buffer;
156 };
157
158 extern AVInputFormat mpegts_demuxer;
159
160 static void clear_program(MpegTSContext *ts, unsigned int programid)
161 {
162     int i;
163
164     for(i=0; i<ts->nb_prg; i++)
165         if(ts->prg[i].id == programid)
166             ts->prg[i].nb_pids = 0;
167 }
168
169 static void clear_programs(MpegTSContext *ts)
170 {
171     av_freep(&ts->prg);
172     ts->nb_prg=0;
173 }
174
175 static void add_pat_entry(MpegTSContext *ts, unsigned int programid)
176 {
177     struct Program *p;
178     void *tmp = av_realloc(ts->prg, (ts->nb_prg+1)*sizeof(struct Program));
179     if(!tmp)
180         return;
181     ts->prg = tmp;
182     p = &ts->prg[ts->nb_prg];
183     p->id = programid;
184     p->nb_pids = 0;
185     ts->nb_prg++;
186 }
187
188 static void add_pid_to_pmt(MpegTSContext *ts, unsigned int programid, unsigned int pid)
189 {
190     int i;
191     struct Program *p = NULL;
192     for(i=0; i<ts->nb_prg; i++) {
193         if(ts->prg[i].id == programid) {
194             p = &ts->prg[i];
195             break;
196         }
197     }
198     if(!p)
199         return;
200
201     if(p->nb_pids >= MAX_PIDS_PER_PROGRAM)
202         return;
203     p->pids[p->nb_pids++] = pid;
204 }
205
206 /**
207  * \brief discard_pid() decides if the pid is to be discarded according
208  *                      to caller's programs selection
209  * \param ts    : - TS context
210  * \param pid   : - pid
211  * \return 1 if the pid is only comprised in programs that have .discard=AVDISCARD_ALL
212  *         0 otherwise
213  */
214 static int discard_pid(MpegTSContext *ts, unsigned int pid)
215 {
216     int i, j, k;
217     int used = 0, discarded = 0;
218     struct Program *p;
219     for(i=0; i<ts->nb_prg; i++) {
220         p = &ts->prg[i];
221         for(j=0; j<p->nb_pids; j++) {
222             if(p->pids[j] != pid)
223                 continue;
224             //is program with id p->id set to be discarded?
225             for(k=0; k<ts->stream->nb_programs; k++) {
226                 if(ts->stream->programs[k]->id == p->id) {
227                     if(ts->stream->programs[k]->discard == AVDISCARD_ALL)
228                         discarded++;
229                     else
230                         used++;
231                 }
232             }
233         }
234     }
235
236     return !used && discarded;
237 }
238
239 /**
240  *  Assembles PES packets out of TS packets, and then calls the "section_cb"
241  *  function when they are complete.
242  */
243 static void write_section_data(AVFormatContext *s, MpegTSFilter *tss1,
244                                const uint8_t *buf, int buf_size, int is_start)
245 {
246     MpegTSSectionFilter *tss = &tss1->u.section_filter;
247     int len;
248
249     if (is_start) {
250         memcpy(tss->section_buf, buf, buf_size);
251         tss->section_index = buf_size;
252         tss->section_h_size = -1;
253         tss->end_of_section_reached = 0;
254     } else {
255         if (tss->end_of_section_reached)
256             return;
257         len = 4096 - tss->section_index;
258         if (buf_size < len)
259             len = buf_size;
260         memcpy(tss->section_buf + tss->section_index, buf, len);
261         tss->section_index += len;
262     }
263
264     /* compute section length if possible */
265     if (tss->section_h_size == -1 && tss->section_index >= 3) {
266         len = (AV_RB16(tss->section_buf + 1) & 0xfff) + 3;
267         if (len > 4096)
268             return;
269         tss->section_h_size = len;
270     }
271
272     if (tss->section_h_size != -1 && tss->section_index >= tss->section_h_size) {
273         tss->end_of_section_reached = 1;
274         if (!tss->check_crc ||
275             av_crc(av_crc_get_table(AV_CRC_32_IEEE), -1,
276                    tss->section_buf, tss->section_h_size) == 0)
277             tss->section_cb(tss1, tss->section_buf, tss->section_h_size);
278     }
279 }
280
281 static MpegTSFilter *mpegts_open_section_filter(MpegTSContext *ts, unsigned int pid,
282                                          SectionCallback *section_cb, void *opaque,
283                                          int check_crc)
284
285 {
286     MpegTSFilter *filter;
287     MpegTSSectionFilter *sec;
288
289     dprintf(ts->stream, "Filter: pid=0x%x\n", pid);
290
291     if (pid >= NB_PID_MAX || ts->pids[pid])
292         return NULL;
293     filter = av_mallocz(sizeof(MpegTSFilter));
294     if (!filter)
295         return NULL;
296     ts->pids[pid] = filter;
297     filter->type = MPEGTS_SECTION;
298     filter->pid = pid;
299     filter->last_cc = -1;
300     sec = &filter->u.section_filter;
301     sec->section_cb = section_cb;
302     sec->opaque = opaque;
303     sec->section_buf = av_malloc(MAX_SECTION_SIZE);
304     sec->check_crc = check_crc;
305     if (!sec->section_buf) {
306         av_free(filter);
307         return NULL;
308     }
309     return filter;
310 }
311
312 static MpegTSFilter *mpegts_open_pes_filter(MpegTSContext *ts, unsigned int pid,
313                                      PESCallback *pes_cb,
314                                      void *opaque)
315 {
316     MpegTSFilter *filter;
317     MpegTSPESFilter *pes;
318
319     if (pid >= NB_PID_MAX || ts->pids[pid])
320         return NULL;
321     filter = av_mallocz(sizeof(MpegTSFilter));
322     if (!filter)
323         return NULL;
324     ts->pids[pid] = filter;
325     filter->type = MPEGTS_PES;
326     filter->pid = pid;
327     filter->last_cc = -1;
328     pes = &filter->u.pes_filter;
329     pes->pes_cb = pes_cb;
330     pes->opaque = opaque;
331     return filter;
332 }
333
334 static void mpegts_close_filter(MpegTSContext *ts, MpegTSFilter *filter)
335 {
336     int pid;
337
338     pid = filter->pid;
339     if (filter->type == MPEGTS_SECTION)
340         av_freep(&filter->u.section_filter.section_buf);
341     else if (filter->type == MPEGTS_PES) {
342         PESContext *pes = filter->u.pes_filter.opaque;
343         av_freep(&pes->buffer);
344         /* referenced private data will be freed later in
345          * av_close_input_stream */
346         if (!((PESContext *)filter->u.pes_filter.opaque)->st) {
347             av_freep(&filter->u.pes_filter.opaque);
348         }
349     }
350
351     av_free(filter);
352     ts->pids[pid] = NULL;
353 }
354
355 static int analyze(const uint8_t *buf, int size, int packet_size, int *index){
356     int stat[packet_size];
357     int i;
358     int x=0;
359     int best_score=0;
360
361     memset(stat, 0, packet_size*sizeof(int));
362
363     for(x=i=0; i<size-3; i++){
364         if(buf[i] == 0x47 && !(buf[i+1] & 0x80) && (buf[i+3] & 0x30)){
365             stat[x]++;
366             if(stat[x] > best_score){
367                 best_score= stat[x];
368                 if(index) *index= x;
369             }
370         }
371
372         x++;
373         if(x == packet_size) x= 0;
374     }
375
376     return best_score;
377 }
378
379 /* autodetect fec presence. Must have at least 1024 bytes  */
380 static int get_packet_size(const uint8_t *buf, int size)
381 {
382     int score, fec_score, dvhs_score;
383
384     if (size < (TS_FEC_PACKET_SIZE * 5 + 1))
385         return -1;
386
387     score    = analyze(buf, size, TS_PACKET_SIZE, NULL);
388     dvhs_score    = analyze(buf, size, TS_DVHS_PACKET_SIZE, NULL);
389     fec_score= analyze(buf, size, TS_FEC_PACKET_SIZE, NULL);
390 //    av_log(NULL, AV_LOG_DEBUG, "score: %d, dvhs_score: %d, fec_score: %d \n", score, dvhs_score, fec_score);
391
392     if     (score > fec_score && score > dvhs_score) return TS_PACKET_SIZE;
393     else if(dvhs_score > score && dvhs_score > fec_score) return TS_DVHS_PACKET_SIZE;
394     else if(score < fec_score && dvhs_score < fec_score) return TS_FEC_PACKET_SIZE;
395     else                       return -1;
396 }
397
398 typedef struct SectionHeader {
399     uint8_t tid;
400     uint16_t id;
401     uint8_t version;
402     uint8_t sec_num;
403     uint8_t last_sec_num;
404 } SectionHeader;
405
406 static inline int get8(const uint8_t **pp, const uint8_t *p_end)
407 {
408     const uint8_t *p;
409     int c;
410
411     p = *pp;
412     if (p >= p_end)
413         return -1;
414     c = *p++;
415     *pp = p;
416     return c;
417 }
418
419 static inline int get16(const uint8_t **pp, const uint8_t *p_end)
420 {
421     const uint8_t *p;
422     int c;
423
424     p = *pp;
425     if ((p + 1) >= p_end)
426         return -1;
427     c = AV_RB16(p);
428     p += 2;
429     *pp = p;
430     return c;
431 }
432
433 /* read and allocate a DVB string preceeded by its length */
434 static char *getstr8(const uint8_t **pp, const uint8_t *p_end)
435 {
436     int len;
437     const uint8_t *p;
438     char *str;
439
440     p = *pp;
441     len = get8(&p, p_end);
442     if (len < 0)
443         return NULL;
444     if ((p + len) > p_end)
445         return NULL;
446     str = av_malloc(len + 1);
447     if (!str)
448         return NULL;
449     memcpy(str, p, len);
450     str[len] = '\0';
451     p += len;
452     *pp = p;
453     return str;
454 }
455
456 static int parse_section_header(SectionHeader *h,
457                                 const uint8_t **pp, const uint8_t *p_end)
458 {
459     int val;
460
461     val = get8(pp, p_end);
462     if (val < 0)
463         return -1;
464     h->tid = val;
465     *pp += 2;
466     val = get16(pp, p_end);
467     if (val < 0)
468         return -1;
469     h->id = val;
470     val = get8(pp, p_end);
471     if (val < 0)
472         return -1;
473     h->version = (val >> 1) & 0x1f;
474     val = get8(pp, p_end);
475     if (val < 0)
476         return -1;
477     h->sec_num = val;
478     val = get8(pp, p_end);
479     if (val < 0)
480         return -1;
481     h->last_sec_num = val;
482     return 0;
483 }
484
485 typedef struct {
486     uint32_t stream_type;
487     enum CodecType codec_type;
488     enum CodecID codec_id;
489 } StreamType;
490
491 static const StreamType ISO_types[] = {
492     { 0x01, CODEC_TYPE_VIDEO, CODEC_ID_MPEG2VIDEO },
493     { 0x02, CODEC_TYPE_VIDEO, CODEC_ID_MPEG2VIDEO },
494     { 0x03, CODEC_TYPE_AUDIO,        CODEC_ID_MP3 },
495     { 0x04, CODEC_TYPE_AUDIO,        CODEC_ID_MP3 },
496     { 0x0f, CODEC_TYPE_AUDIO,        CODEC_ID_AAC },
497     { 0x10, CODEC_TYPE_VIDEO,      CODEC_ID_MPEG4 },
498     { 0x1b, CODEC_TYPE_VIDEO,       CODEC_ID_H264 },
499     { 0xd1, CODEC_TYPE_VIDEO,      CODEC_ID_DIRAC },
500     { 0xea, CODEC_TYPE_VIDEO,        CODEC_ID_VC1 },
501     { 0 },
502 };
503
504 static const StreamType HDMV_types[] = {
505     { 0x81, CODEC_TYPE_AUDIO, CODEC_ID_AC3 },
506     { 0x82, CODEC_TYPE_AUDIO, CODEC_ID_DTS },
507     { 0 },
508 };
509
510 /* ATSC ? */
511 static const StreamType MISC_types[] = {
512     { 0x81, CODEC_TYPE_AUDIO,   CODEC_ID_AC3 },
513     { 0x8a, CODEC_TYPE_AUDIO,   CODEC_ID_DTS },
514     { 0 },
515 };
516
517 static const StreamType REGD_types[] = {
518     { MKTAG('d','r','a','c'), CODEC_TYPE_VIDEO, CODEC_ID_DIRAC },
519     { MKTAG('A','C','-','3'), CODEC_TYPE_AUDIO,   CODEC_ID_AC3 },
520     { 0 },
521 };
522
523 /* descriptor present */
524 static const StreamType DESC_types[] = {
525     { 0x6a, CODEC_TYPE_AUDIO,             CODEC_ID_AC3 }, /* AC-3 descriptor */
526     { 0x7a, CODEC_TYPE_AUDIO,            CODEC_ID_EAC3 }, /* E-AC-3 descriptor */
527     { 0x7b, CODEC_TYPE_AUDIO,             CODEC_ID_DTS },
528     { 0x59, CODEC_TYPE_SUBTITLE, CODEC_ID_DVB_SUBTITLE }, /* subtitling descriptor */
529 };
530
531 static void mpegts_find_stream_type(AVStream *st,
532                                     uint32_t stream_type, const StreamType *types)
533 {
534     for (; types->stream_type; types++) {
535         if (stream_type == types->stream_type) {
536             st->codec->codec_type = types->codec_type;
537             st->codec->codec_id   = types->codec_id;
538             return;
539         }
540     }
541 }
542
543 static AVStream *new_pes_av_stream(PESContext *pes, uint32_t prog_reg_desc, uint32_t code)
544 {
545     AVStream *st = av_new_stream(pes->stream, pes->pid);
546
547     if (!st)
548         return NULL;
549
550     av_set_pts_info(st, 33, 1, 90000);
551     st->priv_data = pes;
552     st->codec->codec_type = CODEC_TYPE_DATA;
553     st->codec->codec_id   = CODEC_ID_PROBE;
554     st->need_parsing = AVSTREAM_PARSE_FULL;
555     pes->st = st;
556
557     dprintf(pes->stream, "stream_type=%x pid=%x prog_reg_desc=%.4s\n",
558             pes->stream_type, pes->pid, (char*)&prog_reg_desc);
559
560     st->codec->codec_tag = pes->stream_type;
561
562     mpegts_find_stream_type(st, pes->stream_type, ISO_types);
563     if (prog_reg_desc == AV_RL32("HDMV") &&
564         st->codec->codec_id == CODEC_ID_PROBE)
565         mpegts_find_stream_type(st, pes->stream_type, HDMV_types);
566     if (st->codec->codec_id == CODEC_ID_PROBE)
567         mpegts_find_stream_type(st, pes->stream_type, MISC_types);
568
569     /* stream was not present in PMT, guess based on PES start code */
570     if (st->codec->codec_id == CODEC_ID_PROBE) {
571         if (code >= 0x1c0 && code <= 0x1df) {
572             st->codec->codec_type = CODEC_TYPE_AUDIO;
573             st->codec->codec_id = CODEC_ID_MP2;
574         } else if (code == 0x1bd) {
575             st->codec->codec_type = CODEC_TYPE_AUDIO;
576             st->codec->codec_id = CODEC_ID_AC3;
577         }
578     }
579
580     return st;
581 }
582
583 static void pmt_cb(MpegTSFilter *filter, const uint8_t *section, int section_len)
584 {
585     MpegTSContext *ts = filter->u.section_filter.opaque;
586     SectionHeader h1, *h = &h1;
587     PESContext *pes;
588     AVStream *st;
589     const uint8_t *p, *p_end, *desc_list_end, *desc_end;
590     int program_info_length, pcr_pid, pid, stream_type;
591     int desc_list_len, desc_len, desc_tag;
592     int comp_page, anc_page;
593     char language[4];
594     uint32_t prog_reg_desc = 0; /* registration descriptor */
595
596 #ifdef DEBUG
597     dprintf(ts->stream, "PMT: len %i\n", section_len);
598     av_hex_dump_log(ts->stream, AV_LOG_DEBUG, (uint8_t *)section, section_len);
599 #endif
600
601     p_end = section + section_len - 4;
602     p = section;
603     if (parse_section_header(h, &p, p_end) < 0)
604         return;
605
606     dprintf(ts->stream, "sid=0x%x sec_num=%d/%d\n",
607            h->id, h->sec_num, h->last_sec_num);
608
609     if (h->tid != PMT_TID)
610         return;
611
612     clear_program(ts, h->id);
613     pcr_pid = get16(&p, p_end) & 0x1fff;
614     if (pcr_pid < 0)
615         return;
616     add_pid_to_pmt(ts, h->id, pcr_pid);
617
618     dprintf(ts->stream, "pcr_pid=0x%x\n", pcr_pid);
619
620     program_info_length = get16(&p, p_end) & 0xfff;
621     if (program_info_length < 0)
622         return;
623     while(program_info_length >= 2) {
624         uint8_t tag, len;
625         tag = get8(&p, p_end);
626         len = get8(&p, p_end);
627         if(len > program_info_length - 2)
628             //something else is broken, exit the program_descriptors_loop
629             break;
630         program_info_length -= len + 2;
631         if(tag == 0x05 && len >= 4) { // registration descriptor
632             prog_reg_desc = bytestream_get_le32(&p);
633             len -= 4;
634         }
635         p += len;
636     }
637     p += program_info_length;
638     if (p >= p_end)
639         return;
640     for(;;) {
641         st = 0;
642         stream_type = get8(&p, p_end);
643         if (stream_type < 0)
644             break;
645         pid = get16(&p, p_end) & 0x1fff;
646         if (pid < 0)
647             break;
648
649         /* now create ffmpeg stream */
650         if (ts->pids[pid] && ts->pids[pid]->type == MPEGTS_PES) {
651             pes = ts->pids[pid]->u.pes_filter.opaque;
652             st = pes->st;
653         } else {
654             if (ts->pids[pid]) mpegts_close_filter(ts, ts->pids[pid]); //wrongly added sdt filter probably
655             pes = add_pes_stream(ts, pid, pcr_pid, stream_type);
656             if (pes)
657                 st = new_pes_av_stream(pes, prog_reg_desc, 0);
658         }
659
660         if (!st)
661             return;
662
663         add_pid_to_pmt(ts, h->id, pid);
664
665         av_program_add_stream_index(ts->stream, h->id, st->index);
666
667         desc_list_len = get16(&p, p_end) & 0xfff;
668         if (desc_list_len < 0)
669             break;
670         desc_list_end = p + desc_list_len;
671         if (desc_list_end > p_end)
672             break;
673         for(;;) {
674             desc_tag = get8(&p, desc_list_end);
675             if (desc_tag < 0)
676                 break;
677             desc_len = get8(&p, desc_list_end);
678             if (desc_len < 0)
679                 break;
680             desc_end = p + desc_len;
681             if (desc_end > desc_list_end)
682                 break;
683
684             dprintf(ts->stream, "tag: 0x%02x len=%d\n",
685                    desc_tag, desc_len);
686
687             if (st->codec->codec_id == CODEC_ID_PROBE &&
688                 stream_type == STREAM_TYPE_PRIVATE_DATA)
689                 mpegts_find_stream_type(st, desc_tag, DESC_types);
690
691             switch(desc_tag) {
692             case 0x59: /* subtitling descriptor */
693                 language[0] = get8(&p, desc_end);
694                 language[1] = get8(&p, desc_end);
695                 language[2] = get8(&p, desc_end);
696                 language[3] = 0;
697                 get8(&p, desc_end);
698                 comp_page = get16(&p, desc_end);
699                 anc_page = get16(&p, desc_end);
700                 st->codec->sub_id = (anc_page << 16) | comp_page;
701                 av_metadata_set(&st->metadata, "language", language);
702                 break;
703             case 0x0a: /* ISO 639 language descriptor */
704                 language[0] = get8(&p, desc_end);
705                 language[1] = get8(&p, desc_end);
706                 language[2] = get8(&p, desc_end);
707                 language[3] = 0;
708                 av_metadata_set(&st->metadata, "language", language);
709                 break;
710             case 0x05: /* registration descriptor */
711                 st->codec->codec_tag = bytestream_get_le32(&p);
712                 dprintf(ts->stream, "reg_desc=%.4s\n", (char*)&st->codec->codec_tag);
713                 if (st->codec->codec_id == CODEC_ID_PROBE &&
714                     stream_type == STREAM_TYPE_PRIVATE_DATA)
715                     mpegts_find_stream_type(st, st->codec->codec_tag, REGD_types);
716                 break;
717             default:
718                 break;
719             }
720             p = desc_end;
721         }
722         p = desc_list_end;
723     }
724     /* all parameters are there */
725     ts->stop_parse++;
726     mpegts_close_filter(ts, filter);
727 }
728
729 static void pat_cb(MpegTSFilter *filter, const uint8_t *section, int section_len)
730 {
731     MpegTSContext *ts = filter->u.section_filter.opaque;
732     SectionHeader h1, *h = &h1;
733     const uint8_t *p, *p_end;
734     int sid, pmt_pid;
735
736 #ifdef DEBUG
737     dprintf(ts->stream, "PAT:\n");
738     av_hex_dump_log(ts->stream, AV_LOG_DEBUG, (uint8_t *)section, section_len);
739 #endif
740     p_end = section + section_len - 4;
741     p = section;
742     if (parse_section_header(h, &p, p_end) < 0)
743         return;
744     if (h->tid != PAT_TID)
745         return;
746
747     clear_programs(ts);
748     for(;;) {
749         sid = get16(&p, p_end);
750         if (sid < 0)
751             break;
752         pmt_pid = get16(&p, p_end) & 0x1fff;
753         if (pmt_pid < 0)
754             break;
755
756         dprintf(ts->stream, "sid=0x%x pid=0x%x\n", sid, pmt_pid);
757
758         if (sid == 0x0000) {
759             /* NIT info */
760         } else {
761             av_new_program(ts->stream, sid);
762             ts->stop_parse--;
763             mpegts_open_section_filter(ts, pmt_pid, pmt_cb, ts, 1);
764             add_pat_entry(ts, sid);
765             add_pid_to_pmt(ts, sid, 0); //add pat pid to program
766             add_pid_to_pmt(ts, sid, pmt_pid);
767         }
768     }
769     /* not found */
770     ts->stop_parse++;
771
772     mpegts_close_filter(ts, filter);
773 }
774
775 static void sdt_cb(MpegTSFilter *filter, const uint8_t *section, int section_len)
776 {
777     MpegTSContext *ts = filter->u.section_filter.opaque;
778     SectionHeader h1, *h = &h1;
779     const uint8_t *p, *p_end, *desc_list_end, *desc_end;
780     int onid, val, sid, desc_list_len, desc_tag, desc_len, service_type;
781     char *name, *provider_name;
782
783 #ifdef DEBUG
784     dprintf(ts->stream, "SDT:\n");
785     av_hex_dump_log(ts->stream, AV_LOG_DEBUG, (uint8_t *)section, section_len);
786 #endif
787
788     p_end = section + section_len - 4;
789     p = section;
790     if (parse_section_header(h, &p, p_end) < 0)
791         return;
792     if (h->tid != SDT_TID)
793         return;
794     onid = get16(&p, p_end);
795     if (onid < 0)
796         return;
797     val = get8(&p, p_end);
798     if (val < 0)
799         return;
800     for(;;) {
801         sid = get16(&p, p_end);
802         if (sid < 0)
803             break;
804         val = get8(&p, p_end);
805         if (val < 0)
806             break;
807         desc_list_len = get16(&p, p_end) & 0xfff;
808         if (desc_list_len < 0)
809             break;
810         desc_list_end = p + desc_list_len;
811         if (desc_list_end > p_end)
812             break;
813         for(;;) {
814             desc_tag = get8(&p, desc_list_end);
815             if (desc_tag < 0)
816                 break;
817             desc_len = get8(&p, desc_list_end);
818             desc_end = p + desc_len;
819             if (desc_end > desc_list_end)
820                 break;
821
822             dprintf(ts->stream, "tag: 0x%02x len=%d\n",
823                    desc_tag, desc_len);
824
825             switch(desc_tag) {
826             case 0x48:
827                 service_type = get8(&p, p_end);
828                 if (service_type < 0)
829                     break;
830                 provider_name = getstr8(&p, p_end);
831                 if (!provider_name)
832                     break;
833                 name = getstr8(&p, p_end);
834                 if (name) {
835                     AVProgram *program = av_new_program(ts->stream, sid);
836                     if(program) {
837                         av_metadata_set(&program->metadata, "name", name);
838                         av_metadata_set(&program->metadata, "provider_name", provider_name);
839                     }
840                 }
841                 av_free(name);
842                 av_free(provider_name);
843                 break;
844             default:
845                 break;
846             }
847             p = desc_end;
848         }
849         p = desc_list_end;
850     }
851 }
852
853 static int64_t get_pts(const uint8_t *p)
854 {
855     int64_t pts = (int64_t)((p[0] >> 1) & 0x07) << 30;
856     pts |= (AV_RB16(p + 1) >> 1) << 15;
857     pts |=  AV_RB16(p + 3) >> 1;
858     return pts;
859 }
860
861 static void new_pes_packet(PESContext *pes, AVPacket *pkt)
862 {
863     av_init_packet(pkt);
864
865     pkt->destruct = av_destruct_packet;
866     pkt->data = pes->buffer;
867     pkt->size = pes->data_index;
868     memset(pkt->data+pkt->size, 0, FF_INPUT_BUFFER_PADDING_SIZE);
869
870     pkt->stream_index = pes->st->index;
871     pkt->pts = pes->pts;
872     pkt->dts = pes->dts;
873     /* store position of first TS packet of this PES packet */
874     pkt->pos = pes->ts_packet_pos;
875
876     /* reset pts values */
877     pes->pts = AV_NOPTS_VALUE;
878     pes->dts = AV_NOPTS_VALUE;
879     pes->buffer = NULL;
880     pes->data_index = 0;
881 }
882
883 /* return non zero if a packet could be constructed */
884 static int mpegts_push_data(MpegTSFilter *filter,
885                             const uint8_t *buf, int buf_size, int is_start,
886                             int64_t pos)
887 {
888     PESContext *pes = filter->u.pes_filter.opaque;
889     MpegTSContext *ts = pes->ts;
890     const uint8_t *p;
891     int len, code;
892
893     if(!ts->pkt)
894         return 0;
895
896     if (is_start) {
897         if (pes->state == MPEGTS_PAYLOAD && pes->data_index > 0) {
898             new_pes_packet(pes, ts->pkt);
899             ts->stop_parse = 1;
900         }
901         pes->state = MPEGTS_HEADER;
902         pes->data_index = 0;
903         pes->ts_packet_pos = pos;
904     }
905     p = buf;
906     while (buf_size > 0) {
907         switch(pes->state) {
908         case MPEGTS_HEADER:
909             len = PES_START_SIZE - pes->data_index;
910             if (len > buf_size)
911                 len = buf_size;
912             memcpy(pes->header + pes->data_index, p, len);
913             pes->data_index += len;
914             p += len;
915             buf_size -= len;
916             if (pes->data_index == PES_START_SIZE) {
917                 /* we got all the PES or section header. We can now
918                    decide */
919 #if 0
920                 av_hex_dump_log(pes->stream, AV_LOG_DEBUG, pes->header, pes->data_index);
921 #endif
922                 if (pes->header[0] == 0x00 && pes->header[1] == 0x00 &&
923                     pes->header[2] == 0x01) {
924                     /* it must be an mpeg2 PES stream */
925                     code = pes->header[3] | 0x100;
926
927                     /* stream not present in PMT */
928                     if (!pes->st)
929                         pes->st = new_pes_av_stream(pes, 0, code);
930                     if (!pes->st)
931                         return AVERROR(ENOMEM);
932
933                     if (pes->st->discard == AVDISCARD_ALL ||
934                         !((code >= 0x1c0 && code <= 0x1df) ||
935                           (code >= 0x1e0 && code <= 0x1ef) ||
936                           (code == 0x1bd) || (code == 0x1fd)))
937                         goto skip;
938                     pes->state = MPEGTS_PESHEADER_FILL;
939                     pes->total_size = AV_RB16(pes->header + 4);
940                     /* NOTE: a zero total size means the PES size is
941                        unbounded */
942                     pes->pes_header_size = pes->header[8] + 9;
943                 } else {
944                     /* otherwise, it should be a table */
945                     /* skip packet */
946                 skip:
947                     pes->state = MPEGTS_SKIP;
948                     continue;
949                 }
950             }
951             break;
952             /**********************************************/
953             /* PES packing parsing */
954         case MPEGTS_PESHEADER_FILL:
955             len = pes->pes_header_size - pes->data_index;
956             if (len < 0)
957                 return -1;
958             if (len > buf_size)
959                 len = buf_size;
960             memcpy(pes->header + pes->data_index, p, len);
961             pes->data_index += len;
962             p += len;
963             buf_size -= len;
964             if (pes->data_index == pes->pes_header_size) {
965                 const uint8_t *r;
966                 unsigned int flags;
967
968                 flags = pes->header[7];
969                 r = pes->header + 9;
970                 pes->pts = AV_NOPTS_VALUE;
971                 pes->dts = AV_NOPTS_VALUE;
972                 if ((flags & 0xc0) == 0x80) {
973                     pes->dts = pes->pts = get_pts(r);
974                     r += 5;
975                 } else if ((flags & 0xc0) == 0xc0) {
976                     pes->pts = get_pts(r);
977                     r += 5;
978                     pes->dts = get_pts(r);
979                     r += 5;
980                 }
981
982                 if (pes->total_size > pes->data_index - 6)
983                     pes->total_size -= pes->data_index - 6;
984                 else
985                     pes->total_size = MAX_PES_PAYLOAD;
986                 /* allocate pes buffer */
987                 pes->buffer = av_malloc(pes->total_size+FF_INPUT_BUFFER_PADDING_SIZE);
988                 if (!pes->buffer)
989                     return AVERROR(ENOMEM);
990
991                 /* we got the full header. We parse it and get the payload */
992                 pes->state = MPEGTS_PAYLOAD;
993                 pes->data_index = 0;
994             }
995             break;
996         case MPEGTS_PAYLOAD:
997             if (buf_size > 0) {
998                 if (pes->data_index+buf_size > pes->total_size) {
999                     new_pes_packet(pes, ts->pkt);
1000                     pes->total_size = MAX_PES_PAYLOAD;
1001                     pes->buffer = av_malloc(pes->total_size+FF_INPUT_BUFFER_PADDING_SIZE);
1002                     if (!pes->buffer)
1003                         return AVERROR(ENOMEM);
1004                     ts->stop_parse = 1;
1005                 }
1006                 memcpy(pes->buffer+pes->data_index, p, buf_size);
1007                 pes->data_index += buf_size;
1008             }
1009             buf_size = 0;
1010             break;
1011         case MPEGTS_SKIP:
1012             buf_size = 0;
1013             break;
1014         }
1015     }
1016
1017     return 0;
1018 }
1019
1020 static PESContext *add_pes_stream(MpegTSContext *ts, int pid, int pcr_pid, int stream_type)
1021 {
1022     MpegTSFilter *tss;
1023     PESContext *pes;
1024
1025     /* if no pid found, then add a pid context */
1026     pes = av_mallocz(sizeof(PESContext));
1027     if (!pes)
1028         return 0;
1029     pes->ts = ts;
1030     pes->stream = ts->stream;
1031     pes->pid = pid;
1032     pes->pcr_pid = pcr_pid;
1033     pes->stream_type = stream_type;
1034     tss = mpegts_open_pes_filter(ts, pid, mpegts_push_data, pes);
1035     if (!tss) {
1036         av_free(pes);
1037         return 0;
1038     }
1039     return pes;
1040 }
1041
1042 /* handle one TS packet */
1043 static int handle_packet(MpegTSContext *ts, const uint8_t *packet)
1044 {
1045     AVFormatContext *s = ts->stream;
1046     MpegTSFilter *tss;
1047     int len, pid, cc, cc_ok, afc, is_start;
1048     const uint8_t *p, *p_end;
1049     int64_t pos;
1050
1051     pid = AV_RB16(packet + 1) & 0x1fff;
1052     if(pid && discard_pid(ts, pid))
1053         return 0;
1054     is_start = packet[1] & 0x40;
1055     tss = ts->pids[pid];
1056     if (ts->auto_guess && tss == NULL && is_start) {
1057         add_pes_stream(ts, pid, -1, 0);
1058         tss = ts->pids[pid];
1059     }
1060     if (!tss)
1061         return 0;
1062
1063     /* continuity check (currently not used) */
1064     cc = (packet[3] & 0xf);
1065     cc_ok = (tss->last_cc < 0) || ((((tss->last_cc + 1) & 0x0f) == cc));
1066     tss->last_cc = cc;
1067
1068     /* skip adaptation field */
1069     afc = (packet[3] >> 4) & 3;
1070     p = packet + 4;
1071     if (afc == 0) /* reserved value */
1072         return 0;
1073     if (afc == 2) /* adaptation field only */
1074         return 0;
1075     if (afc == 3) {
1076         /* skip adapation field */
1077         p += p[0] + 1;
1078     }
1079     /* if past the end of packet, ignore */
1080     p_end = packet + TS_PACKET_SIZE;
1081     if (p >= p_end)
1082         return 0;
1083
1084     pos = url_ftell(ts->stream->pb);
1085     ts->pos47= pos % ts->raw_packet_size;
1086
1087     if (tss->type == MPEGTS_SECTION) {
1088         if (is_start) {
1089             /* pointer field present */
1090             len = *p++;
1091             if (p + len > p_end)
1092                 return 0;
1093             if (len && cc_ok) {
1094                 /* write remaining section bytes */
1095                 write_section_data(s, tss,
1096                                    p, len, 0);
1097                 /* check whether filter has been closed */
1098                 if (!ts->pids[pid])
1099                     return 0;
1100             }
1101             p += len;
1102             if (p < p_end) {
1103                 write_section_data(s, tss,
1104                                    p, p_end - p, 1);
1105             }
1106         } else {
1107             if (cc_ok) {
1108                 write_section_data(s, tss,
1109                                    p, p_end - p, 0);
1110             }
1111         }
1112     } else {
1113         int ret;
1114         // Note: The position here points actually behind the current packet.
1115         if ((ret = tss->u.pes_filter.pes_cb(tss, p, p_end - p, is_start,
1116                                             pos - ts->raw_packet_size)) < 0)
1117             return ret;
1118     }
1119
1120     return 0;
1121 }
1122
1123 /* XXX: try to find a better synchro over several packets (use
1124    get_packet_size() ?) */
1125 static int mpegts_resync(ByteIOContext *pb)
1126 {
1127     int c, i;
1128
1129     for(i = 0;i < MAX_RESYNC_SIZE; i++) {
1130         c = url_fgetc(pb);
1131         if (c < 0)
1132             return -1;
1133         if (c == 0x47) {
1134             url_fseek(pb, -1, SEEK_CUR);
1135             return 0;
1136         }
1137     }
1138     /* no sync found */
1139     return -1;
1140 }
1141
1142 /* return -1 if error or EOF. Return 0 if OK. */
1143 static int read_packet(ByteIOContext *pb, uint8_t *buf, int raw_packet_size)
1144 {
1145     int skip, len;
1146
1147     for(;;) {
1148         len = get_buffer(pb, buf, TS_PACKET_SIZE);
1149         if (len != TS_PACKET_SIZE)
1150             return AVERROR(EIO);
1151         /* check paquet sync byte */
1152         if (buf[0] != 0x47) {
1153             /* find a new packet start */
1154             url_fseek(pb, -TS_PACKET_SIZE, SEEK_CUR);
1155             if (mpegts_resync(pb) < 0)
1156                 return AVERROR_INVALIDDATA;
1157             else
1158                 continue;
1159         } else {
1160             skip = raw_packet_size - TS_PACKET_SIZE;
1161             if (skip > 0)
1162                 url_fskip(pb, skip);
1163             break;
1164         }
1165     }
1166     return 0;
1167 }
1168
1169 static int handle_packets(MpegTSContext *ts, int nb_packets)
1170 {
1171     AVFormatContext *s = ts->stream;
1172     ByteIOContext *pb = s->pb;
1173     uint8_t packet[TS_PACKET_SIZE];
1174     int packet_num, ret;
1175
1176     ts->stop_parse = 0;
1177     packet_num = 0;
1178     for(;;) {
1179         if (ts->stop_parse>0)
1180             break;
1181         packet_num++;
1182         if (nb_packets != 0 && packet_num >= nb_packets)
1183             break;
1184         ret = read_packet(pb, packet, ts->raw_packet_size);
1185         if (ret != 0)
1186             return ret;
1187         ret = handle_packet(ts, packet);
1188         if (ret != 0)
1189             return ret;
1190     }
1191     return 0;
1192 }
1193
1194 static int mpegts_probe(AVProbeData *p)
1195 {
1196 #if 1
1197     const int size= p->buf_size;
1198     int score, fec_score, dvhs_score;
1199     int check_count= size / TS_FEC_PACKET_SIZE;
1200 #define CHECK_COUNT 10
1201
1202     if (check_count < CHECK_COUNT)
1203         return -1;
1204
1205     score     = analyze(p->buf, TS_PACKET_SIZE     *check_count, TS_PACKET_SIZE     , NULL)*CHECK_COUNT/check_count;
1206     dvhs_score= analyze(p->buf, TS_DVHS_PACKET_SIZE*check_count, TS_DVHS_PACKET_SIZE, NULL)*CHECK_COUNT/check_count;
1207     fec_score = analyze(p->buf, TS_FEC_PACKET_SIZE *check_count, TS_FEC_PACKET_SIZE , NULL)*CHECK_COUNT/check_count;
1208 //    av_log(NULL, AV_LOG_DEBUG, "score: %d, dvhs_score: %d, fec_score: %d \n", score, dvhs_score, fec_score);
1209
1210 // we need a clear definition for the returned score otherwise things will become messy sooner or later
1211     if     (score > fec_score && score > dvhs_score && score > 6) return AVPROBE_SCORE_MAX + score     - CHECK_COUNT;
1212     else if(dvhs_score > score && dvhs_score > fec_score && dvhs_score > 6) return AVPROBE_SCORE_MAX + dvhs_score  - CHECK_COUNT;
1213     else if(                 fec_score > 6) return AVPROBE_SCORE_MAX + fec_score - CHECK_COUNT;
1214     else                                    return -1;
1215 #else
1216     /* only use the extension for safer guess */
1217     if (match_ext(p->filename, "ts"))
1218         return AVPROBE_SCORE_MAX;
1219     else
1220         return 0;
1221 #endif
1222 }
1223
1224 /* return the 90kHz PCR and the extension for the 27MHz PCR. return
1225    (-1) if not available */
1226 static int parse_pcr(int64_t *ppcr_high, int *ppcr_low,
1227                      const uint8_t *packet)
1228 {
1229     int afc, len, flags;
1230     const uint8_t *p;
1231     unsigned int v;
1232
1233     afc = (packet[3] >> 4) & 3;
1234     if (afc <= 1)
1235         return -1;
1236     p = packet + 4;
1237     len = p[0];
1238     p++;
1239     if (len == 0)
1240         return -1;
1241     flags = *p++;
1242     len--;
1243     if (!(flags & 0x10))
1244         return -1;
1245     if (len < 6)
1246         return -1;
1247     v = AV_RB32(p);
1248     *ppcr_high = ((int64_t)v << 1) | (p[4] >> 7);
1249     *ppcr_low = ((p[4] & 1) << 8) | p[5];
1250     return 0;
1251 }
1252
1253 static int mpegts_read_header(AVFormatContext *s,
1254                               AVFormatParameters *ap)
1255 {
1256     MpegTSContext *ts = s->priv_data;
1257     ByteIOContext *pb = s->pb;
1258     uint8_t buf[5*1024];
1259     int len;
1260     int64_t pos;
1261
1262     if (ap) {
1263         ts->mpeg2ts_compute_pcr = ap->mpeg2ts_compute_pcr;
1264         if(ap->mpeg2ts_raw){
1265             av_log(s, AV_LOG_ERROR, "use mpegtsraw_demuxer!\n");
1266             return -1;
1267         }
1268     }
1269
1270     /* read the first 1024 bytes to get packet size */
1271     pos = url_ftell(pb);
1272     len = get_buffer(pb, buf, sizeof(buf));
1273     if (len != sizeof(buf))
1274         goto fail;
1275     ts->raw_packet_size = get_packet_size(buf, sizeof(buf));
1276     if (ts->raw_packet_size <= 0)
1277         goto fail;
1278     ts->stream = s;
1279     ts->auto_guess = 0;
1280
1281     if (s->iformat == &mpegts_demuxer) {
1282         /* normal demux */
1283
1284         /* first do a scaning to get all the services */
1285         url_fseek(pb, pos, SEEK_SET);
1286
1287         mpegts_open_section_filter(ts, SDT_PID, sdt_cb, ts, 1);
1288
1289         mpegts_open_section_filter(ts, PAT_PID, pat_cb, ts, 1);
1290
1291         handle_packets(ts, s->probesize);
1292         /* if could not find service, enable auto_guess */
1293
1294         ts->auto_guess = 1;
1295
1296         dprintf(ts->stream, "tuning done\n");
1297
1298         s->ctx_flags |= AVFMTCTX_NOHEADER;
1299     } else {
1300         AVStream *st;
1301         int pcr_pid, pid, nb_packets, nb_pcrs, ret, pcr_l;
1302         int64_t pcrs[2], pcr_h;
1303         int packet_count[2];
1304         uint8_t packet[TS_PACKET_SIZE];
1305
1306         /* only read packets */
1307
1308         st = av_new_stream(s, 0);
1309         if (!st)
1310             goto fail;
1311         av_set_pts_info(st, 60, 1, 27000000);
1312         st->codec->codec_type = CODEC_TYPE_DATA;
1313         st->codec->codec_id = CODEC_ID_MPEG2TS;
1314
1315         /* we iterate until we find two PCRs to estimate the bitrate */
1316         pcr_pid = -1;
1317         nb_pcrs = 0;
1318         nb_packets = 0;
1319         for(;;) {
1320             ret = read_packet(s->pb, packet, ts->raw_packet_size);
1321             if (ret < 0)
1322                 return -1;
1323             pid = AV_RB16(packet + 1) & 0x1fff;
1324             if ((pcr_pid == -1 || pcr_pid == pid) &&
1325                 parse_pcr(&pcr_h, &pcr_l, packet) == 0) {
1326                 pcr_pid = pid;
1327                 packet_count[nb_pcrs] = nb_packets;
1328                 pcrs[nb_pcrs] = pcr_h * 300 + pcr_l;
1329                 nb_pcrs++;
1330                 if (nb_pcrs >= 2)
1331                     break;
1332             }
1333             nb_packets++;
1334         }
1335
1336         /* NOTE1: the bitrate is computed without the FEC */
1337         /* NOTE2: it is only the bitrate of the start of the stream */
1338         ts->pcr_incr = (pcrs[1] - pcrs[0]) / (packet_count[1] - packet_count[0]);
1339         ts->cur_pcr = pcrs[0] - ts->pcr_incr * packet_count[0];
1340         s->bit_rate = (TS_PACKET_SIZE * 8) * 27e6 / ts->pcr_incr;
1341         st->codec->bit_rate = s->bit_rate;
1342         st->start_time = ts->cur_pcr;
1343 #if 0
1344         av_log(ts->stream, AV_LOG_DEBUG, "start=%0.3f pcr=%0.3f incr=%d\n",
1345                st->start_time / 1000000.0, pcrs[0] / 27e6, ts->pcr_incr);
1346 #endif
1347     }
1348
1349     url_fseek(pb, pos, SEEK_SET);
1350     return 0;
1351  fail:
1352     return -1;
1353 }
1354
1355 #define MAX_PACKET_READAHEAD ((128 * 1024) / 188)
1356
1357 static int mpegts_raw_read_packet(AVFormatContext *s,
1358                                   AVPacket *pkt)
1359 {
1360     MpegTSContext *ts = s->priv_data;
1361     int ret, i;
1362     int64_t pcr_h, next_pcr_h, pos;
1363     int pcr_l, next_pcr_l;
1364     uint8_t pcr_buf[12];
1365
1366     if (av_new_packet(pkt, TS_PACKET_SIZE) < 0)
1367         return AVERROR(ENOMEM);
1368     pkt->pos= url_ftell(s->pb);
1369     ret = read_packet(s->pb, pkt->data, ts->raw_packet_size);
1370     if (ret < 0) {
1371         av_free_packet(pkt);
1372         return ret;
1373     }
1374     if (ts->mpeg2ts_compute_pcr) {
1375         /* compute exact PCR for each packet */
1376         if (parse_pcr(&pcr_h, &pcr_l, pkt->data) == 0) {
1377             /* we read the next PCR (XXX: optimize it by using a bigger buffer */
1378             pos = url_ftell(s->pb);
1379             for(i = 0; i < MAX_PACKET_READAHEAD; i++) {
1380                 url_fseek(s->pb, pos + i * ts->raw_packet_size, SEEK_SET);
1381                 get_buffer(s->pb, pcr_buf, 12);
1382                 if (parse_pcr(&next_pcr_h, &next_pcr_l, pcr_buf) == 0) {
1383                     /* XXX: not precise enough */
1384                     ts->pcr_incr = ((next_pcr_h - pcr_h) * 300 + (next_pcr_l - pcr_l)) /
1385                         (i + 1);
1386                     break;
1387                 }
1388             }
1389             url_fseek(s->pb, pos, SEEK_SET);
1390             /* no next PCR found: we use previous increment */
1391             ts->cur_pcr = pcr_h * 300 + pcr_l;
1392         }
1393         pkt->pts = ts->cur_pcr;
1394         pkt->duration = ts->pcr_incr;
1395         ts->cur_pcr += ts->pcr_incr;
1396     }
1397     pkt->stream_index = 0;
1398     return 0;
1399 }
1400
1401 static int mpegts_read_packet(AVFormatContext *s,
1402                               AVPacket *pkt)
1403 {
1404     MpegTSContext *ts = s->priv_data;
1405     int ret, i;
1406
1407     if (url_ftell(s->pb) != ts->last_pos) {
1408         /* seek detected, flush pes buffer */
1409         for (i = 0; i < NB_PID_MAX; i++) {
1410             if (ts->pids[i] && ts->pids[i]->type == MPEGTS_PES) {
1411                 PESContext *pes = ts->pids[i]->u.pes_filter.opaque;
1412                 av_freep(&pes->buffer);
1413                 pes->data_index = 0;
1414                 pes->state = MPEGTS_SKIP; /* skip until pes header */
1415             }
1416         }
1417     }
1418
1419     ts->pkt = pkt;
1420     ret = handle_packets(ts, 0);
1421     if (ret < 0) {
1422         /* flush pes data left */
1423         for (i = 0; i < NB_PID_MAX; i++) {
1424             if (ts->pids[i] && ts->pids[i]->type == MPEGTS_PES) {
1425                 PESContext *pes = ts->pids[i]->u.pes_filter.opaque;
1426                 if (pes->state == MPEGTS_PAYLOAD && pes->data_index > 0) {
1427                     new_pes_packet(pes, pkt);
1428                     ret = 0;
1429                     break;
1430                 }
1431             }
1432         }
1433     }
1434
1435     ts->last_pos = url_ftell(s->pb);
1436
1437     return ret;
1438 }
1439
1440 static int mpegts_read_close(AVFormatContext *s)
1441 {
1442     MpegTSContext *ts = s->priv_data;
1443     int i;
1444
1445     clear_programs(ts);
1446
1447     for(i=0;i<NB_PID_MAX;i++)
1448         if (ts->pids[i]) mpegts_close_filter(ts, ts->pids[i]);
1449
1450     return 0;
1451 }
1452
1453 static int64_t mpegts_get_pcr(AVFormatContext *s, int stream_index,
1454                               int64_t *ppos, int64_t pos_limit)
1455 {
1456     MpegTSContext *ts = s->priv_data;
1457     int64_t pos, timestamp;
1458     uint8_t buf[TS_PACKET_SIZE];
1459     int pcr_l, pcr_pid = ((PESContext*)s->streams[stream_index]->priv_data)->pcr_pid;
1460     const int find_next= 1;
1461     pos = ((*ppos  + ts->raw_packet_size - 1 - ts->pos47) / ts->raw_packet_size) * ts->raw_packet_size + ts->pos47;
1462     if (find_next) {
1463         for(;;) {
1464             url_fseek(s->pb, pos, SEEK_SET);
1465             if (get_buffer(s->pb, buf, TS_PACKET_SIZE) != TS_PACKET_SIZE)
1466                 return AV_NOPTS_VALUE;
1467             if ((pcr_pid < 0 || (AV_RB16(buf + 1) & 0x1fff) == pcr_pid) &&
1468                 parse_pcr(&timestamp, &pcr_l, buf) == 0) {
1469                 break;
1470             }
1471             pos += ts->raw_packet_size;
1472         }
1473     } else {
1474         for(;;) {
1475             pos -= ts->raw_packet_size;
1476             if (pos < 0)
1477                 return AV_NOPTS_VALUE;
1478             url_fseek(s->pb, pos, SEEK_SET);
1479             if (get_buffer(s->pb, buf, TS_PACKET_SIZE) != TS_PACKET_SIZE)
1480                 return AV_NOPTS_VALUE;
1481             if ((pcr_pid < 0 || (AV_RB16(buf + 1) & 0x1fff) == pcr_pid) &&
1482                 parse_pcr(&timestamp, &pcr_l, buf) == 0) {
1483                 break;
1484             }
1485         }
1486     }
1487     *ppos = pos;
1488
1489     return timestamp;
1490 }
1491
1492 static int read_seek(AVFormatContext *s, int stream_index, int64_t target_ts, int flags){
1493     MpegTSContext *ts = s->priv_data;
1494     uint8_t buf[TS_PACKET_SIZE];
1495     int64_t pos;
1496
1497     if(av_seek_frame_binary(s, stream_index, target_ts, flags) < 0)
1498         return -1;
1499
1500     pos= url_ftell(s->pb);
1501
1502     for(;;) {
1503         url_fseek(s->pb, pos, SEEK_SET);
1504         if (get_buffer(s->pb, buf, TS_PACKET_SIZE) != TS_PACKET_SIZE)
1505             return -1;
1506 //        pid = AV_RB16(buf + 1) & 0x1fff;
1507         if(buf[1] & 0x40) break;
1508         pos += ts->raw_packet_size;
1509     }
1510     url_fseek(s->pb, pos, SEEK_SET);
1511
1512     return 0;
1513 }
1514
1515 /**************************************************************/
1516 /* parsing functions - called from other demuxers such as RTP */
1517
1518 MpegTSContext *mpegts_parse_open(AVFormatContext *s)
1519 {
1520     MpegTSContext *ts;
1521
1522     ts = av_mallocz(sizeof(MpegTSContext));
1523     if (!ts)
1524         return NULL;
1525     /* no stream case, currently used by RTP */
1526     ts->raw_packet_size = TS_PACKET_SIZE;
1527     ts->stream = s;
1528     ts->auto_guess = 1;
1529     return ts;
1530 }
1531
1532 /* return the consumed length if a packet was output, or -1 if no
1533    packet is output */
1534 int mpegts_parse_packet(MpegTSContext *ts, AVPacket *pkt,
1535                         const uint8_t *buf, int len)
1536 {
1537     int len1;
1538
1539     len1 = len;
1540     ts->pkt = pkt;
1541     ts->stop_parse = 0;
1542     for(;;) {
1543         if (ts->stop_parse>0)
1544             break;
1545         if (len < TS_PACKET_SIZE)
1546             return -1;
1547         if (buf[0] != 0x47) {
1548             buf++;
1549             len--;
1550         } else {
1551             handle_packet(ts, buf);
1552             buf += TS_PACKET_SIZE;
1553             len -= TS_PACKET_SIZE;
1554         }
1555     }
1556     return len1 - len;
1557 }
1558
1559 void mpegts_parse_close(MpegTSContext *ts)
1560 {
1561     int i;
1562
1563     for(i=0;i<NB_PID_MAX;i++)
1564         av_free(ts->pids[i]);
1565     av_free(ts);
1566 }
1567
1568 AVInputFormat mpegts_demuxer = {
1569     "mpegts",
1570     NULL_IF_CONFIG_SMALL("MPEG-2 transport stream format"),
1571     sizeof(MpegTSContext),
1572     mpegts_probe,
1573     mpegts_read_header,
1574     mpegts_read_packet,
1575     mpegts_read_close,
1576     read_seek,
1577     mpegts_get_pcr,
1578     .flags = AVFMT_SHOW_IDS|AVFMT_TS_DISCONT,
1579 };
1580
1581 AVInputFormat mpegtsraw_demuxer = {
1582     "mpegtsraw",
1583     NULL_IF_CONFIG_SMALL("MPEG-2 raw transport stream format"),
1584     sizeof(MpegTSContext),
1585     NULL,
1586     mpegts_read_header,
1587     mpegts_raw_read_packet,
1588     mpegts_read_close,
1589     read_seek,
1590     mpegts_get_pcr,
1591     .flags = AVFMT_SHOW_IDS|AVFMT_TS_DISCONT,
1592 };