avformat/hlsenc: hls_start_number_source and start_number
[ffmpeg.git] / libavformat / hlsenc.c
1 /*
2  * Apple HTTP Live Streaming segmenter
3  * Copyright (c) 2012, Luca Barbato
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "config.h"
23 #include <float.h>
24 #include <stdint.h>
25 #if HAVE_UNISTD_H
26 #include <unistd.h>
27 #endif
28
29 #include "libavutil/avassert.h"
30 #include "libavutil/mathematics.h"
31 #include "libavutil/parseutils.h"
32 #include "libavutil/avstring.h"
33 #include "libavutil/opt.h"
34 #include "libavutil/log.h"
35 #include "libavutil/time_internal.h"
36
37 #include "avformat.h"
38 #include "avio_internal.h"
39 #include "internal.h"
40 #include "os_support.h"
41
42 typedef enum {
43   HLS_START_SEQUENCE_AS_START_NUMBER = 0,
44   HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH = 1,
45   HLS_START_SEQUENCE_AS_FORMATTED_DATETIME = 2,  // YYYYMMDDhhmmss
46 } StartSequenceSourceType;
47
48 #define KEYSIZE 16
49 #define LINE_BUFFER_SIZE 1024
50
51 typedef struct HLSSegment {
52     char filename[1024];
53     char sub_filename[1024];
54     double duration; /* in seconds */
55     int discont;
56     int64_t pos;
57     int64_t size;
58
59     char key_uri[LINE_BUFFER_SIZE + 1];
60     char iv_string[KEYSIZE*2 + 1];
61
62     struct HLSSegment *next;
63 } HLSSegment;
64
65 typedef enum HLSFlags {
66     // Generate a single media file and use byte ranges in the playlist.
67     HLS_SINGLE_FILE = (1 << 0),
68     HLS_DELETE_SEGMENTS = (1 << 1),
69     HLS_ROUND_DURATIONS = (1 << 2),
70     HLS_DISCONT_START = (1 << 3),
71     HLS_OMIT_ENDLIST = (1 << 4),
72     HLS_SPLIT_BY_TIME = (1 << 5),
73     HLS_APPEND_LIST = (1 << 6),
74     HLS_PROGRAM_DATE_TIME = (1 << 7),
75     HLS_SECOND_LEVEL_SEGMENT_INDEX = (1 << 8), // include segment index in segment filenames when use_localtime  e.g.: %%03d
76     HLS_SECOND_LEVEL_SEGMENT_DURATION = (1 << 9), // include segment duration (microsec) in segment filenames when use_localtime  e.g.: %%09t
77     HLS_SECOND_LEVEL_SEGMENT_SIZE = (1 << 10), // include segment size (bytes) in segment filenames when use_localtime  e.g.: %%014s
78 } HLSFlags;
79
80 typedef enum {
81     PLAYLIST_TYPE_NONE,
82     PLAYLIST_TYPE_EVENT,
83     PLAYLIST_TYPE_VOD,
84     PLAYLIST_TYPE_NB,
85 } PlaylistType;
86
87 typedef struct HLSContext {
88     const AVClass *class;  // Class for private options.
89     unsigned number;
90     int64_t sequence;
91     int64_t start_sequence;
92     uint32_t start_sequence_source_type;  // enum StartSequenceSourceType
93     AVOutputFormat *oformat;
94     AVOutputFormat *vtt_oformat;
95
96     AVFormatContext *avf;
97     AVFormatContext *vtt_avf;
98
99     float time;            // Set by a private option.
100     float init_time;       // Set by a private option.
101     int max_nb_segments;   // Set by a private option.
102     int  wrap;             // Set by a private option.
103     uint32_t flags;        // enum HLSFlags
104     uint32_t pl_type;      // enum PlaylistType
105     char *segment_filename;
106
107     int use_localtime;      ///< flag to expand filename with localtime
108     int use_localtime_mkdir;///< flag to mkdir dirname in timebased filename
109     int allowcache;
110     int64_t recording_time;
111     int has_video;
112     int has_subtitle;
113     int new_start;
114     double dpp;           // duration per packet
115     int64_t start_pts;
116     int64_t end_pts;
117     double duration;      // last segment duration computed so far, in seconds
118     int64_t start_pos;    // last segment starting position
119     int64_t size;         // last segment size
120     int64_t max_seg_size; // every segment file max size
121     int nb_entries;
122     int discontinuity_set;
123     int discontinuity;
124
125     HLSSegment *segments;
126     HLSSegment *last_segment;
127     HLSSegment *old_segments;
128
129     char *basename;
130     char *vtt_basename;
131     char *vtt_m3u8_name;
132     char *baseurl;
133     char *format_options_str;
134     char *vtt_format_options_str;
135     char *subtitle_filename;
136     AVDictionary *format_options;
137
138     char *key_info_file;
139     char key_file[LINE_BUFFER_SIZE + 1];
140     char key_uri[LINE_BUFFER_SIZE + 1];
141     char key_string[KEYSIZE*2 + 1];
142     char iv_string[KEYSIZE*2 + 1];
143     AVDictionary *vtt_format_options;
144
145     char *method;
146
147     double initial_prog_date_time;
148     char current_segment_final_filename_fmt[1024]; // when renaming segments
149 } HLSContext;
150
151 static int get_int_from_double(double val)
152 {
153     return (int)((val - (int)val) >= 0.001) ? (int)(val + 1) : (int)val;
154 }
155
156 static int mkdir_p(const char *path) {
157     int ret = 0;
158     char *temp = av_strdup(path);
159     char *pos = temp;
160     char tmp_ch = '\0';
161
162     if (!path || !temp) {
163         return -1;
164     }
165
166     if (!strncmp(temp, "/", 1) || !strncmp(temp, "\\", 1)) {
167         pos++;
168     } else if (!strncmp(temp, "./", 2) || !strncmp(temp, ".\\", 2)) {
169         pos += 2;
170     }
171
172     for ( ; *pos != '\0'; ++pos) {
173         if (*pos == '/' || *pos == '\\') {
174             tmp_ch = *pos;
175             *pos = '\0';
176             ret = mkdir(temp, 0755);
177             *pos = tmp_ch;
178         }
179     }
180
181     if ((*(pos - 1) != '/') || (*(pos - 1) != '\\')) {
182         ret = mkdir(temp, 0755);
183     }
184
185     av_free(temp);
186     return ret;
187 }
188
189 static int replace_int_data_in_filename(char *buf, int buf_size, const char *filename, char placeholder, int64_t number)
190 {
191     const char *p;
192     char *q, buf1[20], c;
193     int nd, len, addchar_count;
194     int found_count = 0;
195
196     q = buf;
197     p = filename;
198     for (;;) {
199         c = *p;
200         if (c == '\0')
201             break;
202         if (c == '%' && *(p+1) == '%')  // %%
203             addchar_count = 2;
204         else if (c == '%' && (av_isdigit(*(p+1)) || *(p+1) == placeholder)) {
205             nd = 0;
206             addchar_count = 1;
207             while (av_isdigit(*(p + addchar_count))) {
208                 nd = nd * 10 + *(p + addchar_count) - '0';
209                 addchar_count++;
210             }
211
212             if (*(p + addchar_count) == placeholder) {
213                 len = snprintf(buf1, sizeof(buf1), "%0*"PRId64, (number < 0) ? nd : nd++, number);
214                 if (len < 1)  // returned error or empty buf1
215                     goto fail;
216                 if ((q - buf + len) > buf_size - 1)
217                     goto fail;
218                 memcpy(q, buf1, len);
219                 q += len;
220                 p += (addchar_count + 1);
221                 addchar_count = 0;
222                 found_count++;
223             }
224
225         } else
226             addchar_count = 1;
227
228         while (addchar_count--)
229             if ((q - buf) < buf_size - 1)
230                 *q++ = *p++;
231             else
232                 goto fail;
233     }
234     *q = '\0';
235     return found_count;
236 fail:
237     *q = '\0';
238     return -1;
239 }
240
241 static int hls_delete_old_segments(HLSContext *hls) {
242
243     HLSSegment *segment, *previous_segment = NULL;
244     float playlist_duration = 0.0f;
245     int ret = 0, path_size, sub_path_size;
246     char *dirname = NULL, *p, *sub_path;
247     char *path = NULL;
248
249     segment = hls->segments;
250     while (segment) {
251         playlist_duration += segment->duration;
252         segment = segment->next;
253     }
254
255     segment = hls->old_segments;
256     while (segment) {
257         playlist_duration -= segment->duration;
258         previous_segment = segment;
259         segment = previous_segment->next;
260         if (playlist_duration <= -previous_segment->duration) {
261             previous_segment->next = NULL;
262             break;
263         }
264     }
265
266     if (segment && !hls->use_localtime_mkdir) {
267         if (hls->segment_filename) {
268             dirname = av_strdup(hls->segment_filename);
269         } else {
270             dirname = av_strdup(hls->avf->filename);
271         }
272         if (!dirname) {
273             ret = AVERROR(ENOMEM);
274             goto fail;
275         }
276         p = (char *)av_basename(dirname);
277         *p = '\0';
278     }
279
280     while (segment) {
281         av_log(hls, AV_LOG_DEBUG, "deleting old segment %s\n",
282                                   segment->filename);
283         path_size =  (hls->use_localtime_mkdir ? 0 : strlen(dirname)) + strlen(segment->filename) + 1;
284         path = av_malloc(path_size);
285         if (!path) {
286             ret = AVERROR(ENOMEM);
287             goto fail;
288         }
289
290         if (hls->use_localtime_mkdir)
291             av_strlcpy(path, segment->filename, path_size);
292         else { // segment->filename contains basename only
293             av_strlcpy(path, dirname, path_size);
294             av_strlcat(path, segment->filename, path_size);
295         }
296
297         if (unlink(path) < 0) {
298             av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
299                                      path, strerror(errno));
300         }
301
302         if ((segment->sub_filename[0] != '\0')) {
303             sub_path_size = strlen(segment->sub_filename) + 1 + (dirname ? strlen(dirname) : 0);
304             sub_path = av_malloc(sub_path_size);
305             if (!sub_path) {
306                 ret = AVERROR(ENOMEM);
307                 goto fail;
308             }
309
310             av_strlcpy(sub_path, dirname, sub_path_size);
311             av_strlcat(sub_path, segment->sub_filename, sub_path_size);
312             if (unlink(sub_path) < 0) {
313                 av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
314                                          sub_path, strerror(errno));
315             }
316             av_free(sub_path);
317         }
318         av_freep(&path);
319         previous_segment = segment;
320         segment = previous_segment->next;
321         av_free(previous_segment);
322     }
323
324 fail:
325     av_free(path);
326     av_free(dirname);
327
328     return ret;
329 }
330
331 static int hls_encryption_start(AVFormatContext *s)
332 {
333     HLSContext *hls = s->priv_data;
334     int ret;
335     AVIOContext *pb;
336     uint8_t key[KEYSIZE];
337
338     if ((ret = s->io_open(s, &pb, hls->key_info_file, AVIO_FLAG_READ, NULL)) < 0) {
339         av_log(hls, AV_LOG_ERROR,
340                 "error opening key info file %s\n", hls->key_info_file);
341         return ret;
342     }
343
344     ff_get_line(pb, hls->key_uri, sizeof(hls->key_uri));
345     hls->key_uri[strcspn(hls->key_uri, "\r\n")] = '\0';
346
347     ff_get_line(pb, hls->key_file, sizeof(hls->key_file));
348     hls->key_file[strcspn(hls->key_file, "\r\n")] = '\0';
349
350     ff_get_line(pb, hls->iv_string, sizeof(hls->iv_string));
351     hls->iv_string[strcspn(hls->iv_string, "\r\n")] = '\0';
352
353     ff_format_io_close(s, &pb);
354
355     if (!*hls->key_uri) {
356         av_log(hls, AV_LOG_ERROR, "no key URI specified in key info file\n");
357         return AVERROR(EINVAL);
358     }
359
360     if (!*hls->key_file) {
361         av_log(hls, AV_LOG_ERROR, "no key file specified in key info file\n");
362         return AVERROR(EINVAL);
363     }
364
365     if ((ret = s->io_open(s, &pb, hls->key_file, AVIO_FLAG_READ, NULL)) < 0) {
366         av_log(hls, AV_LOG_ERROR, "error opening key file %s\n", hls->key_file);
367         return ret;
368     }
369
370     ret = avio_read(pb, key, sizeof(key));
371     ff_format_io_close(s, &pb);
372     if (ret != sizeof(key)) {
373         av_log(hls, AV_LOG_ERROR, "error reading key file %s\n", hls->key_file);
374         if (ret >= 0 || ret == AVERROR_EOF)
375             ret = AVERROR(EINVAL);
376         return ret;
377     }
378     ff_data_to_hex(hls->key_string, key, sizeof(key), 0);
379
380     return 0;
381 }
382
383 static int read_chomp_line(AVIOContext *s, char *buf, int maxlen)
384 {
385     int len = ff_get_line(s, buf, maxlen);
386     while (len > 0 && av_isspace(buf[len - 1]))
387         buf[--len] = '\0';
388     return len;
389 }
390
391 static int hls_mux_init(AVFormatContext *s)
392 {
393     HLSContext *hls = s->priv_data;
394     AVFormatContext *oc;
395     AVFormatContext *vtt_oc = NULL;
396     int i, ret;
397
398     ret = avformat_alloc_output_context2(&hls->avf, hls->oformat, NULL, NULL);
399     if (ret < 0)
400         return ret;
401     oc = hls->avf;
402
403     oc->oformat            = hls->oformat;
404     oc->interrupt_callback = s->interrupt_callback;
405     oc->max_delay          = s->max_delay;
406     oc->opaque             = s->opaque;
407     oc->io_open            = s->io_open;
408     oc->io_close           = s->io_close;
409     av_dict_copy(&oc->metadata, s->metadata, 0);
410
411     if(hls->vtt_oformat) {
412         ret = avformat_alloc_output_context2(&hls->vtt_avf, hls->vtt_oformat, NULL, NULL);
413         if (ret < 0)
414             return ret;
415         vtt_oc          = hls->vtt_avf;
416         vtt_oc->oformat = hls->vtt_oformat;
417         av_dict_copy(&vtt_oc->metadata, s->metadata, 0);
418     }
419
420     for (i = 0; i < s->nb_streams; i++) {
421         AVStream *st;
422         AVFormatContext *loc;
423         if (s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE)
424             loc = vtt_oc;
425         else
426             loc = oc;
427
428         if (!(st = avformat_new_stream(loc, NULL)))
429             return AVERROR(ENOMEM);
430         avcodec_parameters_copy(st->codecpar, s->streams[i]->codecpar);
431         st->sample_aspect_ratio = s->streams[i]->sample_aspect_ratio;
432         st->time_base = s->streams[i]->time_base;
433     }
434     hls->start_pos = 0;
435     hls->new_start = 1;
436
437     return 0;
438 }
439
440 static HLSSegment *find_segment_by_filename(HLSSegment *segment, const char *filename)
441 {
442     while (segment) {
443         if (!av_strcasecmp(segment->filename,filename))
444             return segment;
445         segment = segment->next;
446     }
447     return (HLSSegment *) NULL;
448 }
449
450 /* Create a new segment and append it to the segment list */
451 static int hls_append_segment(struct AVFormatContext *s, HLSContext *hls, double duration,
452                               int64_t pos, int64_t size)
453 {
454     HLSSegment *en = av_malloc(sizeof(*en));
455     const char  *filename;
456     int ret;
457
458     if (!en)
459         return AVERROR(ENOMEM);
460
461     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
462         strlen(hls->current_segment_final_filename_fmt)) {
463         char * old_filename = av_strdup(hls->avf->filename);  // %%s will be %s after strftime
464         if (!old_filename) {
465             av_free(en);
466             return AVERROR(ENOMEM);
467         }
468         av_strlcpy(hls->avf->filename, hls->current_segment_final_filename_fmt, sizeof(hls->avf->filename));
469         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
470             char * filename = av_strdup(hls->avf->filename);  // %%s will be %s after strftime
471             if (!filename) {
472                 av_free(old_filename);
473                 av_free(en);
474                 return AVERROR(ENOMEM);
475             }
476             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
477                 filename, 's', pos + size) < 1) {
478                 av_log(hls, AV_LOG_ERROR,
479                        "Invalid second level segment filename template '%s', "
480                         "you can try to remove second_level_segment_size flag\n",
481                        filename);
482                 av_free(filename);
483                 av_free(old_filename);
484                 av_free(en);
485                 return AVERROR(EINVAL);
486             }
487             av_free(filename);
488         }
489         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
490             char * filename = av_strdup(hls->avf->filename);  // %%t will be %t after strftime
491             if (!filename) {
492                 av_free(old_filename);
493                 av_free(en);
494                 return AVERROR(ENOMEM);
495             }
496             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
497                 filename, 't',  (int64_t)round(1000000 * duration)) < 1) {
498                 av_log(hls, AV_LOG_ERROR,
499                        "Invalid second level segment filename template '%s', "
500                         "you can try to remove second_level_segment_time flag\n",
501                        filename);
502                 av_free(filename);
503                 av_free(old_filename);
504                 av_free(en);
505                 return AVERROR(EINVAL);
506             }
507             av_free(filename);
508         }
509         ff_rename(old_filename, hls->avf->filename, hls);
510         av_free(old_filename);
511     }
512
513
514     filename = av_basename(hls->avf->filename);
515
516     if (hls->use_localtime_mkdir) {
517         filename = hls->avf->filename;
518     }
519     if (find_segment_by_filename(hls->segments, filename)
520         || find_segment_by_filename(hls->old_segments, filename)) {
521         av_log(hls, AV_LOG_WARNING, "Duplicated segment filename detected: %s\n", filename);
522     }
523     av_strlcpy(en->filename, filename, sizeof(en->filename));
524
525     if(hls->has_subtitle)
526         av_strlcpy(en->sub_filename, av_basename(hls->vtt_avf->filename), sizeof(en->sub_filename));
527     else
528         en->sub_filename[0] = '\0';
529
530     en->duration = duration;
531     en->pos      = pos;
532     en->size     = size;
533     en->next     = NULL;
534     en->discont  = 0;
535
536     if (hls->discontinuity) {
537         en->discont = 1;
538         hls->discontinuity = 0;
539     }
540
541     if (hls->key_info_file) {
542         av_strlcpy(en->key_uri, hls->key_uri, sizeof(en->key_uri));
543         av_strlcpy(en->iv_string, hls->iv_string, sizeof(en->iv_string));
544     }
545
546     if (!hls->segments)
547         hls->segments = en;
548     else
549         hls->last_segment->next = en;
550
551     hls->last_segment = en;
552
553     // EVENT or VOD playlists imply sliding window cannot be used
554     if (hls->pl_type != PLAYLIST_TYPE_NONE)
555         hls->max_nb_segments = 0;
556
557     if (hls->max_nb_segments && hls->nb_entries >= hls->max_nb_segments) {
558         en = hls->segments;
559         hls->initial_prog_date_time += en->duration;
560         hls->segments = en->next;
561         if (en && hls->flags & HLS_DELETE_SEGMENTS &&
562                 !(hls->flags & HLS_SINGLE_FILE || hls->wrap)) {
563             en->next = hls->old_segments;
564             hls->old_segments = en;
565             if ((ret = hls_delete_old_segments(hls)) < 0)
566                 return ret;
567         } else
568             av_free(en);
569     } else
570         hls->nb_entries++;
571
572     if (hls->max_seg_size > 0) {
573         return 0;
574     }
575     hls->sequence++;
576
577     return 0;
578 }
579
580 static int parse_playlist(AVFormatContext *s, const char *url)
581 {
582     HLSContext *hls = s->priv_data;
583     AVIOContext *in;
584     int ret = 0, is_segment = 0;
585     int64_t new_start_pos;
586     char line[1024];
587     const char *ptr;
588
589     if ((ret = ffio_open_whitelist(&in, url, AVIO_FLAG_READ,
590                                    &s->interrupt_callback, NULL,
591                                    s->protocol_whitelist, s->protocol_blacklist)) < 0)
592         return ret;
593
594     read_chomp_line(in, line, sizeof(line));
595     if (strcmp(line, "#EXTM3U")) {
596         ret = AVERROR_INVALIDDATA;
597         goto fail;
598     }
599
600     hls->discontinuity = 0;
601     while (!avio_feof(in)) {
602         read_chomp_line(in, line, sizeof(line));
603         if (av_strstart(line, "#EXT-X-MEDIA-SEQUENCE:", &ptr)) {
604             int64_t tmp_sequence = strtoll(ptr, NULL, 10);
605             if (tmp_sequence < hls->sequence)
606               av_log(hls, AV_LOG_VERBOSE,
607                      "Found playlist sequence number was smaller """
608                      "than specified start sequence number: %"PRId64" < %"PRId64", "
609                      "omitting\n", tmp_sequence, hls->start_sequence);
610             else {
611               av_log(hls, AV_LOG_DEBUG, "Found playlist sequence number: %"PRId64"\n", tmp_sequence);
612               hls->sequence = tmp_sequence;
613             }
614         } else if (av_strstart(line, "#EXT-X-DISCONTINUITY", &ptr)) {
615             is_segment = 1;
616             hls->discontinuity = 1;
617         } else if (av_strstart(line, "#EXTINF:", &ptr)) {
618             is_segment = 1;
619             hls->duration = atof(ptr);
620         } else if (av_strstart(line, "#", NULL)) {
621             continue;
622         } else if (line[0]) {
623             if (is_segment) {
624                 is_segment = 0;
625                 new_start_pos = avio_tell(hls->avf->pb);
626                 hls->size = new_start_pos - hls->start_pos;
627                 av_strlcpy(hls->avf->filename, line, sizeof(line));
628                 ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
629                 if (ret < 0)
630                     goto fail;
631                 hls->start_pos = new_start_pos;
632             }
633         }
634     }
635
636 fail:
637     avio_close(in);
638     return ret;
639 }
640
641 static void hls_free_segments(HLSSegment *p)
642 {
643     HLSSegment *en;
644
645     while(p) {
646         en = p;
647         p = p->next;
648         av_free(en);
649     }
650 }
651
652 static void set_http_options(AVDictionary **options, HLSContext *c)
653 {
654     if (c->method)
655         av_dict_set(options, "method", c->method, 0);
656 }
657
658 static int hls_window(AVFormatContext *s, int last)
659 {
660     HLSContext *hls = s->priv_data;
661     HLSSegment *en;
662     int target_duration = 0;
663     int ret = 0;
664     AVIOContext *out = NULL;
665     AVIOContext *sub_out = NULL;
666     char temp_filename[1024];
667     int64_t sequence = FFMAX(hls->start_sequence, hls->sequence - hls->nb_entries);
668     int version = 3;
669     const char *proto = avio_find_protocol_name(s->filename);
670     int use_rename = proto && !strcmp(proto, "file");
671     static unsigned warned_non_file;
672     char *key_uri = NULL;
673     char *iv_string = NULL;
674     AVDictionary *options = NULL;
675     double prog_date_time = hls->initial_prog_date_time;
676     int byterange_mode = (hls->flags & HLS_SINGLE_FILE) || (hls->max_seg_size > 0);
677
678     if (byterange_mode) {
679         version = 4;
680         sequence = 0;
681     }
682
683     if (!use_rename && !warned_non_file++)
684         av_log(s, AV_LOG_ERROR, "Cannot use rename on non file protocol, this may lead to races and temporary partial files\n");
685
686     set_http_options(&options, hls);
687     snprintf(temp_filename, sizeof(temp_filename), use_rename ? "%s.tmp" : "%s", s->filename);
688     if ((ret = s->io_open(s, &out, temp_filename, AVIO_FLAG_WRITE, &options)) < 0)
689         goto fail;
690
691     for (en = hls->segments; en; en = en->next) {
692         if (target_duration <= en->duration)
693             target_duration = get_int_from_double(en->duration);
694     }
695
696     hls->discontinuity_set = 0;
697     avio_printf(out, "#EXTM3U\n");
698     avio_printf(out, "#EXT-X-VERSION:%d\n", version);
699     if (hls->allowcache == 0 || hls->allowcache == 1) {
700         avio_printf(out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
701     }
702     avio_printf(out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
703     avio_printf(out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
704     if (hls->pl_type == PLAYLIST_TYPE_EVENT) {
705         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:EVENT\n");
706     } else if (hls->pl_type == PLAYLIST_TYPE_VOD) {
707         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:VOD\n");
708     }
709
710     av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
711            sequence);
712     if((hls->flags & HLS_DISCONT_START) && sequence==hls->start_sequence && hls->discontinuity_set==0 ){
713         avio_printf(out, "#EXT-X-DISCONTINUITY\n");
714         hls->discontinuity_set = 1;
715     }
716     for (en = hls->segments; en; en = en->next) {
717         if (hls->key_info_file && (!key_uri || strcmp(en->key_uri, key_uri) ||
718                                     av_strcasecmp(en->iv_string, iv_string))) {
719             avio_printf(out, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\"", en->key_uri);
720             if (*en->iv_string)
721                 avio_printf(out, ",IV=0x%s", en->iv_string);
722             avio_printf(out, "\n");
723             key_uri = en->key_uri;
724             iv_string = en->iv_string;
725         }
726
727         if (en->discont) {
728             avio_printf(out, "#EXT-X-DISCONTINUITY\n");
729         }
730
731         if (hls->flags & HLS_ROUND_DURATIONS)
732             avio_printf(out, "#EXTINF:%ld,\n",  lrint(en->duration));
733         else
734             avio_printf(out, "#EXTINF:%f,\n", en->duration);
735         if (byterange_mode)
736              avio_printf(out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
737                          en->size, en->pos);
738         if (hls->flags & HLS_PROGRAM_DATE_TIME) {
739             time_t tt, wrongsecs;
740             int milli;
741             struct tm *tm, tmpbuf;
742             char buf0[128], buf1[128];
743             tt = (int64_t)prog_date_time;
744             milli = av_clip(lrint(1000*(prog_date_time - tt)), 0, 999);
745             tm = localtime_r(&tt, &tmpbuf);
746             strftime(buf0, sizeof(buf0), "%Y-%m-%dT%H:%M:%S", tm);
747             if (!strftime(buf1, sizeof(buf1), "%z", tm) || buf1[1]<'0' ||buf1[1]>'2') {
748                 int tz_min, dst = tm->tm_isdst;
749                 tm = gmtime_r(&tt, &tmpbuf);
750                 tm->tm_isdst = dst;
751                 wrongsecs = mktime(tm);
752                 tz_min = (abs(wrongsecs - tt) + 30) / 60;
753                 snprintf(buf1, sizeof(buf1),
754                          "%c%02d%02d",
755                          wrongsecs <= tt ? '+' : '-',
756                          tz_min / 60,
757                          tz_min % 60);
758             }
759             avio_printf(out, "#EXT-X-PROGRAM-DATE-TIME:%s.%03d%s\n", buf0, milli, buf1);
760             prog_date_time += en->duration;
761         }
762         if (hls->baseurl)
763             avio_printf(out, "%s", hls->baseurl);
764         avio_printf(out, "%s\n", en->filename);
765     }
766
767     if (last && (hls->flags & HLS_OMIT_ENDLIST)==0)
768         avio_printf(out, "#EXT-X-ENDLIST\n");
769
770     if( hls->vtt_m3u8_name ) {
771         if ((ret = s->io_open(s, &sub_out, hls->vtt_m3u8_name, AVIO_FLAG_WRITE, &options)) < 0)
772             goto fail;
773         avio_printf(sub_out, "#EXTM3U\n");
774         avio_printf(sub_out, "#EXT-X-VERSION:%d\n", version);
775         if (hls->allowcache == 0 || hls->allowcache == 1) {
776             avio_printf(sub_out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
777         }
778         avio_printf(sub_out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
779         avio_printf(sub_out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
780
781         av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
782                sequence);
783
784         for (en = hls->segments; en; en = en->next) {
785             avio_printf(sub_out, "#EXTINF:%f,\n", en->duration);
786             if (byterange_mode)
787                  avio_printf(sub_out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
788                          en->size, en->pos);
789             if (hls->baseurl)
790                 avio_printf(sub_out, "%s", hls->baseurl);
791             avio_printf(sub_out, "%s\n", en->sub_filename);
792         }
793
794         if (last)
795             avio_printf(sub_out, "#EXT-X-ENDLIST\n");
796
797     }
798
799 fail:
800     av_dict_free(&options);
801     ff_format_io_close(s, &out);
802     ff_format_io_close(s, &sub_out);
803     if (ret >= 0 && use_rename)
804         ff_rename(temp_filename, s->filename, s);
805     return ret;
806 }
807
808 static int hls_start(AVFormatContext *s)
809 {
810     HLSContext *c = s->priv_data;
811     AVFormatContext *oc = c->avf;
812     AVFormatContext *vtt_oc = c->vtt_avf;
813     AVDictionary *options = NULL;
814     char *filename, iv_string[KEYSIZE*2 + 1];
815     int err = 0;
816
817     if (c->flags & HLS_SINGLE_FILE) {
818         av_strlcpy(oc->filename, c->basename,
819                    sizeof(oc->filename));
820         if (c->vtt_basename)
821             av_strlcpy(vtt_oc->filename, c->vtt_basename,
822                   sizeof(vtt_oc->filename));
823     } else if (c->max_seg_size > 0) {
824         if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
825             c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
826                 av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s', you can try to use -use_localtime 1 with it\n", c->basename);
827                 return AVERROR(EINVAL);
828         }
829     } else {
830         if (c->use_localtime) {
831             time_t now0;
832             struct tm *tm, tmpbuf;
833             time(&now0);
834             tm = localtime_r(&now0, &tmpbuf);
835             if (!strftime(oc->filename, sizeof(oc->filename), c->basename, tm)) {
836                 av_log(oc, AV_LOG_ERROR, "Could not get segment filename with use_localtime\n");
837                 return AVERROR(EINVAL);
838             }
839             if (c->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
840                 char * filename = av_strdup(oc->filename);  // %%d will be %d after strftime
841                 if (!filename)
842                     return AVERROR(ENOMEM);
843                 if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
844                     filename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
845                     av_log(c, AV_LOG_ERROR,
846                            "Invalid second level segment filename template '%s', "
847                             "you can try to remove second_level_segment_index flag\n",
848                            filename);
849                     av_free(filename);
850                     return AVERROR(EINVAL);
851                 }
852                 av_free(filename);
853             }
854             if (c->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) {
855                 av_strlcpy(c->current_segment_final_filename_fmt, oc->filename,
856                            sizeof(c->current_segment_final_filename_fmt));
857                 if (c->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
858                     char * filename = av_strdup(oc->filename);  // %%s will be %s after strftime
859                     if (!filename)
860                         return AVERROR(ENOMEM);
861                     if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 's', 0) < 1) {
862                         av_log(c, AV_LOG_ERROR,
863                                "Invalid second level segment filename template '%s', "
864                                 "you can try to remove second_level_segment_size flag\n",
865                                filename);
866                         av_free(filename);
867                         return AVERROR(EINVAL);
868                     }
869                     av_free(filename);
870                 }
871                 if (c->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
872                     char * filename = av_strdup(oc->filename);  // %%t will be %t after strftime
873                     if (!filename)
874                         return AVERROR(ENOMEM);
875                     if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 't', 0) < 1) {
876                         av_log(c, AV_LOG_ERROR,
877                                "Invalid second level segment filename template '%s', "
878                                 "you can try to remove second_level_segment_time flag\n",
879                                filename);
880                         av_free(filename);
881                         return AVERROR(EINVAL);
882                     }
883                     av_free(filename);
884                 }
885             }
886             if (c->use_localtime_mkdir) {
887                 const char *dir;
888                 char *fn_copy = av_strdup(oc->filename);
889                 if (!fn_copy) {
890                     return AVERROR(ENOMEM);
891                 }
892                 dir = av_dirname(fn_copy);
893                 if (mkdir_p(dir) == -1 && errno != EEXIST) {
894                     av_log(oc, AV_LOG_ERROR, "Could not create directory %s with use_localtime_mkdir\n", dir);
895                     av_free(fn_copy);
896                     return AVERROR(errno);
897                 }
898                 av_free(fn_copy);
899             }
900         } else if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
901                    c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
902             av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s' you can try to use -use_localtime 1 with it\n", c->basename);
903             return AVERROR(EINVAL);
904         }
905         if( c->vtt_basename) {
906             if (replace_int_data_in_filename(vtt_oc->filename, sizeof(vtt_oc->filename),
907                 c->vtt_basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
908                 av_log(vtt_oc, AV_LOG_ERROR, "Invalid segment filename template '%s'\n", c->vtt_basename);
909                 return AVERROR(EINVAL);
910             }
911        }
912     }
913     c->number++;
914
915     set_http_options(&options, c);
916
917     if (c->key_info_file) {
918         if ((err = hls_encryption_start(s)) < 0)
919             goto fail;
920         if ((err = av_dict_set(&options, "encryption_key", c->key_string, 0))
921                 < 0)
922             goto fail;
923         err = av_strlcpy(iv_string, c->iv_string, sizeof(iv_string));
924         if (!err)
925             snprintf(iv_string, sizeof(iv_string), "%032"PRIx64, c->sequence);
926         if ((err = av_dict_set(&options, "encryption_iv", iv_string, 0)) < 0)
927            goto fail;
928
929         filename = av_asprintf("crypto:%s", oc->filename);
930         if (!filename) {
931             err = AVERROR(ENOMEM);
932             goto fail;
933         }
934         err = s->io_open(s, &oc->pb, filename, AVIO_FLAG_WRITE, &options);
935         av_free(filename);
936         av_dict_free(&options);
937         if (err < 0)
938             return err;
939     } else
940         if ((err = s->io_open(s, &oc->pb, oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
941             goto fail;
942     if (c->vtt_basename) {
943         set_http_options(&options, c);
944         if ((err = s->io_open(s, &vtt_oc->pb, vtt_oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
945             goto fail;
946     }
947     av_dict_free(&options);
948
949     /* We only require one PAT/PMT per segment. */
950     if (oc->oformat->priv_class && oc->priv_data) {
951         char period[21];
952
953         snprintf(period, sizeof(period), "%d", (INT_MAX / 2) - 1);
954
955         av_opt_set(oc->priv_data, "mpegts_flags", "resend_headers", 0);
956         av_opt_set(oc->priv_data, "sdt_period", period, 0);
957         av_opt_set(oc->priv_data, "pat_period", period, 0);
958     }
959
960     if (c->vtt_basename) {
961         err = avformat_write_header(vtt_oc,NULL);
962         if (err < 0)
963             return err;
964     }
965
966     return 0;
967 fail:
968     av_dict_free(&options);
969
970     return err;
971 }
972
973 static const char * get_default_pattern_localtime_fmt(void)
974 {
975     char b[21];
976     time_t t = time(NULL);
977     struct tm *p, tmbuf;
978     p = localtime_r(&t, &tmbuf);
979     // no %s support when strftime returned error or left format string unchanged
980     return (!strftime(b, sizeof(b), "%s", p) || !strcmp(b, "%s")) ? "-%Y%m%d%H%M%S.ts" : "-%s.ts";
981 }
982
983 static int hls_write_header(AVFormatContext *s)
984 {
985     HLSContext *hls = s->priv_data;
986     int ret, i;
987     char *p;
988     const char *pattern = "%d.ts";
989     const char *pattern_localtime_fmt = get_default_pattern_localtime_fmt();
990     const char *vtt_pattern = "%d.vtt";
991     AVDictionary *options = NULL;
992     int basename_size;
993     int vtt_basename_size;
994
995     if (hls->start_sequence_source_type == HLS_START_SEQUNCE_AS_SECONDS_SINCE_EPOCH || hls->start_sequence_source_type == HLS_START_SEQUNCE_AS_FORMATTED_DATETIME) {
996         time_t t = time(NULL); // we will need it in either case
997         if (hls->start_sequence_source_type == HLS_START_SEQUNCE_AS_SECONDS_SINCE_EPOCH) {
998             hls->start_sequence = (int64_t)t;
999         } else if (hls->start_sequence_source_type == HLS_START_SEQUNCE_AS_FORMATTED_DATETIME) {
1000             char b[15];
1001             struct tm *p, tmbuf;
1002             if (!(p = localtime_r(&t, &tmbuf)))
1003                 return AVERROR(ENOMEM);
1004             if (!strftime(b, sizeof(b), "%Y%m%d%H%M%S", p))
1005                 return AVERROR(ENOMEM);
1006             hls->start_sequence = strtoll(b, NULL, 10);
1007         }
1008         av_log(hls, AV_LOG_DEBUG, "start_number evaluated to %"PRId64"\n", hls->start_sequence);
1009     }
1010
1011     hls->sequence       = hls->start_sequence;
1012     hls->recording_time = (hls->init_time ? hls->init_time : hls->time) * AV_TIME_BASE;
1013     hls->start_pts      = AV_NOPTS_VALUE;
1014     hls->current_segment_final_filename_fmt[0] = '\0';
1015
1016     if (hls->flags & HLS_PROGRAM_DATE_TIME) {
1017         time_t now0;
1018         time(&now0);
1019         hls->initial_prog_date_time = now0;
1020     }
1021
1022     if (hls->format_options_str) {
1023         ret = av_dict_parse_string(&hls->format_options, hls->format_options_str, "=", ":", 0);
1024         if (ret < 0) {
1025             av_log(s, AV_LOG_ERROR, "Could not parse format options list '%s'\n", hls->format_options_str);
1026             goto fail;
1027         }
1028     }
1029
1030     for (i = 0; i < s->nb_streams; i++) {
1031         hls->has_video +=
1032             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1033         hls->has_subtitle +=
1034             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE;
1035     }
1036
1037     if (hls->has_video > 1)
1038         av_log(s, AV_LOG_WARNING,
1039                "More than a single video stream present, "
1040                "expect issues decoding it.\n");
1041
1042     hls->oformat = av_guess_format("mpegts", NULL, NULL);
1043
1044     if (!hls->oformat) {
1045         ret = AVERROR_MUXER_NOT_FOUND;
1046         goto fail;
1047     }
1048
1049     if(hls->has_subtitle) {
1050         hls->vtt_oformat = av_guess_format("webvtt", NULL, NULL);
1051         if (!hls->oformat) {
1052             ret = AVERROR_MUXER_NOT_FOUND;
1053             goto fail;
1054         }
1055     }
1056
1057     if (hls->segment_filename) {
1058         hls->basename = av_strdup(hls->segment_filename);
1059         if (!hls->basename) {
1060             ret = AVERROR(ENOMEM);
1061             goto fail;
1062         }
1063     } else {
1064         if (hls->flags & HLS_SINGLE_FILE)
1065             pattern = ".ts";
1066
1067         if (hls->use_localtime) {
1068             basename_size = strlen(s->filename) + strlen(pattern_localtime_fmt) + 1;
1069         } else {
1070             basename_size = strlen(s->filename) + strlen(pattern) + 1;
1071         }
1072         hls->basename = av_malloc(basename_size);
1073         if (!hls->basename) {
1074             ret = AVERROR(ENOMEM);
1075             goto fail;
1076         }
1077
1078         av_strlcpy(hls->basename, s->filename, basename_size);
1079
1080         p = strrchr(hls->basename, '.');
1081         if (p)
1082             *p = '\0';
1083         if (hls->use_localtime) {
1084             av_strlcat(hls->basename, pattern_localtime_fmt, basename_size);
1085         } else {
1086             av_strlcat(hls->basename, pattern, basename_size);
1087         }
1088     }
1089     if (!hls->use_localtime) {
1090         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
1091              av_log(hls, AV_LOG_ERROR,
1092                     "second_level_segment_duration hls_flag requires use_localtime to be true\n");
1093              ret = AVERROR(EINVAL);
1094              goto fail;
1095         }
1096         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
1097              av_log(hls, AV_LOG_ERROR,
1098                     "second_level_segment_size hls_flag requires use_localtime to be true\n");
1099              ret = AVERROR(EINVAL);
1100              goto fail;
1101         }
1102         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
1103             av_log(hls, AV_LOG_ERROR,
1104                    "second_level_segment_index hls_flag requires use_localtime to be true\n");
1105             ret = AVERROR(EINVAL);
1106             goto fail;
1107         }
1108     } else {
1109         const char *proto = avio_find_protocol_name(hls->basename);
1110         int segment_renaming_ok = proto && !strcmp(proto, "file");
1111
1112         if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) && !segment_renaming_ok) {
1113              av_log(hls, AV_LOG_ERROR,
1114                     "second_level_segment_duration hls_flag works only with file protocol segment names\n");
1115              ret = AVERROR(EINVAL);
1116              goto fail;
1117         }
1118         if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) && !segment_renaming_ok) {
1119              av_log(hls, AV_LOG_ERROR,
1120                     "second_level_segment_size hls_flag works only with file protocol segment names\n");
1121              ret = AVERROR(EINVAL);
1122              goto fail;
1123         }
1124     }
1125     if(hls->has_subtitle) {
1126
1127         if (hls->flags & HLS_SINGLE_FILE)
1128             vtt_pattern = ".vtt";
1129         vtt_basename_size = strlen(s->filename) + strlen(vtt_pattern) + 1;
1130         hls->vtt_basename = av_malloc(vtt_basename_size);
1131         if (!hls->vtt_basename) {
1132             ret = AVERROR(ENOMEM);
1133             goto fail;
1134         }
1135         hls->vtt_m3u8_name = av_malloc(vtt_basename_size);
1136         if (!hls->vtt_m3u8_name ) {
1137             ret = AVERROR(ENOMEM);
1138             goto fail;
1139         }
1140         av_strlcpy(hls->vtt_basename, s->filename, vtt_basename_size);
1141         p = strrchr(hls->vtt_basename, '.');
1142         if (p)
1143             *p = '\0';
1144
1145         if( hls->subtitle_filename ) {
1146             strcpy(hls->vtt_m3u8_name, hls->subtitle_filename);
1147         } else {
1148             strcpy(hls->vtt_m3u8_name, hls->vtt_basename);
1149             av_strlcat(hls->vtt_m3u8_name, "_vtt.m3u8", vtt_basename_size);
1150         }
1151         av_strlcat(hls->vtt_basename, vtt_pattern, vtt_basename_size);
1152     }
1153
1154     if ((ret = hls_mux_init(s)) < 0)
1155         goto fail;
1156
1157     if (hls->flags & HLS_APPEND_LIST) {
1158         parse_playlist(s, s->filename);
1159         hls->discontinuity = 1;
1160         if (hls->init_time > 0) {
1161             av_log(s, AV_LOG_WARNING, "append_list mode does not support hls_init_time,"
1162                    " hls_init_time value will have no effect\n");
1163             hls->init_time = 0;
1164             hls->recording_time = hls->time * AV_TIME_BASE;
1165         }
1166     }
1167
1168     if ((ret = hls_start(s)) < 0)
1169         goto fail;
1170
1171     av_dict_copy(&options, hls->format_options, 0);
1172     ret = avformat_write_header(hls->avf, &options);
1173     if (av_dict_count(options)) {
1174         av_log(s, AV_LOG_ERROR, "Some of provided format options in '%s' are not recognized\n", hls->format_options_str);
1175         ret = AVERROR(EINVAL);
1176         goto fail;
1177     }
1178     //av_assert0(s->nb_streams == hls->avf->nb_streams);
1179     for (i = 0; i < s->nb_streams; i++) {
1180         AVStream *inner_st;
1181         AVStream *outer_st = s->streams[i];
1182
1183         if (hls->max_seg_size > 0) {
1184             if ((outer_st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) &&
1185                 (outer_st->codecpar->bit_rate > hls->max_seg_size)) {
1186                 av_log(s, AV_LOG_WARNING, "Your video bitrate is bigger than hls_segment_size, "
1187                        "(%"PRId64 " > %"PRId64 "), the result maybe not be what you want.",
1188                        outer_st->codecpar->bit_rate, hls->max_seg_size);
1189             }
1190         }
1191
1192         if (outer_st->codecpar->codec_type != AVMEDIA_TYPE_SUBTITLE)
1193             inner_st = hls->avf->streams[i];
1194         else if (hls->vtt_avf)
1195             inner_st = hls->vtt_avf->streams[0];
1196         else {
1197             /* We have a subtitle stream, when the user does not want one */
1198             inner_st = NULL;
1199             continue;
1200         }
1201         avpriv_set_pts_info(outer_st, inner_st->pts_wrap_bits, inner_st->time_base.num, inner_st->time_base.den);
1202     }
1203 fail:
1204
1205     av_dict_free(&options);
1206     if (ret < 0) {
1207         av_freep(&hls->basename);
1208         av_freep(&hls->vtt_basename);
1209         if (hls->avf)
1210             avformat_free_context(hls->avf);
1211         if (hls->vtt_avf)
1212             avformat_free_context(hls->vtt_avf);
1213
1214     }
1215     return ret;
1216 }
1217
1218 static int hls_write_packet(AVFormatContext *s, AVPacket *pkt)
1219 {
1220     HLSContext *hls = s->priv_data;
1221     AVFormatContext *oc = NULL;
1222     AVStream *st = s->streams[pkt->stream_index];
1223     int64_t end_pts = hls->recording_time * hls->number;
1224     int is_ref_pkt = 1;
1225     int ret, can_split = 1;
1226     int stream_index = 0;
1227
1228     if (hls->sequence - hls->nb_entries > hls->start_sequence && hls->init_time > 0) {
1229         /* reset end_pts, hls->recording_time at end of the init hls list */
1230         int init_list_dur = hls->init_time * hls->nb_entries * AV_TIME_BASE;
1231         int after_init_list_dur = (hls->sequence - hls->nb_entries ) * hls->time * AV_TIME_BASE;
1232         hls->recording_time = hls->time * AV_TIME_BASE;
1233         end_pts = init_list_dur + after_init_list_dur ;
1234     }
1235
1236     if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE ) {
1237         oc = hls->vtt_avf;
1238         stream_index = 0;
1239     } else {
1240         oc = hls->avf;
1241         stream_index = pkt->stream_index;
1242     }
1243     if (hls->start_pts == AV_NOPTS_VALUE) {
1244         hls->start_pts = pkt->pts;
1245         hls->end_pts   = pkt->pts;
1246     }
1247
1248     if (hls->has_video) {
1249         can_split = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1250                     ((pkt->flags & AV_PKT_FLAG_KEY) || (hls->flags & HLS_SPLIT_BY_TIME));
1251         is_ref_pkt = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1252     }
1253     if (pkt->pts == AV_NOPTS_VALUE)
1254         is_ref_pkt = can_split = 0;
1255
1256     if (is_ref_pkt) {
1257         if (hls->new_start) {
1258             hls->new_start = 0;
1259             hls->duration = (double)(pkt->pts - hls->end_pts)
1260                                        * st->time_base.num / st->time_base.den;
1261             hls->dpp = (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1262             av_log(s, AV_LOG_ERROR, "hls->dpp = [%lf]\n", hls->dpp);
1263         } else {
1264             hls->duration += (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1265         }
1266
1267     }
1268     if (can_split && av_compare_ts(pkt->pts - hls->start_pts, st->time_base,
1269                                    end_pts, AV_TIME_BASE_Q) >= 0) {
1270         int64_t new_start_pos;
1271         av_write_frame(oc, NULL); /* Flush any buffered data */
1272
1273         new_start_pos = avio_tell(hls->avf->pb);
1274         hls->size = new_start_pos - hls->start_pos;
1275         ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
1276         hls->start_pos = new_start_pos;
1277         if (ret < 0)
1278             return ret;
1279
1280         hls->end_pts = pkt->pts;
1281         hls->duration = 0;
1282
1283         if (hls->flags & HLS_SINGLE_FILE) {
1284             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1285                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1286             hls->number++;
1287         } else if (hls->max_seg_size > 0) {
1288             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1289                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1290             if (hls->start_pos >= hls->max_seg_size) {
1291                 hls->sequence++;
1292                 ff_format_io_close(s, &oc->pb);
1293                 if (hls->vtt_avf)
1294                     ff_format_io_close(s, &hls->vtt_avf->pb);
1295                 ret = hls_start(s);
1296                 hls->start_pos = 0;
1297                 /* When split segment by byte, the duration is short than hls_time,
1298                  * so it is not enough one segment duration as hls_time, */
1299                 hls->number--;
1300             }
1301             hls->number++;
1302         } else {
1303             ff_format_io_close(s, &oc->pb);
1304             if (hls->vtt_avf)
1305                 ff_format_io_close(s, &hls->vtt_avf->pb);
1306
1307             ret = hls_start(s);
1308         }
1309
1310         if (ret < 0)
1311             return ret;
1312
1313         if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE )
1314             oc = hls->vtt_avf;
1315         else
1316         oc = hls->avf;
1317
1318         if ((ret = hls_window(s, 0)) < 0)
1319             return ret;
1320     }
1321
1322     ret = ff_write_chained(oc, stream_index, pkt, s, 0);
1323
1324     return ret;
1325 }
1326
1327 static int hls_write_trailer(struct AVFormatContext *s)
1328 {
1329     HLSContext *hls = s->priv_data;
1330     AVFormatContext *oc = hls->avf;
1331     AVFormatContext *vtt_oc = hls->vtt_avf;
1332
1333     av_write_trailer(oc);
1334     if (oc->pb) {
1335         hls->size = avio_tell(hls->avf->pb) - hls->start_pos;
1336         ff_format_io_close(s, &oc->pb);
1337         /* after av_write_trailer, then duration + 1 duration per packet */
1338         hls_append_segment(s, hls, hls->duration + hls->dpp, hls->start_pos, hls->size);
1339     }
1340
1341     if (vtt_oc) {
1342         if (vtt_oc->pb)
1343             av_write_trailer(vtt_oc);
1344         hls->size = avio_tell(hls->vtt_avf->pb) - hls->start_pos;
1345         ff_format_io_close(s, &vtt_oc->pb);
1346     }
1347     av_freep(&hls->basename);
1348     avformat_free_context(oc);
1349
1350     hls->avf = NULL;
1351     hls_window(s, 1);
1352
1353     if (vtt_oc) {
1354         av_freep(&hls->vtt_basename);
1355         av_freep(&hls->vtt_m3u8_name);
1356         avformat_free_context(vtt_oc);
1357     }
1358
1359     hls_free_segments(hls->segments);
1360     hls_free_segments(hls->old_segments);
1361     return 0;
1362 }
1363
1364 #define OFFSET(x) offsetof(HLSContext, x)
1365 #define E AV_OPT_FLAG_ENCODING_PARAM
1366 static const AVOption options[] = {
1367     {"start_number",  "set first number in the sequence",        OFFSET(start_sequence),AV_OPT_TYPE_INT64,  {.i64 = 0},     0, INT64_MAX, E},
1368     {"hls_time",      "set segment length in seconds",           OFFSET(time),    AV_OPT_TYPE_FLOAT,  {.dbl = 2},     0, FLT_MAX, E},
1369     {"hls_init_time", "set segment length in seconds at init list",           OFFSET(init_time),    AV_OPT_TYPE_FLOAT,  {.dbl = 0},     0, FLT_MAX, E},
1370     {"hls_list_size", "set maximum number of playlist entries",  OFFSET(max_nb_segments),    AV_OPT_TYPE_INT,    {.i64 = 5},     0, INT_MAX, E},
1371     {"hls_ts_options","set hls mpegts list of options for the container format used for hls", OFFSET(format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1372     {"hls_vtt_options","set hls vtt list of options for the container format used for hls", OFFSET(vtt_format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1373     {"hls_wrap",      "set number after which the index wraps",  OFFSET(wrap),    AV_OPT_TYPE_INT,    {.i64 = 0},     0, INT_MAX, E},
1374     {"hls_allow_cache", "explicitly set whether the client MAY (1) or MUST NOT (0) cache media segments", OFFSET(allowcache), AV_OPT_TYPE_INT, {.i64 = -1}, INT_MIN, INT_MAX, E},
1375     {"hls_base_url",  "url to prepend to each playlist entry",   OFFSET(baseurl), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,       E},
1376     {"hls_segment_filename", "filename template for segment files", OFFSET(segment_filename),   AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1377     {"hls_segment_size", "maximum size per segment file, (in bytes)",  OFFSET(max_seg_size),    AV_OPT_TYPE_INT,    {.i64 = 0},               0,       INT_MAX,   E},
1378     {"hls_key_info_file",    "file with key URI and key file path", OFFSET(key_info_file),      AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1379     {"hls_subtitle_path",     "set path of hls subtitles", OFFSET(subtitle_filename), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1380     {"hls_flags",     "set flags affecting HLS playlist and media file generation", OFFSET(flags), AV_OPT_TYPE_FLAGS, {.i64 = 0 }, 0, UINT_MAX, E, "flags"},
1381     {"single_file",   "generate a single media file indexed with byte ranges", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SINGLE_FILE }, 0, UINT_MAX,   E, "flags"},
1382     {"delete_segments", "delete segment files that are no longer part of the playlist", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DELETE_SEGMENTS }, 0, UINT_MAX,   E, "flags"},
1383     {"round_durations", "round durations in m3u8 to whole numbers", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_ROUND_DURATIONS }, 0, UINT_MAX,   E, "flags"},
1384     {"discont_start", "start the playlist with a discontinuity tag", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DISCONT_START }, 0, UINT_MAX,   E, "flags"},
1385     {"omit_endlist", "Do not append an endlist when ending stream", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_OMIT_ENDLIST }, 0, UINT_MAX,   E, "flags"},
1386     {"split_by_time", "split the hls segment by time which user set by hls_time", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SPLIT_BY_TIME }, 0, UINT_MAX,   E, "flags"},
1387     {"append_list", "append the new segments into old hls segment list", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_APPEND_LIST }, 0, UINT_MAX,   E, "flags"},
1388     {"program_date_time", "add EXT-X-PROGRAM-DATE-TIME", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_PROGRAM_DATE_TIME }, 0, UINT_MAX,   E, "flags"},
1389     {"second_level_segment_index", "include segment index in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_INDEX }, 0, UINT_MAX,   E, "flags"},
1390     {"second_level_segment_duration", "include segment duration in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_DURATION }, 0, UINT_MAX,   E, "flags"},
1391     {"second_level_segment_size", "include segment size in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_SIZE }, 0, UINT_MAX,   E, "flags"},
1392     {"use_localtime", "set filename expansion with strftime at segment creation", OFFSET(use_localtime), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1393     {"use_localtime_mkdir", "create last directory component in strftime-generated filename", OFFSET(use_localtime_mkdir), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1394     {"hls_playlist_type", "set the HLS playlist type", OFFSET(pl_type), AV_OPT_TYPE_INT, {.i64 = PLAYLIST_TYPE_NONE }, 0, PLAYLIST_TYPE_NB-1, E, "pl_type" },
1395     {"event", "EVENT playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_EVENT }, INT_MIN, INT_MAX, E, "pl_type" },
1396     {"vod", "VOD playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_VOD }, INT_MIN, INT_MAX, E, "pl_type" },
1397     {"method", "set the HTTP method", OFFSET(method), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1398     {"hls_start_number_source", "set source of first number in sequence", OFFSET(start_sequence_source_type), AV_OPT_TYPE_INT, {.i64 = HLS_START_SEQUNCE_AS_START_NUMBER }, 0, HLS_START_SEQUNCE_AS_FORMATTED_DATETIME, E, "start_sequence_source_type" },
1399     {"generic", "start_number value (default)", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUNCE_AS_START_NUMBER }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1400     {"epoch", "seconds since epoch", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUNCE_AS_SECONDS_SINCE_EPOCH }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1401     {"datetime", "current datetime as YYYYMMDDhhmmss", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUNCE_AS_FORMATTED_DATETIME }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1402     { NULL },
1403 };
1404
1405 static const AVClass hls_class = {
1406     .class_name = "hls muxer",
1407     .item_name  = av_default_item_name,
1408     .option     = options,
1409     .version    = LIBAVUTIL_VERSION_INT,
1410 };
1411
1412
1413 AVOutputFormat ff_hls_muxer = {
1414     .name           = "hls",
1415     .long_name      = NULL_IF_CONFIG_SMALL("Apple HTTP Live Streaming"),
1416     .extensions     = "m3u8",
1417     .priv_data_size = sizeof(HLSContext),
1418     .audio_codec    = AV_CODEC_ID_AAC,
1419     .video_codec    = AV_CODEC_ID_H264,
1420     .subtitle_codec = AV_CODEC_ID_WEBVTT,
1421     .flags          = AVFMT_NOFILE | AVFMT_ALLOW_FLUSH,
1422     .write_header   = hls_write_header,
1423     .write_packet   = hls_write_packet,
1424     .write_trailer  = hls_write_trailer,
1425     .priv_class     = &hls_class,
1426 };