avformat/hlsenc: fix bug of hlsenc http delete old segments
[ffmpeg.git] / libavformat / hlsenc.c
1 /*
2  * Apple HTTP Live Streaming segmenter
3  * Copyright (c) 2012, Luca Barbato
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include "config.h"
23 #include <float.h>
24 #include <stdint.h>
25 #if HAVE_UNISTD_H
26 #include <unistd.h>
27 #endif
28
29 #include "libavutil/avassert.h"
30 #include "libavutil/mathematics.h"
31 #include "libavutil/parseutils.h"
32 #include "libavutil/avstring.h"
33 #include "libavutil/opt.h"
34 #include "libavutil/log.h"
35 #include "libavutil/time_internal.h"
36
37 #include "avformat.h"
38 #include "avio_internal.h"
39 #include "internal.h"
40 #include "os_support.h"
41
42 typedef enum {
43   HLS_START_SEQUENCE_AS_START_NUMBER = 0,
44   HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH = 1,
45   HLS_START_SEQUENCE_AS_FORMATTED_DATETIME = 2,  // YYYYMMDDhhmmss
46 } StartSequenceSourceType;
47
48 #define KEYSIZE 16
49 #define LINE_BUFFER_SIZE 1024
50
51 typedef struct HLSSegment {
52     char filename[1024];
53     char sub_filename[1024];
54     double duration; /* in seconds */
55     int discont;
56     int64_t pos;
57     int64_t size;
58
59     char key_uri[LINE_BUFFER_SIZE + 1];
60     char iv_string[KEYSIZE*2 + 1];
61
62     struct HLSSegment *next;
63 } HLSSegment;
64
65 typedef enum HLSFlags {
66     // Generate a single media file and use byte ranges in the playlist.
67     HLS_SINGLE_FILE = (1 << 0),
68     HLS_DELETE_SEGMENTS = (1 << 1),
69     HLS_ROUND_DURATIONS = (1 << 2),
70     HLS_DISCONT_START = (1 << 3),
71     HLS_OMIT_ENDLIST = (1 << 4),
72     HLS_SPLIT_BY_TIME = (1 << 5),
73     HLS_APPEND_LIST = (1 << 6),
74     HLS_PROGRAM_DATE_TIME = (1 << 7),
75     HLS_SECOND_LEVEL_SEGMENT_INDEX = (1 << 8), // include segment index in segment filenames when use_localtime  e.g.: %%03d
76     HLS_SECOND_LEVEL_SEGMENT_DURATION = (1 << 9), // include segment duration (microsec) in segment filenames when use_localtime  e.g.: %%09t
77     HLS_SECOND_LEVEL_SEGMENT_SIZE = (1 << 10), // include segment size (bytes) in segment filenames when use_localtime  e.g.: %%014s
78 } HLSFlags;
79
80 typedef enum {
81     PLAYLIST_TYPE_NONE,
82     PLAYLIST_TYPE_EVENT,
83     PLAYLIST_TYPE_VOD,
84     PLAYLIST_TYPE_NB,
85 } PlaylistType;
86
87 typedef struct HLSContext {
88     const AVClass *class;  // Class for private options.
89     unsigned number;
90     int64_t sequence;
91     int64_t start_sequence;
92     uint32_t start_sequence_source_type;  // enum StartSequenceSourceType
93     AVOutputFormat *oformat;
94     AVOutputFormat *vtt_oformat;
95
96     AVFormatContext *avf;
97     AVFormatContext *vtt_avf;
98
99     float time;            // Set by a private option.
100     float init_time;       // Set by a private option.
101     int max_nb_segments;   // Set by a private option.
102     int  wrap;             // Set by a private option.
103     uint32_t flags;        // enum HLSFlags
104     uint32_t pl_type;      // enum PlaylistType
105     char *segment_filename;
106
107     int use_localtime;      ///< flag to expand filename with localtime
108     int use_localtime_mkdir;///< flag to mkdir dirname in timebased filename
109     int allowcache;
110     int64_t recording_time;
111     int has_video;
112     int has_subtitle;
113     int new_start;
114     double dpp;           // duration per packet
115     int64_t start_pts;
116     int64_t end_pts;
117     double duration;      // last segment duration computed so far, in seconds
118     int64_t start_pos;    // last segment starting position
119     int64_t size;         // last segment size
120     int64_t max_seg_size; // every segment file max size
121     int nb_entries;
122     int discontinuity_set;
123     int discontinuity;
124
125     HLSSegment *segments;
126     HLSSegment *last_segment;
127     HLSSegment *old_segments;
128
129     char *basename;
130     char *vtt_basename;
131     char *vtt_m3u8_name;
132     char *baseurl;
133     char *format_options_str;
134     char *vtt_format_options_str;
135     char *subtitle_filename;
136     AVDictionary *format_options;
137
138     char *key_info_file;
139     char key_file[LINE_BUFFER_SIZE + 1];
140     char key_uri[LINE_BUFFER_SIZE + 1];
141     char key_string[KEYSIZE*2 + 1];
142     char iv_string[KEYSIZE*2 + 1];
143     AVDictionary *vtt_format_options;
144
145     char *method;
146
147     double initial_prog_date_time;
148     char current_segment_final_filename_fmt[1024]; // when renaming segments
149 } HLSContext;
150
151 static int get_int_from_double(double val)
152 {
153     return (int)((val - (int)val) >= 0.001) ? (int)(val + 1) : (int)val;
154 }
155
156 static int mkdir_p(const char *path) {
157     int ret = 0;
158     char *temp = av_strdup(path);
159     char *pos = temp;
160     char tmp_ch = '\0';
161
162     if (!path || !temp) {
163         return -1;
164     }
165
166     if (!strncmp(temp, "/", 1) || !strncmp(temp, "\\", 1)) {
167         pos++;
168     } else if (!strncmp(temp, "./", 2) || !strncmp(temp, ".\\", 2)) {
169         pos += 2;
170     }
171
172     for ( ; *pos != '\0'; ++pos) {
173         if (*pos == '/' || *pos == '\\') {
174             tmp_ch = *pos;
175             *pos = '\0';
176             ret = mkdir(temp, 0755);
177             *pos = tmp_ch;
178         }
179     }
180
181     if ((*(pos - 1) != '/') || (*(pos - 1) != '\\')) {
182         ret = mkdir(temp, 0755);
183     }
184
185     av_free(temp);
186     return ret;
187 }
188
189 static int replace_int_data_in_filename(char *buf, int buf_size, const char *filename, char placeholder, int64_t number)
190 {
191     const char *p;
192     char *q, buf1[20], c;
193     int nd, len, addchar_count;
194     int found_count = 0;
195
196     q = buf;
197     p = filename;
198     for (;;) {
199         c = *p;
200         if (c == '\0')
201             break;
202         if (c == '%' && *(p+1) == '%')  // %%
203             addchar_count = 2;
204         else if (c == '%' && (av_isdigit(*(p+1)) || *(p+1) == placeholder)) {
205             nd = 0;
206             addchar_count = 1;
207             while (av_isdigit(*(p + addchar_count))) {
208                 nd = nd * 10 + *(p + addchar_count) - '0';
209                 addchar_count++;
210             }
211
212             if (*(p + addchar_count) == placeholder) {
213                 len = snprintf(buf1, sizeof(buf1), "%0*"PRId64, (number < 0) ? nd : nd++, number);
214                 if (len < 1)  // returned error or empty buf1
215                     goto fail;
216                 if ((q - buf + len) > buf_size - 1)
217                     goto fail;
218                 memcpy(q, buf1, len);
219                 q += len;
220                 p += (addchar_count + 1);
221                 addchar_count = 0;
222                 found_count++;
223             }
224
225         } else
226             addchar_count = 1;
227
228         while (addchar_count--)
229             if ((q - buf) < buf_size - 1)
230                 *q++ = *p++;
231             else
232                 goto fail;
233     }
234     *q = '\0';
235     return found_count;
236 fail:
237     *q = '\0';
238     return -1;
239 }
240
241 static int hls_delete_old_segments(HLSContext *hls) {
242
243     HLSSegment *segment, *previous_segment = NULL;
244     float playlist_duration = 0.0f;
245     int ret = 0, path_size, sub_path_size;
246     char *dirname = NULL, *p, *sub_path;
247     char *path = NULL;
248     AVDictionary *options = NULL;
249     AVIOContext *out = NULL;
250
251     segment = hls->segments;
252     while (segment) {
253         playlist_duration += segment->duration;
254         segment = segment->next;
255     }
256
257     segment = hls->old_segments;
258     while (segment) {
259         playlist_duration -= segment->duration;
260         previous_segment = segment;
261         segment = previous_segment->next;
262         if (playlist_duration <= -previous_segment->duration) {
263             previous_segment->next = NULL;
264             break;
265         }
266     }
267
268     if (segment && !hls->use_localtime_mkdir) {
269         if (hls->segment_filename) {
270             dirname = av_strdup(hls->segment_filename);
271         } else {
272             dirname = av_strdup(hls->avf->filename);
273         }
274         if (!dirname) {
275             ret = AVERROR(ENOMEM);
276             goto fail;
277         }
278         p = (char *)av_basename(dirname);
279         *p = '\0';
280     }
281
282     while (segment) {
283         av_log(hls, AV_LOG_DEBUG, "deleting old segment %s\n",
284                                   segment->filename);
285         path_size =  (hls->use_localtime_mkdir ? 0 : strlen(dirname)) + strlen(segment->filename) + 1;
286         path = av_malloc(path_size);
287         if (!path) {
288             ret = AVERROR(ENOMEM);
289             goto fail;
290         }
291
292         if (hls->use_localtime_mkdir)
293             av_strlcpy(path, segment->filename, path_size);
294         else { // segment->filename contains basename only
295             av_strlcpy(path, dirname, path_size);
296             av_strlcat(path, segment->filename, path_size);
297         }
298
299         if (hls->method) {
300             av_dict_set(&options, "method", "DELETE", 0);
301             if ((ret = hls->avf->io_open(hls->avf, &out, path, AVIO_FLAG_WRITE, &options)) < 0)
302                 goto fail;
303         } else if (unlink(path) < 0) {
304             av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
305                                      path, strerror(errno));
306         }
307
308         if ((segment->sub_filename[0] != '\0')) {
309             sub_path_size = strlen(segment->sub_filename) + 1 + (dirname ? strlen(dirname) : 0);
310             sub_path = av_malloc(sub_path_size);
311             if (!sub_path) {
312                 ret = AVERROR(ENOMEM);
313                 goto fail;
314             }
315
316             av_strlcpy(sub_path, dirname, sub_path_size);
317             av_strlcat(sub_path, segment->sub_filename, sub_path_size);
318
319             if (hls->method) {
320                 av_dict_set(&options, "method", "DELETE", 0);
321                 if ((ret = hls->avf->io_open(hls->avf, &out, sub_path, AVIO_FLAG_WRITE, &options)) < 0) {
322                     av_free(sub_path);
323                     goto fail;
324                 }
325             } else if (unlink(sub_path) < 0) {
326                 av_log(hls, AV_LOG_ERROR, "failed to delete old segment %s: %s\n",
327                                          sub_path, strerror(errno));
328             }
329             av_free(sub_path);
330         }
331         av_freep(&path);
332         previous_segment = segment;
333         segment = previous_segment->next;
334         av_free(previous_segment);
335     }
336
337 fail:
338     av_free(path);
339     av_free(dirname);
340
341     return ret;
342 }
343
344 static int hls_encryption_start(AVFormatContext *s)
345 {
346     HLSContext *hls = s->priv_data;
347     int ret;
348     AVIOContext *pb;
349     uint8_t key[KEYSIZE];
350
351     if ((ret = s->io_open(s, &pb, hls->key_info_file, AVIO_FLAG_READ, NULL)) < 0) {
352         av_log(hls, AV_LOG_ERROR,
353                 "error opening key info file %s\n", hls->key_info_file);
354         return ret;
355     }
356
357     ff_get_line(pb, hls->key_uri, sizeof(hls->key_uri));
358     hls->key_uri[strcspn(hls->key_uri, "\r\n")] = '\0';
359
360     ff_get_line(pb, hls->key_file, sizeof(hls->key_file));
361     hls->key_file[strcspn(hls->key_file, "\r\n")] = '\0';
362
363     ff_get_line(pb, hls->iv_string, sizeof(hls->iv_string));
364     hls->iv_string[strcspn(hls->iv_string, "\r\n")] = '\0';
365
366     ff_format_io_close(s, &pb);
367
368     if (!*hls->key_uri) {
369         av_log(hls, AV_LOG_ERROR, "no key URI specified in key info file\n");
370         return AVERROR(EINVAL);
371     }
372
373     if (!*hls->key_file) {
374         av_log(hls, AV_LOG_ERROR, "no key file specified in key info file\n");
375         return AVERROR(EINVAL);
376     }
377
378     if ((ret = s->io_open(s, &pb, hls->key_file, AVIO_FLAG_READ, NULL)) < 0) {
379         av_log(hls, AV_LOG_ERROR, "error opening key file %s\n", hls->key_file);
380         return ret;
381     }
382
383     ret = avio_read(pb, key, sizeof(key));
384     ff_format_io_close(s, &pb);
385     if (ret != sizeof(key)) {
386         av_log(hls, AV_LOG_ERROR, "error reading key file %s\n", hls->key_file);
387         if (ret >= 0 || ret == AVERROR_EOF)
388             ret = AVERROR(EINVAL);
389         return ret;
390     }
391     ff_data_to_hex(hls->key_string, key, sizeof(key), 0);
392
393     return 0;
394 }
395
396 static int read_chomp_line(AVIOContext *s, char *buf, int maxlen)
397 {
398     int len = ff_get_line(s, buf, maxlen);
399     while (len > 0 && av_isspace(buf[len - 1]))
400         buf[--len] = '\0';
401     return len;
402 }
403
404 static int hls_mux_init(AVFormatContext *s)
405 {
406     HLSContext *hls = s->priv_data;
407     AVFormatContext *oc;
408     AVFormatContext *vtt_oc = NULL;
409     int i, ret;
410
411     ret = avformat_alloc_output_context2(&hls->avf, hls->oformat, NULL, NULL);
412     if (ret < 0)
413         return ret;
414     oc = hls->avf;
415
416     oc->oformat            = hls->oformat;
417     oc->interrupt_callback = s->interrupt_callback;
418     oc->max_delay          = s->max_delay;
419     oc->opaque             = s->opaque;
420     oc->io_open            = s->io_open;
421     oc->io_close           = s->io_close;
422     av_dict_copy(&oc->metadata, s->metadata, 0);
423
424     if(hls->vtt_oformat) {
425         ret = avformat_alloc_output_context2(&hls->vtt_avf, hls->vtt_oformat, NULL, NULL);
426         if (ret < 0)
427             return ret;
428         vtt_oc          = hls->vtt_avf;
429         vtt_oc->oformat = hls->vtt_oformat;
430         av_dict_copy(&vtt_oc->metadata, s->metadata, 0);
431     }
432
433     for (i = 0; i < s->nb_streams; i++) {
434         AVStream *st;
435         AVFormatContext *loc;
436         if (s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE)
437             loc = vtt_oc;
438         else
439             loc = oc;
440
441         if (!(st = avformat_new_stream(loc, NULL)))
442             return AVERROR(ENOMEM);
443         avcodec_parameters_copy(st->codecpar, s->streams[i]->codecpar);
444         st->sample_aspect_ratio = s->streams[i]->sample_aspect_ratio;
445         st->time_base = s->streams[i]->time_base;
446     }
447     hls->start_pos = 0;
448     hls->new_start = 1;
449
450     return 0;
451 }
452
453 static HLSSegment *find_segment_by_filename(HLSSegment *segment, const char *filename)
454 {
455     while (segment) {
456         if (!av_strcasecmp(segment->filename,filename))
457             return segment;
458         segment = segment->next;
459     }
460     return (HLSSegment *) NULL;
461 }
462
463 /* Create a new segment and append it to the segment list */
464 static int hls_append_segment(struct AVFormatContext *s, HLSContext *hls, double duration,
465                               int64_t pos, int64_t size)
466 {
467     HLSSegment *en = av_malloc(sizeof(*en));
468     const char  *filename;
469     int ret;
470
471     if (!en)
472         return AVERROR(ENOMEM);
473
474     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
475         strlen(hls->current_segment_final_filename_fmt)) {
476         av_strlcpy(hls->avf->filename, hls->current_segment_final_filename_fmt, sizeof(hls->avf->filename));
477         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
478             char * filename = av_strdup(hls->avf->filename);  // %%s will be %s after strftime
479             if (!filename) {
480                 av_free(en);
481                 return AVERROR(ENOMEM);
482             }
483             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
484                 filename, 's', pos + size) < 1) {
485                 av_log(hls, AV_LOG_ERROR,
486                        "Invalid second level segment filename template '%s', "
487                         "you can try to remove second_level_segment_size flag\n",
488                        filename);
489                 av_free(filename);
490                 av_free(en);
491                 return AVERROR(EINVAL);
492             }
493             av_free(filename);
494         }
495         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
496             char * filename = av_strdup(hls->avf->filename);  // %%t will be %t after strftime
497             if (!filename) {
498                 av_free(en);
499                 return AVERROR(ENOMEM);
500             }
501             if (replace_int_data_in_filename(hls->avf->filename, sizeof(hls->avf->filename),
502                 filename, 't',  (int64_t)round(1000000 * duration)) < 1) {
503                 av_log(hls, AV_LOG_ERROR,
504                        "Invalid second level segment filename template '%s', "
505                         "you can try to remove second_level_segment_time flag\n",
506                        filename);
507                 av_free(filename);
508                 av_free(en);
509                 return AVERROR(EINVAL);
510             }
511             av_free(filename);
512         }
513     }
514
515
516     filename = av_basename(hls->avf->filename);
517
518     if (hls->use_localtime_mkdir) {
519         filename = hls->avf->filename;
520     }
521     if (find_segment_by_filename(hls->segments, filename)
522         || find_segment_by_filename(hls->old_segments, filename)) {
523         av_log(hls, AV_LOG_WARNING, "Duplicated segment filename detected: %s\n", filename);
524     }
525     av_strlcpy(en->filename, filename, sizeof(en->filename));
526
527     if(hls->has_subtitle)
528         av_strlcpy(en->sub_filename, av_basename(hls->vtt_avf->filename), sizeof(en->sub_filename));
529     else
530         en->sub_filename[0] = '\0';
531
532     en->duration = duration;
533     en->pos      = pos;
534     en->size     = size;
535     en->next     = NULL;
536     en->discont  = 0;
537
538     if (hls->discontinuity) {
539         en->discont = 1;
540         hls->discontinuity = 0;
541     }
542
543     if (hls->key_info_file) {
544         av_strlcpy(en->key_uri, hls->key_uri, sizeof(en->key_uri));
545         av_strlcpy(en->iv_string, hls->iv_string, sizeof(en->iv_string));
546     }
547
548     if (!hls->segments)
549         hls->segments = en;
550     else
551         hls->last_segment->next = en;
552
553     hls->last_segment = en;
554
555     // EVENT or VOD playlists imply sliding window cannot be used
556     if (hls->pl_type != PLAYLIST_TYPE_NONE)
557         hls->max_nb_segments = 0;
558
559     if (hls->max_nb_segments && hls->nb_entries >= hls->max_nb_segments) {
560         en = hls->segments;
561         hls->initial_prog_date_time += en->duration;
562         hls->segments = en->next;
563         if (en && hls->flags & HLS_DELETE_SEGMENTS &&
564                 !(hls->flags & HLS_SINGLE_FILE || hls->wrap)) {
565             en->next = hls->old_segments;
566             hls->old_segments = en;
567             if ((ret = hls_delete_old_segments(hls)) < 0)
568                 return ret;
569         } else
570             av_free(en);
571     } else
572         hls->nb_entries++;
573
574     if (hls->max_seg_size > 0) {
575         return 0;
576     }
577     hls->sequence++;
578
579     return 0;
580 }
581
582 static int parse_playlist(AVFormatContext *s, const char *url)
583 {
584     HLSContext *hls = s->priv_data;
585     AVIOContext *in;
586     int ret = 0, is_segment = 0;
587     int64_t new_start_pos;
588     char line[1024];
589     const char *ptr;
590
591     if ((ret = ffio_open_whitelist(&in, url, AVIO_FLAG_READ,
592                                    &s->interrupt_callback, NULL,
593                                    s->protocol_whitelist, s->protocol_blacklist)) < 0)
594         return ret;
595
596     read_chomp_line(in, line, sizeof(line));
597     if (strcmp(line, "#EXTM3U")) {
598         ret = AVERROR_INVALIDDATA;
599         goto fail;
600     }
601
602     hls->discontinuity = 0;
603     while (!avio_feof(in)) {
604         read_chomp_line(in, line, sizeof(line));
605         if (av_strstart(line, "#EXT-X-MEDIA-SEQUENCE:", &ptr)) {
606             int64_t tmp_sequence = strtoll(ptr, NULL, 10);
607             if (tmp_sequence < hls->sequence)
608               av_log(hls, AV_LOG_VERBOSE,
609                      "Found playlist sequence number was smaller """
610                      "than specified start sequence number: %"PRId64" < %"PRId64", "
611                      "omitting\n", tmp_sequence, hls->start_sequence);
612             else {
613               av_log(hls, AV_LOG_DEBUG, "Found playlist sequence number: %"PRId64"\n", tmp_sequence);
614               hls->sequence = tmp_sequence;
615             }
616         } else if (av_strstart(line, "#EXT-X-DISCONTINUITY", &ptr)) {
617             is_segment = 1;
618             hls->discontinuity = 1;
619         } else if (av_strstart(line, "#EXTINF:", &ptr)) {
620             is_segment = 1;
621             hls->duration = atof(ptr);
622         } else if (av_strstart(line, "#", NULL)) {
623             continue;
624         } else if (line[0]) {
625             if (is_segment) {
626                 is_segment = 0;
627                 new_start_pos = avio_tell(hls->avf->pb);
628                 hls->size = new_start_pos - hls->start_pos;
629                 av_strlcpy(hls->avf->filename, line, sizeof(line));
630                 ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
631                 if (ret < 0)
632                     goto fail;
633                 hls->start_pos = new_start_pos;
634             }
635         }
636     }
637
638 fail:
639     avio_close(in);
640     return ret;
641 }
642
643 static void hls_free_segments(HLSSegment *p)
644 {
645     HLSSegment *en;
646
647     while(p) {
648         en = p;
649         p = p->next;
650         av_free(en);
651     }
652 }
653
654 static void set_http_options(AVDictionary **options, HLSContext *c)
655 {
656     if (c->method)
657         av_dict_set(options, "method", c->method, 0);
658 }
659
660 static int hls_window(AVFormatContext *s, int last)
661 {
662     HLSContext *hls = s->priv_data;
663     HLSSegment *en;
664     int target_duration = 0;
665     int ret = 0;
666     AVIOContext *out = NULL;
667     AVIOContext *sub_out = NULL;
668     char temp_filename[1024];
669     int64_t sequence = FFMAX(hls->start_sequence, hls->sequence - hls->nb_entries);
670     int version = 3;
671     const char *proto = avio_find_protocol_name(s->filename);
672     int use_rename = proto && !strcmp(proto, "file");
673     static unsigned warned_non_file;
674     char *key_uri = NULL;
675     char *iv_string = NULL;
676     AVDictionary *options = NULL;
677     double prog_date_time = hls->initial_prog_date_time;
678     int byterange_mode = (hls->flags & HLS_SINGLE_FILE) || (hls->max_seg_size > 0);
679
680     if (byterange_mode) {
681         version = 4;
682         sequence = 0;
683     }
684
685     if (!use_rename && !warned_non_file++)
686         av_log(s, AV_LOG_ERROR, "Cannot use rename on non file protocol, this may lead to races and temporary partial files\n");
687
688     set_http_options(&options, hls);
689     snprintf(temp_filename, sizeof(temp_filename), use_rename ? "%s.tmp" : "%s", s->filename);
690     if ((ret = s->io_open(s, &out, temp_filename, AVIO_FLAG_WRITE, &options)) < 0)
691         goto fail;
692
693     for (en = hls->segments; en; en = en->next) {
694         if (target_duration <= en->duration)
695             target_duration = get_int_from_double(en->duration);
696     }
697
698     hls->discontinuity_set = 0;
699     avio_printf(out, "#EXTM3U\n");
700     avio_printf(out, "#EXT-X-VERSION:%d\n", version);
701     if (hls->allowcache == 0 || hls->allowcache == 1) {
702         avio_printf(out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
703     }
704     avio_printf(out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
705     avio_printf(out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
706     if (hls->pl_type == PLAYLIST_TYPE_EVENT) {
707         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:EVENT\n");
708     } else if (hls->pl_type == PLAYLIST_TYPE_VOD) {
709         avio_printf(out, "#EXT-X-PLAYLIST-TYPE:VOD\n");
710     }
711
712     av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
713            sequence);
714     if((hls->flags & HLS_DISCONT_START) && sequence==hls->start_sequence && hls->discontinuity_set==0 ){
715         avio_printf(out, "#EXT-X-DISCONTINUITY\n");
716         hls->discontinuity_set = 1;
717     }
718     for (en = hls->segments; en; en = en->next) {
719         if (hls->key_info_file && (!key_uri || strcmp(en->key_uri, key_uri) ||
720                                     av_strcasecmp(en->iv_string, iv_string))) {
721             avio_printf(out, "#EXT-X-KEY:METHOD=AES-128,URI=\"%s\"", en->key_uri);
722             if (*en->iv_string)
723                 avio_printf(out, ",IV=0x%s", en->iv_string);
724             avio_printf(out, "\n");
725             key_uri = en->key_uri;
726             iv_string = en->iv_string;
727         }
728
729         if (en->discont) {
730             avio_printf(out, "#EXT-X-DISCONTINUITY\n");
731         }
732
733         if (hls->flags & HLS_ROUND_DURATIONS)
734             avio_printf(out, "#EXTINF:%ld,\n",  lrint(en->duration));
735         else
736             avio_printf(out, "#EXTINF:%f,\n", en->duration);
737         if (byterange_mode)
738              avio_printf(out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
739                          en->size, en->pos);
740         if (hls->flags & HLS_PROGRAM_DATE_TIME) {
741             time_t tt, wrongsecs;
742             int milli;
743             struct tm *tm, tmpbuf;
744             char buf0[128], buf1[128];
745             tt = (int64_t)prog_date_time;
746             milli = av_clip(lrint(1000*(prog_date_time - tt)), 0, 999);
747             tm = localtime_r(&tt, &tmpbuf);
748             strftime(buf0, sizeof(buf0), "%Y-%m-%dT%H:%M:%S", tm);
749             if (!strftime(buf1, sizeof(buf1), "%z", tm) || buf1[1]<'0' ||buf1[1]>'2') {
750                 int tz_min, dst = tm->tm_isdst;
751                 tm = gmtime_r(&tt, &tmpbuf);
752                 tm->tm_isdst = dst;
753                 wrongsecs = mktime(tm);
754                 tz_min = (abs(wrongsecs - tt) + 30) / 60;
755                 snprintf(buf1, sizeof(buf1),
756                          "%c%02d%02d",
757                          wrongsecs <= tt ? '+' : '-',
758                          tz_min / 60,
759                          tz_min % 60);
760             }
761             avio_printf(out, "#EXT-X-PROGRAM-DATE-TIME:%s.%03d%s\n", buf0, milli, buf1);
762             prog_date_time += en->duration;
763         }
764         if (hls->baseurl)
765             avio_printf(out, "%s", hls->baseurl);
766         avio_printf(out, "%s\n", en->filename);
767     }
768
769     if (last && (hls->flags & HLS_OMIT_ENDLIST)==0)
770         avio_printf(out, "#EXT-X-ENDLIST\n");
771
772     if( hls->vtt_m3u8_name ) {
773         if ((ret = s->io_open(s, &sub_out, hls->vtt_m3u8_name, AVIO_FLAG_WRITE, &options)) < 0)
774             goto fail;
775         avio_printf(sub_out, "#EXTM3U\n");
776         avio_printf(sub_out, "#EXT-X-VERSION:%d\n", version);
777         if (hls->allowcache == 0 || hls->allowcache == 1) {
778             avio_printf(sub_out, "#EXT-X-ALLOW-CACHE:%s\n", hls->allowcache == 0 ? "NO" : "YES");
779         }
780         avio_printf(sub_out, "#EXT-X-TARGETDURATION:%d\n", target_duration);
781         avio_printf(sub_out, "#EXT-X-MEDIA-SEQUENCE:%"PRId64"\n", sequence);
782
783         av_log(s, AV_LOG_VERBOSE, "EXT-X-MEDIA-SEQUENCE:%"PRId64"\n",
784                sequence);
785
786         for (en = hls->segments; en; en = en->next) {
787             avio_printf(sub_out, "#EXTINF:%f,\n", en->duration);
788             if (byterange_mode)
789                  avio_printf(sub_out, "#EXT-X-BYTERANGE:%"PRIi64"@%"PRIi64"\n",
790                          en->size, en->pos);
791             if (hls->baseurl)
792                 avio_printf(sub_out, "%s", hls->baseurl);
793             avio_printf(sub_out, "%s\n", en->sub_filename);
794         }
795
796         if (last)
797             avio_printf(sub_out, "#EXT-X-ENDLIST\n");
798
799     }
800
801 fail:
802     av_dict_free(&options);
803     ff_format_io_close(s, &out);
804     ff_format_io_close(s, &sub_out);
805     if (ret >= 0 && use_rename)
806         ff_rename(temp_filename, s->filename, s);
807     return ret;
808 }
809
810 static int hls_start(AVFormatContext *s)
811 {
812     HLSContext *c = s->priv_data;
813     AVFormatContext *oc = c->avf;
814     AVFormatContext *vtt_oc = c->vtt_avf;
815     AVDictionary *options = NULL;
816     char *filename, iv_string[KEYSIZE*2 + 1];
817     int err = 0;
818
819     if (c->flags & HLS_SINGLE_FILE) {
820         av_strlcpy(oc->filename, c->basename,
821                    sizeof(oc->filename));
822         if (c->vtt_basename)
823             av_strlcpy(vtt_oc->filename, c->vtt_basename,
824                   sizeof(vtt_oc->filename));
825     } else if (c->max_seg_size > 0) {
826         if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
827             c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
828                 av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s', you can try to use -use_localtime 1 with it\n", c->basename);
829                 return AVERROR(EINVAL);
830         }
831     } else {
832         if (c->use_localtime) {
833             time_t now0;
834             struct tm *tm, tmpbuf;
835             time(&now0);
836             tm = localtime_r(&now0, &tmpbuf);
837             if (!strftime(oc->filename, sizeof(oc->filename), c->basename, tm)) {
838                 av_log(oc, AV_LOG_ERROR, "Could not get segment filename with use_localtime\n");
839                 return AVERROR(EINVAL);
840             }
841             if (c->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
842                 char * filename = av_strdup(oc->filename);  // %%d will be %d after strftime
843                 if (!filename)
844                     return AVERROR(ENOMEM);
845                 if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
846                     filename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
847                     av_log(c, AV_LOG_ERROR,
848                            "Invalid second level segment filename template '%s', "
849                             "you can try to remove second_level_segment_index flag\n",
850                            filename);
851                     av_free(filename);
852                     return AVERROR(EINVAL);
853                 }
854                 av_free(filename);
855             }
856             if (c->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) {
857                 av_strlcpy(c->current_segment_final_filename_fmt, oc->filename,
858                            sizeof(c->current_segment_final_filename_fmt));
859                 if (c->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
860                     char * filename = av_strdup(oc->filename);  // %%s will be %s after strftime
861                     if (!filename)
862                         return AVERROR(ENOMEM);
863                     if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 's', 0) < 1) {
864                         av_log(c, AV_LOG_ERROR,
865                                "Invalid second level segment filename template '%s', "
866                                 "you can try to remove second_level_segment_size flag\n",
867                                filename);
868                         av_free(filename);
869                         return AVERROR(EINVAL);
870                     }
871                     av_free(filename);
872                 }
873                 if (c->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
874                     char * filename = av_strdup(oc->filename);  // %%t will be %t after strftime
875                     if (!filename)
876                         return AVERROR(ENOMEM);
877                     if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename), filename, 't', 0) < 1) {
878                         av_log(c, AV_LOG_ERROR,
879                                "Invalid second level segment filename template '%s', "
880                                 "you can try to remove second_level_segment_time flag\n",
881                                filename);
882                         av_free(filename);
883                         return AVERROR(EINVAL);
884                     }
885                     av_free(filename);
886                 }
887             }
888             if (c->use_localtime_mkdir) {
889                 const char *dir;
890                 char *fn_copy = av_strdup(oc->filename);
891                 if (!fn_copy) {
892                     return AVERROR(ENOMEM);
893                 }
894                 dir = av_dirname(fn_copy);
895                 if (mkdir_p(dir) == -1 && errno != EEXIST) {
896                     av_log(oc, AV_LOG_ERROR, "Could not create directory %s with use_localtime_mkdir\n", dir);
897                     av_free(fn_copy);
898                     return AVERROR(errno);
899                 }
900                 av_free(fn_copy);
901             }
902         } else if (replace_int_data_in_filename(oc->filename, sizeof(oc->filename),
903                    c->basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
904             av_log(oc, AV_LOG_ERROR, "Invalid segment filename template '%s' you can try to use -use_localtime 1 with it\n", c->basename);
905             return AVERROR(EINVAL);
906         }
907         if( c->vtt_basename) {
908             if (replace_int_data_in_filename(vtt_oc->filename, sizeof(vtt_oc->filename),
909                 c->vtt_basename, 'd', c->wrap ? c->sequence % c->wrap : c->sequence) < 1) {
910                 av_log(vtt_oc, AV_LOG_ERROR, "Invalid segment filename template '%s'\n", c->vtt_basename);
911                 return AVERROR(EINVAL);
912             }
913        }
914     }
915     c->number++;
916
917     set_http_options(&options, c);
918
919     if (c->key_info_file) {
920         if ((err = hls_encryption_start(s)) < 0)
921             goto fail;
922         if ((err = av_dict_set(&options, "encryption_key", c->key_string, 0))
923                 < 0)
924             goto fail;
925         err = av_strlcpy(iv_string, c->iv_string, sizeof(iv_string));
926         if (!err)
927             snprintf(iv_string, sizeof(iv_string), "%032"PRIx64, c->sequence);
928         if ((err = av_dict_set(&options, "encryption_iv", iv_string, 0)) < 0)
929            goto fail;
930
931         filename = av_asprintf("crypto:%s", oc->filename);
932         if (!filename) {
933             err = AVERROR(ENOMEM);
934             goto fail;
935         }
936         err = s->io_open(s, &oc->pb, filename, AVIO_FLAG_WRITE, &options);
937         av_free(filename);
938         av_dict_free(&options);
939         if (err < 0)
940             return err;
941     } else
942         if ((err = s->io_open(s, &oc->pb, oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
943             goto fail;
944     if (c->vtt_basename) {
945         set_http_options(&options, c);
946         if ((err = s->io_open(s, &vtt_oc->pb, vtt_oc->filename, AVIO_FLAG_WRITE, &options)) < 0)
947             goto fail;
948     }
949     av_dict_free(&options);
950
951     /* We only require one PAT/PMT per segment. */
952     if (oc->oformat->priv_class && oc->priv_data) {
953         char period[21];
954
955         snprintf(period, sizeof(period), "%d", (INT_MAX / 2) - 1);
956
957         av_opt_set(oc->priv_data, "mpegts_flags", "resend_headers", 0);
958         av_opt_set(oc->priv_data, "sdt_period", period, 0);
959         av_opt_set(oc->priv_data, "pat_period", period, 0);
960     }
961
962     if (c->vtt_basename) {
963         err = avformat_write_header(vtt_oc,NULL);
964         if (err < 0)
965             return err;
966     }
967
968     return 0;
969 fail:
970     av_dict_free(&options);
971
972     return err;
973 }
974
975 static const char * get_default_pattern_localtime_fmt(void)
976 {
977     char b[21];
978     time_t t = time(NULL);
979     struct tm *p, tmbuf;
980     p = localtime_r(&t, &tmbuf);
981     // no %s support when strftime returned error or left format string unchanged
982     return (!strftime(b, sizeof(b), "%s", p) || !strcmp(b, "%s")) ? "-%Y%m%d%H%M%S.ts" : "-%s.ts";
983 }
984
985 static int hls_write_header(AVFormatContext *s)
986 {
987     HLSContext *hls = s->priv_data;
988     int ret, i;
989     char *p;
990     const char *pattern = "%d.ts";
991     const char *pattern_localtime_fmt = get_default_pattern_localtime_fmt();
992     const char *vtt_pattern = "%d.vtt";
993     AVDictionary *options = NULL;
994     int basename_size;
995     int vtt_basename_size;
996
997     if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH || hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_FORMATTED_DATETIME) {
998         time_t t = time(NULL); // we will need it in either case
999         if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH) {
1000             hls->start_sequence = (int64_t)t;
1001         } else if (hls->start_sequence_source_type == HLS_START_SEQUENCE_AS_FORMATTED_DATETIME) {
1002             char b[15];
1003             struct tm *p, tmbuf;
1004             if (!(p = localtime_r(&t, &tmbuf)))
1005                 return AVERROR(ENOMEM);
1006             if (!strftime(b, sizeof(b), "%Y%m%d%H%M%S", p))
1007                 return AVERROR(ENOMEM);
1008             hls->start_sequence = strtoll(b, NULL, 10);
1009         }
1010         av_log(hls, AV_LOG_DEBUG, "start_number evaluated to %"PRId64"\n", hls->start_sequence);
1011     }
1012
1013     hls->sequence       = hls->start_sequence;
1014     hls->recording_time = (hls->init_time ? hls->init_time : hls->time) * AV_TIME_BASE;
1015     hls->start_pts      = AV_NOPTS_VALUE;
1016     hls->current_segment_final_filename_fmt[0] = '\0';
1017
1018     if (hls->flags & HLS_PROGRAM_DATE_TIME) {
1019         time_t now0;
1020         time(&now0);
1021         hls->initial_prog_date_time = now0;
1022     }
1023
1024     if (hls->format_options_str) {
1025         ret = av_dict_parse_string(&hls->format_options, hls->format_options_str, "=", ":", 0);
1026         if (ret < 0) {
1027             av_log(s, AV_LOG_ERROR, "Could not parse format options list '%s'\n", hls->format_options_str);
1028             goto fail;
1029         }
1030     }
1031
1032     for (i = 0; i < s->nb_streams; i++) {
1033         hls->has_video +=
1034             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1035         hls->has_subtitle +=
1036             s->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE;
1037     }
1038
1039     if (hls->has_video > 1)
1040         av_log(s, AV_LOG_WARNING,
1041                "More than a single video stream present, "
1042                "expect issues decoding it.\n");
1043
1044     hls->oformat = av_guess_format("mpegts", NULL, NULL);
1045
1046     if (!hls->oformat) {
1047         ret = AVERROR_MUXER_NOT_FOUND;
1048         goto fail;
1049     }
1050
1051     if(hls->has_subtitle) {
1052         hls->vtt_oformat = av_guess_format("webvtt", NULL, NULL);
1053         if (!hls->oformat) {
1054             ret = AVERROR_MUXER_NOT_FOUND;
1055             goto fail;
1056         }
1057     }
1058
1059     if (hls->segment_filename) {
1060         hls->basename = av_strdup(hls->segment_filename);
1061         if (!hls->basename) {
1062             ret = AVERROR(ENOMEM);
1063             goto fail;
1064         }
1065     } else {
1066         if (hls->flags & HLS_SINGLE_FILE)
1067             pattern = ".ts";
1068
1069         if (hls->use_localtime) {
1070             basename_size = strlen(s->filename) + strlen(pattern_localtime_fmt) + 1;
1071         } else {
1072             basename_size = strlen(s->filename) + strlen(pattern) + 1;
1073         }
1074         hls->basename = av_malloc(basename_size);
1075         if (!hls->basename) {
1076             ret = AVERROR(ENOMEM);
1077             goto fail;
1078         }
1079
1080         av_strlcpy(hls->basename, s->filename, basename_size);
1081
1082         p = strrchr(hls->basename, '.');
1083         if (p)
1084             *p = '\0';
1085         if (hls->use_localtime) {
1086             av_strlcat(hls->basename, pattern_localtime_fmt, basename_size);
1087         } else {
1088             av_strlcat(hls->basename, pattern, basename_size);
1089         }
1090     }
1091     if (!hls->use_localtime) {
1092         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) {
1093              av_log(hls, AV_LOG_ERROR,
1094                     "second_level_segment_duration hls_flag requires use_localtime to be true\n");
1095              ret = AVERROR(EINVAL);
1096              goto fail;
1097         }
1098         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) {
1099              av_log(hls, AV_LOG_ERROR,
1100                     "second_level_segment_size hls_flag requires use_localtime to be true\n");
1101              ret = AVERROR(EINVAL);
1102              goto fail;
1103         }
1104         if (hls->flags & HLS_SECOND_LEVEL_SEGMENT_INDEX) {
1105             av_log(hls, AV_LOG_ERROR,
1106                    "second_level_segment_index hls_flag requires use_localtime to be true\n");
1107             ret = AVERROR(EINVAL);
1108             goto fail;
1109         }
1110     } else {
1111         const char *proto = avio_find_protocol_name(hls->basename);
1112         int segment_renaming_ok = proto && !strcmp(proto, "file");
1113
1114         if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_DURATION) && !segment_renaming_ok) {
1115              av_log(hls, AV_LOG_ERROR,
1116                     "second_level_segment_duration hls_flag works only with file protocol segment names\n");
1117              ret = AVERROR(EINVAL);
1118              goto fail;
1119         }
1120         if ((hls->flags & HLS_SECOND_LEVEL_SEGMENT_SIZE) && !segment_renaming_ok) {
1121              av_log(hls, AV_LOG_ERROR,
1122                     "second_level_segment_size hls_flag works only with file protocol segment names\n");
1123              ret = AVERROR(EINVAL);
1124              goto fail;
1125         }
1126     }
1127     if(hls->has_subtitle) {
1128
1129         if (hls->flags & HLS_SINGLE_FILE)
1130             vtt_pattern = ".vtt";
1131         vtt_basename_size = strlen(s->filename) + strlen(vtt_pattern) + 1;
1132         hls->vtt_basename = av_malloc(vtt_basename_size);
1133         if (!hls->vtt_basename) {
1134             ret = AVERROR(ENOMEM);
1135             goto fail;
1136         }
1137         hls->vtt_m3u8_name = av_malloc(vtt_basename_size);
1138         if (!hls->vtt_m3u8_name ) {
1139             ret = AVERROR(ENOMEM);
1140             goto fail;
1141         }
1142         av_strlcpy(hls->vtt_basename, s->filename, vtt_basename_size);
1143         p = strrchr(hls->vtt_basename, '.');
1144         if (p)
1145             *p = '\0';
1146
1147         if( hls->subtitle_filename ) {
1148             strcpy(hls->vtt_m3u8_name, hls->subtitle_filename);
1149         } else {
1150             strcpy(hls->vtt_m3u8_name, hls->vtt_basename);
1151             av_strlcat(hls->vtt_m3u8_name, "_vtt.m3u8", vtt_basename_size);
1152         }
1153         av_strlcat(hls->vtt_basename, vtt_pattern, vtt_basename_size);
1154     }
1155
1156     if ((ret = hls_mux_init(s)) < 0)
1157         goto fail;
1158
1159     if (hls->flags & HLS_APPEND_LIST) {
1160         parse_playlist(s, s->filename);
1161         hls->discontinuity = 1;
1162         if (hls->init_time > 0) {
1163             av_log(s, AV_LOG_WARNING, "append_list mode does not support hls_init_time,"
1164                    " hls_init_time value will have no effect\n");
1165             hls->init_time = 0;
1166             hls->recording_time = hls->time * AV_TIME_BASE;
1167         }
1168     }
1169
1170     if ((ret = hls_start(s)) < 0)
1171         goto fail;
1172
1173     av_dict_copy(&options, hls->format_options, 0);
1174     ret = avformat_write_header(hls->avf, &options);
1175     if (av_dict_count(options)) {
1176         av_log(s, AV_LOG_ERROR, "Some of provided format options in '%s' are not recognized\n", hls->format_options_str);
1177         ret = AVERROR(EINVAL);
1178         goto fail;
1179     }
1180     //av_assert0(s->nb_streams == hls->avf->nb_streams);
1181     for (i = 0; i < s->nb_streams; i++) {
1182         AVStream *inner_st;
1183         AVStream *outer_st = s->streams[i];
1184
1185         if (hls->max_seg_size > 0) {
1186             if ((outer_st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) &&
1187                 (outer_st->codecpar->bit_rate > hls->max_seg_size)) {
1188                 av_log(s, AV_LOG_WARNING, "Your video bitrate is bigger than hls_segment_size, "
1189                        "(%"PRId64 " > %"PRId64 "), the result maybe not be what you want.",
1190                        outer_st->codecpar->bit_rate, hls->max_seg_size);
1191             }
1192         }
1193
1194         if (outer_st->codecpar->codec_type != AVMEDIA_TYPE_SUBTITLE)
1195             inner_st = hls->avf->streams[i];
1196         else if (hls->vtt_avf)
1197             inner_st = hls->vtt_avf->streams[0];
1198         else {
1199             /* We have a subtitle stream, when the user does not want one */
1200             inner_st = NULL;
1201             continue;
1202         }
1203         avpriv_set_pts_info(outer_st, inner_st->pts_wrap_bits, inner_st->time_base.num, inner_st->time_base.den);
1204     }
1205 fail:
1206
1207     av_dict_free(&options);
1208     if (ret < 0) {
1209         av_freep(&hls->basename);
1210         av_freep(&hls->vtt_basename);
1211         if (hls->avf)
1212             avformat_free_context(hls->avf);
1213         if (hls->vtt_avf)
1214             avformat_free_context(hls->vtt_avf);
1215
1216     }
1217     return ret;
1218 }
1219
1220 static int hls_write_packet(AVFormatContext *s, AVPacket *pkt)
1221 {
1222     HLSContext *hls = s->priv_data;
1223     AVFormatContext *oc = NULL;
1224     AVStream *st = s->streams[pkt->stream_index];
1225     int64_t end_pts = hls->recording_time * hls->number;
1226     int is_ref_pkt = 1;
1227     int ret, can_split = 1;
1228     int stream_index = 0;
1229
1230     if (hls->sequence - hls->nb_entries > hls->start_sequence && hls->init_time > 0) {
1231         /* reset end_pts, hls->recording_time at end of the init hls list */
1232         int init_list_dur = hls->init_time * hls->nb_entries * AV_TIME_BASE;
1233         int after_init_list_dur = (hls->sequence - hls->nb_entries ) * hls->time * AV_TIME_BASE;
1234         hls->recording_time = hls->time * AV_TIME_BASE;
1235         end_pts = init_list_dur + after_init_list_dur ;
1236     }
1237
1238     if( st->codecpar->codec_type == AVMEDIA_TYPE_SUBTITLE ) {
1239         oc = hls->vtt_avf;
1240         stream_index = 0;
1241     } else {
1242         oc = hls->avf;
1243         stream_index = pkt->stream_index;
1244     }
1245     if (hls->start_pts == AV_NOPTS_VALUE) {
1246         hls->start_pts = pkt->pts;
1247         hls->end_pts   = pkt->pts;
1248     }
1249
1250     if (hls->has_video) {
1251         can_split = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO &&
1252                     ((pkt->flags & AV_PKT_FLAG_KEY) || (hls->flags & HLS_SPLIT_BY_TIME));
1253         is_ref_pkt = st->codecpar->codec_type == AVMEDIA_TYPE_VIDEO;
1254     }
1255     if (pkt->pts == AV_NOPTS_VALUE)
1256         is_ref_pkt = can_split = 0;
1257
1258     if (is_ref_pkt) {
1259         if (hls->new_start) {
1260             hls->new_start = 0;
1261             hls->duration = (double)(pkt->pts - hls->end_pts)
1262                                        * st->time_base.num / st->time_base.den;
1263             hls->dpp = (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1264         } else {
1265             hls->duration += (double)(pkt->duration) * st->time_base.num / st->time_base.den;
1266         }
1267
1268     }
1269     if (can_split && av_compare_ts(pkt->pts - hls->start_pts, st->time_base,
1270                                    end_pts, AV_TIME_BASE_Q) >= 0) {
1271         int64_t new_start_pos;
1272         char *old_filename = av_strdup(hls->avf->filename);
1273
1274         if (!old_filename) {
1275             return AVERROR(ENOMEM);
1276         }
1277
1278         av_write_frame(oc, NULL); /* Flush any buffered data */
1279
1280         new_start_pos = avio_tell(hls->avf->pb);
1281         hls->size = new_start_pos - hls->start_pos;
1282         ret = hls_append_segment(s, hls, hls->duration, hls->start_pos, hls->size);
1283         hls->start_pos = new_start_pos;
1284         if (ret < 0) {
1285             av_free(old_filename);
1286             return ret;
1287         }
1288
1289         hls->end_pts = pkt->pts;
1290         hls->duration = 0;
1291
1292         if (hls->flags & HLS_SINGLE_FILE) {
1293             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1294                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1295             hls->number++;
1296         } else if (hls->max_seg_size > 0) {
1297             if (hls->avf->oformat->priv_class && hls->avf->priv_data)
1298                 av_opt_set(hls->avf->priv_data, "mpegts_flags", "resend_headers", 0);
1299             if (hls->start_pos >= hls->max_seg_size) {
1300                 hls->sequence++;
1301                 ff_format_io_close(s, &oc->pb);
1302                 if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
1303                      strlen(hls->current_segment_final_filename_fmt)) {
1304                     ff_rename(old_filename, hls->avf->filename, hls);
1305                 }
1306                 if (hls->vtt_avf)
1307                     ff_format_io_close(s, &hls->vtt_avf->pb);
1308                 ret = hls_start(s);
1309                 hls->start_pos = 0;
1310                 /* When split segment by byte, the duration is short than hls_time,
1311                  * so it is not enough one segment duration as hls_time, */
1312                 hls->number--;
1313             }
1314             hls->number++;
1315         } else {
1316             ff_format_io_close(s, &oc->pb);
1317             if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
1318                 strlen(hls->current_segment_final_filename_fmt)) {
1319                 ff_rename(old_filename, hls->avf->filename, hls);
1320             }
1321             if (hls->vtt_avf)
1322                 ff_format_io_close(s, &hls->vtt_avf->pb);
1323
1324             ret = hls_start(s);
1325         }
1326
1327         if (ret < 0) {
1328             av_free(old_filename);
1329             return ret;
1330         }
1331
1332         if ((ret = hls_window(s, 0)) < 0) {
1333             av_free(old_filename);
1334             return ret;
1335         }
1336     }
1337
1338     ret = ff_write_chained(oc, stream_index, pkt, s, 0);
1339
1340     return ret;
1341 }
1342
1343 static int hls_write_trailer(struct AVFormatContext *s)
1344 {
1345     HLSContext *hls = s->priv_data;
1346     AVFormatContext *oc = hls->avf;
1347     AVFormatContext *vtt_oc = hls->vtt_avf;
1348     char *old_filename = av_strdup(hls->avf->filename);
1349
1350     if (!old_filename) {
1351         return AVERROR(ENOMEM);
1352     }
1353
1354
1355     av_write_trailer(oc);
1356     if (oc->pb) {
1357         hls->size = avio_tell(hls->avf->pb) - hls->start_pos;
1358         ff_format_io_close(s, &oc->pb);
1359         /* after av_write_trailer, then duration + 1 duration per packet */
1360         hls_append_segment(s, hls, hls->duration + hls->dpp, hls->start_pos, hls->size);
1361     }
1362
1363     if ((hls->flags & (HLS_SECOND_LEVEL_SEGMENT_SIZE | HLS_SECOND_LEVEL_SEGMENT_DURATION)) &&
1364          strlen(hls->current_segment_final_filename_fmt)) {
1365          ff_rename(old_filename, hls->avf->filename, hls);
1366     }
1367
1368     if (vtt_oc) {
1369         if (vtt_oc->pb)
1370             av_write_trailer(vtt_oc);
1371         hls->size = avio_tell(hls->vtt_avf->pb) - hls->start_pos;
1372         ff_format_io_close(s, &vtt_oc->pb);
1373     }
1374     av_freep(&hls->basename);
1375     avformat_free_context(oc);
1376
1377     hls->avf = NULL;
1378     hls_window(s, 1);
1379
1380     if (vtt_oc) {
1381         av_freep(&hls->vtt_basename);
1382         av_freep(&hls->vtt_m3u8_name);
1383         avformat_free_context(vtt_oc);
1384     }
1385
1386     hls_free_segments(hls->segments);
1387     hls_free_segments(hls->old_segments);
1388     av_free(old_filename);
1389     return 0;
1390 }
1391
1392 #define OFFSET(x) offsetof(HLSContext, x)
1393 #define E AV_OPT_FLAG_ENCODING_PARAM
1394 static const AVOption options[] = {
1395     {"start_number",  "set first number in the sequence",        OFFSET(start_sequence),AV_OPT_TYPE_INT64,  {.i64 = 0},     0, INT64_MAX, E},
1396     {"hls_time",      "set segment length in seconds",           OFFSET(time),    AV_OPT_TYPE_FLOAT,  {.dbl = 2},     0, FLT_MAX, E},
1397     {"hls_init_time", "set segment length in seconds at init list",           OFFSET(init_time),    AV_OPT_TYPE_FLOAT,  {.dbl = 0},     0, FLT_MAX, E},
1398     {"hls_list_size", "set maximum number of playlist entries",  OFFSET(max_nb_segments),    AV_OPT_TYPE_INT,    {.i64 = 5},     0, INT_MAX, E},
1399     {"hls_ts_options","set hls mpegts list of options for the container format used for hls", OFFSET(format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1400     {"hls_vtt_options","set hls vtt list of options for the container format used for hls", OFFSET(vtt_format_options_str), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1401     {"hls_wrap",      "set number after which the index wraps",  OFFSET(wrap),    AV_OPT_TYPE_INT,    {.i64 = 0},     0, INT_MAX, E},
1402     {"hls_allow_cache", "explicitly set whether the client MAY (1) or MUST NOT (0) cache media segments", OFFSET(allowcache), AV_OPT_TYPE_INT, {.i64 = -1}, INT_MIN, INT_MAX, E},
1403     {"hls_base_url",  "url to prepend to each playlist entry",   OFFSET(baseurl), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,       E},
1404     {"hls_segment_filename", "filename template for segment files", OFFSET(segment_filename),   AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1405     {"hls_segment_size", "maximum size per segment file, (in bytes)",  OFFSET(max_seg_size),    AV_OPT_TYPE_INT,    {.i64 = 0},               0,       INT_MAX,   E},
1406     {"hls_key_info_file",    "file with key URI and key file path", OFFSET(key_info_file),      AV_OPT_TYPE_STRING, {.str = NULL},            0,       0,         E},
1407     {"hls_subtitle_path",     "set path of hls subtitles", OFFSET(subtitle_filename), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1408     {"hls_flags",     "set flags affecting HLS playlist and media file generation", OFFSET(flags), AV_OPT_TYPE_FLAGS, {.i64 = 0 }, 0, UINT_MAX, E, "flags"},
1409     {"single_file",   "generate a single media file indexed with byte ranges", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SINGLE_FILE }, 0, UINT_MAX,   E, "flags"},
1410     {"delete_segments", "delete segment files that are no longer part of the playlist", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DELETE_SEGMENTS }, 0, UINT_MAX,   E, "flags"},
1411     {"round_durations", "round durations in m3u8 to whole numbers", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_ROUND_DURATIONS }, 0, UINT_MAX,   E, "flags"},
1412     {"discont_start", "start the playlist with a discontinuity tag", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_DISCONT_START }, 0, UINT_MAX,   E, "flags"},
1413     {"omit_endlist", "Do not append an endlist when ending stream", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_OMIT_ENDLIST }, 0, UINT_MAX,   E, "flags"},
1414     {"split_by_time", "split the hls segment by time which user set by hls_time", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SPLIT_BY_TIME }, 0, UINT_MAX,   E, "flags"},
1415     {"append_list", "append the new segments into old hls segment list", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_APPEND_LIST }, 0, UINT_MAX,   E, "flags"},
1416     {"program_date_time", "add EXT-X-PROGRAM-DATE-TIME", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_PROGRAM_DATE_TIME }, 0, UINT_MAX,   E, "flags"},
1417     {"second_level_segment_index", "include segment index in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_INDEX }, 0, UINT_MAX,   E, "flags"},
1418     {"second_level_segment_duration", "include segment duration in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_DURATION }, 0, UINT_MAX,   E, "flags"},
1419     {"second_level_segment_size", "include segment size in segment filenames when use_localtime", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_SECOND_LEVEL_SEGMENT_SIZE }, 0, UINT_MAX,   E, "flags"},
1420     {"use_localtime", "set filename expansion with strftime at segment creation", OFFSET(use_localtime), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1421     {"use_localtime_mkdir", "create last directory component in strftime-generated filename", OFFSET(use_localtime_mkdir), AV_OPT_TYPE_BOOL, {.i64 = 0 }, 0, 1, E },
1422     {"hls_playlist_type", "set the HLS playlist type", OFFSET(pl_type), AV_OPT_TYPE_INT, {.i64 = PLAYLIST_TYPE_NONE }, 0, PLAYLIST_TYPE_NB-1, E, "pl_type" },
1423     {"event", "EVENT playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_EVENT }, INT_MIN, INT_MAX, E, "pl_type" },
1424     {"vod", "VOD playlist", 0, AV_OPT_TYPE_CONST, {.i64 = PLAYLIST_TYPE_VOD }, INT_MIN, INT_MAX, E, "pl_type" },
1425     {"method", "set the HTTP method", OFFSET(method), AV_OPT_TYPE_STRING, {.str = NULL},  0, 0,    E},
1426     {"hls_start_number_source", "set source of first number in sequence", OFFSET(start_sequence_source_type), AV_OPT_TYPE_INT, {.i64 = HLS_START_SEQUENCE_AS_START_NUMBER }, 0, HLS_START_SEQUENCE_AS_FORMATTED_DATETIME, E, "start_sequence_source_type" },
1427     {"generic", "start_number value (default)", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_START_NUMBER }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1428     {"epoch", "seconds since epoch", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_SECONDS_SINCE_EPOCH }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1429     {"datetime", "current datetime as YYYYMMDDhhmmss", 0, AV_OPT_TYPE_CONST, {.i64 = HLS_START_SEQUENCE_AS_FORMATTED_DATETIME }, INT_MIN, INT_MAX, E, "start_sequence_source_type" },
1430     { NULL },
1431 };
1432
1433 static const AVClass hls_class = {
1434     .class_name = "hls muxer",
1435     .item_name  = av_default_item_name,
1436     .option     = options,
1437     .version    = LIBAVUTIL_VERSION_INT,
1438 };
1439
1440
1441 AVOutputFormat ff_hls_muxer = {
1442     .name           = "hls",
1443     .long_name      = NULL_IF_CONFIG_SMALL("Apple HTTP Live Streaming"),
1444     .extensions     = "m3u8",
1445     .priv_data_size = sizeof(HLSContext),
1446     .audio_codec    = AV_CODEC_ID_AAC,
1447     .video_codec    = AV_CODEC_ID_H264,
1448     .subtitle_codec = AV_CODEC_ID_WEBVTT,
1449     .flags          = AVFMT_NOFILE | AVFMT_ALLOW_FLUSH,
1450     .write_header   = hls_write_header,
1451     .write_packet   = hls_write_packet,
1452     .write_trailer  = hls_write_trailer,
1453     .priv_class     = &hls_class,
1454 };