avformat/asfdec_f: Add ASFDataType, use named types for metadata
[ffmpeg.git] / libavformat / asfdec_f.c
1 /*
2  * ASF compatible demuxer
3  * Copyright (c) 2000, 2001 Fabrice Bellard
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with FFmpeg; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 #include <inttypes.h>
23
24 #include "libavutil/attributes.h"
25 #include "libavutil/avassert.h"
26 #include "libavutil/avstring.h"
27 #include "libavutil/bswap.h"
28 #include "libavutil/common.h"
29 #include "libavutil/dict.h"
30 #include "libavutil/internal.h"
31 #include "libavutil/mathematics.h"
32 #include "libavutil/opt.h"
33 #include "avformat.h"
34 #include "avio_internal.h"
35 #include "avlanguage.h"
36 #include "id3v2.h"
37 #include "internal.h"
38 #include "riff.h"
39 #include "asf.h"
40 #include "asfcrypt.h"
41
42 typedef struct ASFPayload {
43     uint8_t type;
44     uint16_t size;
45 } ASFPayload;
46
47 typedef struct ASFStream {
48     int num;
49     unsigned char seq;
50     /* use for reading */
51     AVPacket pkt;
52     int frag_offset;
53     int packet_obj_size;
54     int timestamp;
55     int64_t duration;
56     int skip_to_key;
57     int pkt_clean;
58
59     int ds_span;                /* descrambling  */
60     int ds_packet_size;
61     int ds_chunk_size;
62
63     int64_t packet_pos;
64
65     uint16_t stream_language_index;
66
67     int      palette_changed;
68     uint32_t palette[256];
69
70     int payload_ext_ct;
71     ASFPayload payload[8];
72 } ASFStream;
73
74 typedef struct ASFContext {
75     const AVClass *class;
76     int asfid2avid[128];                 ///< conversion table from asf ID 2 AVStream ID
77     ASFStream streams[128];              ///< it's max number and it's not that big
78     uint32_t stream_bitrates[128];       ///< max number of streams, bitrate for each (for streaming)
79     AVRational dar[128];
80     char stream_languages[128][6];       ///< max number of streams, language for each (RFC1766, e.g. en-US)
81     /* non streamed additonnal info */
82     /* packet filling */
83     int packet_size_left;
84     /* only for reading */
85     uint64_t data_offset;                ///< beginning of the first data packet
86     uint64_t data_object_offset;         ///< data object offset (excl. GUID & size)
87     uint64_t data_object_size;           ///< size of the data object
88     int index_read;
89
90     ASFMainHeader hdr;
91
92     int packet_flags;
93     int packet_property;
94     int packet_timestamp;
95     int packet_segsizetype;
96     int packet_segments;
97     int packet_seq;
98     int packet_replic_size;
99     int packet_key_frame;
100     int packet_padsize;
101     unsigned int packet_frag_offset;
102     unsigned int packet_frag_size;
103     int64_t packet_frag_timestamp;
104     int ts_is_pts;
105     int packet_multi_size;
106     int packet_time_delta;
107     int packet_time_start;
108     int64_t packet_pos;
109
110     int stream_index;
111
112     ASFStream *asf_st;                   ///< currently decoded stream
113
114     int no_resync_search;
115     int export_xmp;
116 } ASFContext;
117
118 static const AVOption options[] = {
119     { "no_resync_search", "Don't try to resynchronize by looking for a certain optional start code", offsetof(ASFContext, no_resync_search), AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 1, AV_OPT_FLAG_DECODING_PARAM },
120     { "export_xmp", "Export full XMP metadata", offsetof(ASFContext, export_xmp), AV_OPT_TYPE_INT, { .i64 = 0 }, 0, 1, AV_OPT_FLAG_DECODING_PARAM },
121     { NULL },
122 };
123
124 static const AVClass asf_class = {
125     .class_name = "asf demuxer",
126     .item_name  = av_default_item_name,
127     .option     = options,
128     .version    = LIBAVUTIL_VERSION_INT,
129 };
130
131 #undef NDEBUG
132 #include <assert.h>
133
134 #define ASF_MAX_STREAMS 127
135 #define FRAME_HEADER_SIZE 6
136 // Fix Me! FRAME_HEADER_SIZE may be different.
137 // (7 is known to be too large for GipsyGuitar.wmv)
138
139 #ifdef DEBUG
140 static const ff_asf_guid stream_bitrate_guid = { /* (http://get.to/sdp) */
141     0xce, 0x75, 0xf8, 0x7b, 0x8d, 0x46, 0xd1, 0x11, 0x8d, 0x82, 0x00, 0x60, 0x97, 0xc9, 0xa2, 0xb2
142 };
143
144 #define PRINT_IF_GUID(g, cmp) \
145     if (!ff_guidcmp(g, &cmp)) \
146         av_log(NULL, AV_LOG_TRACE, "(GUID: %s) ", # cmp)
147
148 static void print_guid(ff_asf_guid *g)
149 {
150     int i;
151     PRINT_IF_GUID(g, ff_asf_header);
152     else PRINT_IF_GUID(g, ff_asf_file_header);
153     else PRINT_IF_GUID(g, ff_asf_stream_header);
154     else PRINT_IF_GUID(g, ff_asf_audio_stream);
155     else PRINT_IF_GUID(g, ff_asf_audio_conceal_none);
156     else PRINT_IF_GUID(g, ff_asf_video_stream);
157     else PRINT_IF_GUID(g, ff_asf_video_conceal_none);
158     else PRINT_IF_GUID(g, ff_asf_command_stream);
159     else PRINT_IF_GUID(g, ff_asf_comment_header);
160     else PRINT_IF_GUID(g, ff_asf_codec_comment_header);
161     else PRINT_IF_GUID(g, ff_asf_codec_comment1_header);
162     else PRINT_IF_GUID(g, ff_asf_data_header);
163     else PRINT_IF_GUID(g, ff_asf_simple_index_header);
164     else PRINT_IF_GUID(g, ff_asf_head1_guid);
165     else PRINT_IF_GUID(g, ff_asf_head2_guid);
166     else PRINT_IF_GUID(g, ff_asf_my_guid);
167     else PRINT_IF_GUID(g, ff_asf_ext_stream_header);
168     else PRINT_IF_GUID(g, ff_asf_extended_content_header);
169     else PRINT_IF_GUID(g, ff_asf_ext_stream_embed_stream_header);
170     else PRINT_IF_GUID(g, ff_asf_ext_stream_audio_stream);
171     else PRINT_IF_GUID(g, ff_asf_metadata_header);
172     else PRINT_IF_GUID(g, ff_asf_metadata_library_header);
173     else PRINT_IF_GUID(g, ff_asf_marker_header);
174     else PRINT_IF_GUID(g, stream_bitrate_guid);
175     else PRINT_IF_GUID(g, ff_asf_language_guid);
176     else
177         av_log(NULL, AV_LOG_TRACE, "(GUID: unknown) ");
178     for (i = 0; i < 16; i++)
179         av_log(NULL, AV_LOG_TRACE, " 0x%02x,", (*g)[i]);
180     av_log(NULL, AV_LOG_TRACE, "}\n");
181 }
182 #undef PRINT_IF_GUID
183 #else
184 #define print_guid(g) while(0)
185 #endif
186
187 static int asf_probe(AVProbeData *pd)
188 {
189     /* check file header */
190     if (!ff_guidcmp(pd->buf, &ff_asf_header))
191         return AVPROBE_SCORE_MAX;
192     else
193         return 0;
194 }
195
196 /* size of type 2 (BOOL) is 32bit for "Extended Content Description Object"
197  * but 16 bit for "Metadata Object" and "Metadata Library Object" */
198 static int get_value(AVIOContext *pb, int type, int type2_size)
199 {
200     switch (type) {
201     case 2:
202         return (type2_size == 32) ? avio_rl32(pb) : avio_rl16(pb);
203     case 3:
204         return avio_rl32(pb);
205     case 4:
206         return avio_rl64(pb);
207     case 5:
208         return avio_rl16(pb);
209     default:
210         return INT_MIN;
211     }
212 }
213
214 /* MSDN claims that this should be "compatible with the ID3 frame, APIC",
215  * but in reality this is only loosely similar */
216 static int asf_read_picture(AVFormatContext *s, int len)
217 {
218     AVPacket pkt          = { 0 };
219     const CodecMime *mime = ff_id3v2_mime_tags;
220     enum  AVCodecID id    = AV_CODEC_ID_NONE;
221     char mimetype[64];
222     uint8_t  *desc = NULL;
223     AVStream   *st = NULL;
224     int ret, type, picsize, desc_len;
225
226     /* type + picsize + mime + desc */
227     if (len < 1 + 4 + 2 + 2) {
228         av_log(s, AV_LOG_ERROR, "Invalid attached picture size: %d.\n", len);
229         return AVERROR_INVALIDDATA;
230     }
231
232     /* picture type */
233     type = avio_r8(s->pb);
234     len--;
235     if (type >= FF_ARRAY_ELEMS(ff_id3v2_picture_types) || type < 0) {
236         av_log(s, AV_LOG_WARNING, "Unknown attached picture type: %d.\n", type);
237         type = 0;
238     }
239
240     /* picture data size */
241     picsize = avio_rl32(s->pb);
242     len    -= 4;
243
244     /* picture MIME type */
245     len -= avio_get_str16le(s->pb, len, mimetype, sizeof(mimetype));
246     while (mime->id != AV_CODEC_ID_NONE) {
247         if (!strncmp(mime->str, mimetype, sizeof(mimetype))) {
248             id = mime->id;
249             break;
250         }
251         mime++;
252     }
253     if (id == AV_CODEC_ID_NONE) {
254         av_log(s, AV_LOG_ERROR, "Unknown attached picture mimetype: %s.\n",
255                mimetype);
256         return 0;
257     }
258
259     if (picsize >= len) {
260         av_log(s, AV_LOG_ERROR, "Invalid attached picture data size: %d >= %d.\n",
261                picsize, len);
262         return AVERROR_INVALIDDATA;
263     }
264
265     /* picture description */
266     desc_len = (len - picsize) * 2 + 1;
267     desc     = av_malloc(desc_len);
268     if (!desc)
269         return AVERROR(ENOMEM);
270     len -= avio_get_str16le(s->pb, len - picsize, desc, desc_len);
271
272     ret = av_get_packet(s->pb, &pkt, picsize);
273     if (ret < 0)
274         goto fail;
275
276     st  = avformat_new_stream(s, NULL);
277     if (!st) {
278         ret = AVERROR(ENOMEM);
279         goto fail;
280     }
281     st->disposition              |= AV_DISPOSITION_ATTACHED_PIC;
282     st->codec->codec_type         = AVMEDIA_TYPE_VIDEO;
283     st->codec->codec_id           = id;
284     st->attached_pic              = pkt;
285     st->attached_pic.stream_index = st->index;
286     st->attached_pic.flags       |= AV_PKT_FLAG_KEY;
287
288     if (*desc)
289         av_dict_set(&st->metadata, "title", desc, AV_DICT_DONT_STRDUP_VAL);
290     else
291         av_freep(&desc);
292
293     av_dict_set(&st->metadata, "comment", ff_id3v2_picture_types[type], 0);
294
295     return 0;
296
297 fail:
298     av_freep(&desc);
299     av_free_packet(&pkt);
300     return ret;
301 }
302
303 static void get_id3_tag(AVFormatContext *s, int len)
304 {
305     ID3v2ExtraMeta *id3v2_extra_meta = NULL;
306
307     ff_id3v2_read(s, ID3v2_DEFAULT_MAGIC, &id3v2_extra_meta, len);
308     if (id3v2_extra_meta)
309         ff_id3v2_parse_apic(s, &id3v2_extra_meta);
310     ff_id3v2_free_extra_meta(&id3v2_extra_meta);
311 }
312
313 static void get_tag(AVFormatContext *s, const char *key, int type, int len, int type2_size)
314 {
315     ASFContext *asf = s->priv_data;
316     char *value = NULL;
317     int64_t off = avio_tell(s->pb);
318 #define LEN 22
319
320     if ((unsigned)len >= (UINT_MAX - LEN) / 2)
321         return;
322
323     if (!asf->export_xmp && !strncmp(key, "xmp", 3))
324         goto finish;
325
326     value = av_malloc(2 * len + LEN);
327     if (!value)
328         goto finish;
329
330     switch (type) {
331     case ASF_UNICODE:
332         avio_get_str16le(s->pb, len, value, 2 * len + 1);
333         break;
334     case -1: // ASCI
335         avio_read(s->pb, value, len);
336         value[len]=0;
337         break;
338     case ASF_BYTE_ARRAY:
339         if (!strcmp(key, "WM/Picture")) { // handle cover art
340             asf_read_picture(s, len);
341         } else if (!strcmp(key, "ID3")) { // handle ID3 tag
342             get_id3_tag(s, len);
343         } else {
344             av_log(s, AV_LOG_VERBOSE, "Unsupported byte array in tag %s.\n", key);
345         }
346         goto finish;
347     case ASF_BOOL:
348     case ASF_DWORD:
349     case ASF_QWORD:
350     case ASF_WORD: {
351         uint64_t num = get_value(s->pb, type, type2_size);
352         snprintf(value, LEN, "%"PRIu64, num);
353         break;
354     }
355     case ASF_GUID:
356         av_log(s, AV_LOG_DEBUG, "Unsupported GUID value in tag %s.\n", key);
357         goto finish;
358     default:
359         av_log(s, AV_LOG_DEBUG,
360                "Unsupported value type %d in tag %s.\n", type, key);
361         goto finish;
362     }
363     if (*value)
364         av_dict_set(&s->metadata, key, value, 0);
365
366 finish:
367     av_freep(&value);
368     avio_seek(s->pb, off + len, SEEK_SET);
369 }
370
371 static int asf_read_file_properties(AVFormatContext *s, int64_t size)
372 {
373     ASFContext *asf = s->priv_data;
374     AVIOContext *pb = s->pb;
375
376     ff_get_guid(pb, &asf->hdr.guid);
377     asf->hdr.file_size   = avio_rl64(pb);
378     asf->hdr.create_time = avio_rl64(pb);
379     avio_rl64(pb);                               /* number of packets */
380     asf->hdr.play_time   = avio_rl64(pb);
381     asf->hdr.send_time   = avio_rl64(pb);
382     asf->hdr.preroll     = avio_rl32(pb);
383     asf->hdr.ignore      = avio_rl32(pb);
384     asf->hdr.flags       = avio_rl32(pb);
385     asf->hdr.min_pktsize = avio_rl32(pb);
386     asf->hdr.max_pktsize = avio_rl32(pb);
387     if (asf->hdr.min_pktsize >= (1U << 29))
388         return AVERROR_INVALIDDATA;
389     asf->hdr.max_bitrate = avio_rl32(pb);
390     s->packet_size       = asf->hdr.max_pktsize;
391
392     return 0;
393 }
394
395 static int asf_read_stream_properties(AVFormatContext *s, int64_t size)
396 {
397     ASFContext *asf = s->priv_data;
398     AVIOContext *pb = s->pb;
399     AVStream *st;
400     ASFStream *asf_st;
401     ff_asf_guid g;
402     enum AVMediaType type;
403     int type_specific_size, sizeX;
404     unsigned int tag1;
405     int64_t pos1, pos2, start_time;
406     int test_for_ext_stream_audio, is_dvr_ms_audio = 0;
407
408     if (s->nb_streams == ASF_MAX_STREAMS) {
409         av_log(s, AV_LOG_ERROR, "too many streams\n");
410         return AVERROR(EINVAL);
411     }
412
413     pos1 = avio_tell(pb);
414
415     st = avformat_new_stream(s, NULL);
416     if (!st)
417         return AVERROR(ENOMEM);
418     avpriv_set_pts_info(st, 32, 1, 1000); /* 32 bit pts in ms */
419     start_time     = asf->hdr.preroll;
420
421     if (!(asf->hdr.flags & 0x01)) { // if we aren't streaming...
422         int64_t fsize = avio_size(pb);
423         if (fsize <= 0 || (int64_t)asf->hdr.file_size <= 0 ||
424             20*FFABS(fsize - (int64_t)asf->hdr.file_size) < FFMIN(fsize, asf->hdr.file_size))
425             st->duration = asf->hdr.play_time /
426                        (10000000 / 1000) - start_time;
427     }
428     ff_get_guid(pb, &g);
429
430     test_for_ext_stream_audio = 0;
431     if (!ff_guidcmp(&g, &ff_asf_audio_stream)) {
432         type = AVMEDIA_TYPE_AUDIO;
433     } else if (!ff_guidcmp(&g, &ff_asf_video_stream)) {
434         type = AVMEDIA_TYPE_VIDEO;
435     } else if (!ff_guidcmp(&g, &ff_asf_jfif_media)) {
436         type                = AVMEDIA_TYPE_VIDEO;
437         st->codec->codec_id = AV_CODEC_ID_MJPEG;
438     } else if (!ff_guidcmp(&g, &ff_asf_command_stream)) {
439         type = AVMEDIA_TYPE_DATA;
440     } else if (!ff_guidcmp(&g, &ff_asf_ext_stream_embed_stream_header)) {
441         test_for_ext_stream_audio = 1;
442         type                      = AVMEDIA_TYPE_UNKNOWN;
443     } else {
444         return -1;
445     }
446     ff_get_guid(pb, &g);
447     avio_skip(pb, 8); /* total_size */
448     type_specific_size = avio_rl32(pb);
449     avio_rl32(pb);
450     st->id = avio_rl16(pb) & 0x7f; /* stream id */
451     // mapping of asf ID to AV stream ID;
452     asf->asfid2avid[st->id] = s->nb_streams - 1;
453     asf_st = &asf->streams[st->id];
454
455     avio_rl32(pb);
456
457     if (test_for_ext_stream_audio) {
458         ff_get_guid(pb, &g);
459         if (!ff_guidcmp(&g, &ff_asf_ext_stream_audio_stream)) {
460             type            = AVMEDIA_TYPE_AUDIO;
461             is_dvr_ms_audio = 1;
462             ff_get_guid(pb, &g);
463             avio_rl32(pb);
464             avio_rl32(pb);
465             avio_rl32(pb);
466             ff_get_guid(pb, &g);
467             avio_rl32(pb);
468         }
469     }
470
471     st->codec->codec_type = type;
472     if (type == AVMEDIA_TYPE_AUDIO) {
473         int ret = ff_get_wav_header(pb, st->codec, type_specific_size, 0);
474         if (ret < 0)
475             return ret;
476         if (is_dvr_ms_audio) {
477             // codec_id and codec_tag are unreliable in dvr_ms
478             // files. Set them later by probing stream.
479             st->request_probe    = 1;
480             st->codec->codec_tag = 0;
481         }
482         if (st->codec->codec_id == AV_CODEC_ID_AAC)
483             st->need_parsing = AVSTREAM_PARSE_NONE;
484         else
485             st->need_parsing = AVSTREAM_PARSE_FULL;
486         /* We have to init the frame size at some point .... */
487         pos2 = avio_tell(pb);
488         if (size >= (pos2 + 8 - pos1 + 24)) {
489             asf_st->ds_span        = avio_r8(pb);
490             asf_st->ds_packet_size = avio_rl16(pb);
491             asf_st->ds_chunk_size  = avio_rl16(pb);
492             avio_rl16(pb);  // ds_data_size
493             avio_r8(pb);    // ds_silence_data
494         }
495         if (asf_st->ds_span > 1) {
496             if (!asf_st->ds_chunk_size                                ||
497                 (asf_st->ds_packet_size / asf_st->ds_chunk_size <= 1) ||
498                 asf_st->ds_packet_size % asf_st->ds_chunk_size)
499                 asf_st->ds_span = 0;  // disable descrambling
500         }
501     } else if (type == AVMEDIA_TYPE_VIDEO &&
502                size - (avio_tell(pb) - pos1 + 24) >= 51) {
503         avio_rl32(pb);
504         avio_rl32(pb);
505         avio_r8(pb);
506         avio_rl16(pb);        /* size */
507         sizeX             = avio_rl32(pb); /* size */
508         st->codec->width  = avio_rl32(pb);
509         st->codec->height = avio_rl32(pb);
510         /* not available for asf */
511         avio_rl16(pb); /* panes */
512         st->codec->bits_per_coded_sample = avio_rl16(pb); /* depth */
513         tag1                             = avio_rl32(pb);
514         avio_skip(pb, 20);
515         if (sizeX > 40) {
516             st->codec->extradata_size = ffio_limit(pb, sizeX - 40);
517             st->codec->extradata      = av_mallocz(st->codec->extradata_size +
518                                                    FF_INPUT_BUFFER_PADDING_SIZE);
519             if (!st->codec->extradata)
520                 return AVERROR(ENOMEM);
521             avio_read(pb, st->codec->extradata, st->codec->extradata_size);
522         }
523
524         /* Extract palette from extradata if bpp <= 8 */
525         /* This code assumes that extradata contains only palette */
526         /* This is true for all paletted codecs implemented in libavcodec */
527         if (st->codec->extradata_size && (st->codec->bits_per_coded_sample <= 8)) {
528 #if HAVE_BIGENDIAN
529             int i;
530             for (i = 0; i < FFMIN(st->codec->extradata_size, AVPALETTE_SIZE) / 4; i++)
531                 asf_st->palette[i] = av_bswap32(((uint32_t *)st->codec->extradata)[i]);
532 #else
533             memcpy(asf_st->palette, st->codec->extradata,
534                    FFMIN(st->codec->extradata_size, AVPALETTE_SIZE));
535 #endif
536             asf_st->palette_changed = 1;
537         }
538
539         st->codec->codec_tag = tag1;
540         st->codec->codec_id  = ff_codec_get_id(ff_codec_bmp_tags, tag1);
541         if (tag1 == MKTAG('D', 'V', 'R', ' ')) {
542             st->need_parsing = AVSTREAM_PARSE_FULL;
543             /* issue658 contains wrong w/h and MS even puts a fake seq header
544              * with wrong w/h in extradata while a correct one is in the stream.
545              * maximum lameness */
546             st->codec->width      =
547                 st->codec->height = 0;
548             av_freep(&st->codec->extradata);
549             st->codec->extradata_size = 0;
550         }
551         if (st->codec->codec_id == AV_CODEC_ID_H264)
552             st->need_parsing = AVSTREAM_PARSE_FULL_ONCE;
553         if (st->codec->codec_id == AV_CODEC_ID_MPEG4)
554             st->need_parsing = AVSTREAM_PARSE_FULL_ONCE;
555     }
556     pos2 = avio_tell(pb);
557     avio_skip(pb, size - (pos2 - pos1 + 24));
558
559     return 0;
560 }
561
562 static int asf_read_ext_stream_properties(AVFormatContext *s, int64_t size)
563 {
564     ASFContext *asf = s->priv_data;
565     AVIOContext *pb = s->pb;
566     ff_asf_guid g;
567     int ext_len, payload_ext_ct, stream_ct, i;
568     uint32_t leak_rate, stream_num;
569     unsigned int stream_languageid_index;
570
571     avio_rl64(pb); // starttime
572     avio_rl64(pb); // endtime
573     leak_rate = avio_rl32(pb); // leak-datarate
574     avio_rl32(pb); // bucket-datasize
575     avio_rl32(pb); // init-bucket-fullness
576     avio_rl32(pb); // alt-leak-datarate
577     avio_rl32(pb); // alt-bucket-datasize
578     avio_rl32(pb); // alt-init-bucket-fullness
579     avio_rl32(pb); // max-object-size
580     avio_rl32(pb); // flags (reliable,seekable,no_cleanpoints?,resend-live-cleanpoints, rest of bits reserved)
581     stream_num = avio_rl16(pb); // stream-num
582
583     stream_languageid_index = avio_rl16(pb); // stream-language-id-index
584     if (stream_num < 128)
585         asf->streams[stream_num].stream_language_index = stream_languageid_index;
586
587     avio_rl64(pb); // avg frametime in 100ns units
588     stream_ct      = avio_rl16(pb); // stream-name-count
589     payload_ext_ct = avio_rl16(pb); // payload-extension-system-count
590
591     if (stream_num < 128) {
592         asf->stream_bitrates[stream_num] = leak_rate;
593         asf->streams[stream_num].payload_ext_ct = 0;
594     }
595
596     for (i = 0; i < stream_ct; i++) {
597         avio_rl16(pb);
598         ext_len = avio_rl16(pb);
599         avio_skip(pb, ext_len);
600     }
601
602     for (i = 0; i < payload_ext_ct; i++) {
603         int size;
604         ff_get_guid(pb, &g);
605         size = avio_rl16(pb);
606         ext_len = avio_rl32(pb);
607         avio_skip(pb, ext_len);
608         if (stream_num < 128 && i < FF_ARRAY_ELEMS(asf->streams[stream_num].payload)) {
609             ASFPayload *p = &asf->streams[stream_num].payload[i];
610             p->type = g[0];
611             p->size = size;
612             av_log(s, AV_LOG_DEBUG, "Payload extension %x %d\n", g[0], p->size );
613             asf->streams[stream_num].payload_ext_ct ++;
614         }
615     }
616
617     return 0;
618 }
619
620 static int asf_read_content_desc(AVFormatContext *s, int64_t size)
621 {
622     AVIOContext *pb = s->pb;
623     int len1, len2, len3, len4, len5;
624
625     len1 = avio_rl16(pb);
626     len2 = avio_rl16(pb);
627     len3 = avio_rl16(pb);
628     len4 = avio_rl16(pb);
629     len5 = avio_rl16(pb);
630     get_tag(s, "title", 0, len1, 32);
631     get_tag(s, "author", 0, len2, 32);
632     get_tag(s, "copyright", 0, len3, 32);
633     get_tag(s, "comment", 0, len4, 32);
634     avio_skip(pb, len5);
635
636     return 0;
637 }
638
639 static int asf_read_ext_content_desc(AVFormatContext *s, int64_t size)
640 {
641     AVIOContext *pb = s->pb;
642     ASFContext *asf = s->priv_data;
643     int desc_count, i, ret;
644
645     desc_count = avio_rl16(pb);
646     for (i = 0; i < desc_count; i++) {
647         int name_len, value_type, value_len;
648         char name[1024];
649
650         name_len = avio_rl16(pb);
651         if (name_len % 2)   // must be even, broken lavf versions wrote len-1
652             name_len += 1;
653         if ((ret = avio_get_str16le(pb, name_len, name, sizeof(name))) < name_len)
654             avio_skip(pb, name_len - ret);
655         value_type = avio_rl16(pb);
656         value_len  = avio_rl16(pb);
657         if (!value_type && value_len % 2)
658             value_len += 1;
659         /* My sample has that stream set to 0 maybe that mean the container.
660          * ASF stream count starts at 1. I am using 0 to the container value
661          * since it's unused. */
662         if (!strcmp(name, "AspectRatioX"))
663             asf->dar[0].num = get_value(s->pb, value_type, 32);
664         else if (!strcmp(name, "AspectRatioY"))
665             asf->dar[0].den = get_value(s->pb, value_type, 32);
666         else
667             get_tag(s, name, value_type, value_len, 32);
668     }
669
670     return 0;
671 }
672
673 static int asf_read_language_list(AVFormatContext *s, int64_t size)
674 {
675     AVIOContext *pb = s->pb;
676     ASFContext *asf = s->priv_data;
677     int j, ret;
678     int stream_count = avio_rl16(pb);
679     for (j = 0; j < stream_count; j++) {
680         char lang[6];
681         unsigned int lang_len = avio_r8(pb);
682         if ((ret = avio_get_str16le(pb, lang_len, lang,
683                                     sizeof(lang))) < lang_len)
684             avio_skip(pb, lang_len - ret);
685         if (j < 128)
686             av_strlcpy(asf->stream_languages[j], lang,
687                        sizeof(*asf->stream_languages));
688     }
689
690     return 0;
691 }
692
693 static int asf_read_metadata(AVFormatContext *s, int64_t size)
694 {
695     AVIOContext *pb = s->pb;
696     ASFContext *asf = s->priv_data;
697     int n, stream_num, name_len_utf16, name_len_utf8, value_len;
698     int ret, i;
699     n = avio_rl16(pb);
700
701     for (i = 0; i < n; i++) {
702         uint8_t *name;
703         int value_type;
704
705         avio_rl16(pb);  // lang_list_index
706         stream_num = avio_rl16(pb);
707         name_len_utf16 = avio_rl16(pb);
708         value_type = avio_rl16(pb); /* value_type */
709         value_len  = avio_rl32(pb);
710
711         name_len_utf8 = 2*name_len_utf16 + 1;
712         name          = av_malloc(name_len_utf8);
713         if (!name)
714             return AVERROR(ENOMEM);
715
716         if ((ret = avio_get_str16le(pb, name_len_utf16, name, name_len_utf8)) < name_len_utf16)
717             avio_skip(pb, name_len_utf16 - ret);
718         av_log(s, AV_LOG_TRACE, "%d stream %d name_len %2d type %d len %4d <%s>\n",
719                 i, stream_num, name_len_utf16, value_type, value_len, name);
720
721         if (!strcmp(name, "AspectRatioX")){
722             int aspect_x = get_value(s->pb, value_type, 16);
723             if(stream_num < 128)
724                 asf->dar[stream_num].num = aspect_x;
725         } else if(!strcmp(name, "AspectRatioY")){
726             int aspect_y = get_value(s->pb, value_type, 16);
727             if(stream_num < 128)
728                 asf->dar[stream_num].den = aspect_y;
729         } else {
730             get_tag(s, name, value_type, value_len, 16);
731         }
732     }
733
734     return 0;
735 }
736
737 static int asf_read_marker(AVFormatContext *s, int64_t size)
738 {
739     AVIOContext *pb = s->pb;
740     ASFContext *asf = s->priv_data;
741     int i, count, name_len, ret;
742     char name[1024];
743
744     avio_rl64(pb);            // reserved 16 bytes
745     avio_rl64(pb);            // ...
746     count = avio_rl32(pb);    // markers count
747     avio_rl16(pb);            // reserved 2 bytes
748     name_len = avio_rl16(pb); // name length
749     for (i = 0; i < name_len; i++)
750         avio_r8(pb); // skip the name
751
752     for (i = 0; i < count; i++) {
753         int64_t pres_time;
754         int name_len;
755
756         avio_rl64(pb);             // offset, 8 bytes
757         pres_time = avio_rl64(pb); // presentation time
758         pres_time -= asf->hdr.preroll * 10000;
759         avio_rl16(pb);             // entry length
760         avio_rl32(pb);             // send time
761         avio_rl32(pb);             // flags
762         name_len = avio_rl32(pb);  // name length
763         if ((ret = avio_get_str16le(pb, name_len * 2, name,
764                                     sizeof(name))) < name_len)
765             avio_skip(pb, name_len - ret);
766         avpriv_new_chapter(s, i, (AVRational) { 1, 10000000 }, pres_time,
767                            AV_NOPTS_VALUE, name);
768     }
769
770     return 0;
771 }
772
773 static int asf_read_header(AVFormatContext *s)
774 {
775     ASFContext *asf = s->priv_data;
776     ff_asf_guid g;
777     AVIOContext *pb = s->pb;
778     int i;
779     int64_t gsize;
780
781     ff_get_guid(pb, &g);
782     if (ff_guidcmp(&g, &ff_asf_header))
783         return AVERROR_INVALIDDATA;
784     avio_rl64(pb);
785     avio_rl32(pb);
786     avio_r8(pb);
787     avio_r8(pb);
788     memset(&asf->asfid2avid, -1, sizeof(asf->asfid2avid));
789
790     for (i = 0; i<128; i++)
791         asf->streams[i].stream_language_index = 128; // invalid stream index means no language info
792
793     for (;;) {
794         uint64_t gpos = avio_tell(pb);
795         int ret = 0;
796         ff_get_guid(pb, &g);
797         gsize = avio_rl64(pb);
798         print_guid(&g);
799         if (!ff_guidcmp(&g, &ff_asf_data_header)) {
800             asf->data_object_offset = avio_tell(pb);
801             /* If not streaming, gsize is not unlimited (how?),
802              * and there is enough space in the file.. */
803             if (!(asf->hdr.flags & 0x01) && gsize >= 100)
804                 asf->data_object_size = gsize - 24;
805             else
806                 asf->data_object_size = (uint64_t)-1;
807             break;
808         }
809         if (gsize < 24)
810             return AVERROR_INVALIDDATA;
811         if (!ff_guidcmp(&g, &ff_asf_file_header)) {
812             ret = asf_read_file_properties(s, gsize);
813         } else if (!ff_guidcmp(&g, &ff_asf_stream_header)) {
814             ret = asf_read_stream_properties(s, gsize);
815         } else if (!ff_guidcmp(&g, &ff_asf_comment_header)) {
816             asf_read_content_desc(s, gsize);
817         } else if (!ff_guidcmp(&g, &ff_asf_language_guid)) {
818             asf_read_language_list(s, gsize);
819         } else if (!ff_guidcmp(&g, &ff_asf_extended_content_header)) {
820             asf_read_ext_content_desc(s, gsize);
821         } else if (!ff_guidcmp(&g, &ff_asf_metadata_header)) {
822             asf_read_metadata(s, gsize);
823         } else if (!ff_guidcmp(&g, &ff_asf_metadata_library_header)) {
824             asf_read_metadata(s, gsize);
825         } else if (!ff_guidcmp(&g, &ff_asf_ext_stream_header)) {
826             asf_read_ext_stream_properties(s, gsize);
827
828             // there could be a optional stream properties object to follow
829             // if so the next iteration will pick it up
830             continue;
831         } else if (!ff_guidcmp(&g, &ff_asf_head1_guid)) {
832             ff_get_guid(pb, &g);
833             avio_skip(pb, 6);
834             continue;
835         } else if (!ff_guidcmp(&g, &ff_asf_marker_header)) {
836             asf_read_marker(s, gsize);
837         } else if (avio_feof(pb)) {
838             return AVERROR_EOF;
839         } else {
840             if (!s->keylen) {
841                 if (!ff_guidcmp(&g, &ff_asf_content_encryption)) {
842                     unsigned int len;
843                     AVPacket pkt;
844                     av_log(s, AV_LOG_WARNING,
845                            "DRM protected stream detected, decoding will likely fail!\n");
846                     len= avio_rl32(pb);
847                     av_log(s, AV_LOG_DEBUG, "Secret data:\n");
848
849                     if ((ret = av_get_packet(pb, &pkt, len)) < 0)
850                         return ret;
851                     av_hex_dump_log(s, AV_LOG_DEBUG, pkt.data, pkt.size);
852                     av_free_packet(&pkt);
853                     len= avio_rl32(pb);
854                     get_tag(s, "ASF_Protection_Type", -1, len, 32);
855                     len= avio_rl32(pb);
856                     get_tag(s, "ASF_Key_ID", -1, len, 32);
857                     len= avio_rl32(pb);
858                     get_tag(s, "ASF_License_URL", -1, len, 32);
859                 } else if (!ff_guidcmp(&g, &ff_asf_ext_content_encryption)) {
860                     av_log(s, AV_LOG_WARNING,
861                            "Ext DRM protected stream detected, decoding will likely fail!\n");
862                     av_dict_set(&s->metadata, "encryption", "ASF Extended Content Encryption", 0);
863                 } else if (!ff_guidcmp(&g, &ff_asf_digital_signature)) {
864                     av_log(s, AV_LOG_INFO, "Digital signature detected!\n");
865                 }
866             }
867         }
868         if (ret < 0)
869             return ret;
870
871         if (avio_tell(pb) != gpos + gsize)
872             av_log(s, AV_LOG_DEBUG,
873                    "gpos mismatch our pos=%"PRIu64", end=%"PRId64"\n",
874                    avio_tell(pb) - gpos, gsize);
875         avio_seek(pb, gpos + gsize, SEEK_SET);
876     }
877     ff_get_guid(pb, &g);
878     avio_rl64(pb);
879     avio_r8(pb);
880     avio_r8(pb);
881     if (avio_feof(pb))
882         return AVERROR_EOF;
883     asf->data_offset      = avio_tell(pb);
884     asf->packet_size_left = 0;
885
886     for (i = 0; i < 128; i++) {
887         int stream_num = asf->asfid2avid[i];
888         if (stream_num >= 0) {
889             AVStream *st = s->streams[stream_num];
890             if (!st->codec->bit_rate)
891                 st->codec->bit_rate = asf->stream_bitrates[i];
892             if (asf->dar[i].num > 0 && asf->dar[i].den > 0) {
893                 av_reduce(&st->sample_aspect_ratio.num,
894                           &st->sample_aspect_ratio.den,
895                           asf->dar[i].num, asf->dar[i].den, INT_MAX);
896             } else if ((asf->dar[0].num > 0) && (asf->dar[0].den > 0) &&
897                        // Use ASF container value if the stream doesn't set AR.
898                        (st->codec->codec_type == AVMEDIA_TYPE_VIDEO))
899                 av_reduce(&st->sample_aspect_ratio.num,
900                           &st->sample_aspect_ratio.den,
901                           asf->dar[0].num, asf->dar[0].den, INT_MAX);
902
903             av_log(s, AV_LOG_TRACE, "i=%d, st->codec->codec_type:%d, asf->dar %d:%d sar=%d:%d\n",
904                     i, st->codec->codec_type, asf->dar[i].num, asf->dar[i].den,
905                     st->sample_aspect_ratio.num, st->sample_aspect_ratio.den);
906
907             // copy and convert language codes to the frontend
908             if (asf->streams[i].stream_language_index < 128) {
909                 const char *rfc1766 = asf->stream_languages[asf->streams[i].stream_language_index];
910                 if (rfc1766 && strlen(rfc1766) > 1) {
911                     const char primary_tag[3] = { rfc1766[0], rfc1766[1], '\0' }; // ignore country code if any
912                     const char *iso6392       = av_convert_lang_to(primary_tag,
913                                                                    AV_LANG_ISO639_2_BIBL);
914                     if (iso6392)
915                         av_dict_set(&st->metadata, "language", iso6392, 0);
916                 }
917             }
918         }
919     }
920
921     ff_metadata_conv(&s->metadata, NULL, ff_asf_metadata_conv);
922
923     return 0;
924 }
925
926 #define DO_2BITS(bits, var, defval)             \
927     switch (bits & 3) {                         \
928     case 3:                                     \
929         var = avio_rl32(pb);                    \
930         rsize += 4;                             \
931         break;                                  \
932     case 2:                                     \
933         var = avio_rl16(pb);                    \
934         rsize += 2;                             \
935         break;                                  \
936     case 1:                                     \
937         var = avio_r8(pb);                      \
938         rsize++;                                \
939         break;                                  \
940     default:                                    \
941         var = defval;                           \
942         break;                                  \
943     }
944
945 /**
946  * Load a single ASF packet into the demuxer.
947  * @param s demux context
948  * @param pb context to read data from
949  * @return 0 on success, <0 on error
950  */
951 static int asf_get_packet(AVFormatContext *s, AVIOContext *pb)
952 {
953     ASFContext *asf = s->priv_data;
954     uint32_t packet_length, padsize;
955     int rsize = 8;
956     int c, d, e, off;
957
958     // if we do not know packet size, allow skipping up to 32 kB
959     off = 32768;
960     if (asf->no_resync_search)
961         off = 3;
962     else if (s->packet_size > 0)
963         off = (avio_tell(pb) - s->internal->data_offset) % s->packet_size + 3;
964
965     c = d = e = -1;
966     while (off-- > 0) {
967         c = d;
968         d = e;
969         e = avio_r8(pb);
970         if (c == 0x82 && !d && !e)
971             break;
972     }
973
974     if (c != 0x82) {
975         /* This code allows handling of -EAGAIN at packet boundaries (i.e.
976          * if the packet sync code above triggers -EAGAIN). This does not
977          * imply complete -EAGAIN handling support at random positions in
978          * the stream. */
979         if (pb->error == AVERROR(EAGAIN))
980             return AVERROR(EAGAIN);
981         if (!avio_feof(pb))
982             av_log(s, AV_LOG_ERROR,
983                    "ff asf bad header %x  at:%"PRId64"\n", c, avio_tell(pb));
984     }
985     if ((c & 0x8f) == 0x82) {
986         if (d || e) {
987             if (!avio_feof(pb))
988                 av_log(s, AV_LOG_ERROR, "ff asf bad non zero\n");
989             return AVERROR_INVALIDDATA;
990         }
991         c      = avio_r8(pb);
992         d      = avio_r8(pb);
993         rsize += 3;
994     } else if(!avio_feof(pb)) {
995         avio_seek(pb, -1, SEEK_CUR); // FIXME
996     }
997
998     asf->packet_flags    = c;
999     asf->packet_property = d;
1000
1001     DO_2BITS(asf->packet_flags >> 5, packet_length, s->packet_size);
1002     DO_2BITS(asf->packet_flags >> 1, padsize, 0); // sequence ignored
1003     DO_2BITS(asf->packet_flags >> 3, padsize, 0); // padding length
1004
1005     // the following checks prevent overflows and infinite loops
1006     if (!packet_length || packet_length >= (1U << 29)) {
1007         av_log(s, AV_LOG_ERROR,
1008                "invalid packet_length %"PRIu32" at:%"PRId64"\n",
1009                packet_length, avio_tell(pb));
1010         return AVERROR_INVALIDDATA;
1011     }
1012     if (padsize >= packet_length) {
1013         av_log(s, AV_LOG_ERROR,
1014                "invalid padsize %"PRIu32" at:%"PRId64"\n", padsize, avio_tell(pb));
1015         return AVERROR_INVALIDDATA;
1016     }
1017
1018     asf->packet_timestamp = avio_rl32(pb);
1019     avio_rl16(pb); /* duration */
1020     // rsize has at least 11 bytes which have to be present
1021
1022     if (asf->packet_flags & 0x01) {
1023         asf->packet_segsizetype = avio_r8(pb);
1024         rsize++;
1025         asf->packet_segments = asf->packet_segsizetype & 0x3f;
1026     } else {
1027         asf->packet_segments    = 1;
1028         asf->packet_segsizetype = 0x80;
1029     }
1030     if (rsize > packet_length - padsize) {
1031         asf->packet_size_left = 0;
1032         av_log(s, AV_LOG_ERROR,
1033                "invalid packet header length %d for pktlen %"PRIu32"-%"PRIu32" at %"PRId64"\n",
1034                rsize, packet_length, padsize, avio_tell(pb));
1035         return AVERROR_INVALIDDATA;
1036     }
1037     asf->packet_size_left = packet_length - padsize - rsize;
1038     if (packet_length < asf->hdr.min_pktsize)
1039         padsize += asf->hdr.min_pktsize - packet_length;
1040     asf->packet_padsize = padsize;
1041     av_log(s, AV_LOG_TRACE, "packet: size=%d padsize=%d  left=%d\n",
1042             s->packet_size, asf->packet_padsize, asf->packet_size_left);
1043     return 0;
1044 }
1045
1046 /**
1047  *
1048  * @return <0 if error
1049  */
1050 static int asf_read_frame_header(AVFormatContext *s, AVIOContext *pb)
1051 {
1052     ASFContext *asf = s->priv_data;
1053     ASFStream *asfst;
1054     int rsize       = 1;
1055     int num         = avio_r8(pb);
1056     int i;
1057     int64_t ts0, ts1 av_unused;
1058
1059     asf->packet_segments--;
1060     asf->packet_key_frame = num >> 7;
1061     asf->stream_index     = asf->asfid2avid[num & 0x7f];
1062     asfst                 = &asf->streams[num & 0x7f];
1063     // sequence should be ignored!
1064     DO_2BITS(asf->packet_property >> 4, asf->packet_seq, 0);
1065     DO_2BITS(asf->packet_property >> 2, asf->packet_frag_offset, 0);
1066     DO_2BITS(asf->packet_property, asf->packet_replic_size, 0);
1067     av_log(asf, AV_LOG_TRACE, "key:%d stream:%d seq:%d offset:%d replic_size:%d\n",
1068             asf->packet_key_frame, asf->stream_index, asf->packet_seq,
1069             asf->packet_frag_offset, asf->packet_replic_size);
1070     if (rsize+(int64_t)asf->packet_replic_size > asf->packet_size_left) {
1071         av_log(s, AV_LOG_ERROR, "packet_replic_size %d is invalid\n", asf->packet_replic_size);
1072         return AVERROR_INVALIDDATA;
1073     }
1074     if (asf->packet_replic_size >= 8) {
1075         int64_t end = avio_tell(pb) + asf->packet_replic_size;
1076         AVRational aspect;
1077         asfst->packet_obj_size = avio_rl32(pb);
1078         if (asfst->packet_obj_size >= (1 << 24) || asfst->packet_obj_size < 0) {
1079             av_log(s, AV_LOG_ERROR, "packet_obj_size %d invalid\n", asfst->packet_obj_size);
1080             asfst->packet_obj_size = 0;
1081             return AVERROR_INVALIDDATA;
1082         }
1083         asf->packet_frag_timestamp = avio_rl32(pb); // timestamp
1084
1085         for (i = 0; i < asfst->payload_ext_ct; i++) {
1086             ASFPayload *p = &asfst->payload[i];
1087             int size = p->size;
1088             int64_t payend;
1089             if (size == 0xFFFF)
1090                 size = avio_rl16(pb);
1091             payend = avio_tell(pb) + size;
1092             if (payend > end) {
1093                 av_log(s, AV_LOG_ERROR, "too long payload\n");
1094                 break;
1095             }
1096             switch (p->type) {
1097             case 0x50:
1098 //              duration = avio_rl16(pb);
1099                 break;
1100             case 0x54:
1101                 aspect.num = avio_r8(pb);
1102                 aspect.den = avio_r8(pb);
1103                 if (aspect.num > 0 && aspect.den > 0 && asf->stream_index >= 0) {
1104                     s->streams[asf->stream_index]->sample_aspect_ratio = aspect;
1105                 }
1106                 break;
1107             case 0x2A:
1108                 avio_skip(pb, 8);
1109                 ts0 = avio_rl64(pb);
1110                 ts1 = avio_rl64(pb);
1111                 if (ts0!= -1) asf->packet_frag_timestamp = ts0/10000;
1112                 else          asf->packet_frag_timestamp = AV_NOPTS_VALUE;
1113                 asf->ts_is_pts = 1;
1114                 break;
1115             case 0x5B:
1116             case 0xB7:
1117             case 0xCC:
1118             case 0xC0:
1119             case 0xA0:
1120                 //unknown
1121                 break;
1122             }
1123             avio_seek(pb, payend, SEEK_SET);
1124         }
1125
1126         avio_seek(pb, end, SEEK_SET);
1127         rsize += asf->packet_replic_size; // FIXME - check validity
1128     } else if (asf->packet_replic_size == 1) {
1129         // multipacket - frag_offset is beginning timestamp
1130         asf->packet_time_start     = asf->packet_frag_offset;
1131         asf->packet_frag_offset    = 0;
1132         asf->packet_frag_timestamp = asf->packet_timestamp;
1133
1134         asf->packet_time_delta = avio_r8(pb);
1135         rsize++;
1136     } else if (asf->packet_replic_size != 0) {
1137         av_log(s, AV_LOG_ERROR, "unexpected packet_replic_size of %d\n",
1138                asf->packet_replic_size);
1139         return AVERROR_INVALIDDATA;
1140     }
1141     if (asf->packet_flags & 0x01) {
1142         DO_2BITS(asf->packet_segsizetype >> 6, asf->packet_frag_size, 0); // 0 is illegal
1143         if (rsize > asf->packet_size_left) {
1144             av_log(s, AV_LOG_ERROR, "packet_replic_size is invalid\n");
1145             return AVERROR_INVALIDDATA;
1146         } else if (asf->packet_frag_size > asf->packet_size_left - rsize) {
1147             if (asf->packet_frag_size > asf->packet_size_left - rsize + asf->packet_padsize) {
1148                 av_log(s, AV_LOG_ERROR, "packet_frag_size is invalid (%d-%d)\n",
1149                        asf->packet_size_left, rsize);
1150                 return AVERROR_INVALIDDATA;
1151             } else {
1152                 int diff = asf->packet_frag_size - (asf->packet_size_left - rsize);
1153                 asf->packet_size_left += diff;
1154                 asf->packet_padsize   -= diff;
1155             }
1156         }
1157     } else {
1158         asf->packet_frag_size = asf->packet_size_left - rsize;
1159     }
1160     if (asf->packet_replic_size == 1) {
1161         asf->packet_multi_size = asf->packet_frag_size;
1162         if (asf->packet_multi_size > asf->packet_size_left)
1163             return AVERROR_INVALIDDATA;
1164     }
1165     asf->packet_size_left -= rsize;
1166
1167     return 0;
1168 }
1169
1170 /**
1171  * Parse data from individual ASF packets (which were previously loaded
1172  * with asf_get_packet()).
1173  * @param s demux context
1174  * @param pb context to read data from
1175  * @param pkt pointer to store packet data into
1176  * @return 0 if data was stored in pkt, <0 on error or 1 if more ASF
1177  *          packets need to be loaded (through asf_get_packet())
1178  */
1179 static int asf_parse_packet(AVFormatContext *s, AVIOContext *pb, AVPacket *pkt)
1180 {
1181     ASFContext *asf   = s->priv_data;
1182     ASFStream *asf_st = 0;
1183     for (;;) {
1184         int ret;
1185         if (avio_feof(pb))
1186             return AVERROR_EOF;
1187         if (asf->packet_size_left < FRAME_HEADER_SIZE ||
1188             asf->packet_segments < 1 && asf->packet_time_start == 0) {
1189             int ret = asf->packet_size_left + asf->packet_padsize;
1190
1191             if (asf->packet_size_left && asf->packet_size_left < FRAME_HEADER_SIZE)
1192                 av_log(s, AV_LOG_WARNING, "Skip due to FRAME_HEADER_SIZE\n");
1193
1194             assert(ret >= 0);
1195             /* fail safe */
1196             avio_skip(pb, ret);
1197
1198             asf->packet_pos = avio_tell(pb);
1199             if (asf->data_object_size != (uint64_t)-1 &&
1200                 (asf->packet_pos - asf->data_object_offset >= asf->data_object_size))
1201                 return AVERROR_EOF;  /* Do not exceed the size of the data object */
1202             return 1;
1203         }
1204         if (asf->packet_time_start == 0) {
1205             if (asf_read_frame_header(s, pb) < 0) {
1206                 asf->packet_time_start = asf->packet_segments = 0;
1207                 continue;
1208             }
1209             if (asf->stream_index < 0 ||
1210                 s->streams[asf->stream_index]->discard >= AVDISCARD_ALL ||
1211                 (!asf->packet_key_frame &&
1212                  (s->streams[asf->stream_index]->discard >= AVDISCARD_NONKEY || asf->streams[s->streams[asf->stream_index]->id].skip_to_key))) {
1213                 asf->packet_time_start = 0;
1214                 /* unhandled packet (should not happen) */
1215                 avio_skip(pb, asf->packet_frag_size);
1216                 asf->packet_size_left -= asf->packet_frag_size;
1217                 if (asf->stream_index < 0)
1218                     av_log(s, AV_LOG_ERROR, "ff asf skip %d (unknown stream)\n",
1219                            asf->packet_frag_size);
1220                 continue;
1221             }
1222             asf->asf_st = &asf->streams[s->streams[asf->stream_index]->id];
1223             if (!asf->packet_frag_offset)
1224                 asf->asf_st->skip_to_key = 0;
1225         }
1226         asf_st = asf->asf_st;
1227         av_assert0(asf_st);
1228
1229         if (!asf_st->frag_offset && asf->packet_frag_offset) {
1230             av_log(s, AV_LOG_TRACE, "skipping asf data pkt with fragment offset for "
1231                     "stream:%d, expected:%d but got %d from pkt)\n",
1232                     asf->stream_index, asf_st->frag_offset,
1233                     asf->packet_frag_offset);
1234             avio_skip(pb, asf->packet_frag_size);
1235             asf->packet_size_left -= asf->packet_frag_size;
1236             continue;
1237         }
1238
1239         if (asf->packet_replic_size == 1) {
1240             // frag_offset is here used as the beginning timestamp
1241             asf->packet_frag_timestamp = asf->packet_time_start;
1242             asf->packet_time_start    += asf->packet_time_delta;
1243             asf_st->packet_obj_size    = asf->packet_frag_size = avio_r8(pb);
1244             asf->packet_size_left--;
1245             asf->packet_multi_size--;
1246             if (asf->packet_multi_size < asf_st->packet_obj_size) {
1247                 asf->packet_time_start = 0;
1248                 avio_skip(pb, asf->packet_multi_size);
1249                 asf->packet_size_left -= asf->packet_multi_size;
1250                 continue;
1251             }
1252             asf->packet_multi_size -= asf_st->packet_obj_size;
1253         }
1254
1255         if (asf_st->pkt.size != asf_st->packet_obj_size ||
1256             // FIXME is this condition sufficient?
1257             asf_st->frag_offset + asf->packet_frag_size > asf_st->pkt.size) {
1258             int ret;
1259
1260             if (asf_st->pkt.data) {
1261                 av_log(s, AV_LOG_INFO,
1262                        "freeing incomplete packet size %d, new %d\n",
1263                        asf_st->pkt.size, asf_st->packet_obj_size);
1264                 asf_st->frag_offset = 0;
1265                 av_free_packet(&asf_st->pkt);
1266             }
1267             /* new packet */
1268             if ((ret = av_new_packet(&asf_st->pkt, asf_st->packet_obj_size)) < 0)
1269                 return ret;
1270             asf_st->seq              = asf->packet_seq;
1271             if (asf->ts_is_pts) {
1272                 asf_st->pkt.pts          = asf->packet_frag_timestamp - asf->hdr.preroll;
1273             } else
1274                 asf_st->pkt.dts          = asf->packet_frag_timestamp - asf->hdr.preroll;
1275             asf_st->pkt.stream_index = asf->stream_index;
1276             asf_st->pkt.pos          = asf_st->packet_pos = asf->packet_pos;
1277             asf_st->pkt_clean        = 0;
1278
1279             if (asf_st->pkt.data && asf_st->palette_changed) {
1280                 uint8_t *pal;
1281                 pal = av_packet_new_side_data(&asf_st->pkt, AV_PKT_DATA_PALETTE,
1282                                               AVPALETTE_SIZE);
1283                 if (!pal) {
1284                     av_log(s, AV_LOG_ERROR, "Cannot append palette to packet\n");
1285                 } else {
1286                     memcpy(pal, asf_st->palette, AVPALETTE_SIZE);
1287                     asf_st->palette_changed = 0;
1288                 }
1289             }
1290             av_log(asf, AV_LOG_TRACE, "new packet: stream:%d key:%d packet_key:%d audio:%d size:%d\n",
1291                     asf->stream_index, asf->packet_key_frame,
1292                     asf_st->pkt.flags & AV_PKT_FLAG_KEY,
1293                     s->streams[asf->stream_index]->codec->codec_type == AVMEDIA_TYPE_AUDIO,
1294                     asf_st->packet_obj_size);
1295             if (s->streams[asf->stream_index]->codec->codec_type == AVMEDIA_TYPE_AUDIO)
1296                 asf->packet_key_frame = 1;
1297             if (asf->packet_key_frame)
1298                 asf_st->pkt.flags |= AV_PKT_FLAG_KEY;
1299         }
1300
1301         /* read data */
1302         av_log(asf, AV_LOG_TRACE, "READ PACKET s:%d  os:%d  o:%d,%d  l:%d   DATA:%p\n",
1303                 s->packet_size, asf_st->pkt.size, asf->packet_frag_offset,
1304                 asf_st->frag_offset, asf->packet_frag_size, asf_st->pkt.data);
1305         asf->packet_size_left -= asf->packet_frag_size;
1306         if (asf->packet_size_left < 0)
1307             continue;
1308
1309         if (asf->packet_frag_offset >= asf_st->pkt.size ||
1310             asf->packet_frag_size > asf_st->pkt.size - asf->packet_frag_offset) {
1311             av_log(s, AV_LOG_ERROR,
1312                    "packet fragment position invalid %u,%u not in %u\n",
1313                    asf->packet_frag_offset, asf->packet_frag_size,
1314                    asf_st->pkt.size);
1315             continue;
1316         }
1317
1318         if (asf->packet_frag_offset != asf_st->frag_offset && !asf_st->pkt_clean) {
1319             memset(asf_st->pkt.data + asf_st->frag_offset, 0, asf_st->pkt.size - asf_st->frag_offset);
1320             asf_st->pkt_clean = 1;
1321         }
1322
1323         ret = avio_read(pb, asf_st->pkt.data + asf->packet_frag_offset,
1324                         asf->packet_frag_size);
1325         if (ret != asf->packet_frag_size) {
1326             if (ret < 0 || asf->packet_frag_offset + ret == 0)
1327                 return ret < 0 ? ret : AVERROR_EOF;
1328
1329             if (asf_st->ds_span > 1) {
1330                 // scrambling, we can either drop it completely or fill the remainder
1331                 // TODO: should we fill the whole packet instead of just the current
1332                 // fragment?
1333                 memset(asf_st->pkt.data + asf->packet_frag_offset + ret, 0,
1334                        asf->packet_frag_size - ret);
1335                 ret = asf->packet_frag_size;
1336             } else {
1337                 // no scrambling, so we can return partial packets
1338                 av_shrink_packet(&asf_st->pkt, asf->packet_frag_offset + ret);
1339             }
1340         }
1341         if (s->key && s->keylen == 20)
1342             ff_asfcrypt_dec(s->key, asf_st->pkt.data + asf->packet_frag_offset,
1343                             ret);
1344         asf_st->frag_offset += ret;
1345         /* test if whole packet is read */
1346         if (asf_st->frag_offset == asf_st->pkt.size) {
1347             // workaround for macroshit radio DVR-MS files
1348             if (s->streams[asf->stream_index]->codec->codec_id == AV_CODEC_ID_MPEG2VIDEO &&
1349                 asf_st->pkt.size > 100) {
1350                 int i;
1351                 for (i = 0; i < asf_st->pkt.size && !asf_st->pkt.data[i]; i++)
1352                     ;
1353                 if (i == asf_st->pkt.size) {
1354                     av_log(s, AV_LOG_DEBUG, "discarding ms fart\n");
1355                     asf_st->frag_offset = 0;
1356                     av_free_packet(&asf_st->pkt);
1357                     continue;
1358                 }
1359             }
1360
1361             /* return packet */
1362             if (asf_st->ds_span > 1) {
1363                 if (asf_st->pkt.size != asf_st->ds_packet_size * asf_st->ds_span) {
1364                     av_log(s, AV_LOG_ERROR,
1365                            "pkt.size != ds_packet_size * ds_span (%d %d %d)\n",
1366                            asf_st->pkt.size, asf_st->ds_packet_size,
1367                            asf_st->ds_span);
1368                 } else {
1369                     /* packet descrambling */
1370                     AVBufferRef *buf = av_buffer_alloc(asf_st->pkt.size +
1371                                                        FF_INPUT_BUFFER_PADDING_SIZE);
1372                     if (buf) {
1373                         uint8_t *newdata = buf->data;
1374                         int offset = 0;
1375                         memset(newdata + asf_st->pkt.size, 0,
1376                                FF_INPUT_BUFFER_PADDING_SIZE);
1377                         while (offset < asf_st->pkt.size) {
1378                             int off = offset / asf_st->ds_chunk_size;
1379                             int row = off / asf_st->ds_span;
1380                             int col = off % asf_st->ds_span;
1381                             int idx = row + col * asf_st->ds_packet_size / asf_st->ds_chunk_size;
1382                             assert(offset + asf_st->ds_chunk_size <= asf_st->pkt.size);
1383                             assert(idx + 1 <= asf_st->pkt.size / asf_st->ds_chunk_size);
1384                             memcpy(newdata + offset,
1385                                    asf_st->pkt.data + idx * asf_st->ds_chunk_size,
1386                                    asf_st->ds_chunk_size);
1387                             offset += asf_st->ds_chunk_size;
1388                         }
1389                         av_buffer_unref(&asf_st->pkt.buf);
1390                         asf_st->pkt.buf  = buf;
1391                         asf_st->pkt.data = buf->data;
1392                     }
1393                 }
1394             }
1395             asf_st->frag_offset         = 0;
1396             *pkt                        = asf_st->pkt;
1397 #if FF_API_DESTRUCT_PACKET
1398 FF_DISABLE_DEPRECATION_WARNINGS
1399             asf_st->pkt.destruct        = NULL;
1400 FF_ENABLE_DEPRECATION_WARNINGS
1401 #endif
1402             asf_st->pkt.buf             = 0;
1403             asf_st->pkt.size            = 0;
1404             asf_st->pkt.data            = 0;
1405             asf_st->pkt.side_data_elems = 0;
1406             asf_st->pkt.side_data       = NULL;
1407             break; // packet completed
1408         }
1409     }
1410     return 0;
1411 }
1412
1413 static int asf_read_packet(AVFormatContext *s, AVPacket *pkt)
1414 {
1415     ASFContext *asf = s->priv_data;
1416
1417     for (;;) {
1418         int ret;
1419
1420         /* parse cached packets, if any */
1421         if ((ret = asf_parse_packet(s, s->pb, pkt)) <= 0)
1422             return ret;
1423         if ((ret = asf_get_packet(s, s->pb)) < 0)
1424             assert(asf->packet_size_left < FRAME_HEADER_SIZE ||
1425                    asf->packet_segments < 1);
1426         asf->packet_time_start = 0;
1427     }
1428 }
1429
1430 // Added to support seeking after packets have been read
1431 // If information is not reset, read_packet fails due to
1432 // leftover information from previous reads
1433 static void asf_reset_header(AVFormatContext *s)
1434 {
1435     ASFContext *asf = s->priv_data;
1436     ASFStream *asf_st;
1437     int i;
1438
1439     asf->packet_size_left      = 0;
1440     asf->packet_flags          = 0;
1441     asf->packet_property       = 0;
1442     asf->packet_timestamp      = 0;
1443     asf->packet_segsizetype    = 0;
1444     asf->packet_segments       = 0;
1445     asf->packet_seq            = 0;
1446     asf->packet_replic_size    = 0;
1447     asf->packet_key_frame      = 0;
1448     asf->packet_padsize        = 0;
1449     asf->packet_frag_offset    = 0;
1450     asf->packet_frag_size      = 0;
1451     asf->packet_frag_timestamp = 0;
1452     asf->packet_multi_size     = 0;
1453     asf->packet_time_delta     = 0;
1454     asf->packet_time_start     = 0;
1455
1456     for (i = 0; i < 128; i++) {
1457         asf_st = &asf->streams[i];
1458         av_free_packet(&asf_st->pkt);
1459         asf_st->packet_obj_size = 0;
1460         asf_st->frag_offset = 0;
1461         asf_st->seq         = 0;
1462     }
1463     asf->asf_st = NULL;
1464 }
1465
1466 static void skip_to_key(AVFormatContext *s)
1467 {
1468     ASFContext *asf = s->priv_data;
1469     int i;
1470
1471     for (i = 0; i < 128; i++) {
1472         int j = asf->asfid2avid[i];
1473         ASFStream *asf_st = &asf->streams[i];
1474         if (j < 0 || s->streams[j]->codec->codec_type != AVMEDIA_TYPE_VIDEO)
1475             continue;
1476
1477         asf_st->skip_to_key = 1;
1478     }
1479 }
1480
1481 static int asf_read_close(AVFormatContext *s)
1482 {
1483     asf_reset_header(s);
1484
1485     return 0;
1486 }
1487
1488 static int64_t asf_read_pts(AVFormatContext *s, int stream_index,
1489                             int64_t *ppos, int64_t pos_limit)
1490 {
1491     ASFContext *asf     = s->priv_data;
1492     AVPacket pkt1, *pkt = &pkt1;
1493     ASFStream *asf_st;
1494     int64_t pts;
1495     int64_t pos = *ppos;
1496     int i;
1497     int64_t start_pos[ASF_MAX_STREAMS];
1498
1499     for (i = 0; i < s->nb_streams; i++)
1500         start_pos[i] = pos;
1501
1502     if (s->packet_size > 0)
1503         pos = (pos + s->packet_size - 1 - s->internal->data_offset) /
1504               s->packet_size * s->packet_size +
1505               s->internal->data_offset;
1506     *ppos = pos;
1507     if (avio_seek(s->pb, pos, SEEK_SET) < 0)
1508         return AV_NOPTS_VALUE;
1509
1510     ff_read_frame_flush(s);
1511     asf_reset_header(s);
1512     for (;;) {
1513         if (av_read_frame(s, pkt) < 0) {
1514             av_log(s, AV_LOG_INFO, "asf_read_pts failed\n");
1515             return AV_NOPTS_VALUE;
1516         }
1517
1518         pts = pkt->dts;
1519
1520         av_free_packet(pkt);
1521         if (pkt->flags & AV_PKT_FLAG_KEY) {
1522             i = pkt->stream_index;
1523
1524             asf_st = &asf->streams[s->streams[i]->id];
1525
1526 //            assert((asf_st->packet_pos - s->data_offset) % s->packet_size == 0);
1527             pos = asf_st->packet_pos;
1528             av_assert1(pkt->pos == asf_st->packet_pos);
1529
1530             av_add_index_entry(s->streams[i], pos, pts, pkt->size,
1531                                pos - start_pos[i] + 1, AVINDEX_KEYFRAME);
1532             start_pos[i] = asf_st->packet_pos + 1;
1533
1534             if (pkt->stream_index == stream_index)
1535                 break;
1536         }
1537     }
1538
1539     *ppos = pos;
1540     return pts;
1541 }
1542
1543 static int asf_build_simple_index(AVFormatContext *s, int stream_index)
1544 {
1545     ff_asf_guid g;
1546     ASFContext *asf     = s->priv_data;
1547     int64_t current_pos = avio_tell(s->pb);
1548     int64_t ret;
1549
1550     if((ret = avio_seek(s->pb, asf->data_object_offset + asf->data_object_size, SEEK_SET)) < 0) {
1551         return ret;
1552     }
1553
1554     if ((ret = ff_get_guid(s->pb, &g)) < 0)
1555         goto end;
1556
1557     /* the data object can be followed by other top-level objects,
1558      * skip them until the simple index object is reached */
1559     while (ff_guidcmp(&g, &ff_asf_simple_index_header)) {
1560         int64_t gsize = avio_rl64(s->pb);
1561         if (gsize < 24 || avio_feof(s->pb)) {
1562             goto end;
1563         }
1564         avio_skip(s->pb, gsize - 24);
1565         if ((ret = ff_get_guid(s->pb, &g)) < 0)
1566             goto end;
1567     }
1568
1569     {
1570         int64_t itime, last_pos = -1;
1571         int pct, ict;
1572         int i;
1573         int64_t av_unused gsize = avio_rl64(s->pb);
1574         if ((ret = ff_get_guid(s->pb, &g)) < 0)
1575             goto end;
1576         itime = avio_rl64(s->pb);
1577         pct   = avio_rl32(s->pb);
1578         ict   = avio_rl32(s->pb);
1579         av_log(s, AV_LOG_DEBUG,
1580                "itime:0x%"PRIx64", pct:%d, ict:%d\n", itime, pct, ict);
1581
1582         for (i = 0; i < ict; i++) {
1583             int pktnum        = avio_rl32(s->pb);
1584             int pktct         = avio_rl16(s->pb);
1585             int64_t pos       = s->internal->data_offset + s->packet_size * (int64_t)pktnum;
1586             int64_t index_pts = FFMAX(av_rescale(itime, i, 10000) - asf->hdr.preroll, 0);
1587
1588             if (pos != last_pos) {
1589                 av_log(s, AV_LOG_DEBUG, "pktnum:%d, pktct:%d  pts: %"PRId64"\n",
1590                        pktnum, pktct, index_pts);
1591                 av_add_index_entry(s->streams[stream_index], pos, index_pts,
1592                                    s->packet_size, 0, AVINDEX_KEYFRAME);
1593                 last_pos = pos;
1594             }
1595         }
1596         asf->index_read = ict > 1;
1597     }
1598 end:
1599 //     if (avio_feof(s->pb)) {
1600 //         ret = 0;
1601 //     }
1602     avio_seek(s->pb, current_pos, SEEK_SET);
1603     return ret;
1604 }
1605
1606 static int asf_read_seek(AVFormatContext *s, int stream_index,
1607                          int64_t pts, int flags)
1608 {
1609     ASFContext *asf = s->priv_data;
1610     AVStream *st    = s->streams[stream_index];
1611     int ret = 0;
1612
1613     if (s->packet_size <= 0)
1614         return -1;
1615
1616     /* Try using the protocol's read_seek if available */
1617     if (s->pb) {
1618         int64_t ret = avio_seek_time(s->pb, stream_index, pts, flags);
1619         if (ret >= 0)
1620             asf_reset_header(s);
1621         if (ret != AVERROR(ENOSYS))
1622             return ret;
1623     }
1624
1625     /* explicitly handle the case of seeking to 0 */
1626     if (!pts) {
1627         asf_reset_header(s);
1628         avio_seek(s->pb, s->internal->data_offset, SEEK_SET);
1629         return 0;
1630     }
1631
1632     if (!asf->index_read) {
1633         ret = asf_build_simple_index(s, stream_index);
1634         if (ret < 0)
1635             asf->index_read = -1;
1636     }
1637
1638     if (asf->index_read > 0 && st->index_entries) {
1639         int index = av_index_search_timestamp(st, pts, flags);
1640         if (index >= 0) {
1641             /* find the position */
1642             uint64_t pos = st->index_entries[index].pos;
1643
1644             /* do the seek */
1645             av_log(s, AV_LOG_DEBUG, "SEEKTO: %"PRId64"\n", pos);
1646             if(avio_seek(s->pb, pos, SEEK_SET) < 0)
1647                 return -1;
1648             asf_reset_header(s);
1649             skip_to_key(s);
1650             return 0;
1651         }
1652     }
1653     /* no index or seeking by index failed */
1654     if (ff_seek_frame_binary(s, stream_index, pts, flags) < 0)
1655         return -1;
1656     asf_reset_header(s);
1657     skip_to_key(s);
1658     return 0;
1659 }
1660
1661 AVInputFormat ff_asf_demuxer = {
1662     .name           = "asf",
1663     .long_name      = NULL_IF_CONFIG_SMALL("ASF (Advanced / Active Streaming Format)"),
1664     .priv_data_size = sizeof(ASFContext),
1665     .read_probe     = asf_probe,
1666     .read_header    = asf_read_header,
1667     .read_packet    = asf_read_packet,
1668     .read_close     = asf_read_close,
1669     .read_seek      = asf_read_seek,
1670     .read_timestamp = asf_read_pts,
1671     .flags          = AVFMT_NOBINSEARCH | AVFMT_NOGENSEARCH,
1672     .priv_class     = &asf_class,
1673 };