rtpdec: add a trace when jitter buffer is full
[ffmpeg.git] / libavformat / rtpdec_mpeg4.c
1 /*
2  * Common code for the RTP depacketization of MPEG-4 formats.
3  * Copyright (c) 2010 Fabrice Bellard
4  *                    Romain Degez
5  *
6  * This file is part of Libav.
7  *
8  * Libav is free software; you can redistribute it and/or
9  * modify it under the terms of the GNU Lesser General Public
10  * License as published by the Free Software Foundation; either
11  * version 2.1 of the License, or (at your option) any later version.
12  *
13  * Libav is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
16  * Lesser General Public License for more details.
17  *
18  * You should have received a copy of the GNU Lesser General Public
19  * License along with Libav; if not, write to the Free Software
20  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
21  */
22
23 /**
24  * @file
25  * @brief MPEG4 / RTP Code
26  * @author Fabrice Bellard
27  * @author Romain Degez
28  */
29
30 #include "rtpdec_formats.h"
31 #include "internal.h"
32 #include "libavutil/attributes.h"
33 #include "libavutil/avstring.h"
34 #include "libavcodec/get_bits.h"
35
36 #define MAX_AAC_HBR_FRAME_SIZE 8191
37
38 /** Structure listing useful vars to parse RTP packet payload */
39 struct PayloadContext {
40     int sizelength;
41     int indexlength;
42     int indexdeltalength;
43     int profile_level_id;
44     int streamtype;
45     int objecttype;
46     char *mode;
47
48     /** mpeg 4 AU headers */
49     struct AUHeaders {
50         int size;
51         int index;
52         int cts_flag;
53         int cts;
54         int dts_flag;
55         int dts;
56         int rap_flag;
57         int streamstate;
58     } *au_headers;
59     int au_headers_allocated;
60     int nb_au_headers;
61     int au_headers_length_bytes;
62     int cur_au_index;
63
64     uint8_t buf[FFMAX(RTP_MAX_PACKET_LENGTH, MAX_AAC_HBR_FRAME_SIZE)];
65     int buf_pos, buf_size;
66     uint32_t timestamp;
67 };
68
69 typedef struct AttrNameMap {
70     const char *str;
71     uint16_t    type;
72     uint32_t    offset;
73 } AttrNameMap;
74
75 /* All known fmtp parameters and the corresponding RTPAttrTypeEnum */
76 #define ATTR_NAME_TYPE_INT 0
77 #define ATTR_NAME_TYPE_STR 1
78 static const AttrNameMap attr_names[] = {
79     { "SizeLength",       ATTR_NAME_TYPE_INT,
80       offsetof(PayloadContext, sizelength) },
81     { "IndexLength",      ATTR_NAME_TYPE_INT,
82       offsetof(PayloadContext, indexlength) },
83     { "IndexDeltaLength", ATTR_NAME_TYPE_INT,
84       offsetof(PayloadContext, indexdeltalength) },
85     { "profile-level-id", ATTR_NAME_TYPE_INT,
86       offsetof(PayloadContext, profile_level_id) },
87     { "StreamType",       ATTR_NAME_TYPE_INT,
88       offsetof(PayloadContext, streamtype) },
89     { "mode",             ATTR_NAME_TYPE_STR,
90       offsetof(PayloadContext, mode) },
91     { NULL, -1, -1 },
92 };
93
94 static void close_context(PayloadContext *data)
95 {
96     av_free(data->au_headers);
97     av_free(data->mode);
98 }
99
100 static int parse_fmtp_config(AVCodecContext *codec, const char *value)
101 {
102     /* decode the hexa encoded parameter */
103     int len = ff_hex_to_data(NULL, value);
104     av_free(codec->extradata);
105     codec->extradata = av_mallocz(len + AV_INPUT_BUFFER_PADDING_SIZE);
106     if (!codec->extradata)
107         return AVERROR(ENOMEM);
108     codec->extradata_size = len;
109     ff_hex_to_data(codec->extradata, value);
110     return 0;
111 }
112
113 static int rtp_parse_mp4_au(PayloadContext *data, const uint8_t *buf, int len)
114 {
115     int au_headers_length, au_header_size, i;
116     GetBitContext getbitcontext;
117
118     if (len < 2)
119         return AVERROR_INVALIDDATA;
120
121     /* decode the first 2 bytes where the AUHeader sections are stored
122        length in bits */
123     au_headers_length = AV_RB16(buf);
124
125     if (au_headers_length > RTP_MAX_PACKET_LENGTH)
126       return -1;
127
128     data->au_headers_length_bytes = (au_headers_length + 7) / 8;
129
130     /* skip AU headers length section (2 bytes) */
131     buf += 2;
132     len -= 2;
133
134     if (len < data->au_headers_length_bytes)
135         return AVERROR_INVALIDDATA;
136
137     init_get_bits(&getbitcontext, buf, data->au_headers_length_bytes * 8);
138
139     /* XXX: Wrong if optionnal additional sections are present (cts, dts etc...) */
140     au_header_size = data->sizelength + data->indexlength;
141     if (au_header_size <= 0 || (au_headers_length % au_header_size != 0))
142         return -1;
143
144     data->nb_au_headers = au_headers_length / au_header_size;
145     if (!data->au_headers || data->au_headers_allocated < data->nb_au_headers) {
146         av_free(data->au_headers);
147         data->au_headers = av_malloc(sizeof(struct AUHeaders) * data->nb_au_headers);
148         if (!data->au_headers)
149             return AVERROR(ENOMEM);
150         data->au_headers_allocated = data->nb_au_headers;
151     }
152
153     for (i = 0; i < data->nb_au_headers; ++i) {
154         data->au_headers[i].size  = get_bits_long(&getbitcontext, data->sizelength);
155         data->au_headers[i].index = get_bits_long(&getbitcontext, data->indexlength);
156     }
157
158     return 0;
159 }
160
161
162 /* Follows RFC 3640 */
163 static int aac_parse_packet(AVFormatContext *ctx, PayloadContext *data,
164                             AVStream *st, AVPacket *pkt, uint32_t *timestamp,
165                             const uint8_t *buf, int len, uint16_t seq,
166                             int flags)
167 {
168     int ret;
169
170     if (!buf) {
171         if (data->cur_au_index > data->nb_au_headers) {
172             av_log(ctx, AV_LOG_ERROR, "Invalid parser state\n");
173             return AVERROR_INVALIDDATA;
174         }
175         if (data->buf_size - data->buf_pos < data->au_headers[data->cur_au_index].size) {
176             av_log(ctx, AV_LOG_ERROR, "Invalid AU size\n");
177             return AVERROR_INVALIDDATA;
178         }
179         if ((ret = av_new_packet(pkt, data->au_headers[data->cur_au_index].size)) < 0) {
180             av_log(ctx, AV_LOG_ERROR, "Out of memory\n");
181             return ret;
182         }
183         memcpy(pkt->data, &data->buf[data->buf_pos], data->au_headers[data->cur_au_index].size);
184         data->buf_pos += data->au_headers[data->cur_au_index].size;
185         pkt->stream_index = st->index;
186         data->cur_au_index++;
187
188         if (data->cur_au_index == data->nb_au_headers) {
189             data->buf_pos = 0;
190             return 0;
191         }
192
193         return 1;
194     }
195
196     if (rtp_parse_mp4_au(data, buf, len)) {
197         av_log(ctx, AV_LOG_ERROR, "Error parsing AU headers\n");
198         return -1;
199     }
200
201     buf += data->au_headers_length_bytes + 2;
202     len -= data->au_headers_length_bytes + 2;
203     if (data->nb_au_headers == 1 && len < data->au_headers[0].size) {
204         /* Packet is fragmented */
205
206         if (!data->buf_pos) {
207             if (data->au_headers[0].size > MAX_AAC_HBR_FRAME_SIZE) {
208                 av_log(ctx, AV_LOG_ERROR, "Invalid AU size\n");
209                 return AVERROR_INVALIDDATA;
210             }
211
212             data->buf_size = data->au_headers[0].size;
213             data->timestamp = *timestamp;
214         }
215
216         if (data->timestamp != *timestamp ||
217             data->au_headers[0].size != data->buf_size ||
218             data->buf_pos + len > MAX_AAC_HBR_FRAME_SIZE) {
219             data->buf_pos = 0;
220             data->buf_size = 0;
221             av_log(ctx, AV_LOG_ERROR, "Invalid packet received\n");
222             return AVERROR_INVALIDDATA;
223         }
224
225         memcpy(&data->buf[data->buf_pos], buf, len);
226         data->buf_pos += len;
227
228         if (!(flags & RTP_FLAG_MARKER))
229             return AVERROR(EAGAIN);
230
231         if (data->buf_pos != data->buf_size) {
232             data->buf_pos = 0;
233             av_log(ctx, AV_LOG_ERROR, "Missed some packets, discarding frame\n");
234             return AVERROR_INVALIDDATA;
235         }
236
237         data->buf_pos = 0;
238         ret = av_new_packet(pkt, data->buf_size);
239         if (ret < 0) {
240             av_log(ctx, AV_LOG_ERROR, "Out of memory\n");
241             return ret;
242         }
243         pkt->stream_index = st->index;
244
245         memcpy(pkt->data, data->buf, data->buf_size);
246
247         return 0;
248     }
249
250     if (len < data->au_headers[0].size) {
251         av_log(ctx, AV_LOG_ERROR, "First AU larger than packet size\n");
252         return AVERROR_INVALIDDATA;
253     }
254     if ((ret = av_new_packet(pkt, data->au_headers[0].size)) < 0) {
255         av_log(ctx, AV_LOG_ERROR, "Out of memory\n");
256         return ret;
257     }
258     memcpy(pkt->data, buf, data->au_headers[0].size);
259     len -= data->au_headers[0].size;
260     buf += data->au_headers[0].size;
261     pkt->stream_index = st->index;
262
263     if (len > 0 && data->nb_au_headers > 1) {
264         data->buf_size = FFMIN(len, sizeof(data->buf));
265         memcpy(data->buf, buf, data->buf_size);
266         data->cur_au_index = 1;
267         data->buf_pos = 0;
268         return 1;
269     }
270
271     return 0;
272 }
273
274 static int parse_fmtp(AVFormatContext *s,
275                       AVStream *stream, PayloadContext *data,
276                       const char *attr, const char *value)
277 {
278     AVCodecContext *codec = stream->codec;
279     int res, i;
280
281     if (!strcmp(attr, "config")) {
282         res = parse_fmtp_config(codec, value);
283
284         if (res < 0)
285             return res;
286     }
287
288     if (codec->codec_id == AV_CODEC_ID_AAC) {
289         /* Looking for a known attribute */
290         for (i = 0; attr_names[i].str; ++i) {
291             if (!av_strcasecmp(attr, attr_names[i].str)) {
292                 if (attr_names[i].type == ATTR_NAME_TYPE_INT) {
293                     *(int *)((char *)data+
294                         attr_names[i].offset) = atoi(value);
295                 } else if (attr_names[i].type == ATTR_NAME_TYPE_STR)
296                     *(char **)((char *)data+
297                         attr_names[i].offset) = av_strdup(value);
298             }
299         }
300     }
301     return 0;
302 }
303
304 static int parse_sdp_line(AVFormatContext *s, int st_index,
305                           PayloadContext *data, const char *line)
306 {
307     const char *p;
308
309     if (st_index < 0)
310         return 0;
311
312     if (av_strstart(line, "fmtp:", &p))
313         return ff_parse_fmtp(s, s->streams[st_index], data, p, parse_fmtp);
314
315     return 0;
316 }
317
318 RTPDynamicProtocolHandler ff_mp4v_es_dynamic_handler = {
319     .enc_name           = "MP4V-ES",
320     .codec_type         = AVMEDIA_TYPE_VIDEO,
321     .codec_id           = AV_CODEC_ID_MPEG4,
322     .need_parsing       = AVSTREAM_PARSE_FULL,
323     .priv_data_size     = sizeof(PayloadContext),
324     .parse_sdp_a_line   = parse_sdp_line,
325 };
326
327 RTPDynamicProtocolHandler ff_mpeg4_generic_dynamic_handler = {
328     .enc_name           = "mpeg4-generic",
329     .codec_type         = AVMEDIA_TYPE_AUDIO,
330     .codec_id           = AV_CODEC_ID_AAC,
331     .priv_data_size     = sizeof(PayloadContext),
332     .parse_sdp_a_line   = parse_sdp_line,
333     .close              = close_context,
334     .parse_packet       = aac_parse_packet,
335 };