nsvdec: Propagate error values instead of returning 0 in nsv_read_header().
[ffmpeg.git] / libavformat / nsvdec.c
1 /*
2  * NSV demuxer
3  * Copyright (c) 2004 The Libav Project
4  *
5  * This file is part of Libav.
6  *
7  * Libav is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * Libav is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with Libav; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21 #include "avformat.h"
22 #include "riff.h"
23 #include "libavutil/dict.h"
24
25 //#define DEBUG_DUMP_INDEX // XXX dumbdriving-271.nsv breaks with it commented!!
26 #define CHECK_SUBSEQUENT_NSVS
27 //#define DISABLE_AUDIO
28
29 /* max bytes to crawl for trying to resync
30  * stupid streaming servers don't start at chunk boundaries...
31  */
32 #define NSV_MAX_RESYNC (500*1024)
33 #define NSV_MAX_RESYNC_TRIES 300
34
35 /*
36  * First version by Francois Revol - revol@free.fr
37  * References:
38  * (1) http://www.multimedia.cx/nsv-format.txt
39  * seems someone came to the same conclusions as me, and updated it:
40  * (2) http://www.stud.ktu.lt/~vitslav/nsv/nsv-format.txt
41  *     http://www.stud.ktu.lt/~vitslav/nsv/
42  * official docs
43  * (3) http://ultravox.aol.com/NSVFormat.rtf
44  * Sample files:
45  * (S1) http://www.nullsoft.com/nsv/samples/
46  * http://www.nullsoft.com/nsv/samples/faster.nsv
47  * http://streamripper.sourceforge.net/openbb/read.php?TID=492&page=4
48  */
49
50 /*
51  * notes on the header (Francois Revol):
52  *
53  * It is followed by strings, then a table, but nothing tells
54  * where the table begins according to (1). After checking faster.nsv,
55  * I believe NVSf[16-19] gives the size of the strings data
56  * (that is the offset of the data table after the header).
57  * After checking all samples from (S1) all confirms this.
58  *
59  * Then, about NSVf[12-15], faster.nsf has 179700. When veiwing it in VLC,
60  * I noticed there was about 1 NVSs chunk/s, so I ran
61  * strings faster.nsv | grep NSVs | wc -l
62  * which gave me 180. That leads me to think that NSVf[12-15] might be the
63  * file length in milliseconds.
64  * Let's try that:
65  * for f in *.nsv; do HTIME="$(od -t x4 "$f" | head -1 | sed 's/.* //')"; echo "'$f' $((0x$HTIME))s = $((0x$HTIME/1000/60)):$((0x$HTIME/1000%60))"; done
66  * except for nstrailer (which doesn't have an NSVf header), it repports correct time.
67  *
68  * nsvtrailer.nsv (S1) does not have any NSVf header, only NSVs chunks,
69  * so the header seems to not be mandatory. (for streaming).
70  *
71  * index slice duration check (excepts nsvtrailer.nsv):
72  * for f in [^n]*.nsv; do DUR="$(ffmpeg -i "$f" 2>/dev/null | grep 'NSVf duration' | cut -d ' ' -f 4)"; IC="$(ffmpeg -i "$f" 2>/dev/null | grep 'INDEX ENTRIES' | cut -d ' ' -f 2)"; echo "duration $DUR, slite time $(($DUR/$IC))"; done
73  */
74
75 /*
76  * TODO:
77  * - handle timestamps !!!
78  * - use index
79  * - mime-type in probe()
80  * - seek
81  */
82
83 #if 0
84 struct NSVf_header {
85     uint32_t chunk_tag; /* 'NSVf' */
86     uint32_t chunk_size;
87     uint32_t file_size; /* max 4GB ??? no one learns anything it seems :^) */
88     uint32_t file_length; //unknown1;  /* what about MSB of file_size ? */
89     uint32_t info_strings_size; /* size of the info strings */ //unknown2;
90     uint32_t table_entries;
91     uint32_t table_entries_used; /* the left ones should be -1 */
92 };
93
94 struct NSVs_header {
95     uint32_t chunk_tag; /* 'NSVs' */
96     uint32_t v4cc;      /* or 'NONE' */
97     uint32_t a4cc;      /* or 'NONE' */
98     uint16_t vwidth;    /* assert(vwidth%16==0) */
99     uint16_t vheight;   /* assert(vheight%16==0) */
100     uint8_t framerate;  /* value = (framerate&0x80)?frtable[frameratex0x7f]:framerate */
101     uint16_t unknown;
102 };
103
104 struct nsv_avchunk_header {
105     uint8_t vchunk_size_lsb;
106     uint16_t vchunk_size_msb; /* value = (vchunk_size_msb << 4) | (vchunk_size_lsb >> 4) */
107     uint16_t achunk_size;
108 };
109
110 struct nsv_pcm_header {
111     uint8_t bits_per_sample;
112     uint8_t channel_count;
113     uint16_t sample_rate;
114 };
115 #endif
116
117 /* variation from avi.h */
118 /*typedef struct CodecTag {
119     int id;
120     unsigned int tag;
121 } CodecTag;*/
122
123 /* tags */
124
125 #define T_NSVF MKTAG('N', 'S', 'V', 'f') /* file header */
126 #define T_NSVS MKTAG('N', 'S', 'V', 's') /* chunk header */
127 #define T_TOC2 MKTAG('T', 'O', 'C', '2') /* extra index marker */
128 #define T_NONE MKTAG('N', 'O', 'N', 'E') /* null a/v 4CC */
129 #define T_SUBT MKTAG('S', 'U', 'B', 'T') /* subtitle aux data */
130 #define T_ASYN MKTAG('A', 'S', 'Y', 'N') /* async a/v aux marker */
131 #define T_KEYF MKTAG('K', 'E', 'Y', 'F') /* video keyframe aux marker (addition) */
132
133 #define TB_NSVF MKBETAG('N', 'S', 'V', 'f')
134 #define TB_NSVS MKBETAG('N', 'S', 'V', 's')
135
136 /* hardcoded stream indexes */
137 #define NSV_ST_VIDEO 0
138 #define NSV_ST_AUDIO 1
139 #define NSV_ST_SUBT 2
140
141 enum NSVStatus {
142     NSV_UNSYNC,
143     NSV_FOUND_NSVF,
144     NSV_HAS_READ_NSVF,
145     NSV_FOUND_NSVS,
146     NSV_HAS_READ_NSVS,
147     NSV_FOUND_BEEF,
148     NSV_GOT_VIDEO,
149     NSV_GOT_AUDIO,
150 };
151
152 typedef struct NSVStream {
153     int frame_offset; /* current frame (video) or byte (audio) counter
154                          (used to compute the pts) */
155     int scale;
156     int rate;
157     int sample_size; /* audio only data */
158     int start;
159
160     int new_frame_offset; /* temporary storage (used during seek) */
161     int cum_len; /* temporary storage (used during seek) */
162 } NSVStream;
163
164 typedef struct {
165     int  base_offset;
166     int  NSVf_end;
167     uint32_t *nsvs_file_offset;
168     int index_entries;
169     enum NSVStatus state;
170     AVPacket ahead[2]; /* [v, a] if .data is !NULL there is something */
171     /* cached */
172     int64_t duration;
173     uint32_t vtag, atag;
174     uint16_t vwidth, vheight;
175     int16_t avsync;
176     AVRational framerate;
177     uint32_t *nsvs_timestamps;
178     //DVDemuxContext* dv_demux;
179 } NSVContext;
180
181 static const AVCodecTag nsv_codec_video_tags[] = {
182     { CODEC_ID_VP3, MKTAG('V', 'P', '3', ' ') },
183     { CODEC_ID_VP3, MKTAG('V', 'P', '3', '0') },
184     { CODEC_ID_VP3, MKTAG('V', 'P', '3', '1') },
185     { CODEC_ID_VP5, MKTAG('V', 'P', '5', ' ') },
186     { CODEC_ID_VP5, MKTAG('V', 'P', '5', '0') },
187     { CODEC_ID_VP6, MKTAG('V', 'P', '6', ' ') },
188     { CODEC_ID_VP6, MKTAG('V', 'P', '6', '0') },
189     { CODEC_ID_VP6, MKTAG('V', 'P', '6', '1') },
190     { CODEC_ID_VP6, MKTAG('V', 'P', '6', '2') },
191 /*
192     { CODEC_ID_VP4, MKTAG('V', 'P', '4', ' ') },
193     { CODEC_ID_VP4, MKTAG('V', 'P', '4', '0') },
194 */
195     { CODEC_ID_MPEG4, MKTAG('X', 'V', 'I', 'D') }, /* cf sample xvid decoder from nsv_codec_sdk.zip */
196     { CODEC_ID_RAWVIDEO, MKTAG('R', 'G', 'B', '3') },
197     { CODEC_ID_NONE, 0 },
198 };
199
200 static const AVCodecTag nsv_codec_audio_tags[] = {
201     { CODEC_ID_MP3,       MKTAG('M', 'P', '3', ' ') },
202     { CODEC_ID_AAC,       MKTAG('A', 'A', 'C', ' ') },
203     { CODEC_ID_AAC,       MKTAG('A', 'A', 'C', 'P') },
204     { CODEC_ID_SPEEX,     MKTAG('S', 'P', 'X', ' ') },
205     { CODEC_ID_PCM_U16LE, MKTAG('P', 'C', 'M', ' ') },
206     { CODEC_ID_NONE,      0 },
207 };
208
209 //static int nsv_load_index(AVFormatContext *s);
210 static int nsv_read_chunk(AVFormatContext *s, int fill_header);
211
212 #define print_tag(str, tag, size)       \
213     av_dlog(NULL, "%s: tag=%c%c%c%c\n", \
214             str, tag & 0xff,            \
215             (tag >> 8) & 0xff,          \
216             (tag >> 16) & 0xff,         \
217             (tag >> 24) & 0xff);
218
219 /* try to find something we recognize, and set the state accordingly */
220 static int nsv_resync(AVFormatContext *s)
221 {
222     NSVContext *nsv = s->priv_data;
223     AVIOContext *pb = s->pb;
224     uint32_t v = 0;
225     int i;
226
227     av_dlog(s, "%s(), offset = %"PRId64", state = %d\n", __FUNCTION__, avio_tell(pb), nsv->state);
228
229     //nsv->state = NSV_UNSYNC;
230
231     for (i = 0; i < NSV_MAX_RESYNC; i++) {
232         if (pb->eof_reached) {
233             av_dlog(s, "NSV EOF\n");
234             nsv->state = NSV_UNSYNC;
235             return -1;
236         }
237         v <<= 8;
238         v |= avio_r8(pb);
239         if (i < 8) {
240             av_dlog(s, "NSV resync: [%d] = %02x\n", i, v & 0x0FF);
241         }
242
243         if ((v & 0x0000ffff) == 0xefbe) { /* BEEF */
244             av_dlog(s, "NSV resynced on BEEF after %d bytes\n", i+1);
245             nsv->state = NSV_FOUND_BEEF;
246             return 0;
247         }
248         /* we read as big endian, thus the MK*BE* */
249         if (v == TB_NSVF) { /* NSVf */
250             av_dlog(s, "NSV resynced on NSVf after %d bytes\n", i+1);
251             nsv->state = NSV_FOUND_NSVF;
252             return 0;
253         }
254         if (v == MKBETAG('N', 'S', 'V', 's')) { /* NSVs */
255             av_dlog(s, "NSV resynced on NSVs after %d bytes\n", i+1);
256             nsv->state = NSV_FOUND_NSVS;
257             return 0;
258         }
259
260     }
261     av_dlog(s, "NSV sync lost\n");
262     return -1;
263 }
264
265 static int nsv_parse_NSVf_header(AVFormatContext *s, AVFormatParameters *ap)
266 {
267     NSVContext *nsv = s->priv_data;
268     AVIOContext *pb = s->pb;
269     unsigned int av_unused file_size;
270     unsigned int size;
271     int64_t duration;
272     int strings_size;
273     int table_entries;
274     int table_entries_used;
275
276     av_dlog(s, "%s()\n", __FUNCTION__);
277
278     nsv->state = NSV_UNSYNC; /* in case we fail */
279
280     size = avio_rl32(pb);
281     if (size < 28)
282         return -1;
283     nsv->NSVf_end = size;
284
285     //s->file_size = (uint32_t)avio_rl32(pb);
286     file_size = (uint32_t)avio_rl32(pb);
287     av_dlog(s, "NSV NSVf chunk_size %u\n", size);
288     av_dlog(s, "NSV NSVf file_size %u\n", file_size);
289
290     nsv->duration = duration = avio_rl32(pb); /* in ms */
291     av_dlog(s, "NSV NSVf duration %"PRId64" ms\n", duration);
292     // XXX: store it in AVStreams
293
294     strings_size = avio_rl32(pb);
295     table_entries = avio_rl32(pb);
296     table_entries_used = avio_rl32(pb);
297     av_dlog(s, "NSV NSVf info-strings size: %d, table entries: %d, bis %d\n",
298             strings_size, table_entries, table_entries_used);
299     if (pb->eof_reached)
300         return -1;
301
302     av_dlog(s, "NSV got header; filepos %"PRId64"\n", avio_tell(pb));
303
304     if (strings_size > 0) {
305         char *strings; /* last byte will be '\0' to play safe with str*() */
306         char *p, *endp;
307         char *token, *value;
308         char quote;
309
310         p = strings = av_mallocz(strings_size + 1);
311         endp = strings + strings_size;
312         avio_read(pb, strings, strings_size);
313         while (p < endp) {
314             while (*p == ' ')
315                 p++; /* strip out spaces */
316             if (p >= endp-2)
317                 break;
318             token = p;
319             p = strchr(p, '=');
320             if (!p || p >= endp-2)
321                 break;
322             *p++ = '\0';
323             quote = *p++;
324             value = p;
325             p = strchr(p, quote);
326             if (!p || p >= endp)
327                 break;
328             *p++ = '\0';
329             av_dlog(s, "NSV NSVf INFO: %s='%s'\n", token, value);
330             av_dict_set(&s->metadata, token, value, 0);
331         }
332         av_free(strings);
333     }
334     if (pb->eof_reached)
335         return -1;
336
337     av_dlog(s, "NSV got infos; filepos %"PRId64"\n", avio_tell(pb));
338
339     if (table_entries_used > 0) {
340         int i;
341         nsv->index_entries = table_entries_used;
342         if((unsigned)table_entries_used >= UINT_MAX / sizeof(uint32_t))
343             return -1;
344         nsv->nsvs_file_offset = av_malloc((unsigned)table_entries_used * sizeof(uint32_t));
345
346         for(i=0;i<table_entries_used;i++)
347             nsv->nsvs_file_offset[i] = avio_rl32(pb) + size;
348
349         if(table_entries > table_entries_used &&
350            avio_rl32(pb) == MKTAG('T','O','C','2')) {
351             nsv->nsvs_timestamps = av_malloc((unsigned)table_entries_used*sizeof(uint32_t));
352             for(i=0;i<table_entries_used;i++) {
353                 nsv->nsvs_timestamps[i] = avio_rl32(pb);
354             }
355         }
356     }
357
358     av_dlog(s, "NSV got index; filepos %"PRId64"\n", avio_tell(pb));
359
360 #ifdef DEBUG_DUMP_INDEX
361 #define V(v) ((v<0x20 || v > 127)?'.':v)
362     /* dump index */
363     av_dlog(s, "NSV %d INDEX ENTRIES:\n", table_entries);
364     av_dlog(s, "NSV [dataoffset][fileoffset]\n", table_entries);
365     for (i = 0; i < table_entries; i++) {
366         unsigned char b[8];
367         avio_seek(pb, size + nsv->nsvs_file_offset[i], SEEK_SET);
368         avio_read(pb, b, 8);
369         av_dlog(s, "NSV [0x%08lx][0x%08lx]: %02x %02x %02x %02x %02x %02x %02x %02x"
370            "%c%c%c%c%c%c%c%c\n",
371            nsv->nsvs_file_offset[i], size + nsv->nsvs_file_offset[i],
372            b[0], b[1], b[2], b[3], b[4], b[5], b[6], b[7],
373            V(b[0]), V(b[1]), V(b[2]), V(b[3]), V(b[4]), V(b[5]), V(b[6]), V(b[7]) );
374     }
375     //avio_seek(pb, size, SEEK_SET); /* go back to end of header */
376 #undef V
377 #endif
378
379     avio_seek(pb, nsv->base_offset + size, SEEK_SET); /* required for dumbdriving-271.nsv (2 extra bytes) */
380
381     if (pb->eof_reached)
382         return -1;
383     nsv->state = NSV_HAS_READ_NSVF;
384     return 0;
385 }
386
387 static int nsv_parse_NSVs_header(AVFormatContext *s, AVFormatParameters *ap)
388 {
389     NSVContext *nsv = s->priv_data;
390     AVIOContext *pb = s->pb;
391     uint32_t vtag, atag;
392     uint16_t vwidth, vheight;
393     AVRational framerate;
394     int i;
395     AVStream *st;
396     NSVStream *nst;
397     av_dlog(s, "%s()\n", __FUNCTION__);
398
399     vtag = avio_rl32(pb);
400     atag = avio_rl32(pb);
401     vwidth = avio_rl16(pb);
402     vheight = avio_rl16(pb);
403     i = avio_r8(pb);
404
405     av_dlog(s, "NSV NSVs framerate code %2x\n", i);
406     if(i&0x80) { /* odd way of giving native framerates from docs */
407         int t=(i & 0x7F)>>2;
408         if(t<16) framerate = (AVRational){1, t+1};
409         else     framerate = (AVRational){t-15, 1};
410
411         if(i&1){
412             framerate.num *= 1000;
413             framerate.den *= 1001;
414         }
415
416         if((i&3)==3)      framerate.num *= 24;
417         else if((i&3)==2) framerate.num *= 25;
418         else              framerate.num *= 30;
419     }
420     else
421         framerate= (AVRational){i, 1};
422
423     nsv->avsync = avio_rl16(pb);
424     nsv->framerate = framerate;
425
426     print_tag("NSV NSVs vtag", vtag, 0);
427     print_tag("NSV NSVs atag", atag, 0);
428     av_dlog(s, "NSV NSVs vsize %dx%d\n", vwidth, vheight);
429
430     /* XXX change to ap != NULL ? */
431     if (s->nb_streams == 0) { /* streams not yet published, let's do that */
432         nsv->vtag = vtag;
433         nsv->atag = atag;
434         nsv->vwidth = vwidth;
435         nsv->vheight = vwidth;
436         if (vtag != T_NONE) {
437             int i;
438             st = av_new_stream(s, NSV_ST_VIDEO);
439             if (!st)
440                 goto fail;
441
442             nst = av_mallocz(sizeof(NSVStream));
443             if (!nst)
444                 goto fail;
445             st->priv_data = nst;
446             st->codec->codec_type = AVMEDIA_TYPE_VIDEO;
447             st->codec->codec_tag = vtag;
448             st->codec->codec_id = ff_codec_get_id(nsv_codec_video_tags, vtag);
449             st->codec->width = vwidth;
450             st->codec->height = vheight;
451             st->codec->bits_per_coded_sample = 24; /* depth XXX */
452
453             av_set_pts_info(st, 64, framerate.den, framerate.num);
454             st->start_time = 0;
455             st->duration = av_rescale(nsv->duration, framerate.num, 1000*framerate.den);
456
457             for(i=0;i<nsv->index_entries;i++) {
458                 if(nsv->nsvs_timestamps) {
459                     av_add_index_entry(st, nsv->nsvs_file_offset[i], nsv->nsvs_timestamps[i],
460                                        0, 0, AVINDEX_KEYFRAME);
461                 } else {
462                     int64_t ts = av_rescale(i*nsv->duration/nsv->index_entries, framerate.num, 1000*framerate.den);
463                     av_add_index_entry(st, nsv->nsvs_file_offset[i], ts, 0, 0, AVINDEX_KEYFRAME);
464                 }
465             }
466         }
467         if (atag != T_NONE) {
468 #ifndef DISABLE_AUDIO
469             st = av_new_stream(s, NSV_ST_AUDIO);
470             if (!st)
471                 goto fail;
472
473             nst = av_mallocz(sizeof(NSVStream));
474             if (!nst)
475                 goto fail;
476             st->priv_data = nst;
477             st->codec->codec_type = AVMEDIA_TYPE_AUDIO;
478             st->codec->codec_tag = atag;
479             st->codec->codec_id = ff_codec_get_id(nsv_codec_audio_tags, atag);
480
481             st->need_parsing = AVSTREAM_PARSE_FULL; /* for PCM we will read a chunk later and put correct info */
482
483             /* set timebase to common denominator of ms and framerate */
484             av_set_pts_info(st, 64, 1, framerate.num*1000);
485             st->start_time = 0;
486             st->duration = (int64_t)nsv->duration * framerate.num;
487 #endif
488         }
489 #ifdef CHECK_SUBSEQUENT_NSVS
490     } else {
491         if (nsv->vtag != vtag || nsv->atag != atag || nsv->vwidth != vwidth || nsv->vheight != vwidth) {
492             av_dlog(s, "NSV NSVs header values differ from the first one!!!\n");
493             //return -1;
494         }
495 #endif /* CHECK_SUBSEQUENT_NSVS */
496     }
497
498     nsv->state = NSV_HAS_READ_NSVS;
499     return 0;
500 fail:
501     /* XXX */
502     nsv->state = NSV_UNSYNC;
503     return -1;
504 }
505
506 static int nsv_read_header(AVFormatContext *s, AVFormatParameters *ap)
507 {
508     NSVContext *nsv = s->priv_data;
509     int i, err;
510
511     av_dlog(s, "%s()\n", __FUNCTION__);
512     av_dlog(s, "filename '%s'\n", s->filename);
513
514     nsv->state = NSV_UNSYNC;
515     nsv->ahead[0].data = nsv->ahead[1].data = NULL;
516
517     for (i = 0; i < NSV_MAX_RESYNC_TRIES; i++) {
518         if (nsv_resync(s) < 0)
519             return -1;
520         if (nsv->state == NSV_FOUND_NSVF)
521             err = nsv_parse_NSVf_header(s, ap);
522             /* we need the first NSVs also... */
523         if (nsv->state == NSV_FOUND_NSVS) {
524             err = nsv_parse_NSVs_header(s, ap);
525             break; /* we just want the first one */
526         }
527     }
528     if (s->nb_streams < 1) /* no luck so far */
529         return -1;
530     /* now read the first chunk, so we can attempt to decode more info */
531     err = nsv_read_chunk(s, 1);
532
533     av_dlog(s, "parsed header\n");
534     return err;
535 }
536
537 static int nsv_read_chunk(AVFormatContext *s, int fill_header)
538 {
539     NSVContext *nsv = s->priv_data;
540     AVIOContext *pb = s->pb;
541     AVStream *st[2] = {NULL, NULL};
542     NSVStream *nst;
543     AVPacket *pkt;
544     int i, err = 0;
545     uint8_t auxcount; /* number of aux metadata, also 4 bits of vsize */
546     uint32_t vsize;
547     uint16_t asize;
548     uint16_t auxsize;
549     uint32_t av_unused auxtag;
550
551     av_dlog(s, "%s(%d)\n", __FUNCTION__, fill_header);
552
553     if (nsv->ahead[0].data || nsv->ahead[1].data)
554         return 0; //-1; /* hey! eat what you've in your plate first! */
555
556 null_chunk_retry:
557     if (pb->eof_reached)
558         return -1;
559
560     for (i = 0; i < NSV_MAX_RESYNC_TRIES && nsv->state < NSV_FOUND_NSVS && !err; i++)
561         err = nsv_resync(s);
562     if (err < 0)
563         return err;
564     if (nsv->state == NSV_FOUND_NSVS)
565         err = nsv_parse_NSVs_header(s, NULL);
566     if (err < 0)
567         return err;
568     if (nsv->state != NSV_HAS_READ_NSVS && nsv->state != NSV_FOUND_BEEF)
569         return -1;
570
571     auxcount = avio_r8(pb);
572     vsize = avio_rl16(pb);
573     asize = avio_rl16(pb);
574     vsize = (vsize << 4) | (auxcount >> 4);
575     auxcount &= 0x0f;
576     av_dlog(s, "NSV CHUNK %d aux, %u bytes video, %d bytes audio\n", auxcount, vsize, asize);
577     /* skip aux stuff */
578     for (i = 0; i < auxcount; i++) {
579         auxsize = avio_rl16(pb);
580         auxtag = avio_rl32(pb);
581         av_dlog(s, "NSV aux data: '%c%c%c%c', %d bytes\n",
582               (auxtag & 0x0ff),
583               ((auxtag >> 8) & 0x0ff),
584               ((auxtag >> 16) & 0x0ff),
585               ((auxtag >> 24) & 0x0ff),
586               auxsize);
587         avio_skip(pb, auxsize);
588         vsize -= auxsize + sizeof(uint16_t) + sizeof(uint32_t); /* that's becoming braindead */
589     }
590
591     if (pb->eof_reached)
592         return -1;
593     if (!vsize && !asize) {
594         nsv->state = NSV_UNSYNC;
595         goto null_chunk_retry;
596     }
597
598     /* map back streams to v,a */
599     if (s->streams[0])
600         st[s->streams[0]->id] = s->streams[0];
601     if (s->streams[1])
602         st[s->streams[1]->id] = s->streams[1];
603
604     if (vsize/* && st[NSV_ST_VIDEO]*/) {
605         nst = st[NSV_ST_VIDEO]->priv_data;
606         pkt = &nsv->ahead[NSV_ST_VIDEO];
607         av_get_packet(pb, pkt, vsize);
608         pkt->stream_index = st[NSV_ST_VIDEO]->index;//NSV_ST_VIDEO;
609         pkt->dts = nst->frame_offset;
610         pkt->flags |= nsv->state == NSV_HAS_READ_NSVS ? AV_PKT_FLAG_KEY : 0; /* keyframe only likely on a sync frame */
611         for (i = 0; i < FFMIN(8, vsize); i++)
612             av_dlog(s, "NSV video: [%d] = %02x\n", i, pkt->data[i]);
613     }
614     if(st[NSV_ST_VIDEO])
615         ((NSVStream*)st[NSV_ST_VIDEO]->priv_data)->frame_offset++;
616
617     if (asize/*st[NSV_ST_AUDIO]*/) {
618         nst = st[NSV_ST_AUDIO]->priv_data;
619         pkt = &nsv->ahead[NSV_ST_AUDIO];
620         /* read raw audio specific header on the first audio chunk... */
621         /* on ALL audio chunks ?? seems so! */
622         if (asize && st[NSV_ST_AUDIO]->codec->codec_tag == MKTAG('P', 'C', 'M', ' ')/* && fill_header*/) {
623             uint8_t bps;
624             uint8_t channels;
625             uint16_t samplerate;
626             bps = avio_r8(pb);
627             channels = avio_r8(pb);
628             samplerate = avio_rl16(pb);
629             asize-=4;
630             av_dlog(s, "NSV RAWAUDIO: bps %d, nchan %d, srate %d\n", bps, channels, samplerate);
631             if (fill_header) {
632                 st[NSV_ST_AUDIO]->need_parsing = AVSTREAM_PARSE_NONE; /* we know everything */
633                 if (bps != 16) {
634                     av_dlog(s, "NSV AUDIO bit/sample != 16 (%d)!!!\n", bps);
635                 }
636                 bps /= channels; // ???
637                 if (bps == 8)
638                     st[NSV_ST_AUDIO]->codec->codec_id = CODEC_ID_PCM_U8;
639                 samplerate /= 4;/* UGH ??? XXX */
640                 channels = 1;
641                 st[NSV_ST_AUDIO]->codec->channels = channels;
642                 st[NSV_ST_AUDIO]->codec->sample_rate = samplerate;
643                 av_dlog(s, "NSV RAWAUDIO: bps %d, nchan %d, srate %d\n", bps, channels, samplerate);
644             }
645         }
646         av_get_packet(pb, pkt, asize);
647         pkt->stream_index = st[NSV_ST_AUDIO]->index;//NSV_ST_AUDIO;
648         pkt->flags |= nsv->state == NSV_HAS_READ_NSVS ? AV_PKT_FLAG_KEY : 0; /* keyframe only likely on a sync frame */
649         if( nsv->state == NSV_HAS_READ_NSVS && st[NSV_ST_VIDEO] ) {
650             /* on a nsvs frame we have new information on a/v sync */
651             pkt->dts = (((NSVStream*)st[NSV_ST_VIDEO]->priv_data)->frame_offset-1);
652             pkt->dts *= (int64_t)1000        * nsv->framerate.den;
653             pkt->dts += (int64_t)nsv->avsync * nsv->framerate.num;
654             av_dlog(s, "NSV AUDIO: sync:%d, dts:%"PRId64, nsv->avsync, pkt->dts);
655         }
656         nst->frame_offset++;
657     }
658
659     nsv->state = NSV_UNSYNC;
660     return 0;
661 }
662
663
664 static int nsv_read_packet(AVFormatContext *s, AVPacket *pkt)
665 {
666     NSVContext *nsv = s->priv_data;
667     int i, err = 0;
668
669     av_dlog(s, "%s()\n", __FUNCTION__);
670
671     /* in case we don't already have something to eat ... */
672     if (nsv->ahead[0].data == NULL && nsv->ahead[1].data == NULL)
673         err = nsv_read_chunk(s, 0);
674     if (err < 0)
675         return err;
676
677     /* now pick one of the plates */
678     for (i = 0; i < 2; i++) {
679         if (nsv->ahead[i].data) {
680             av_dlog(s, "%s: using cached packet[%d]\n", __FUNCTION__, i);
681             /* avoid the cost of new_packet + memcpy(->data) */
682             memcpy(pkt, &nsv->ahead[i], sizeof(AVPacket));
683             nsv->ahead[i].data = NULL; /* we ate that one */
684             return pkt->size;
685         }
686     }
687
688     /* this restaurant is not approvisionned :^] */
689     return -1;
690 }
691
692 static int nsv_read_seek(AVFormatContext *s, int stream_index, int64_t timestamp, int flags)
693 {
694     NSVContext *nsv = s->priv_data;
695     AVStream *st = s->streams[stream_index];
696     NSVStream *nst = st->priv_data;
697     int index;
698
699     index = av_index_search_timestamp(st, timestamp, flags);
700     if(index < 0)
701         return -1;
702
703     avio_seek(s->pb, st->index_entries[index].pos, SEEK_SET);
704     nst->frame_offset = st->index_entries[index].timestamp;
705     nsv->state = NSV_UNSYNC;
706     return 0;
707 }
708
709 static int nsv_read_close(AVFormatContext *s)
710 {
711 /*     int i; */
712     NSVContext *nsv = s->priv_data;
713
714     av_freep(&nsv->nsvs_file_offset);
715     av_freep(&nsv->nsvs_timestamps);
716     if (nsv->ahead[0].data)
717         av_free_packet(&nsv->ahead[0]);
718     if (nsv->ahead[1].data)
719         av_free_packet(&nsv->ahead[1]);
720
721 #if 0
722
723     for(i=0;i<s->nb_streams;i++) {
724         AVStream *st = s->streams[i];
725         NSVStream *ast = st->priv_data;
726         if(ast){
727             av_free(ast->index_entries);
728             av_free(ast);
729         }
730         av_free(st->codec->palctrl);
731     }
732
733 #endif
734     return 0;
735 }
736
737 static int nsv_probe(AVProbeData *p)
738 {
739     int i;
740     int score;
741     int vsize, asize, auxcount;
742     score = 0;
743     av_dlog(NULL, "nsv_probe(), buf_size %d\n", p->buf_size);
744     /* check file header */
745     /* streamed files might not have any header */
746     if (p->buf[0] == 'N' && p->buf[1] == 'S' &&
747         p->buf[2] == 'V' && (p->buf[3] == 'f' || p->buf[3] == 's'))
748         return AVPROBE_SCORE_MAX;
749     /* XXX: do streamed files always start at chunk boundary ?? */
750     /* or do we need to search NSVs in the byte stream ? */
751     /* seems the servers don't bother starting clean chunks... */
752     /* sometimes even the first header is at 9KB or something :^) */
753     for (i = 1; i < p->buf_size - 3; i++) {
754         if (p->buf[i+0] == 'N' && p->buf[i+1] == 'S' &&
755             p->buf[i+2] == 'V' && p->buf[i+3] == 's') {
756             score = AVPROBE_SCORE_MAX/5;
757             /* Get the chunk size and check if at the end we are getting 0xBEEF */
758             auxcount = p->buf[i+19];
759             vsize = p->buf[i+20]  | p->buf[i+21] << 8;
760             asize = p->buf[i+22]  | p->buf[i+23] << 8;
761             vsize = (vsize << 4) | (auxcount >> 4);
762             if ((asize + vsize + i + 23) <  p->buf_size - 2) {
763                 if (p->buf[i+23+asize+vsize+1] == 0xEF &&
764                     p->buf[i+23+asize+vsize+2] == 0xBE)
765                     return AVPROBE_SCORE_MAX-20;
766             }
767         }
768     }
769     /* so we'll have more luck on extension... */
770     if (av_match_ext(p->filename, "nsv"))
771         return AVPROBE_SCORE_MAX/2;
772     /* FIXME: add mime-type check */
773     return score;
774 }
775
776 AVInputFormat ff_nsv_demuxer = {
777     "nsv",
778     NULL_IF_CONFIG_SMALL("Nullsoft Streaming Video"),
779     sizeof(NSVContext),
780     nsv_probe,
781     nsv_read_header,
782     nsv_read_packet,
783     nsv_read_close,
784     nsv_read_seek,
785 };