Don't recreate the same table over and over and over
[vlc.git] / src / audio_output / input.c
1 /*****************************************************************************
2  * input.c : internal management of input streams for the audio output
3  *****************************************************************************
4  * Copyright (C) 2002-2007 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Christophe Massiot <massiot@via.ecp.fr>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
22  *****************************************************************************/
23
24 /*****************************************************************************
25  * Preamble
26  *****************************************************************************/
27
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <vlc_common.h>
33
34 #include <stdio.h>
35 #include <string.h>
36 #include <math.h>
37 #include <assert.h>
38
39 #include <vlc_input.h>
40 #include <vlc_vout.h>                  /* for vout_Request */
41
42 #ifdef HAVE_ALLOCA_H
43 #   include <alloca.h>
44 #endif
45 #include <vlc_aout.h>
46 #include <libvlc.h>
47
48 #include "aout_internal.h"
49
50 #define AOUT_ASSERT_MIXER_LOCKED vlc_assert_locked( &p_aout->mixer_lock )
51 #define AOUT_ASSERT_INPUT_LOCKED vlc_assert_locked( &p_input->lock )
52
53 static void inputFailure( aout_instance_t *, aout_input_t *, const char * );
54 static void inputDrop( aout_input_t *, aout_buffer_t * );
55 static void inputResamplingStop( aout_input_t *p_input );
56
57 static int VisualizationCallback( vlc_object_t *, char const *,
58                                   vlc_value_t, vlc_value_t, void * );
59 static int EqualizerCallback( vlc_object_t *, char const *,
60                               vlc_value_t, vlc_value_t, void * );
61 static int ReplayGainCallback( vlc_object_t *, char const *,
62                                vlc_value_t, vlc_value_t, void * );
63 static void ReplayGainSelect( aout_instance_t *, aout_input_t * );
64
65 static vout_thread_t *RequestVout( void *,
66                                    vout_thread_t *, video_format_t *, bool );
67 static vout_thread_t *RequestVoutFromFilter( void *,
68                                              vout_thread_t *, video_format_t *, bool  );
69
70 /*****************************************************************************
71  * aout_InputNew : allocate a new input and rework the filter pipeline
72  *****************************************************************************/
73 int aout_InputNew( aout_instance_t * p_aout, aout_input_t * p_input, const aout_request_vout_t *p_request_vout )
74 {
75     audio_sample_format_t chain_input_format;
76     audio_sample_format_t chain_output_format;
77     vlc_value_t val, text;
78     char *psz_filters, *psz_visual, *psz_scaletempo;
79     int i_visual;
80
81     aout_FormatPrint( p_aout, "input", &p_input->input );
82
83     p_input->i_nb_resamplers = p_input->i_nb_filters = 0;
84
85     /* Prepare FIFO. */
86     aout_FifoInit( p_aout, &p_input->fifo, p_aout->mixer.mixer.i_rate );
87     p_input->p_first_byte_to_mix = NULL;
88
89     /* */
90     if( p_request_vout )
91     {
92         p_input->request_vout = *p_request_vout;
93     }
94     else
95     {
96         p_input->request_vout.pf_request_vout = RequestVout;
97         p_input->request_vout.p_private = p_aout;
98     }
99
100     /* Prepare format structure */
101     memcpy( &chain_input_format, &p_input->input,
102             sizeof(audio_sample_format_t) );
103     memcpy( &chain_output_format, &p_aout->mixer.mixer,
104             sizeof(audio_sample_format_t) );
105     chain_output_format.i_rate = p_input->input.i_rate;
106     aout_FormatPrepare( &chain_output_format );
107
108     /* Now add user filters */
109     if( var_Type( p_aout, "visual" ) == 0 )
110     {
111         var_Create( p_aout, "visual", VLC_VAR_STRING | VLC_VAR_HASCHOICE );
112         text.psz_string = _("Visualizations");
113         var_Change( p_aout, "visual", VLC_VAR_SETTEXT, &text, NULL );
114         val.psz_string = (char*)""; text.psz_string = _("Disable");
115         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
116         val.psz_string = (char*)"spectrometer"; text.psz_string = _("Spectrometer");
117         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
118         val.psz_string = (char*)"scope"; text.psz_string = _("Scope");
119         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
120         val.psz_string = (char*)"spectrum"; text.psz_string = _("Spectrum");
121         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
122         val.psz_string = (char*)"vuMeter"; text.psz_string = _("Vu meter");
123         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
124
125         /* Look for goom plugin */
126         if( module_exists( "goom" ) )
127         {
128             val.psz_string = (char*)"goom"; text.psz_string = (char*)"Goom";
129             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
130         }
131
132         /* Look for galaktos plugin */
133         if( module_exists( "galaktos" ) )
134         {
135             val.psz_string = (char*)"galaktos"; text.psz_string = (char*)"GaLaktos";
136             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
137         }
138
139         /* Look for libprojectM plugin */
140         if( module_exists( "projectm" ) )
141         {
142             val.psz_string = (char*)"projectm"; text.psz_string = (char*)"projectM";
143             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
144         }
145
146         if( var_Get( p_aout, "effect-list", &val ) == VLC_SUCCESS )
147         {
148             var_SetString( p_aout, "visual", val.psz_string );
149             free( val.psz_string );
150         }
151         var_AddCallback( p_aout, "visual", VisualizationCallback, NULL );
152     }
153
154     if( var_Type( p_aout, "equalizer" ) == 0 )
155     {
156         module_config_t *p_config;
157         int i;
158
159         p_config = config_FindConfig( VLC_OBJECT(p_aout), "equalizer-preset" );
160         if( p_config && p_config->i_list )
161         {
162                var_Create( p_aout, "equalizer",
163                            VLC_VAR_STRING | VLC_VAR_HASCHOICE );
164             text.psz_string = _("Equalizer");
165             var_Change( p_aout, "equalizer", VLC_VAR_SETTEXT, &text, NULL );
166
167             val.psz_string = (char*)""; text.psz_string = _("Disable");
168             var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE, &val, &text );
169
170             for( i = 0; i < p_config->i_list; i++ )
171             {
172                 val.psz_string = (char *)p_config->ppsz_list[i];
173                 text.psz_string = (char *)p_config->ppsz_list_text[i];
174                 var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE,
175                             &val, &text );
176             }
177
178             var_AddCallback( p_aout, "equalizer", EqualizerCallback, NULL );
179         }
180     }
181
182     if( var_Type( p_aout, "audio-filter" ) == 0 )
183     {
184         var_Create( p_aout, "audio-filter",
185                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
186         text.psz_string = _("Audio filters");
187         var_Change( p_aout, "audio-filter", VLC_VAR_SETTEXT, &text, NULL );
188     }
189     if( var_Type( p_aout, "audio-visual" ) == 0 )
190     {
191         var_Create( p_aout, "audio-visual",
192                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
193         text.psz_string = _("Audio visualizations");
194         var_Change( p_aout, "audio-visual", VLC_VAR_SETTEXT, &text, NULL );
195     }
196
197     if( var_Type( p_aout, "audio-replay-gain-mode" ) == 0 )
198     {
199         module_config_t *p_config;
200         int i;
201
202         p_config = config_FindConfig( VLC_OBJECT(p_aout), "audio-replay-gain-mode" );
203         if( p_config && p_config->i_list )
204         {
205             var_Create( p_aout, "audio-replay-gain-mode",
206                         VLC_VAR_STRING | VLC_VAR_DOINHERIT );
207
208             text.psz_string = _("Replay gain");
209             var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_SETTEXT, &text, NULL );
210
211             for( i = 0; i < p_config->i_list; i++ )
212             {
213                 val.psz_string = (char *)p_config->ppsz_list[i];
214                 text.psz_string = (char *)p_config->ppsz_list_text[i];
215                 var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_ADDCHOICE,
216                             &val, &text );
217             }
218
219             var_AddCallback( p_aout, "audio-replay-gain-mode", ReplayGainCallback, NULL );
220         }
221     }
222     if( var_Type( p_aout, "audio-replay-gain-preamp" ) == 0 )
223     {
224         var_Create( p_aout, "audio-replay-gain-preamp",
225                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
226     }
227     if( var_Type( p_aout, "audio-replay-gain-default" ) == 0 )
228     {
229         var_Create( p_aout, "audio-replay-gain-default",
230                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
231     }
232     if( var_Type( p_aout, "audio-replay-gain-peak-protection" ) == 0 )
233     {
234         var_Create( p_aout, "audio-replay-gain-peak-protection",
235                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
236     }
237     if( var_Type( p_aout, "audio-time-stretch" ) == 0 )
238     {
239         var_Create( p_aout, "audio-time-stretch",
240                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
241     }
242
243     psz_filters = var_GetString( p_aout, "audio-filter" );
244     psz_visual = var_GetString( p_aout, "audio-visual");
245     psz_scaletempo = var_GetBool( p_aout, "audio-time-stretch" ) ? strdup( "scaletempo" ) : NULL;
246
247     p_input->b_recycle_vout = psz_visual && *psz_visual;
248
249     /* parse user filter lists */
250     char *const ppsz_array[] = { psz_scaletempo, psz_filters, psz_visual };
251     for( i_visual = 0; i_visual < 3 && !AOUT_FMT_NON_LINEAR(&chain_output_format); i_visual++ )
252     {
253         char *psz_next = NULL;
254         char *psz_parser = ppsz_array[i_visual];
255
256         if( psz_parser == NULL || !*psz_parser )
257             continue;
258
259         while( psz_parser && *psz_parser )
260         {
261             aout_filter_t * p_filter = NULL;
262
263             if( p_input->i_nb_filters >= AOUT_MAX_FILTERS )
264             {
265                 msg_Dbg( p_aout, "max filters reached (%d)", AOUT_MAX_FILTERS );
266                 break;
267             }
268
269             while( *psz_parser == ' ' && *psz_parser == ':' )
270             {
271                 psz_parser++;
272             }
273             if( ( psz_next = strchr( psz_parser , ':'  ) ) )
274             {
275                 *psz_next++ = '\0';
276             }
277             if( *psz_parser =='\0' )
278             {
279                 break;
280             }
281
282             /* Create a VLC object */
283             static const char typename[] = "audio filter";
284             p_filter = vlc_custom_create( p_aout, sizeof(*p_filter),
285                                           VLC_OBJECT_GENERIC, typename );
286             if( p_filter == NULL )
287             {
288                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
289                          psz_parser );
290                 psz_parser = psz_next;
291                 continue;
292             }
293
294             vlc_object_attach( p_filter , p_aout );
295
296             p_filter->request_vout.pf_request_vout = RequestVoutFromFilter;
297             p_filter->request_vout.p_private = p_input;
298
299             p_filter->p_owner = malloc( sizeof(*p_filter->p_owner) );
300             p_filter->p_owner->p_aout  = p_aout;
301             p_filter->p_owner->p_input = p_input;
302
303             /* try to find the requested filter */
304             if( i_visual == 2 ) /* this can only be a visualization module */
305             {
306                 /* request format */
307                 memcpy( &p_filter->input, &chain_output_format,
308                         sizeof(audio_sample_format_t) );
309                 memcpy( &p_filter->output, &chain_output_format,
310                         sizeof(audio_sample_format_t) );
311
312                 p_filter->p_module = module_need( p_filter, "visualization",
313                                                   psz_parser, true );
314             }
315             else /* this can be a audio filter module as well as a visualization module */
316             {
317                 /* request format */
318                 memcpy( &p_filter->input, &chain_input_format,
319                         sizeof(audio_sample_format_t) );
320                 memcpy( &p_filter->output, &chain_output_format,
321                         sizeof(audio_sample_format_t) );
322
323                 p_filter->p_module = module_need( p_filter, "audio filter",
324                                               psz_parser, true );
325
326                 if ( p_filter->p_module == NULL )
327                 {
328                     /* if the filter requested a special format, retry */
329                     if ( !( AOUT_FMTS_IDENTICAL( &p_filter->input,
330                                                  &chain_input_format )
331                             && AOUT_FMTS_IDENTICAL( &p_filter->output,
332                                                     &chain_output_format ) ) )
333                     {
334                         aout_FormatPrepare( &p_filter->input );
335                         aout_FormatPrepare( &p_filter->output );
336                         p_filter->p_module = module_need( p_filter,
337                                                           "audio filter",
338                                                           psz_parser, true );
339                     }
340                     /* try visual filters */
341                     else
342                     {
343                         memcpy( &p_filter->input, &chain_output_format,
344                                 sizeof(audio_sample_format_t) );
345                         memcpy( &p_filter->output, &chain_output_format,
346                                 sizeof(audio_sample_format_t) );
347                         p_filter->p_module = module_need( p_filter,
348                                                           "visualization",
349                                                           psz_parser, true );
350                     }
351                 }
352             }
353
354             /* failure */
355             if ( p_filter->p_module == NULL )
356             {
357                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
358                          psz_parser );
359
360                 free( p_filter->p_owner );
361                 vlc_object_detach( p_filter );
362                 vlc_object_release( p_filter );
363
364                 psz_parser = psz_next;
365                 continue;
366             }
367
368             /* complete the filter chain if necessary */
369             if ( !AOUT_FMTS_IDENTICAL( &chain_input_format, &p_filter->input ) )
370             {
371                 if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
372                                                  &p_input->i_nb_filters,
373                                                  &chain_input_format,
374                                                  &p_filter->input ) < 0 )
375                 {
376                     msg_Err( p_aout, "cannot add user filter %s (skipped)",
377                              psz_parser );
378
379                     module_unneed( p_filter, p_filter->p_module );
380                     free( p_filter->p_owner );
381                     vlc_object_detach( p_filter );
382                     vlc_object_release( p_filter );
383
384                     psz_parser = psz_next;
385                     continue;
386                 }
387             }
388
389             /* success */
390             p_filter->b_continuity = false;
391             p_input->pp_filters[p_input->i_nb_filters++] = p_filter;
392             memcpy( &chain_input_format, &p_filter->output,
393                     sizeof( audio_sample_format_t ) );
394
395             /* next filter if any */
396             psz_parser = psz_next;
397         }
398     }
399     free( psz_visual );
400     free( psz_filters );
401     free( psz_scaletempo );
402
403     /* complete the filter chain if necessary */
404     if ( !AOUT_FMTS_IDENTICAL( &chain_input_format, &chain_output_format ) )
405     {
406         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
407                                          &p_input->i_nb_filters,
408                                          &chain_input_format,
409                                          &chain_output_format ) < 0 )
410         {
411             inputFailure( p_aout, p_input, "couldn't set an input pipeline" );
412             return -1;
413         }
414     }
415
416     /* Prepare hints for the buffer allocator. */
417     p_input->input_alloc.i_alloc_type = AOUT_ALLOC_HEAP;
418     p_input->input_alloc.i_bytes_per_sec = -1;
419
420     /* Create resamplers. */
421     if ( !AOUT_FMT_NON_LINEAR( &p_aout->mixer.mixer ) )
422     {
423         chain_output_format.i_rate = (__MAX(p_input->input.i_rate,
424                                             p_aout->mixer.mixer.i_rate)
425                                  * (100 + AOUT_MAX_RESAMPLING)) / 100;
426         if ( chain_output_format.i_rate == p_aout->mixer.mixer.i_rate )
427         {
428             /* Just in case... */
429             chain_output_format.i_rate++;
430         }
431         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_resamplers,
432                                          &p_input->i_nb_resamplers,
433                                          &chain_output_format,
434                                          &p_aout->mixer.mixer ) < 0 )
435         {
436             inputFailure( p_aout, p_input, "couldn't set a resampler pipeline");
437             return -1;
438         }
439
440         aout_FiltersHintBuffers( p_aout, p_input->pp_resamplers,
441                                  p_input->i_nb_resamplers,
442                                  &p_input->input_alloc );
443         p_input->input_alloc.i_alloc_type = AOUT_ALLOC_HEAP;
444
445         /* Setup the initial rate of the resampler */
446         p_input->pp_resamplers[0]->input.i_rate = p_input->input.i_rate;
447     }
448     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
449
450     p_input->p_playback_rate_filter = NULL;
451     for( int i = 0; i < p_input->i_nb_filters; i++ )
452     {
453         aout_filter_t *p_filter = p_input->pp_filters[i];
454         /* FIXME: suspicious access to psz_object_name */
455 #warning Is this right?
456         if( strcmp( "scaletempo",
457                     vlc_internals(p_filter)->psz_object_name ) == 0 )
458         {
459           p_input->p_playback_rate_filter = p_filter;
460           break;
461         }
462     }
463     if( ! p_input->p_playback_rate_filter && p_input->i_nb_resamplers > 0 )
464     {
465         p_input->p_playback_rate_filter = p_input->pp_resamplers[0];
466     }
467
468     aout_FiltersHintBuffers( p_aout, p_input->pp_filters,
469                              p_input->i_nb_filters,
470                              &p_input->input_alloc );
471     p_input->input_alloc.i_alloc_type = AOUT_ALLOC_HEAP;
472
473     /* i_bytes_per_sec is still == -1 if no filters */
474     p_input->input_alloc.i_bytes_per_sec = __MAX(
475                                     p_input->input_alloc.i_bytes_per_sec,
476                                     (int)(p_input->input.i_bytes_per_frame
477                                      * p_input->input.i_rate
478                                      / p_input->input.i_frame_length) );
479
480     ReplayGainSelect( p_aout, p_input );
481
482     /* Success */
483     p_input->b_error = false;
484     p_input->b_restart = false;
485     p_input->i_last_input_rate = INPUT_RATE_DEFAULT;
486
487     return 0;
488 }
489
490 /*****************************************************************************
491  * aout_InputDelete : delete an input
492  *****************************************************************************
493  * This function must be entered with the mixer lock.
494  *****************************************************************************/
495 int aout_InputDelete( aout_instance_t * p_aout, aout_input_t * p_input )
496 {
497     AOUT_ASSERT_MIXER_LOCKED;
498     if ( p_input->b_error )
499         return 0;
500
501     /* XXX We need to update b_recycle_vout before calling aout_FiltersDestroyPipeline.
502      * FIXME They can be a race condition if audio-visual is updated between
503      * aout_InputDelete and aout_InputNew.
504      */
505     char *psz_visual = var_GetString( p_aout, "audio-visual");
506     p_input->b_recycle_vout = psz_visual && *psz_visual;
507     free( psz_visual );
508
509     aout_FiltersDestroyPipeline( p_aout, p_input->pp_filters,
510                                  p_input->i_nb_filters );
511     p_input->i_nb_filters = 0;
512     aout_FiltersDestroyPipeline( p_aout, p_input->pp_resamplers,
513                                  p_input->i_nb_resamplers );
514     p_input->i_nb_resamplers = 0;
515     aout_FifoDestroy( p_aout, &p_input->fifo );
516
517     return 0;
518 }
519
520 /*****************************************************************************
521  * aout_InputPlay : play a buffer
522  *****************************************************************************
523  * This function must be entered with the input lock.
524  *****************************************************************************/
525 /* XXX Do not activate it !! */
526 //#define AOUT_PROCESS_BEFORE_CHEKS
527 int aout_InputPlay( aout_instance_t * p_aout, aout_input_t * p_input,
528                     aout_buffer_t * p_buffer, int i_input_rate )
529 {
530     mtime_t start_date;
531     AOUT_ASSERT_INPUT_LOCKED;
532
533     if( p_input->b_restart )
534     {
535         aout_fifo_t fifo;
536         uint8_t     *p_first_byte_to_mix;
537         bool        b_paused;
538         mtime_t     i_pause_date;
539
540         aout_lock_mixer( p_aout );
541         aout_lock_input_fifos( p_aout );
542
543         /* A little trick to avoid loosing our input fifo and properties */
544
545         p_first_byte_to_mix = p_input->p_first_byte_to_mix;
546         fifo = p_input->fifo;
547         b_paused = p_input->b_paused;
548         i_pause_date = p_input->i_pause_date;
549
550         aout_FifoInit( p_aout, &p_input->fifo, p_aout->mixer.mixer.i_rate );
551
552         aout_InputDelete( p_aout, p_input );
553
554         aout_InputNew( p_aout, p_input, &p_input->request_vout );
555         p_input->p_first_byte_to_mix = p_first_byte_to_mix;
556         p_input->fifo = fifo;
557         p_input->b_paused = b_paused;
558         p_input->i_pause_date = i_pause_date;
559
560         aout_unlock_input_fifos( p_aout );
561         aout_unlock_mixer( p_aout );
562     }
563
564     if( i_input_rate != INPUT_RATE_DEFAULT && p_input->p_playback_rate_filter == NULL )
565     {
566         inputDrop( p_input, p_buffer );
567         return 0;
568     }
569
570 #ifdef AOUT_PROCESS_BEFORE_CHEKS
571     /* Run pre-filters. */
572     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
573                       &p_buffer );
574
575     /* Actually run the resampler now. */
576     if ( p_input->i_nb_resamplers > 0 )
577     {
578         const mtime_t i_date = p_buffer->start_date;
579         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
580                           p_input->i_nb_resamplers,
581                           &p_buffer );
582     }
583
584     if( p_buffer->i_nb_samples <= 0 )
585     {
586         aout_BufferFree( p_buffer );
587         return 0;
588     }
589 #endif
590
591     /* Handle input rate change, but keep drift correction */
592     if( i_input_rate != p_input->i_last_input_rate )
593     {
594         unsigned int * const pi_rate = &p_input->p_playback_rate_filter->input.i_rate;
595 #define F(r,ir) ( INPUT_RATE_DEFAULT * (r) / (ir) )
596         const int i_delta = *pi_rate - F(p_input->input.i_rate,p_input->i_last_input_rate);
597         *pi_rate = F(p_input->input.i_rate + i_delta, i_input_rate);
598 #undef F
599         p_input->i_last_input_rate = i_input_rate;
600     }
601
602     /* We don't care if someone changes the start date behind our back after
603      * this. We'll deal with that when pushing the buffer, and compensate
604      * with the next incoming buffer. */
605     aout_lock_input_fifos( p_aout );
606     start_date = aout_FifoNextStart( p_aout, &p_input->fifo );
607     aout_unlock_input_fifos( p_aout );
608
609     if ( start_date != 0 && start_date < mdate() )
610     {
611         /* The decoder is _very_ late. This can only happen if the user
612          * pauses the stream (or if the decoder is buggy, which cannot
613          * happen :). */
614         msg_Warn( p_aout, "computed PTS is out of range (%"PRId64"), "
615                   "clearing out", mdate() - start_date );
616         aout_lock_input_fifos( p_aout );
617         aout_FifoSet( p_aout, &p_input->fifo, 0 );
618         p_input->p_first_byte_to_mix = NULL;
619         aout_unlock_input_fifos( p_aout );
620         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
621             msg_Warn( p_aout, "timing screwed, stopping resampling" );
622         inputResamplingStop( p_input );
623         start_date = 0;
624     }
625
626     if ( p_buffer->start_date < mdate() + AOUT_MIN_PREPARE_TIME )
627     {
628         /* The decoder gives us f*cked up PTS. It's its business, but we
629          * can't present it anyway, so drop the buffer. */
630         msg_Warn( p_aout, "PTS is out of range (%"PRId64"), dropping buffer",
631                   mdate() - p_buffer->start_date );
632
633         inputDrop( p_input, p_buffer );
634         inputResamplingStop( p_input );
635         return 0;
636     }
637
638     /* If the audio drift is too big then it's not worth trying to resample
639      * the audio. */
640     mtime_t i_pts_tolerance = 3 * AOUT_PTS_TOLERANCE * i_input_rate / INPUT_RATE_DEFAULT;
641     if ( start_date != 0 &&
642          ( start_date < p_buffer->start_date - i_pts_tolerance ) )
643     {
644         msg_Warn( p_aout, "audio drift is too big (%"PRId64"), clearing out",
645                   start_date - p_buffer->start_date );
646         aout_lock_input_fifos( p_aout );
647         aout_FifoSet( p_aout, &p_input->fifo, 0 );
648         p_input->p_first_byte_to_mix = NULL;
649         aout_unlock_input_fifos( p_aout );
650         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
651             msg_Warn( p_aout, "timing screwed, stopping resampling" );
652         inputResamplingStop( p_input );
653         start_date = 0;
654     }
655     else if ( start_date != 0 &&
656               ( start_date > p_buffer->start_date + i_pts_tolerance) )
657     {
658         msg_Warn( p_aout, "audio drift is too big (%"PRId64"), dropping buffer",
659                   start_date - p_buffer->start_date );
660         inputDrop( p_input, p_buffer );
661         return 0;
662     }
663
664     if ( start_date == 0 ) start_date = p_buffer->start_date;
665
666 #ifndef AOUT_PROCESS_BEFORE_CHEKS
667     /* Run pre-filters. */
668     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
669                       &p_buffer );
670 #endif
671
672     /* Run the resampler if needed.
673      * We first need to calculate the output rate of this resampler. */
674     if ( ( p_input->i_resampling_type == AOUT_RESAMPLING_NONE ) &&
675          ( start_date < p_buffer->start_date - AOUT_PTS_TOLERANCE
676            || start_date > p_buffer->start_date + AOUT_PTS_TOLERANCE ) &&
677          p_input->i_nb_resamplers > 0 )
678     {
679         /* Can happen in several circumstances :
680          * 1. A problem at the input (clock drift)
681          * 2. A small pause triggered by the user
682          * 3. Some delay in the output stage, causing a loss of lip
683          *    synchronization
684          * Solution : resample the buffer to avoid a scratch.
685          */
686         mtime_t drift = p_buffer->start_date - start_date;
687
688         p_input->i_resamp_start_date = mdate();
689         p_input->i_resamp_start_drift = (int)drift;
690
691         if ( drift > 0 )
692             p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
693         else
694             p_input->i_resampling_type = AOUT_RESAMPLING_UP;
695
696         msg_Warn( p_aout, "buffer is %"PRId64" %s, triggering %ssampling",
697                           drift > 0 ? drift : -drift,
698                           drift > 0 ? "in advance" : "late",
699                           drift > 0 ? "down" : "up");
700     }
701
702     if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
703     {
704         /* Resampling has been triggered previously (because of dates
705          * mismatch). We want the resampling to happen progressively so
706          * it isn't too audible to the listener. */
707
708         if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
709         {
710             p_input->pp_resamplers[0]->input.i_rate += 2; /* Hz */
711         }
712         else
713         {
714             p_input->pp_resamplers[0]->input.i_rate -= 2; /* Hz */
715         }
716
717         /* Check if everything is back to normal, in which case we can stop the
718          * resampling */
719         unsigned int i_nominal_rate =
720           (p_input->pp_resamplers[0] == p_input->p_playback_rate_filter)
721           ? INPUT_RATE_DEFAULT * p_input->input.i_rate / i_input_rate
722           : p_input->input.i_rate;
723         if( p_input->pp_resamplers[0]->input.i_rate == i_nominal_rate )
724         {
725             p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
726             msg_Warn( p_aout, "resampling stopped after %"PRIi64" usec "
727                       "(drift: %"PRIi64")",
728                       mdate() - p_input->i_resamp_start_date,
729                       p_buffer->start_date - start_date);
730         }
731         else if( abs( (int)(p_buffer->start_date - start_date) ) <
732                  abs( p_input->i_resamp_start_drift ) / 2 )
733         {
734             /* if we reduced the drift from half, then it is time to switch
735              * back the resampling direction. */
736             if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
737                 p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
738             else
739                 p_input->i_resampling_type = AOUT_RESAMPLING_UP;
740             p_input->i_resamp_start_drift = 0;
741         }
742         else if( p_input->i_resamp_start_drift &&
743                  ( abs( (int)(p_buffer->start_date - start_date) ) >
744                    abs( p_input->i_resamp_start_drift ) * 3 / 2 ) )
745         {
746             /* If the drift is increasing and not decreasing, than something
747              * is bad. We'd better stop the resampling right now. */
748             msg_Warn( p_aout, "timing screwed, stopping resampling" );
749             inputResamplingStop( p_input );
750         }
751     }
752
753 #ifndef AOUT_PROCESS_BEFORE_CHEKS
754     /* Actually run the resampler now. */
755     if ( p_input->i_nb_resamplers > 0 )
756     {
757         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
758                           p_input->i_nb_resamplers,
759                           &p_buffer );
760     }
761
762     if( p_buffer->i_nb_samples <= 0 )
763     {
764         aout_BufferFree( p_buffer );
765         return 0;
766     }
767 #endif
768
769     /* Adding the start date will be managed by aout_FifoPush(). */
770     p_buffer->end_date = start_date +
771         (p_buffer->end_date - p_buffer->start_date);
772     p_buffer->start_date = start_date;
773
774     aout_lock_input_fifos( p_aout );
775     aout_FifoPush( p_aout, &p_input->fifo, p_buffer );
776     aout_unlock_input_fifos( p_aout );
777     return 0;
778 }
779
780 /*****************************************************************************
781  * static functions
782  *****************************************************************************/
783
784 static void inputFailure( aout_instance_t * p_aout, aout_input_t * p_input,
785                           const char * psz_error_message )
786 {
787     /* error message */
788     msg_Err( p_aout, "%s", psz_error_message );
789
790     /* clean up */
791     aout_FiltersDestroyPipeline( p_aout, p_input->pp_filters,
792                                  p_input->i_nb_filters );
793     aout_FiltersDestroyPipeline( p_aout, p_input->pp_resamplers,
794                                  p_input->i_nb_resamplers );
795     aout_FifoDestroy( p_aout, &p_input->fifo );
796     var_Destroy( p_aout, "visual" );
797     var_Destroy( p_aout, "equalizer" );
798     var_Destroy( p_aout, "audio-filter" );
799     var_Destroy( p_aout, "audio-visual" );
800
801     var_Destroy( p_aout, "audio-replay-gain-mode" );
802     var_Destroy( p_aout, "audio-replay-gain-default" );
803     var_Destroy( p_aout, "audio-replay-gain-preamp" );
804     var_Destroy( p_aout, "audio-replay-gain-peak-protection" );
805
806     /* error flag */
807     p_input->b_error = 1;
808 }
809
810 static void inputDrop( aout_input_t *p_input, aout_buffer_t *p_buffer )
811 {
812     aout_BufferFree( p_buffer );
813
814     p_input->i_buffer_lost++;
815 }
816
817 static void inputResamplingStop( aout_input_t *p_input )
818 {
819     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
820     if( p_input->i_nb_resamplers != 0 )
821     {
822         p_input->pp_resamplers[0]->input.i_rate =
823             ( p_input->pp_resamplers[0] == p_input->p_playback_rate_filter )
824             ? INPUT_RATE_DEFAULT * p_input->input.i_rate / p_input->i_last_input_rate
825             : p_input->input.i_rate;
826         p_input->pp_resamplers[0]->b_continuity = false;
827     }
828 }
829
830 static vout_thread_t *RequestVout( void *p_private,
831                                    vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
832 {
833     aout_instance_t *p_aout = p_private;
834     VLC_UNUSED(b_recycle);
835     return vout_Request( p_aout, p_vout, p_fmt );
836 }
837
838 static vout_thread_t *RequestVoutFromFilter( void *p_private,
839                                             vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
840 {
841     aout_input_t *p_input = p_private;
842     aout_request_vout_t *p_request = &p_input->request_vout;
843
844     return p_request->pf_request_vout( p_request->p_private,
845                                        p_vout, p_fmt, p_input->b_recycle_vout && b_recycle );
846 }
847
848 static int ChangeFiltersString( aout_instance_t * p_aout, const char* psz_variable,
849                                  const char *psz_name, bool b_add )
850 {
851     return AoutChangeFilterString( VLC_OBJECT(p_aout), p_aout,
852                                    psz_variable, psz_name, b_add ) ? 1 : 0;
853 }
854
855 static int VisualizationCallback( vlc_object_t *p_this, char const *psz_cmd,
856                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
857 {
858     aout_instance_t *p_aout = (aout_instance_t *)p_this;
859     char *psz_mode = newval.psz_string;
860     (void)psz_cmd; (void)oldval; (void)p_data;
861
862     if( !psz_mode || !*psz_mode )
863     {
864         ChangeFiltersString( p_aout, "audio-visual", "goom", false );
865         ChangeFiltersString( p_aout, "audio-visual", "visual", false );
866         ChangeFiltersString( p_aout, "audio-visual", "galaktos", false );
867         ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
868     }
869     else
870     {
871         if( !strcmp( "goom", psz_mode ) )
872         {
873             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
874             ChangeFiltersString( p_aout, "audio-visual", "goom", true );
875             ChangeFiltersString( p_aout, "audio-visual", "galaktos", false );
876             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
877         }
878         else if( !strcmp( "galaktos", psz_mode ) )
879         {
880             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
881             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
882             ChangeFiltersString( p_aout, "audio-visual", "galaktos", true );
883         }
884         else if( !strcmp( "projectm", psz_mode ) )
885         {
886             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
887             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
888             ChangeFiltersString( p_aout, "audio-visual", "galaktos", false );
889             ChangeFiltersString( p_aout, "audio-visual", "projectm", true );
890         }
891         else
892         {
893             var_Create( p_aout, "effect-list", VLC_VAR_STRING );
894             var_SetString( p_aout, "effect-list", psz_mode );
895
896             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
897             ChangeFiltersString( p_aout, "audio-visual", "visual", true );
898             ChangeFiltersString( p_aout, "audio-visual", "galaktos", false );
899             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
900         }
901     }
902
903     /* That sucks */
904     AoutInputsMarkToRestart( p_aout );
905
906     return VLC_SUCCESS;
907 }
908
909 static int EqualizerCallback( vlc_object_t *p_this, char const *psz_cmd,
910                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
911 {
912     aout_instance_t *p_aout = (aout_instance_t *)p_this;
913     char *psz_mode = newval.psz_string;
914     int i_ret;
915     (void)psz_cmd; (void)oldval; (void)p_data;
916
917     if( !psz_mode || !*psz_mode )
918     {
919         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
920                                      false );
921     }
922     else
923     {
924         var_Create( p_aout, "equalizer-preset", VLC_VAR_STRING );
925         var_SetString( p_aout, "equalizer-preset", psz_mode );
926         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
927                                      true );
928     }
929
930     /* That sucks */
931     if( i_ret == 1 )
932         AoutInputsMarkToRestart( p_aout );
933     return VLC_SUCCESS;
934 }
935
936 static int ReplayGainCallback( vlc_object_t *p_this, char const *psz_cmd,
937                                vlc_value_t oldval, vlc_value_t newval, void *p_data )
938 {
939     VLC_UNUSED(psz_cmd); VLC_UNUSED(oldval);
940     VLC_UNUSED(newval); VLC_UNUSED(p_data);
941     aout_instance_t *p_aout = (aout_instance_t *)p_this;
942     int i;
943
944     aout_lock_mixer( p_aout );
945     for( i = 0; i < p_aout->i_nb_inputs; i++ )
946         ReplayGainSelect( p_aout, p_aout->pp_inputs[i] );
947
948     /* Restart the mixer (a trivial mixer may be in use) */
949     aout_MixerMultiplierSet( p_aout, p_aout->mixer.f_multiplier );
950     aout_unlock_mixer( p_aout );
951
952     return VLC_SUCCESS;
953 }
954
955 static void ReplayGainSelect( aout_instance_t *p_aout, aout_input_t *p_input )
956 {
957     char *psz_replay_gain = var_GetNonEmptyString( p_aout,
958                                                    "audio-replay-gain-mode" );
959     int i_mode;
960     int i_use;
961     float f_gain;
962
963     p_input->f_multiplier = 1.0;
964
965     if( !psz_replay_gain )
966         return;
967
968     /* Find select mode */
969     if( !strcmp( psz_replay_gain, "track" ) )
970         i_mode = AUDIO_REPLAY_GAIN_TRACK;
971     else if( !strcmp( psz_replay_gain, "album" ) )
972         i_mode = AUDIO_REPLAY_GAIN_ALBUM;
973     else
974         i_mode = AUDIO_REPLAY_GAIN_MAX;
975
976     /* If the select mode is not available, prefer the other one */
977     i_use = i_mode;
978     if( i_use != AUDIO_REPLAY_GAIN_MAX && !p_input->replay_gain.pb_gain[i_use] )
979     {
980         for( i_use = 0; i_use < AUDIO_REPLAY_GAIN_MAX; i_use++ )
981         {
982             if( p_input->replay_gain.pb_gain[i_use] )
983                 break;
984         }
985     }
986
987     /* */
988     if( i_use != AUDIO_REPLAY_GAIN_MAX )
989         f_gain = p_input->replay_gain.pf_gain[i_use] + var_GetFloat( p_aout, "audio-replay-gain-preamp" );
990     else if( i_mode != AUDIO_REPLAY_GAIN_MAX )
991         f_gain = var_GetFloat( p_aout, "audio-replay-gain-default" );
992     else
993         f_gain = 0.0;
994     p_input->f_multiplier = pow( 10.0, f_gain / 20.0 );
995
996     /* */
997     if( p_input->replay_gain.pb_peak[i_use] &&
998         var_GetBool( p_aout, "audio-replay-gain-peak-protection" ) &&
999         p_input->replay_gain.pf_peak[i_use] * p_input->f_multiplier > 1.0 )
1000     {
1001         p_input->f_multiplier = 1.0f / p_input->replay_gain.pf_peak[i_use];
1002     }
1003
1004     free( psz_replay_gain );
1005 }
1006