Merge all audio output locks except volume control
[vlc.git] / src / audio_output / input.c
1 /*****************************************************************************
2  * input.c : internal management of input streams for the audio output
3  *****************************************************************************
4  * Copyright (C) 2002-2007 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Christophe Massiot <massiot@via.ecp.fr>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
22  *****************************************************************************/
23
24 /*****************************************************************************
25  * Preamble
26  *****************************************************************************/
27
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <assert.h>
33
34 #include <vlc_common.h>
35
36 #include <stdio.h>
37 #include <string.h>
38 #include <math.h>
39 #include <assert.h>
40
41 #include <vlc_input.h>
42 #include <vlc_vout.h>                  /* for vout_Request */
43 #include <vlc_modules.h>
44
45 #include <vlc_aout.h>
46 #include <vlc_filter.h>
47 #include <libvlc.h>
48
49 #include "aout_internal.h"
50
51 #define AOUT_ASSERT_LOCKED vlc_assert_locked( &p_aout->lock )
52
53 static void inputFailure( aout_instance_t *, aout_input_t *, const char * );
54 static void inputDrop( aout_input_t *, aout_buffer_t * );
55 static void inputResamplingStop( aout_input_t *p_input );
56
57 static int VisualizationCallback( vlc_object_t *, char const *,
58                                   vlc_value_t, vlc_value_t, void * );
59 static int EqualizerCallback( vlc_object_t *, char const *,
60                               vlc_value_t, vlc_value_t, void * );
61 static int ReplayGainCallback( vlc_object_t *, char const *,
62                                vlc_value_t, vlc_value_t, void * );
63 static void ReplayGainSelect( aout_instance_t *, aout_input_t * );
64
65 static vout_thread_t *RequestVout( void *,
66                                    vout_thread_t *, video_format_t *, bool );
67
68 /*****************************************************************************
69  * aout_InputNew : allocate a new input and rework the filter pipeline
70  *****************************************************************************/
71 int aout_InputNew( aout_instance_t * p_aout, aout_input_t * p_input, const aout_request_vout_t *p_request_vout )
72 {
73     audio_sample_format_t chain_input_format;
74     audio_sample_format_t chain_output_format;
75     vlc_value_t val, text;
76     char *psz_filters, *psz_visual, *psz_scaletempo;
77     int i_visual;
78
79     aout_FormatPrint( p_aout, "input", &p_input->input );
80
81     p_input->i_nb_resamplers = p_input->i_nb_filters = 0;
82
83     /* Prepare FIFO. */
84     aout_FifoInit( p_aout, &p_input->mixer.fifo, p_aout->mixer_format.i_rate );
85
86     /* */
87     if( p_request_vout )
88     {
89         p_input->request_vout = *p_request_vout;
90     }
91     else
92     {
93         p_input->request_vout.pf_request_vout = RequestVout;
94         p_input->request_vout.p_private = p_aout;
95     }
96
97     /* Prepare format structure */
98     chain_input_format  = p_input->input;
99     chain_output_format = p_aout->mixer_format;
100     chain_output_format.i_rate = p_input->input.i_rate;
101     aout_FormatPrepare( &chain_output_format );
102
103     /* Now add user filters */
104     if( var_Type( p_aout, "visual" ) == 0 )
105     {
106         var_Create( p_aout, "visual", VLC_VAR_STRING | VLC_VAR_HASCHOICE );
107         text.psz_string = _("Visualizations");
108         var_Change( p_aout, "visual", VLC_VAR_SETTEXT, &text, NULL );
109         val.psz_string = (char*)""; text.psz_string = _("Disable");
110         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
111         val.psz_string = (char*)"spectrometer"; text.psz_string = _("Spectrometer");
112         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
113         val.psz_string = (char*)"scope"; text.psz_string = _("Scope");
114         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
115         val.psz_string = (char*)"spectrum"; text.psz_string = _("Spectrum");
116         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
117         val.psz_string = (char*)"vuMeter"; text.psz_string = _("Vu meter");
118         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
119
120         /* Look for goom plugin */
121         if( module_exists( "goom" ) )
122         {
123             val.psz_string = (char*)"goom"; text.psz_string = (char*)"Goom";
124             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
125         }
126
127         /* Look for libprojectM plugin */
128         if( module_exists( "projectm" ) )
129         {
130             val.psz_string = (char*)"projectm"; text.psz_string = (char*)"projectM";
131             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
132         }
133
134         if( var_Get( p_aout, "effect-list", &val ) == VLC_SUCCESS )
135         {
136             var_SetString( p_aout, "visual", val.psz_string );
137             free( val.psz_string );
138         }
139         var_AddCallback( p_aout, "visual", VisualizationCallback, NULL );
140     }
141
142     if( var_Type( p_aout, "equalizer" ) == 0 )
143     {
144         module_config_t *p_config;
145         int i;
146
147         p_config = config_FindConfig( VLC_OBJECT(p_aout), "equalizer-preset" );
148         if( p_config && p_config->i_list )
149         {
150                var_Create( p_aout, "equalizer",
151                            VLC_VAR_STRING | VLC_VAR_HASCHOICE );
152             text.psz_string = _("Equalizer");
153             var_Change( p_aout, "equalizer", VLC_VAR_SETTEXT, &text, NULL );
154
155             val.psz_string = (char*)""; text.psz_string = _("Disable");
156             var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE, &val, &text );
157
158             for( i = 0; i < p_config->i_list; i++ )
159             {
160                 val.psz_string = (char *)p_config->ppsz_list[i];
161                 text.psz_string = (char *)p_config->ppsz_list_text[i];
162                 var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE,
163                             &val, &text );
164             }
165
166             var_AddCallback( p_aout, "equalizer", EqualizerCallback, NULL );
167         }
168     }
169
170     if( var_Type( p_aout, "audio-filter" ) == 0 )
171     {
172         var_Create( p_aout, "audio-filter",
173                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
174         text.psz_string = _("Audio filters");
175         var_Change( p_aout, "audio-filter", VLC_VAR_SETTEXT, &text, NULL );
176     }
177     if( var_Type( p_aout, "audio-visual" ) == 0 )
178     {
179         var_Create( p_aout, "audio-visual",
180                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
181         text.psz_string = _("Audio visualizations");
182         var_Change( p_aout, "audio-visual", VLC_VAR_SETTEXT, &text, NULL );
183     }
184
185     if( var_Type( p_aout, "audio-replay-gain-mode" ) == 0 )
186     {
187         module_config_t *p_config;
188         int i;
189
190         p_config = config_FindConfig( VLC_OBJECT(p_aout), "audio-replay-gain-mode" );
191         if( p_config && p_config->i_list )
192         {
193             var_Create( p_aout, "audio-replay-gain-mode",
194                         VLC_VAR_STRING | VLC_VAR_DOINHERIT );
195
196             text.psz_string = _("Replay gain");
197             var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_SETTEXT, &text, NULL );
198
199             for( i = 0; i < p_config->i_list; i++ )
200             {
201                 val.psz_string = (char *)p_config->ppsz_list[i];
202                 text.psz_string = (char *)p_config->ppsz_list_text[i];
203                 var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_ADDCHOICE,
204                             &val, &text );
205             }
206
207             var_AddCallback( p_aout, "audio-replay-gain-mode", ReplayGainCallback, NULL );
208         }
209     }
210     if( var_Type( p_aout, "audio-replay-gain-preamp" ) == 0 )
211     {
212         var_Create( p_aout, "audio-replay-gain-preamp",
213                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
214     }
215     if( var_Type( p_aout, "audio-replay-gain-default" ) == 0 )
216     {
217         var_Create( p_aout, "audio-replay-gain-default",
218                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
219     }
220     if( var_Type( p_aout, "audio-replay-gain-peak-protection" ) == 0 )
221     {
222         var_Create( p_aout, "audio-replay-gain-peak-protection",
223                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
224     }
225
226     psz_filters = var_GetString( p_aout, "audio-filter" );
227     psz_visual = var_GetString( p_aout, "audio-visual");
228     psz_scaletempo = var_InheritBool( p_aout, "audio-time-stretch" ) ? strdup( "scaletempo" ) : NULL;
229
230     p_input->b_recycle_vout = psz_visual && *psz_visual;
231
232     /* parse user filter lists */
233     char *const ppsz_array[] = { psz_scaletempo, psz_filters, psz_visual };
234     p_input->p_playback_rate_filter = NULL;
235
236     for( i_visual = 0; i_visual < 3 && !AOUT_FMT_NON_LINEAR(&chain_output_format); i_visual++ )
237     {
238         char *psz_next = NULL;
239         char *psz_parser = ppsz_array[i_visual];
240
241         if( psz_parser == NULL || !*psz_parser )
242             continue;
243
244         while( psz_parser && *psz_parser )
245         {
246             filter_t * p_filter = NULL;
247
248             if( p_input->i_nb_filters >= AOUT_MAX_FILTERS )
249             {
250                 msg_Dbg( p_aout, "max filters reached (%d)", AOUT_MAX_FILTERS );
251                 break;
252             }
253
254             while( *psz_parser == ' ' && *psz_parser == ':' )
255             {
256                 psz_parser++;
257             }
258             if( ( psz_next = strchr( psz_parser , ':'  ) ) )
259             {
260                 *psz_next++ = '\0';
261             }
262             if( *psz_parser =='\0' )
263             {
264                 break;
265             }
266
267             /* Create a VLC object */
268             static const char typename[] = "audio filter";
269             p_filter = vlc_custom_create( p_aout, sizeof(*p_filter),
270                                           VLC_OBJECT_GENERIC, typename );
271             if( p_filter == NULL )
272             {
273                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
274                          psz_parser );
275                 psz_parser = psz_next;
276                 continue;
277             }
278
279             p_filter->p_owner = malloc( sizeof(*p_filter->p_owner) );
280             p_filter->p_owner->p_aout  = p_aout;
281             p_filter->p_owner->p_input = p_input;
282
283             /* request format */
284             memcpy( &p_filter->fmt_in.audio, &chain_output_format,
285                     sizeof(audio_sample_format_t) );
286             p_filter->fmt_in.i_codec = chain_output_format.i_format;
287             memcpy( &p_filter->fmt_out.audio, &chain_output_format,
288                     sizeof(audio_sample_format_t) );
289             p_filter->fmt_out.i_codec = chain_output_format.i_format;
290             p_filter->pf_audio_buffer_new = aout_FilterBufferNew;
291
292             /* try to find the requested filter */
293             if( i_visual == 2 ) /* this can only be a visualization module */
294             {
295                 p_filter->p_module = module_need( p_filter, "visualization2",
296                                                   psz_parser, true );
297             }
298             else /* this can be a audio filter module as well as a visualization module */
299             {
300                 p_filter->p_module = module_need( p_filter, "audio filter",
301                                               psz_parser, true );
302
303                 if ( p_filter->p_module == NULL )
304                 {
305                     /* if the filter requested a special format, retry */
306                     if ( !( AOUT_FMTS_IDENTICAL( &p_filter->fmt_in.audio,
307                                                  &chain_input_format )
308                             && AOUT_FMTS_IDENTICAL( &p_filter->fmt_out.audio,
309                                                     &chain_output_format ) ) )
310                     {
311                         aout_FormatPrepare( &p_filter->fmt_in.audio );
312                         aout_FormatPrepare( &p_filter->fmt_out.audio );
313                         p_filter->p_module = module_need( p_filter,
314                                                           "audio filter",
315                                                           psz_parser, true );
316                     }
317                     /* try visual filters */
318                     else
319                     {
320                         memcpy( &p_filter->fmt_in.audio, &chain_output_format,
321                                 sizeof(audio_sample_format_t) );
322                         memcpy( &p_filter->fmt_out.audio, &chain_output_format,
323                                 sizeof(audio_sample_format_t) );
324                         p_filter->p_module = module_need( p_filter,
325                                                           "visualization2",
326                                                           psz_parser, true );
327                     }
328                 }
329             }
330
331             /* failure */
332             if ( p_filter->p_module == NULL )
333             {
334                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
335                          psz_parser );
336
337                 free( p_filter->p_owner );
338                 vlc_object_release( p_filter );
339
340                 psz_parser = psz_next;
341                 continue;
342             }
343
344             /* complete the filter chain if necessary */
345             if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
346                                              &p_input->i_nb_filters,
347                                              &chain_input_format,
348                                              &p_filter->fmt_in.audio ) < 0 )
349             {
350                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
351                          psz_parser );
352
353                 module_unneed( p_filter, p_filter->p_module );
354                 free( p_filter->p_owner );
355                 vlc_object_release( p_filter );
356
357                 psz_parser = psz_next;
358                 continue;
359             }
360
361             /* success */
362             p_input->pp_filters[p_input->i_nb_filters++] = p_filter;
363             memcpy( &chain_input_format, &p_filter->fmt_out.audio,
364                     sizeof( audio_sample_format_t ) );
365
366             if( i_visual == 0 ) /* scaletempo */
367                 p_input->p_playback_rate_filter = p_filter;
368
369             /* next filter if any */
370             psz_parser = psz_next;
371         }
372     }
373     free( psz_visual );
374     free( psz_filters );
375     free( psz_scaletempo );
376
377     /* complete the filter chain if necessary */
378     if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
379                                      &p_input->i_nb_filters,
380                                      &chain_input_format,
381                                      &chain_output_format ) < 0 )
382     {
383         inputFailure( p_aout, p_input, "couldn't set an input pipeline" );
384         return -1;
385     }
386
387     /* Create resamplers. */
388     if ( !AOUT_FMT_NON_LINEAR( &p_aout->mixer_format ) )
389     {
390         chain_output_format.i_rate = (__MAX(p_input->input.i_rate,
391                                             p_aout->mixer_format.i_rate)
392                                  * (100 + AOUT_MAX_RESAMPLING)) / 100;
393         if ( chain_output_format.i_rate == p_aout->mixer_format.i_rate )
394         {
395             /* Just in case... */
396             chain_output_format.i_rate++;
397         }
398         if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_resamplers,
399                                          &p_input->i_nb_resamplers,
400                                          &chain_output_format,
401                                          &p_aout->mixer_format ) < 0 )
402         {
403             inputFailure( p_aout, p_input, "couldn't set a resampler pipeline");
404             return -1;
405         }
406
407         /* Setup the initial rate of the resampler */
408         p_input->pp_resamplers[0]->fmt_in.audio.i_rate = p_input->input.i_rate;
409     }
410     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
411
412     if( ! p_input->p_playback_rate_filter && p_input->i_nb_resamplers > 0 )
413     {
414         p_input->p_playback_rate_filter = p_input->pp_resamplers[0];
415     }
416
417     ReplayGainSelect( p_aout, p_input );
418
419     /* Success */
420     p_input->b_error = false;
421     p_input->i_last_input_rate = INPUT_RATE_DEFAULT;
422
423     return 0;
424 }
425
426 /*****************************************************************************
427  * aout_InputDelete : delete an input
428  *****************************************************************************
429  * This function must be entered with the mixer lock.
430  *****************************************************************************/
431 int aout_InputDelete( aout_instance_t * p_aout, aout_input_t * p_input )
432 {
433     AOUT_ASSERT_LOCKED;
434     if ( p_input->b_error )
435         return 0;
436
437     /* XXX We need to update b_recycle_vout before calling aout_FiltersDestroyPipeline.
438      * FIXME They can be a race condition if audio-visual is updated between
439      * aout_InputDelete and aout_InputNew.
440      */
441     char *psz_visual = var_GetString( p_aout, "audio-visual");
442     p_input->b_recycle_vout = psz_visual && *psz_visual;
443     free( psz_visual );
444
445     aout_FiltersDestroyPipeline( p_input->pp_filters, p_input->i_nb_filters );
446     p_input->i_nb_filters = 0;
447     aout_FiltersDestroyPipeline( p_input->pp_resamplers,
448                                  p_input->i_nb_resamplers );
449     p_input->i_nb_resamplers = 0;
450     aout_FifoDestroy( &p_input->mixer.fifo );
451
452     return 0;
453 }
454
455 /*****************************************************************************
456  * aout_InputCheckAndRestart : restart an input
457  *****************************************************************************
458  * This function must be entered with the input and mixer lock.
459  *****************************************************************************/
460 void aout_InputCheckAndRestart( aout_instance_t * p_aout, aout_input_t * p_input )
461 {
462     AOUT_ASSERT_LOCKED;
463
464     if( !p_input->b_restart )
465         return;
466
467     /* A little trick to avoid loosing our input fifo and properties */
468
469     aout_fifo_t fifo = p_input->mixer.fifo;
470     bool b_paused = p_input->b_paused;
471     mtime_t i_pause_date = p_input->i_pause_date;
472
473     aout_FifoInit( p_aout, &p_input->mixer.fifo, p_aout->mixer_format.i_rate );
474
475     aout_InputDelete( p_aout, p_input );
476
477     aout_InputNew( p_aout, p_input, &p_input->request_vout );
478     p_input->mixer.fifo = fifo;
479     p_input->b_paused = b_paused;
480     p_input->i_pause_date = i_pause_date;
481
482     p_input->b_restart = false;
483 }
484 /*****************************************************************************
485  * aout_InputPlay : play a buffer
486  *****************************************************************************
487  * This function must be entered with the input lock.
488  *****************************************************************************/
489 /* XXX Do not activate it !! */
490 //#define AOUT_PROCESS_BEFORE_CHEKS
491 void aout_InputPlay( aout_instance_t * p_aout, aout_input_t * p_input,
492                      aout_buffer_t * p_buffer, int i_input_rate )
493 {
494     mtime_t start_date;
495     AOUT_ASSERT_LOCKED;
496
497     if( i_input_rate != INPUT_RATE_DEFAULT && p_input->p_playback_rate_filter == NULL )
498     {
499         inputDrop( p_input, p_buffer );
500         return;
501     }
502
503 #ifdef AOUT_PROCESS_BEFORE_CHEKS
504     /* Run pre-filters. */
505     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
506                       &p_buffer );
507     if( !p_buffer )
508         return;
509
510     /* Actually run the resampler now. */
511     if ( p_input->i_nb_resamplers > 0 )
512     {
513         const mtime_t i_date = p_buffer->i_pts;
514         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
515                           p_input->i_nb_resamplers,
516                           &p_buffer );
517     }
518
519     if( !p_buffer )
520         return;
521     if( p_buffer->i_nb_samples <= 0 )
522     {
523         block_Release( p_buffer );
524         return;
525     }
526 #endif
527
528     /* Handle input rate change, but keep drift correction */
529     if( i_input_rate != p_input->i_last_input_rate )
530     {
531         unsigned int * const pi_rate = &p_input->p_playback_rate_filter->fmt_in.audio.i_rate;
532 #define F(r,ir) ( INPUT_RATE_DEFAULT * (r) / (ir) )
533         const int i_delta = *pi_rate - F(p_input->input.i_rate,p_input->i_last_input_rate);
534         *pi_rate = F(p_input->input.i_rate + i_delta, i_input_rate);
535 #undef F
536         p_input->i_last_input_rate = i_input_rate;
537     }
538
539     mtime_t now = mdate();
540
541     /* We don't care if someone changes the start date behind our back after
542      * this. We'll deal with that when pushing the buffer, and compensate
543      * with the next incoming buffer. */
544     start_date = aout_FifoNextStart( &p_input->mixer.fifo );
545
546     if ( start_date != 0 && start_date < now )
547     {
548         /* The decoder is _very_ late. This can only happen if the user
549          * pauses the stream (or if the decoder is buggy, which cannot
550          * happen :). */
551         msg_Warn( p_aout, "computed PTS is out of range (%"PRId64"), "
552                   "clearing out", now - start_date );
553         aout_FifoSet( &p_input->mixer.fifo, 0 );
554         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
555             msg_Warn( p_aout, "timing screwed, stopping resampling" );
556         inputResamplingStop( p_input );
557         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
558         start_date = 0;
559     }
560
561     if ( p_buffer->i_pts < now + AOUT_MIN_PREPARE_TIME )
562     {
563         /* The decoder gives us f*cked up PTS. It's its business, but we
564          * can't present it anyway, so drop the buffer. */
565         msg_Warn( p_aout, "PTS is out of range (%"PRId64"), dropping buffer",
566                   now - p_buffer->i_pts );
567         inputDrop( p_input, p_buffer );
568         inputResamplingStop( p_input );
569         return;
570     }
571
572     /* If the audio drift is too big then it's not worth trying to resample
573      * the audio. */
574     if( !start_date )
575         start_date = p_buffer->i_pts;
576
577     mtime_t tolerance = 3 * AOUT_PTS_TOLERANCE
578                           * i_input_rate / INPUT_RATE_DEFAULT;
579     mtime_t drift = start_date - p_buffer->i_pts;
580
581     if( drift < -tolerance )
582     {
583         msg_Warn( p_aout, "buffer way too early (%"PRId64"), clearing queue",
584                   drift );
585         aout_FifoSet( &p_input->mixer.fifo, 0 );
586         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
587             msg_Warn( p_aout, "timing screwed, stopping resampling" );
588         inputResamplingStop( p_input );
589         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
590         start_date = p_buffer->i_pts;
591         drift = 0;
592     }
593     else if( drift > +tolerance )
594     {
595         msg_Warn( p_aout, "buffer way too late (%"PRId64"), dropping buffer",
596                   drift );
597         inputDrop( p_input, p_buffer );
598         return;
599     }
600
601 #ifndef AOUT_PROCESS_BEFORE_CHEKS
602     /* Run pre-filters. */
603     aout_FiltersPlay( p_input->pp_filters, p_input->i_nb_filters, &p_buffer );
604     if( !p_buffer )
605         return;
606 #endif
607
608     /* Run the resampler if needed.
609      * We first need to calculate the output rate of this resampler. */
610     if ( ( p_input->i_resampling_type == AOUT_RESAMPLING_NONE ) &&
611          ( drift < -AOUT_PTS_TOLERANCE || drift > +AOUT_PTS_TOLERANCE ) &&
612          p_input->i_nb_resamplers > 0 )
613     {
614         /* Can happen in several circumstances :
615          * 1. A problem at the input (clock drift)
616          * 2. A small pause triggered by the user
617          * 3. Some delay in the output stage, causing a loss of lip
618          *    synchronization
619          * Solution : resample the buffer to avoid a scratch.
620          */
621         p_input->i_resamp_start_date = now;
622         p_input->i_resamp_start_drift = (int)-drift;
623         p_input->i_resampling_type = (drift < 0) ? AOUT_RESAMPLING_DOWN
624                                                  : AOUT_RESAMPLING_UP;
625         msg_Warn( p_aout, (drift < 0)
626                   ? "buffer too early (%"PRId64"), down-sampling"
627                   : "buffer too late  (%"PRId64"), up-sampling", drift );
628     }
629
630     if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
631     {
632         /* Resampling has been triggered previously (because of dates
633          * mismatch). We want the resampling to happen progressively so
634          * it isn't too audible to the listener. */
635
636         if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
637             p_input->pp_resamplers[0]->fmt_in.audio.i_rate += 2; /* Hz */
638         else
639             p_input->pp_resamplers[0]->fmt_in.audio.i_rate -= 2; /* Hz */
640
641         /* Check if everything is back to normal, in which case we can stop the
642          * resampling */
643         unsigned int i_nominal_rate =
644           (p_input->pp_resamplers[0] == p_input->p_playback_rate_filter)
645           ? INPUT_RATE_DEFAULT * p_input->input.i_rate / i_input_rate
646           : p_input->input.i_rate;
647         if( p_input->pp_resamplers[0]->fmt_in.audio.i_rate == i_nominal_rate )
648         {
649             p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
650             msg_Warn( p_aout, "resampling stopped after %"PRIi64" usec "
651                       "(drift: %"PRIi64")",
652                       now - p_input->i_resamp_start_date,
653                       p_buffer->i_pts - start_date);
654         }
655         else if( abs( (int)(p_buffer->i_pts - start_date) ) <
656                  abs( p_input->i_resamp_start_drift ) / 2 )
657         {
658             /* if we reduced the drift from half, then it is time to switch
659              * back the resampling direction. */
660             if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
661                 p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
662             else
663                 p_input->i_resampling_type = AOUT_RESAMPLING_UP;
664             p_input->i_resamp_start_drift = 0;
665         }
666         else if( p_input->i_resamp_start_drift &&
667                  ( abs( (int)(p_buffer->i_pts - start_date) ) >
668                    abs( p_input->i_resamp_start_drift ) * 3 / 2 ) )
669         {
670             /* If the drift is increasing and not decreasing, than something
671              * is bad. We'd better stop the resampling right now. */
672             msg_Warn( p_aout, "timing screwed, stopping resampling" );
673             inputResamplingStop( p_input );
674             p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
675         }
676     }
677
678 #ifndef AOUT_PROCESS_BEFORE_CHEKS
679     /* Actually run the resampler now. */
680     if ( p_input->i_nb_resamplers > 0 )
681     {
682         aout_FiltersPlay( p_input->pp_resamplers, p_input->i_nb_resamplers,
683                           &p_buffer );
684     }
685
686     if( !p_buffer )
687         return;
688     if( p_buffer->i_nb_samples <= 0 )
689     {
690         block_Release( p_buffer );
691         return;
692     }
693 #endif
694
695     /* Adding the start date will be managed by aout_FifoPush(). */
696     p_buffer->i_pts = start_date;
697     aout_FifoPush( &p_input->mixer.fifo, p_buffer );
698 }
699
700 /*****************************************************************************
701  * static functions
702  *****************************************************************************/
703
704 static void inputFailure( aout_instance_t * p_aout, aout_input_t * p_input,
705                           const char * psz_error_message )
706 {
707     /* error message */
708     msg_Err( p_aout, "%s", psz_error_message );
709
710     /* clean up */
711     aout_FiltersDestroyPipeline( p_input->pp_filters, p_input->i_nb_filters );
712     aout_FiltersDestroyPipeline( p_input->pp_resamplers,
713                                  p_input->i_nb_resamplers );
714     aout_FifoDestroy( &p_input->mixer.fifo );
715     var_Destroy( p_aout, "visual" );
716     var_Destroy( p_aout, "equalizer" );
717     var_Destroy( p_aout, "audio-filter" );
718     var_Destroy( p_aout, "audio-visual" );
719
720     var_Destroy( p_aout, "audio-replay-gain-mode" );
721     var_Destroy( p_aout, "audio-replay-gain-default" );
722     var_Destroy( p_aout, "audio-replay-gain-preamp" );
723     var_Destroy( p_aout, "audio-replay-gain-peak-protection" );
724
725     /* error flag */
726     p_input->b_error = 1;
727 }
728
729 static void inputDrop( aout_input_t *p_input, aout_buffer_t *p_buffer )
730 {
731     aout_BufferFree( p_buffer );
732
733     p_input->i_buffer_lost++;
734 }
735
736 static void inputResamplingStop( aout_input_t *p_input )
737 {
738     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
739     if( p_input->i_nb_resamplers != 0 )
740     {
741         p_input->pp_resamplers[0]->fmt_in.audio.i_rate =
742             ( p_input->pp_resamplers[0] == p_input->p_playback_rate_filter )
743             ? INPUT_RATE_DEFAULT * p_input->input.i_rate / p_input->i_last_input_rate
744             : p_input->input.i_rate;
745     }
746 }
747
748 static vout_thread_t *RequestVout( void *p_private,
749                                    vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
750 {
751     aout_instance_t *p_aout = p_private;
752     VLC_UNUSED(b_recycle);
753     vout_configuration_t cfg = {
754         .vout       = p_vout,
755         .input      = NULL,
756         .change_fmt = true,
757         .fmt        = p_fmt,
758         .dpb_size   = 1,
759     };
760     return vout_Request( p_aout, &cfg );
761 }
762
763 vout_thread_t *aout_filter_RequestVout( filter_t *p_filter,
764                                         vout_thread_t *p_vout, video_format_t *p_fmt )
765 {
766     aout_input_t *p_input = p_filter->p_owner->p_input;
767     aout_request_vout_t *p_request = &p_input->request_vout;
768
769     /* XXX: this only works from audio input */
770     /* If you want to use visualization filters from another place, you will
771      * need to add a new pf_aout_request_vout callback or store a pointer
772      * to aout_request_vout_t inside filter_t (i.e. a level of indirection). */
773
774     return p_request->pf_request_vout( p_request->p_private,
775                                        p_vout, p_fmt, p_input->b_recycle_vout );
776 }
777
778 static int ChangeFiltersString( aout_instance_t * p_aout, const char* psz_variable,
779                                  const char *psz_name, bool b_add )
780 {
781     return aout_ChangeFilterString( VLC_OBJECT(p_aout), p_aout,
782                                     psz_variable, psz_name, b_add ) ? 1 : 0;
783 }
784
785 static int VisualizationCallback( vlc_object_t *p_this, char const *psz_cmd,
786                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
787 {
788     aout_instance_t *p_aout = (aout_instance_t *)p_this;
789     char *psz_mode = newval.psz_string;
790     (void)psz_cmd; (void)oldval; (void)p_data;
791
792     if( !psz_mode || !*psz_mode )
793     {
794         ChangeFiltersString( p_aout, "audio-visual", "goom", false );
795         ChangeFiltersString( p_aout, "audio-visual", "visual", false );
796         ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
797     }
798     else
799     {
800         if( !strcmp( "goom", psz_mode ) )
801         {
802             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
803             ChangeFiltersString( p_aout, "audio-visual", "goom", true );
804             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
805         }
806         else if( !strcmp( "projectm", psz_mode ) )
807         {
808             ChangeFiltersString( p_aout, "audio-visual", "visual", false );
809             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
810             ChangeFiltersString( p_aout, "audio-visual", "projectm", true );
811         }
812         else
813         {
814             var_Create( p_aout, "effect-list", VLC_VAR_STRING );
815             var_SetString( p_aout, "effect-list", psz_mode );
816
817             ChangeFiltersString( p_aout, "audio-visual", "goom", false );
818             ChangeFiltersString( p_aout, "audio-visual", "visual", true );
819             ChangeFiltersString( p_aout, "audio-visual", "projectm", false );
820         }
821     }
822
823     /* That sucks */
824     AoutInputsMarkToRestart( p_aout );
825
826     return VLC_SUCCESS;
827 }
828
829 static int EqualizerCallback( vlc_object_t *p_this, char const *psz_cmd,
830                        vlc_value_t oldval, vlc_value_t newval, void *p_data )
831 {
832     aout_instance_t *p_aout = (aout_instance_t *)p_this;
833     char *psz_mode = newval.psz_string;
834     int i_ret;
835     (void)psz_cmd; (void)oldval; (void)p_data;
836
837     if( !psz_mode || !*psz_mode )
838     {
839         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
840                                      false );
841     }
842     else
843     {
844         var_Create( p_aout, "equalizer-preset", VLC_VAR_STRING );
845         var_SetString( p_aout, "equalizer-preset", psz_mode );
846         i_ret = ChangeFiltersString( p_aout, "audio-filter", "equalizer",
847                                      true );
848     }
849
850     /* That sucks */
851     if( i_ret == 1 )
852         AoutInputsMarkToRestart( p_aout );
853     return VLC_SUCCESS;
854 }
855
856 static int ReplayGainCallback( vlc_object_t *p_this, char const *psz_cmd,
857                                vlc_value_t oldval, vlc_value_t newval, void *p_data )
858 {
859     VLC_UNUSED(psz_cmd); VLC_UNUSED(oldval);
860     VLC_UNUSED(newval); VLC_UNUSED(p_data);
861     aout_instance_t *p_aout = (aout_instance_t *)p_this;
862
863     aout_lock( p_aout );
864     if( p_aout->p_input != NULL )
865         ReplayGainSelect( p_aout, p_aout->p_input );
866     aout_unlock( p_aout );
867
868     return VLC_SUCCESS;
869 }
870
871 static void ReplayGainSelect( aout_instance_t *p_aout, aout_input_t *p_input )
872 {
873     char *psz_replay_gain = var_GetNonEmptyString( p_aout,
874                                                    "audio-replay-gain-mode" );
875     int i_mode;
876     int i_use;
877     float f_gain;
878
879     p_input->mixer.multiplier = 1.0;
880
881     if( !psz_replay_gain )
882         return;
883
884     /* Find select mode */
885     if( !strcmp( psz_replay_gain, "track" ) )
886         i_mode = AUDIO_REPLAY_GAIN_TRACK;
887     else if( !strcmp( psz_replay_gain, "album" ) )
888         i_mode = AUDIO_REPLAY_GAIN_ALBUM;
889     else
890         i_mode = AUDIO_REPLAY_GAIN_MAX;
891
892     /* If the select mode is not available, prefer the other one */
893     i_use = i_mode;
894     if( i_use != AUDIO_REPLAY_GAIN_MAX && !p_input->replay_gain.pb_gain[i_use] )
895     {
896         for( i_use = 0; i_use < AUDIO_REPLAY_GAIN_MAX; i_use++ )
897         {
898             if( p_input->replay_gain.pb_gain[i_use] )
899                 break;
900         }
901     }
902
903     /* */
904     if( i_use != AUDIO_REPLAY_GAIN_MAX )
905         f_gain = p_input->replay_gain.pf_gain[i_use] + var_GetFloat( p_aout, "audio-replay-gain-preamp" );
906     else if( i_mode != AUDIO_REPLAY_GAIN_MAX )
907         f_gain = var_GetFloat( p_aout, "audio-replay-gain-default" );
908     else
909         f_gain = 0.0;
910     p_input->mixer.multiplier = pow( 10.0, f_gain / 20.0 );
911
912     /* */
913     if( p_input->replay_gain.pb_peak[i_use] &&
914         var_GetBool( p_aout, "audio-replay-gain-peak-protection" ) &&
915         p_input->replay_gain.pf_peak[i_use] * p_input->mixer.multiplier > 1.0 )
916     {
917         p_input->mixer.multiplier = 1.0f / p_input->replay_gain.pf_peak[i_use];
918     }
919
920     free( psz_replay_gain );
921 }