aout: clean up replay gain callback
[vlc.git] / src / audio_output / input.c
1 /*****************************************************************************
2  * input.c : internal management of input streams for the audio output
3  *****************************************************************************
4  * Copyright (C) 2002-2007 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Christophe Massiot <massiot@via.ecp.fr>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
22  *****************************************************************************/
23
24 /*****************************************************************************
25  * Preamble
26  *****************************************************************************/
27
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <assert.h>
33
34 #include <vlc_common.h>
35
36 #include <stdio.h>
37 #include <string.h>
38 #include <math.h>
39 #include <assert.h>
40
41 #include <vlc_input.h>
42 #include <vlc_vout.h>                  /* for vout_Request */
43 #include <vlc_modules.h>
44
45 #include <vlc_aout.h>
46 #include <vlc_filter.h>
47 #include <libvlc.h>
48
49 #include "aout_internal.h"
50
51 static void inputFailure( audio_output_t *, aout_input_t *, const char * );
52 static void inputDrop( aout_input_t *, aout_buffer_t * );
53 static void inputResamplingStop( aout_input_t *p_input );
54
55 static int VisualizationCallback( vlc_object_t *, char const *,
56                                   vlc_value_t, vlc_value_t, void * );
57 static int EqualizerCallback( vlc_object_t *, char const *,
58                               vlc_value_t, vlc_value_t, void * );
59 static int ReplayGainCallback( vlc_object_t *, char const *,
60                                vlc_value_t, vlc_value_t, void * );
61 static float ReplayGainSelect(vlc_object_t *, const char *,
62                               const audio_replay_gain_t *);
63
64 static vout_thread_t *RequestVout( void *,
65                                    vout_thread_t *, video_format_t *, bool );
66
67 /*****************************************************************************
68  * aout_InputNew : allocate a new input and rework the filter pipeline
69  *****************************************************************************/
70 int aout_InputNew( audio_output_t * p_aout,
71                    const audio_sample_format_t *restrict infmt,
72                    const audio_sample_format_t *restrict outfmt,
73                    aout_input_t * p_input,
74                    const aout_request_vout_t *p_request_vout )
75 {
76     audio_sample_format_t chain_input_format;
77     audio_sample_format_t chain_output_format;
78     vlc_value_t val, text;
79     char *psz_filters, *psz_visual, *psz_scaletempo;
80     int i_visual;
81
82     aout_FormatPrint( p_aout, "input", infmt );
83     p_input->samplerate = infmt->i_rate;
84
85     p_input->i_nb_resamplers = p_input->i_nb_filters = 0;
86
87     /* */
88     if( p_request_vout )
89     {
90         p_input->request_vout = *p_request_vout;
91     }
92     else
93     {
94         p_input->request_vout.pf_request_vout = RequestVout;
95         p_input->request_vout.p_private = p_aout;
96     }
97
98     /* Prepare format structure */
99     chain_input_format  = *infmt;
100     chain_output_format = *outfmt;
101     chain_output_format.i_rate = infmt->i_rate;
102     aout_FormatPrepare( &chain_output_format );
103
104     /* Now add user filters */
105     if( var_Type( p_aout, "visual" ) == 0 )
106     {
107         var_Create( p_aout, "visual", VLC_VAR_STRING | VLC_VAR_HASCHOICE );
108         text.psz_string = _("Visualizations");
109         var_Change( p_aout, "visual", VLC_VAR_SETTEXT, &text, NULL );
110         val.psz_string = (char*)""; text.psz_string = _("Disable");
111         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
112         val.psz_string = (char*)"spectrometer"; text.psz_string = _("Spectrometer");
113         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
114         val.psz_string = (char*)"scope"; text.psz_string = _("Scope");
115         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
116         val.psz_string = (char*)"spectrum"; text.psz_string = _("Spectrum");
117         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
118         val.psz_string = (char*)"vuMeter"; text.psz_string = _("Vu meter");
119         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
120
121         /* Look for goom plugin */
122         if( module_exists( "goom" ) )
123         {
124             val.psz_string = (char*)"goom"; text.psz_string = (char*)"Goom";
125             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
126         }
127
128         /* Look for libprojectM plugin */
129         if( module_exists( "projectm" ) )
130         {
131             val.psz_string = (char*)"projectm"; text.psz_string = (char*)"projectM";
132             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
133         }
134
135         if( var_Get( p_aout, "effect-list", &val ) == VLC_SUCCESS )
136         {
137             var_SetString( p_aout, "visual", val.psz_string );
138             free( val.psz_string );
139         }
140         var_AddCallback( p_aout, "visual", VisualizationCallback, p_input );
141     }
142
143     if( var_Type( p_aout, "equalizer" ) == 0 )
144     {
145         module_config_t *p_config;
146         int i;
147
148         p_config = config_FindConfig( VLC_OBJECT(p_aout), "equalizer-preset" );
149         if( p_config && p_config->i_list )
150         {
151                var_Create( p_aout, "equalizer",
152                            VLC_VAR_STRING | VLC_VAR_HASCHOICE );
153             text.psz_string = _("Equalizer");
154             var_Change( p_aout, "equalizer", VLC_VAR_SETTEXT, &text, NULL );
155
156             val.psz_string = (char*)""; text.psz_string = _("Disable");
157             var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE, &val, &text );
158
159             for( i = 0; i < p_config->i_list; i++ )
160             {
161                 val.psz_string = (char *)p_config->ppsz_list[i];
162                 text.psz_string = (char *)p_config->ppsz_list_text[i];
163                 var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE,
164                             &val, &text );
165             }
166
167             var_AddCallback( p_aout, "equalizer", EqualizerCallback, p_input );
168         }
169     }
170
171     if( var_Type( p_aout, "audio-filter" ) == 0 )
172     {
173         var_Create( p_aout, "audio-filter",
174                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
175         text.psz_string = _("Audio filters");
176         var_Change( p_aout, "audio-filter", VLC_VAR_SETTEXT, &text, NULL );
177     }
178     if( var_Type( p_aout, "audio-visual" ) == 0 )
179     {
180         var_Create( p_aout, "audio-visual",
181                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
182         text.psz_string = _("Audio visualizations");
183         var_Change( p_aout, "audio-visual", VLC_VAR_SETTEXT, &text, NULL );
184     }
185
186     if( var_Type( p_aout, "audio-replay-gain-mode" ) == 0 )
187     {
188         module_config_t *p_config;
189         int i;
190
191         p_config = config_FindConfig( VLC_OBJECT(p_aout), "audio-replay-gain-mode" );
192         if( p_config && p_config->i_list )
193         {
194             var_Create( p_aout, "audio-replay-gain-mode",
195                         VLC_VAR_STRING | VLC_VAR_DOINHERIT );
196
197             text.psz_string = _("Replay gain");
198             var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_SETTEXT, &text, NULL );
199
200             for( i = 0; i < p_config->i_list; i++ )
201             {
202                 val.psz_string = (char *)p_config->ppsz_list[i];
203                 text.psz_string = (char *)p_config->ppsz_list_text[i];
204                 var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_ADDCHOICE,
205                             &val, &text );
206             }
207
208             var_AddCallback( p_aout, "audio-replay-gain-mode", ReplayGainCallback, p_input );
209         }
210     }
211
212     char *gain = var_InheritString (p_aout, "audio-replay-gain-mode");
213     p_input->multiplier = ReplayGainSelect (VLC_OBJECT(p_aout), gain,
214                                             &p_input->replay_gain);
215     free (gain);
216
217     if( var_Type( p_aout, "audio-replay-gain-preamp" ) == 0 )
218     {
219         var_Create( p_aout, "audio-replay-gain-preamp",
220                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
221     }
222     if( var_Type( p_aout, "audio-replay-gain-default" ) == 0 )
223     {
224         var_Create( p_aout, "audio-replay-gain-default",
225                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
226     }
227     if( var_Type( p_aout, "audio-replay-gain-peak-protection" ) == 0 )
228     {
229         var_Create( p_aout, "audio-replay-gain-peak-protection",
230                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
231     }
232
233     psz_filters = var_GetString( p_aout, "audio-filter" );
234     psz_visual = var_GetString( p_aout, "audio-visual");
235     psz_scaletempo = var_InheritBool( p_aout, "audio-time-stretch" ) ? strdup( "scaletempo" ) : NULL;
236
237     p_input->b_recycle_vout = psz_visual && *psz_visual;
238
239     /* parse user filter lists */
240     char *const ppsz_array[] = { psz_scaletempo, psz_filters, psz_visual };
241     p_input->p_playback_rate_filter = NULL;
242
243     for( i_visual = 0; i_visual < 3 && AOUT_FMT_LINEAR(&chain_output_format); i_visual++ )
244     {
245         char *psz_next = NULL;
246         char *psz_parser = ppsz_array[i_visual];
247
248         if( psz_parser == NULL || !*psz_parser )
249             continue;
250
251         while( psz_parser && *psz_parser )
252         {
253             filter_t * p_filter = NULL;
254
255             if( p_input->i_nb_filters >= AOUT_MAX_FILTERS )
256             {
257                 msg_Dbg( p_aout, "max filters reached (%d)", AOUT_MAX_FILTERS );
258                 break;
259             }
260
261             while( *psz_parser == ' ' && *psz_parser == ':' )
262             {
263                 psz_parser++;
264             }
265             if( ( psz_next = strchr( psz_parser , ':'  ) ) )
266             {
267                 *psz_next++ = '\0';
268             }
269             if( *psz_parser =='\0' )
270             {
271                 break;
272             }
273
274             /* Create a VLC object */
275             p_filter = vlc_custom_create( p_aout, sizeof(*p_filter),
276                                           "audio filter" );
277             if( p_filter == NULL )
278             {
279                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
280                          psz_parser );
281                 psz_parser = psz_next;
282                 continue;
283             }
284
285             p_filter->p_owner = malloc( sizeof(*p_filter->p_owner) );
286             p_filter->p_owner->p_aout  = p_aout;
287             p_filter->p_owner->p_input = p_input;
288
289             /* request format */
290             memcpy( &p_filter->fmt_in.audio, &chain_output_format,
291                     sizeof(audio_sample_format_t) );
292             p_filter->fmt_in.i_codec = chain_output_format.i_format;
293             memcpy( &p_filter->fmt_out.audio, &chain_output_format,
294                     sizeof(audio_sample_format_t) );
295             p_filter->fmt_out.i_codec = chain_output_format.i_format;
296             p_filter->pf_audio_buffer_new = aout_FilterBufferNew;
297
298             /* try to find the requested filter */
299             if( i_visual == 2 ) /* this can only be a visualization module */
300             {
301                 p_filter->p_module = module_need( p_filter, "visualization2",
302                                                   psz_parser, true );
303             }
304             else /* this can be a audio filter module as well as a visualization module */
305             {
306                 p_filter->p_module = module_need( p_filter, "audio filter",
307                                               psz_parser, true );
308
309                 if ( p_filter->p_module == NULL )
310                 {
311                     /* if the filter requested a special format, retry */
312                     if ( !( AOUT_FMTS_IDENTICAL( &p_filter->fmt_in.audio,
313                                                  &chain_input_format )
314                             && AOUT_FMTS_IDENTICAL( &p_filter->fmt_out.audio,
315                                                     &chain_output_format ) ) )
316                     {
317                         aout_FormatPrepare( &p_filter->fmt_in.audio );
318                         aout_FormatPrepare( &p_filter->fmt_out.audio );
319                         p_filter->p_module = module_need( p_filter,
320                                                           "audio filter",
321                                                           psz_parser, true );
322                     }
323                     /* try visual filters */
324                     else
325                     {
326                         memcpy( &p_filter->fmt_in.audio, &chain_output_format,
327                                 sizeof(audio_sample_format_t) );
328                         memcpy( &p_filter->fmt_out.audio, &chain_output_format,
329                                 sizeof(audio_sample_format_t) );
330                         p_filter->p_module = module_need( p_filter,
331                                                           "visualization2",
332                                                           psz_parser, true );
333                     }
334                 }
335             }
336
337             /* failure */
338             if ( p_filter->p_module == NULL )
339             {
340                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
341                          psz_parser );
342
343                 free( p_filter->p_owner );
344                 vlc_object_release( p_filter );
345
346                 psz_parser = psz_next;
347                 continue;
348             }
349
350             /* complete the filter chain if necessary */
351             if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
352                                              &p_input->i_nb_filters,
353                                              &chain_input_format,
354                                              &p_filter->fmt_in.audio ) < 0 )
355             {
356                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
357                          psz_parser );
358
359                 module_unneed( p_filter, p_filter->p_module );
360                 free( p_filter->p_owner );
361                 vlc_object_release( p_filter );
362
363                 psz_parser = psz_next;
364                 continue;
365             }
366
367             /* success */
368             p_input->pp_filters[p_input->i_nb_filters++] = p_filter;
369             memcpy( &chain_input_format, &p_filter->fmt_out.audio,
370                     sizeof( audio_sample_format_t ) );
371
372             if( i_visual == 0 ) /* scaletempo */
373                 p_input->p_playback_rate_filter = p_filter;
374
375             /* next filter if any */
376             psz_parser = psz_next;
377         }
378     }
379     free( psz_visual );
380     free( psz_filters );
381     free( psz_scaletempo );
382
383     /* complete the filter chain if necessary */
384     if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
385                                      &p_input->i_nb_filters,
386                                      &chain_input_format,
387                                      &chain_output_format ) < 0 )
388     {
389         inputFailure( p_aout, p_input, "couldn't set an input pipeline" );
390         return -1;
391     }
392
393     /* Create resamplers. */
394     if (AOUT_FMT_LINEAR(outfmt))
395     {
396         chain_output_format.i_rate = (__MAX(p_input->samplerate,
397                                             outfmt->i_rate)
398                                  * (100 + AOUT_MAX_RESAMPLING)) / 100;
399         if ( chain_output_format.i_rate == outfmt->i_rate )
400         {
401             /* Just in case... */
402             chain_output_format.i_rate++;
403         }
404         if (aout_FiltersCreatePipeline (p_aout, p_input->pp_resamplers,
405                                         &p_input->i_nb_resamplers,
406                                         &chain_output_format, outfmt) < 0)
407         {
408             inputFailure( p_aout, p_input, "couldn't set a resampler pipeline");
409             return -1;
410         }
411
412         /* Setup the initial rate of the resampler */
413         p_input->pp_resamplers[0]->fmt_in.audio.i_rate = p_input->samplerate;
414     }
415     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
416
417     if( ! p_input->p_playback_rate_filter && p_input->i_nb_resamplers > 0 )
418     {
419         p_input->p_playback_rate_filter = p_input->pp_resamplers[0];
420     }
421
422     /* Success */
423     p_input->b_error = false;
424     p_input->i_last_input_rate = INPUT_RATE_DEFAULT;
425
426     return 0;
427 }
428
429 /*****************************************************************************
430  * aout_InputDelete : delete an input
431  *****************************************************************************
432  * This function must be entered with the mixer lock.
433  *****************************************************************************/
434 int aout_InputDelete( audio_output_t * p_aout, aout_input_t * p_input )
435 {
436     aout_assert_locked( p_aout );
437     if ( p_input->b_error )
438         return 0;
439
440     /* XXX We need to update b_recycle_vout before calling aout_FiltersDestroyPipeline.
441      * FIXME They can be a race condition if audio-visual is updated between
442      * aout_InputDelete and aout_InputNew.
443      */
444     char *psz_visual = var_GetString( p_aout, "audio-visual");
445     p_input->b_recycle_vout = psz_visual && *psz_visual;
446     free( psz_visual );
447
448     aout_FiltersDestroyPipeline( p_input->pp_filters, p_input->i_nb_filters );
449     p_input->i_nb_filters = 0;
450     aout_FiltersDestroyPipeline( p_input->pp_resamplers,
451                                  p_input->i_nb_resamplers );
452     p_input->i_nb_resamplers = 0;
453
454     return 0;
455 }
456
457 /*****************************************************************************
458  * aout_InputPlay : play a buffer
459  *****************************************************************************
460  * This function must be entered with the input lock.
461  *****************************************************************************/
462 /* XXX Do not activate it !! */
463 //#define AOUT_PROCESS_BEFORE_CHEKS
464 block_t *aout_InputPlay(audio_output_t *p_aout, aout_input_t *p_input,
465                         block_t *p_buffer, int i_input_rate, date_t *date )
466 {
467     mtime_t start_date;
468
469     aout_assert_locked( p_aout );
470
471     if( i_input_rate != INPUT_RATE_DEFAULT && p_input->p_playback_rate_filter == NULL )
472     {
473         inputDrop( p_input, p_buffer );
474         return NULL;
475     }
476
477 #ifdef AOUT_PROCESS_BEFORE_CHEKS
478     /* Run pre-filters. */
479     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
480                       &p_buffer );
481     if( !p_buffer )
482         return NULL;
483
484     /* Actually run the resampler now. */
485     if ( p_input->i_nb_resamplers > 0 )
486     {
487         const mtime_t i_date = p_buffer->i_pts;
488         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
489                           p_input->i_nb_resamplers,
490                           &p_buffer );
491     }
492
493     if( !p_buffer )
494         return NULL;
495     if( p_buffer->i_nb_samples <= 0 )
496     {
497         block_Release( p_buffer );
498         return NULL;
499     }
500 #endif
501
502     /* Handle input rate change, but keep drift correction */
503     if( i_input_rate != p_input->i_last_input_rate )
504     {
505         unsigned int * const pi_rate = &p_input->p_playback_rate_filter->fmt_in.audio.i_rate;
506 #define F(r,ir) ( INPUT_RATE_DEFAULT * (r) / (ir) )
507         const int i_delta = *pi_rate - F(p_input->samplerate,p_input->i_last_input_rate);
508         *pi_rate = F(p_input->samplerate + i_delta, i_input_rate);
509 #undef F
510         p_input->i_last_input_rate = i_input_rate;
511     }
512
513     mtime_t now = mdate();
514
515     /* We don't care if someone changes the start date behind our back after
516      * this. We'll deal with that when pushing the buffer, and compensate
517      * with the next incoming buffer. */
518     start_date = date_Get (date);
519
520     if ( start_date != VLC_TS_INVALID && start_date < now )
521     {
522         /* The decoder is _very_ late. This can only happen if the user
523          * pauses the stream (or if the decoder is buggy, which cannot
524          * happen :). */
525         msg_Warn( p_aout, "computed PTS is out of range (%"PRId64"), "
526                   "clearing out", now - start_date );
527         aout_OutputFlush( p_aout, false );
528         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
529             msg_Warn( p_aout, "timing screwed, stopping resampling" );
530         inputResamplingStop( p_input );
531         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
532         start_date = VLC_TS_INVALID;
533     }
534
535     if ( p_buffer->i_pts < now + AOUT_MIN_PREPARE_TIME )
536     {
537         /* The decoder gives us f*cked up PTS. It's its business, but we
538          * can't present it anyway, so drop the buffer. */
539         msg_Warn( p_aout, "PTS is out of range (%"PRId64"), dropping buffer",
540                   now - p_buffer->i_pts );
541         inputDrop( p_input, p_buffer );
542         inputResamplingStop( p_input );
543         return NULL;
544     }
545
546     /* If the audio drift is too big then it's not worth trying to resample
547      * the audio. */
548     if( start_date == VLC_TS_INVALID )
549     {
550         start_date = p_buffer->i_pts;
551         date_Set (date, start_date);
552     }
553
554     mtime_t drift = start_date - p_buffer->i_pts;
555
556     if( drift < -i_input_rate * 3 * AOUT_MAX_PTS_ADVANCE / INPUT_RATE_DEFAULT )
557     {
558         msg_Warn( p_aout, "buffer way too early (%"PRId64"), clearing queue",
559                   drift );
560         aout_OutputFlush( p_aout, false );
561         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
562             msg_Warn( p_aout, "timing screwed, stopping resampling" );
563         inputResamplingStop( p_input );
564         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
565         start_date = p_buffer->i_pts;
566         date_Set (date, start_date);
567         drift = 0;
568     }
569     else
570     if( drift > +i_input_rate * 3 * AOUT_MAX_PTS_DELAY / INPUT_RATE_DEFAULT )
571     {
572         msg_Warn( p_aout, "buffer way too late (%"PRId64"), dropping buffer",
573                   drift );
574         inputDrop( p_input, p_buffer );
575         return NULL;
576     }
577
578 #ifndef AOUT_PROCESS_BEFORE_CHEKS
579     /* Run pre-filters. */
580     aout_FiltersPlay( p_input->pp_filters, p_input->i_nb_filters, &p_buffer );
581     if( !p_buffer )
582         return NULL;
583 #endif
584
585     /* Run the resampler if needed.
586      * We first need to calculate the output rate of this resampler. */
587     if ( ( p_input->i_resampling_type == AOUT_RESAMPLING_NONE ) &&
588          ( drift < -AOUT_MAX_PTS_ADVANCE || drift > +AOUT_MAX_PTS_DELAY ) &&
589          p_input->i_nb_resamplers > 0 )
590     {
591         /* Can happen in several circumstances :
592          * 1. A problem at the input (clock drift)
593          * 2. A small pause triggered by the user
594          * 3. Some delay in the output stage, causing a loss of lip
595          *    synchronization
596          * Solution : resample the buffer to avoid a scratch.
597          */
598         p_input->i_resamp_start_date = now;
599         p_input->i_resamp_start_drift = (int)-drift;
600         p_input->i_resampling_type = (drift < 0) ? AOUT_RESAMPLING_DOWN
601                                                  : AOUT_RESAMPLING_UP;
602         msg_Warn( p_aout, (drift < 0)
603                   ? "buffer too early (%"PRId64"), down-sampling"
604                   : "buffer too late  (%"PRId64"), up-sampling", drift );
605     }
606
607     if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
608     {
609         /* Resampling has been triggered previously (because of dates
610          * mismatch). We want the resampling to happen progressively so
611          * it isn't too audible to the listener. */
612
613         if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
614             p_input->pp_resamplers[0]->fmt_in.audio.i_rate += 2; /* Hz */
615         else
616             p_input->pp_resamplers[0]->fmt_in.audio.i_rate -= 2; /* Hz */
617
618         /* Check if everything is back to normal, in which case we can stop the
619          * resampling */
620         unsigned int i_nominal_rate =
621           (p_input->pp_resamplers[0] == p_input->p_playback_rate_filter)
622           ? INPUT_RATE_DEFAULT * p_input->samplerate / i_input_rate
623           : p_input->samplerate;
624         if( p_input->pp_resamplers[0]->fmt_in.audio.i_rate == i_nominal_rate )
625         {
626             p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
627             msg_Warn( p_aout, "resampling stopped after %"PRIi64" usec "
628                       "(drift: %"PRIi64")",
629                       now - p_input->i_resamp_start_date,
630                       p_buffer->i_pts - start_date);
631         }
632         else if( abs( (int)(p_buffer->i_pts - start_date) ) <
633                  abs( p_input->i_resamp_start_drift ) / 2 )
634         {
635             /* if we reduced the drift from half, then it is time to switch
636              * back the resampling direction. */
637             if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
638                 p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
639             else
640                 p_input->i_resampling_type = AOUT_RESAMPLING_UP;
641             p_input->i_resamp_start_drift = 0;
642         }
643         else if( p_input->i_resamp_start_drift &&
644                  ( abs( (int)(p_buffer->i_pts - start_date) ) >
645                    abs( p_input->i_resamp_start_drift ) * 3 / 2 ) )
646         {
647             /* If the drift is increasing and not decreasing, than something
648              * is bad. We'd better stop the resampling right now. */
649             msg_Warn( p_aout, "timing screwed, stopping resampling" );
650             inputResamplingStop( p_input );
651             p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
652         }
653     }
654
655 #ifndef AOUT_PROCESS_BEFORE_CHEKS
656     /* Actually run the resampler now. */
657     if ( p_input->i_nb_resamplers > 0 )
658     {
659         aout_FiltersPlay( p_input->pp_resamplers, p_input->i_nb_resamplers,
660                           &p_buffer );
661     }
662
663     if( !p_buffer )
664         return NULL;
665     if( p_buffer->i_nb_samples <= 0 )
666     {
667         block_Release( p_buffer );
668         return NULL;
669     }
670 #endif
671
672     p_buffer->i_pts = start_date;
673     return p_buffer;
674 }
675
676 /*****************************************************************************
677  * static functions
678  *****************************************************************************/
679
680 static void inputFailure( audio_output_t * p_aout, aout_input_t * p_input,
681                           const char * psz_error_message )
682 {
683     /* error message */
684     msg_Err( p_aout, "%s", psz_error_message );
685
686     /* clean up */
687     aout_FiltersDestroyPipeline( p_input->pp_filters, p_input->i_nb_filters );
688     aout_FiltersDestroyPipeline( p_input->pp_resamplers,
689                                  p_input->i_nb_resamplers );
690     var_Destroy( p_aout, "visual" );
691     var_Destroy( p_aout, "equalizer" );
692     var_Destroy( p_aout, "audio-filter" );
693     var_Destroy( p_aout, "audio-visual" );
694
695     var_Destroy( p_aout, "audio-replay-gain-mode" );
696     var_Destroy( p_aout, "audio-replay-gain-default" );
697     var_Destroy( p_aout, "audio-replay-gain-preamp" );
698     var_Destroy( p_aout, "audio-replay-gain-peak-protection" );
699
700     /* error flag */
701     p_input->b_error = 1;
702 }
703
704 static void inputDrop( aout_input_t *p_input, aout_buffer_t *p_buffer )
705 {
706     aout_BufferFree( p_buffer );
707
708     p_input->i_buffer_lost++;
709 }
710
711 static void inputResamplingStop( aout_input_t *p_input )
712 {
713     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
714     if( p_input->i_nb_resamplers != 0 )
715     {
716         p_input->pp_resamplers[0]->fmt_in.audio.i_rate =
717             ( p_input->pp_resamplers[0] == p_input->p_playback_rate_filter )
718             ? INPUT_RATE_DEFAULT * p_input->samplerate / p_input->i_last_input_rate
719             : p_input->samplerate;
720     }
721 }
722
723 static vout_thread_t *RequestVout( void *p_private,
724                                    vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
725 {
726     audio_output_t *p_aout = p_private;
727     VLC_UNUSED(b_recycle);
728     vout_configuration_t cfg = {
729         .vout       = p_vout,
730         .input      = NULL,
731         .change_fmt = true,
732         .fmt        = p_fmt,
733         .dpb_size   = 1,
734     };
735     return vout_Request( p_aout, &cfg );
736 }
737
738 vout_thread_t *aout_filter_RequestVout( filter_t *p_filter,
739                                         vout_thread_t *p_vout, video_format_t *p_fmt )
740 {
741     aout_input_t *p_input = p_filter->p_owner->p_input;
742     aout_request_vout_t *p_request = &p_input->request_vout;
743
744     /* XXX: this only works from audio input */
745     /* If you want to use visualization filters from another place, you will
746      * need to add a new pf_aout_request_vout callback or store a pointer
747      * to aout_request_vout_t inside filter_t (i.e. a level of indirection). */
748
749     return p_request->pf_request_vout( p_request->p_private,
750                                        p_vout, p_fmt, p_input->b_recycle_vout );
751 }
752
753 static inline bool ChangeFiltersString (vlc_object_t *aout, const char *var,
754                                         const char *filter, bool add)
755 {
756     return aout_ChangeFilterString (aout, aout, var, filter, add);
757 }
758
759 static int VisualizationCallback (vlc_object_t *obj, char const *var,
760                                   vlc_value_t oldval, vlc_value_t newval,
761                                   void *data)
762 {
763     const char *mode = newval.psz_string;
764     //aout_input_t *input = data;
765     (void) data;
766
767     if (!*mode)
768     {
769         ChangeFiltersString (obj, "audio-visual", "goom", false);
770         ChangeFiltersString (obj, "audio-visual", "visual", false);
771         ChangeFiltersString (obj, "audio-visual", "projectm", false);
772     }
773     else if (!strcmp ("goom", mode))
774     {
775         ChangeFiltersString (obj, "audio-visual", "visual", false );
776         ChangeFiltersString (obj, "audio-visual", "goom", true );
777         ChangeFiltersString (obj, "audio-visual", "projectm", false );
778     }
779     else if (!strcmp ("projectm", mode))
780     {
781         ChangeFiltersString (obj, "audio-visual", "visual", false);
782         ChangeFiltersString (obj, "audio-visual", "goom", false);
783         ChangeFiltersString (obj, "audio-visual", "projectm", true);
784     }
785     else
786     {
787         var_Create (obj, "effect-list", VLC_VAR_STRING);
788         var_SetString (obj, "effect-list", mode);
789
790         ChangeFiltersString (obj, "audio-visual", "goom", false);
791         ChangeFiltersString (obj, "audio-visual", "visual", true);
792         ChangeFiltersString (obj, "audio-visual", "projectm", false);
793     }
794
795     /* That sucks FIXME: use "input" instead of cast */
796     aout_InputRequestRestart ((audio_output_t *)obj);
797
798     (void) var; (void) oldval;
799     return VLC_SUCCESS;
800 }
801
802 static int EqualizerCallback (vlc_object_t *obj, char const *cmd,
803                               vlc_value_t oldval, vlc_value_t newval,
804                               void *data)
805 {
806     char *mode = newval.psz_string;
807     //aout_input_t *input = data;
808     bool ret;
809
810     (void) data;
811     (void) cmd; (void) oldval;
812     if (!*mode)
813         ret = ChangeFiltersString (obj, "audio-filter", "equalizer", false);
814     else
815     {
816         var_Create (obj, "equalizer-preset", VLC_VAR_STRING);
817         var_SetString (obj, "equalizer-preset", mode);
818         ret = ChangeFiltersString (obj, "audio-filter", "equalizer", true);
819     }
820
821     /* That sucks */
822     if (ret)
823         aout_InputRequestRestart ((audio_output_t *)obj);
824     return VLC_SUCCESS;
825 }
826
827 static int ReplayGainCallback (vlc_object_t *obj, char const *var,
828                                vlc_value_t oldval, vlc_value_t val, void *data)
829 {
830     audio_output_t *aout = (audio_output_t *)obj;
831     aout_input_t *input = data;
832     float multiplier = ReplayGainSelect (obj, val.psz_string,
833                                          &input->replay_gain);
834
835     aout_lock (aout);
836     input->multiplier = multiplier;
837     aout_unlock (aout);
838
839     VLC_UNUSED(var); VLC_UNUSED(oldval);
840     return VLC_SUCCESS;
841 }
842
843 static float ReplayGainSelect (vlc_object_t *obj, const char *str,
844                                const audio_replay_gain_t *replay_gain)
845 {
846     float gain = 0.;
847     unsigned mode = AUDIO_REPLAY_GAIN_MAX;
848
849     if (likely(str != NULL))
850     {   /* Find selectrf mode */
851         if (!strcmp (str, "track"))
852             mode = AUDIO_REPLAY_GAIN_TRACK;
853         else
854         if (!strcmp (str, "album"))
855             mode = AUDIO_REPLAY_GAIN_ALBUM;
856
857         /* If the selectrf mode is not available, prefer the other one */
858         if (mode != AUDIO_REPLAY_GAIN_MAX && !replay_gain->pb_gain[mode])
859         {
860             if (replay_gain->pb_gain[!mode])
861                 mode = !mode;
862         }
863     }
864
865     /* */
866     if (mode == AUDIO_REPLAY_GAIN_MAX)
867         return 1.;
868
869     if (replay_gain->pb_gain[mode])
870         gain = replay_gain->pf_gain[mode]
871              + var_InheritFloat (obj, "audio-replay-gain-preamp");
872     else
873         gain = var_InheritFloat (obj, "audio-replay-gain-default");
874
875     float multiplier = pow (10., gain / 20.);
876
877     if (replay_gain->pb_peak[mode]
878      && var_InheritBool (obj, "audio-replay-gain-peak-protection")
879      && replay_gain->pf_peak[mode] * multiplier > 1.0)
880         multiplier = 1.0f / replay_gain->pf_peak[mode];
881
882     return multiplier;
883 }