Replace AOUT_FMT_NON_LINEAR with AOUT_FMT_SPDIF and AOUT_FMT_LINEAR
[vlc.git] / src / audio_output / input.c
1 /*****************************************************************************
2  * input.c : internal management of input streams for the audio output
3  *****************************************************************************
4  * Copyright (C) 2002-2007 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Christophe Massiot <massiot@via.ecp.fr>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
22  *****************************************************************************/
23
24 /*****************************************************************************
25  * Preamble
26  *****************************************************************************/
27
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <assert.h>
33
34 #include <vlc_common.h>
35
36 #include <stdio.h>
37 #include <string.h>
38 #include <math.h>
39 #include <assert.h>
40
41 #include <vlc_input.h>
42 #include <vlc_vout.h>                  /* for vout_Request */
43 #include <vlc_modules.h>
44
45 #include <vlc_aout.h>
46 #include <vlc_filter.h>
47 #include <libvlc.h>
48
49 #include "aout_internal.h"
50
51 static void inputFailure( audio_output_t *, aout_input_t *, const char * );
52 static void inputDrop( aout_input_t *, aout_buffer_t * );
53 static void inputResamplingStop( aout_input_t *p_input );
54
55 static int VisualizationCallback( vlc_object_t *, char const *,
56                                   vlc_value_t, vlc_value_t, void * );
57 static int EqualizerCallback( vlc_object_t *, char const *,
58                               vlc_value_t, vlc_value_t, void * );
59 static int ReplayGainCallback( vlc_object_t *, char const *,
60                                vlc_value_t, vlc_value_t, void * );
61 static void ReplayGainSelect( audio_output_t *, aout_input_t * );
62
63 static vout_thread_t *RequestVout( void *,
64                                    vout_thread_t *, video_format_t *, bool );
65
66 /*****************************************************************************
67  * aout_InputNew : allocate a new input and rework the filter pipeline
68  *****************************************************************************/
69 int aout_InputNew( audio_output_t * p_aout, aout_input_t * p_input, const aout_request_vout_t *p_request_vout )
70 {
71     aout_owner_t *owner = aout_owner (p_aout);
72     audio_sample_format_t chain_input_format;
73     audio_sample_format_t chain_output_format;
74     vlc_value_t val, text;
75     char *psz_filters, *psz_visual, *psz_scaletempo;
76     int i_visual;
77
78     aout_FormatPrint( p_aout, "input", &p_input->input );
79
80     p_input->i_nb_resamplers = p_input->i_nb_filters = 0;
81
82     /* */
83     if( p_request_vout )
84     {
85         p_input->request_vout = *p_request_vout;
86     }
87     else
88     {
89         p_input->request_vout.pf_request_vout = RequestVout;
90         p_input->request_vout.p_private = p_aout;
91     }
92
93     /* Prepare format structure */
94     chain_input_format  = p_input->input;
95     chain_output_format = owner->mixer_format;
96     chain_output_format.i_rate = p_input->input.i_rate;
97     aout_FormatPrepare( &chain_output_format );
98
99     /* Now add user filters */
100     if( var_Type( p_aout, "visual" ) == 0 )
101     {
102         var_Create( p_aout, "visual", VLC_VAR_STRING | VLC_VAR_HASCHOICE );
103         text.psz_string = _("Visualizations");
104         var_Change( p_aout, "visual", VLC_VAR_SETTEXT, &text, NULL );
105         val.psz_string = (char*)""; text.psz_string = _("Disable");
106         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
107         val.psz_string = (char*)"spectrometer"; text.psz_string = _("Spectrometer");
108         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
109         val.psz_string = (char*)"scope"; text.psz_string = _("Scope");
110         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
111         val.psz_string = (char*)"spectrum"; text.psz_string = _("Spectrum");
112         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
113         val.psz_string = (char*)"vuMeter"; text.psz_string = _("Vu meter");
114         var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
115
116         /* Look for goom plugin */
117         if( module_exists( "goom" ) )
118         {
119             val.psz_string = (char*)"goom"; text.psz_string = (char*)"Goom";
120             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
121         }
122
123         /* Look for libprojectM plugin */
124         if( module_exists( "projectm" ) )
125         {
126             val.psz_string = (char*)"projectm"; text.psz_string = (char*)"projectM";
127             var_Change( p_aout, "visual", VLC_VAR_ADDCHOICE, &val, &text );
128         }
129
130         if( var_Get( p_aout, "effect-list", &val ) == VLC_SUCCESS )
131         {
132             var_SetString( p_aout, "visual", val.psz_string );
133             free( val.psz_string );
134         }
135         var_AddCallback( p_aout, "visual", VisualizationCallback, p_input );
136     }
137
138     if( var_Type( p_aout, "equalizer" ) == 0 )
139     {
140         module_config_t *p_config;
141         int i;
142
143         p_config = config_FindConfig( VLC_OBJECT(p_aout), "equalizer-preset" );
144         if( p_config && p_config->i_list )
145         {
146                var_Create( p_aout, "equalizer",
147                            VLC_VAR_STRING | VLC_VAR_HASCHOICE );
148             text.psz_string = _("Equalizer");
149             var_Change( p_aout, "equalizer", VLC_VAR_SETTEXT, &text, NULL );
150
151             val.psz_string = (char*)""; text.psz_string = _("Disable");
152             var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE, &val, &text );
153
154             for( i = 0; i < p_config->i_list; i++ )
155             {
156                 val.psz_string = (char *)p_config->ppsz_list[i];
157                 text.psz_string = (char *)p_config->ppsz_list_text[i];
158                 var_Change( p_aout, "equalizer", VLC_VAR_ADDCHOICE,
159                             &val, &text );
160             }
161
162             var_AddCallback( p_aout, "equalizer", EqualizerCallback, NULL );
163         }
164     }
165
166     if( var_Type( p_aout, "audio-filter" ) == 0 )
167     {
168         var_Create( p_aout, "audio-filter",
169                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
170         text.psz_string = _("Audio filters");
171         var_Change( p_aout, "audio-filter", VLC_VAR_SETTEXT, &text, NULL );
172     }
173     if( var_Type( p_aout, "audio-visual" ) == 0 )
174     {
175         var_Create( p_aout, "audio-visual",
176                     VLC_VAR_STRING | VLC_VAR_DOINHERIT );
177         text.psz_string = _("Audio visualizations");
178         var_Change( p_aout, "audio-visual", VLC_VAR_SETTEXT, &text, NULL );
179     }
180
181     if( var_Type( p_aout, "audio-replay-gain-mode" ) == 0 )
182     {
183         module_config_t *p_config;
184         int i;
185
186         p_config = config_FindConfig( VLC_OBJECT(p_aout), "audio-replay-gain-mode" );
187         if( p_config && p_config->i_list )
188         {
189             var_Create( p_aout, "audio-replay-gain-mode",
190                         VLC_VAR_STRING | VLC_VAR_DOINHERIT );
191
192             text.psz_string = _("Replay gain");
193             var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_SETTEXT, &text, NULL );
194
195             for( i = 0; i < p_config->i_list; i++ )
196             {
197                 val.psz_string = (char *)p_config->ppsz_list[i];
198                 text.psz_string = (char *)p_config->ppsz_list_text[i];
199                 var_Change( p_aout, "audio-replay-gain-mode", VLC_VAR_ADDCHOICE,
200                             &val, &text );
201             }
202
203             var_AddCallback( p_aout, "audio-replay-gain-mode", ReplayGainCallback, NULL );
204         }
205     }
206     if( var_Type( p_aout, "audio-replay-gain-preamp" ) == 0 )
207     {
208         var_Create( p_aout, "audio-replay-gain-preamp",
209                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
210     }
211     if( var_Type( p_aout, "audio-replay-gain-default" ) == 0 )
212     {
213         var_Create( p_aout, "audio-replay-gain-default",
214                     VLC_VAR_FLOAT | VLC_VAR_DOINHERIT );
215     }
216     if( var_Type( p_aout, "audio-replay-gain-peak-protection" ) == 0 )
217     {
218         var_Create( p_aout, "audio-replay-gain-peak-protection",
219                     VLC_VAR_BOOL | VLC_VAR_DOINHERIT );
220     }
221
222     psz_filters = var_GetString( p_aout, "audio-filter" );
223     psz_visual = var_GetString( p_aout, "audio-visual");
224     psz_scaletempo = var_InheritBool( p_aout, "audio-time-stretch" ) ? strdup( "scaletempo" ) : NULL;
225
226     p_input->b_recycle_vout = psz_visual && *psz_visual;
227
228     /* parse user filter lists */
229     char *const ppsz_array[] = { psz_scaletempo, psz_filters, psz_visual };
230     p_input->p_playback_rate_filter = NULL;
231
232     for( i_visual = 0; i_visual < 3 && AOUT_FMT_LINEAR(&chain_output_format); i_visual++ )
233     {
234         char *psz_next = NULL;
235         char *psz_parser = ppsz_array[i_visual];
236
237         if( psz_parser == NULL || !*psz_parser )
238             continue;
239
240         while( psz_parser && *psz_parser )
241         {
242             filter_t * p_filter = NULL;
243
244             if( p_input->i_nb_filters >= AOUT_MAX_FILTERS )
245             {
246                 msg_Dbg( p_aout, "max filters reached (%d)", AOUT_MAX_FILTERS );
247                 break;
248             }
249
250             while( *psz_parser == ' ' && *psz_parser == ':' )
251             {
252                 psz_parser++;
253             }
254             if( ( psz_next = strchr( psz_parser , ':'  ) ) )
255             {
256                 *psz_next++ = '\0';
257             }
258             if( *psz_parser =='\0' )
259             {
260                 break;
261             }
262
263             /* Create a VLC object */
264             p_filter = vlc_custom_create( p_aout, sizeof(*p_filter),
265                                           "audio filter" );
266             if( p_filter == NULL )
267             {
268                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
269                          psz_parser );
270                 psz_parser = psz_next;
271                 continue;
272             }
273
274             p_filter->p_owner = malloc( sizeof(*p_filter->p_owner) );
275             p_filter->p_owner->p_aout  = p_aout;
276             p_filter->p_owner->p_input = p_input;
277
278             /* request format */
279             memcpy( &p_filter->fmt_in.audio, &chain_output_format,
280                     sizeof(audio_sample_format_t) );
281             p_filter->fmt_in.i_codec = chain_output_format.i_format;
282             memcpy( &p_filter->fmt_out.audio, &chain_output_format,
283                     sizeof(audio_sample_format_t) );
284             p_filter->fmt_out.i_codec = chain_output_format.i_format;
285             p_filter->pf_audio_buffer_new = aout_FilterBufferNew;
286
287             /* try to find the requested filter */
288             if( i_visual == 2 ) /* this can only be a visualization module */
289             {
290                 p_filter->p_module = module_need( p_filter, "visualization2",
291                                                   psz_parser, true );
292             }
293             else /* this can be a audio filter module as well as a visualization module */
294             {
295                 p_filter->p_module = module_need( p_filter, "audio filter",
296                                               psz_parser, true );
297
298                 if ( p_filter->p_module == NULL )
299                 {
300                     /* if the filter requested a special format, retry */
301                     if ( !( AOUT_FMTS_IDENTICAL( &p_filter->fmt_in.audio,
302                                                  &chain_input_format )
303                             && AOUT_FMTS_IDENTICAL( &p_filter->fmt_out.audio,
304                                                     &chain_output_format ) ) )
305                     {
306                         aout_FormatPrepare( &p_filter->fmt_in.audio );
307                         aout_FormatPrepare( &p_filter->fmt_out.audio );
308                         p_filter->p_module = module_need( p_filter,
309                                                           "audio filter",
310                                                           psz_parser, true );
311                     }
312                     /* try visual filters */
313                     else
314                     {
315                         memcpy( &p_filter->fmt_in.audio, &chain_output_format,
316                                 sizeof(audio_sample_format_t) );
317                         memcpy( &p_filter->fmt_out.audio, &chain_output_format,
318                                 sizeof(audio_sample_format_t) );
319                         p_filter->p_module = module_need( p_filter,
320                                                           "visualization2",
321                                                           psz_parser, true );
322                     }
323                 }
324             }
325
326             /* failure */
327             if ( p_filter->p_module == NULL )
328             {
329                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
330                          psz_parser );
331
332                 free( p_filter->p_owner );
333                 vlc_object_release( p_filter );
334
335                 psz_parser = psz_next;
336                 continue;
337             }
338
339             /* complete the filter chain if necessary */
340             if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
341                                              &p_input->i_nb_filters,
342                                              &chain_input_format,
343                                              &p_filter->fmt_in.audio ) < 0 )
344             {
345                 msg_Err( p_aout, "cannot add user filter %s (skipped)",
346                          psz_parser );
347
348                 module_unneed( p_filter, p_filter->p_module );
349                 free( p_filter->p_owner );
350                 vlc_object_release( p_filter );
351
352                 psz_parser = psz_next;
353                 continue;
354             }
355
356             /* success */
357             p_input->pp_filters[p_input->i_nb_filters++] = p_filter;
358             memcpy( &chain_input_format, &p_filter->fmt_out.audio,
359                     sizeof( audio_sample_format_t ) );
360
361             if( i_visual == 0 ) /* scaletempo */
362                 p_input->p_playback_rate_filter = p_filter;
363
364             /* next filter if any */
365             psz_parser = psz_next;
366         }
367     }
368     free( psz_visual );
369     free( psz_filters );
370     free( psz_scaletempo );
371
372     /* complete the filter chain if necessary */
373     if ( aout_FiltersCreatePipeline( p_aout, p_input->pp_filters,
374                                      &p_input->i_nb_filters,
375                                      &chain_input_format,
376                                      &chain_output_format ) < 0 )
377     {
378         inputFailure( p_aout, p_input, "couldn't set an input pipeline" );
379         return -1;
380     }
381
382     /* Create resamplers. */
383     if (AOUT_FMT_LINEAR(&owner->mixer_format))
384     {
385         chain_output_format.i_rate = (__MAX(p_input->input.i_rate,
386                                             owner->mixer_format.i_rate)
387                                  * (100 + AOUT_MAX_RESAMPLING)) / 100;
388         if ( chain_output_format.i_rate == owner->mixer_format.i_rate )
389         {
390             /* Just in case... */
391             chain_output_format.i_rate++;
392         }
393         if (aout_FiltersCreatePipeline (p_aout, p_input->pp_resamplers,
394                                         &p_input->i_nb_resamplers,
395                                         &chain_output_format,
396                                         &owner->mixer_format) < 0)
397         {
398             inputFailure( p_aout, p_input, "couldn't set a resampler pipeline");
399             return -1;
400         }
401
402         /* Setup the initial rate of the resampler */
403         p_input->pp_resamplers[0]->fmt_in.audio.i_rate = p_input->input.i_rate;
404     }
405     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
406
407     if( ! p_input->p_playback_rate_filter && p_input->i_nb_resamplers > 0 )
408     {
409         p_input->p_playback_rate_filter = p_input->pp_resamplers[0];
410     }
411
412     ReplayGainSelect( p_aout, p_input );
413
414     /* Success */
415     p_input->b_error = false;
416     p_input->i_last_input_rate = INPUT_RATE_DEFAULT;
417
418     return 0;
419 }
420
421 /*****************************************************************************
422  * aout_InputDelete : delete an input
423  *****************************************************************************
424  * This function must be entered with the mixer lock.
425  *****************************************************************************/
426 int aout_InputDelete( audio_output_t * p_aout, aout_input_t * p_input )
427 {
428     aout_assert_locked( p_aout );
429     if ( p_input->b_error )
430         return 0;
431
432     /* XXX We need to update b_recycle_vout before calling aout_FiltersDestroyPipeline.
433      * FIXME They can be a race condition if audio-visual is updated between
434      * aout_InputDelete and aout_InputNew.
435      */
436     char *psz_visual = var_GetString( p_aout, "audio-visual");
437     p_input->b_recycle_vout = psz_visual && *psz_visual;
438     free( psz_visual );
439
440     aout_FiltersDestroyPipeline( p_input->pp_filters, p_input->i_nb_filters );
441     p_input->i_nb_filters = 0;
442     aout_FiltersDestroyPipeline( p_input->pp_resamplers,
443                                  p_input->i_nb_resamplers );
444     p_input->i_nb_resamplers = 0;
445
446     return 0;
447 }
448
449 /*****************************************************************************
450  * aout_InputCheckAndRestart : restart an input
451  *****************************************************************************
452  * This function must be entered with the input and mixer lock.
453  *****************************************************************************/
454 void aout_InputCheckAndRestart( audio_output_t * p_aout, aout_input_t * p_input )
455 {
456     aout_assert_locked( p_aout );
457
458     if( !p_input->b_restart )
459         return;
460
461     aout_InputDelete( p_aout, p_input );
462     aout_InputNew( p_aout, p_input, &p_input->request_vout );
463
464     p_input->b_restart = false;
465 }
466 /*****************************************************************************
467  * aout_InputPlay : play a buffer
468  *****************************************************************************
469  * This function must be entered with the input lock.
470  *****************************************************************************/
471 /* XXX Do not activate it !! */
472 //#define AOUT_PROCESS_BEFORE_CHEKS
473 block_t *aout_InputPlay(audio_output_t *p_aout, aout_input_t *p_input,
474                         block_t *p_buffer, int i_input_rate, date_t *date )
475 {
476     mtime_t start_date;
477
478     aout_assert_locked( p_aout );
479
480     if( i_input_rate != INPUT_RATE_DEFAULT && p_input->p_playback_rate_filter == NULL )
481     {
482         inputDrop( p_input, p_buffer );
483         return NULL;
484     }
485
486 #ifdef AOUT_PROCESS_BEFORE_CHEKS
487     /* Run pre-filters. */
488     aout_FiltersPlay( p_aout, p_input->pp_filters, p_input->i_nb_filters,
489                       &p_buffer );
490     if( !p_buffer )
491         return NULL;
492
493     /* Actually run the resampler now. */
494     if ( p_input->i_nb_resamplers > 0 )
495     {
496         const mtime_t i_date = p_buffer->i_pts;
497         aout_FiltersPlay( p_aout, p_input->pp_resamplers,
498                           p_input->i_nb_resamplers,
499                           &p_buffer );
500     }
501
502     if( !p_buffer )
503         return NULL;
504     if( p_buffer->i_nb_samples <= 0 )
505     {
506         block_Release( p_buffer );
507         return NULL;
508     }
509 #endif
510
511     /* Handle input rate change, but keep drift correction */
512     if( i_input_rate != p_input->i_last_input_rate )
513     {
514         unsigned int * const pi_rate = &p_input->p_playback_rate_filter->fmt_in.audio.i_rate;
515 #define F(r,ir) ( INPUT_RATE_DEFAULT * (r) / (ir) )
516         const int i_delta = *pi_rate - F(p_input->input.i_rate,p_input->i_last_input_rate);
517         *pi_rate = F(p_input->input.i_rate + i_delta, i_input_rate);
518 #undef F
519         p_input->i_last_input_rate = i_input_rate;
520     }
521
522     mtime_t now = mdate();
523
524     /* We don't care if someone changes the start date behind our back after
525      * this. We'll deal with that when pushing the buffer, and compensate
526      * with the next incoming buffer. */
527     start_date = date_Get (date);
528
529     if ( start_date != VLC_TS_INVALID && start_date < now )
530     {
531         /* The decoder is _very_ late. This can only happen if the user
532          * pauses the stream (or if the decoder is buggy, which cannot
533          * happen :). */
534         msg_Warn( p_aout, "computed PTS is out of range (%"PRId64"), "
535                   "clearing out", now - start_date );
536         aout_OutputFlush( p_aout, false );
537         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
538             msg_Warn( p_aout, "timing screwed, stopping resampling" );
539         inputResamplingStop( p_input );
540         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
541         start_date = VLC_TS_INVALID;
542     }
543
544     if ( p_buffer->i_pts < now + AOUT_MIN_PREPARE_TIME )
545     {
546         /* The decoder gives us f*cked up PTS. It's its business, but we
547          * can't present it anyway, so drop the buffer. */
548         msg_Warn( p_aout, "PTS is out of range (%"PRId64"), dropping buffer",
549                   now - p_buffer->i_pts );
550         inputDrop( p_input, p_buffer );
551         inputResamplingStop( p_input );
552         return NULL;
553     }
554
555     /* If the audio drift is too big then it's not worth trying to resample
556      * the audio. */
557     if( start_date == VLC_TS_INVALID )
558     {
559         start_date = p_buffer->i_pts;
560         date_Set (date, start_date);
561     }
562
563     mtime_t drift = start_date - p_buffer->i_pts;
564
565     if( drift < -i_input_rate * 3 * AOUT_MAX_PTS_ADVANCE / INPUT_RATE_DEFAULT )
566     {
567         msg_Warn( p_aout, "buffer way too early (%"PRId64"), clearing queue",
568                   drift );
569         aout_OutputFlush( p_aout, false );
570         if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
571             msg_Warn( p_aout, "timing screwed, stopping resampling" );
572         inputResamplingStop( p_input );
573         p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
574         start_date = p_buffer->i_pts;
575         date_Set (date, start_date);
576         drift = 0;
577     }
578     else
579     if( drift > +i_input_rate * 3 * AOUT_MAX_PTS_DELAY / INPUT_RATE_DEFAULT )
580     {
581         msg_Warn( p_aout, "buffer way too late (%"PRId64"), dropping buffer",
582                   drift );
583         inputDrop( p_input, p_buffer );
584         return NULL;
585     }
586
587 #ifndef AOUT_PROCESS_BEFORE_CHEKS
588     /* Run pre-filters. */
589     aout_FiltersPlay( p_input->pp_filters, p_input->i_nb_filters, &p_buffer );
590     if( !p_buffer )
591         return NULL;
592 #endif
593
594     /* Run the resampler if needed.
595      * We first need to calculate the output rate of this resampler. */
596     if ( ( p_input->i_resampling_type == AOUT_RESAMPLING_NONE ) &&
597          ( drift < -AOUT_MAX_PTS_ADVANCE || drift > +AOUT_MAX_PTS_DELAY ) &&
598          p_input->i_nb_resamplers > 0 )
599     {
600         /* Can happen in several circumstances :
601          * 1. A problem at the input (clock drift)
602          * 2. A small pause triggered by the user
603          * 3. Some delay in the output stage, causing a loss of lip
604          *    synchronization
605          * Solution : resample the buffer to avoid a scratch.
606          */
607         p_input->i_resamp_start_date = now;
608         p_input->i_resamp_start_drift = (int)-drift;
609         p_input->i_resampling_type = (drift < 0) ? AOUT_RESAMPLING_DOWN
610                                                  : AOUT_RESAMPLING_UP;
611         msg_Warn( p_aout, (drift < 0)
612                   ? "buffer too early (%"PRId64"), down-sampling"
613                   : "buffer too late  (%"PRId64"), up-sampling", drift );
614     }
615
616     if ( p_input->i_resampling_type != AOUT_RESAMPLING_NONE )
617     {
618         /* Resampling has been triggered previously (because of dates
619          * mismatch). We want the resampling to happen progressively so
620          * it isn't too audible to the listener. */
621
622         if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
623             p_input->pp_resamplers[0]->fmt_in.audio.i_rate += 2; /* Hz */
624         else
625             p_input->pp_resamplers[0]->fmt_in.audio.i_rate -= 2; /* Hz */
626
627         /* Check if everything is back to normal, in which case we can stop the
628          * resampling */
629         unsigned int i_nominal_rate =
630           (p_input->pp_resamplers[0] == p_input->p_playback_rate_filter)
631           ? INPUT_RATE_DEFAULT * p_input->input.i_rate / i_input_rate
632           : p_input->input.i_rate;
633         if( p_input->pp_resamplers[0]->fmt_in.audio.i_rate == i_nominal_rate )
634         {
635             p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
636             msg_Warn( p_aout, "resampling stopped after %"PRIi64" usec "
637                       "(drift: %"PRIi64")",
638                       now - p_input->i_resamp_start_date,
639                       p_buffer->i_pts - start_date);
640         }
641         else if( abs( (int)(p_buffer->i_pts - start_date) ) <
642                  abs( p_input->i_resamp_start_drift ) / 2 )
643         {
644             /* if we reduced the drift from half, then it is time to switch
645              * back the resampling direction. */
646             if( p_input->i_resampling_type == AOUT_RESAMPLING_UP )
647                 p_input->i_resampling_type = AOUT_RESAMPLING_DOWN;
648             else
649                 p_input->i_resampling_type = AOUT_RESAMPLING_UP;
650             p_input->i_resamp_start_drift = 0;
651         }
652         else if( p_input->i_resamp_start_drift &&
653                  ( abs( (int)(p_buffer->i_pts - start_date) ) >
654                    abs( p_input->i_resamp_start_drift ) * 3 / 2 ) )
655         {
656             /* If the drift is increasing and not decreasing, than something
657              * is bad. We'd better stop the resampling right now. */
658             msg_Warn( p_aout, "timing screwed, stopping resampling" );
659             inputResamplingStop( p_input );
660             p_buffer->i_flags |= BLOCK_FLAG_DISCONTINUITY;
661         }
662     }
663
664 #ifndef AOUT_PROCESS_BEFORE_CHEKS
665     /* Actually run the resampler now. */
666     if ( p_input->i_nb_resamplers > 0 )
667     {
668         aout_FiltersPlay( p_input->pp_resamplers, p_input->i_nb_resamplers,
669                           &p_buffer );
670     }
671
672     if( !p_buffer )
673         return NULL;
674     if( p_buffer->i_nb_samples <= 0 )
675     {
676         block_Release( p_buffer );
677         return NULL;
678     }
679 #endif
680
681     p_buffer->i_pts = start_date;
682     return p_buffer;
683 }
684
685 /*****************************************************************************
686  * static functions
687  *****************************************************************************/
688
689 static void inputFailure( audio_output_t * p_aout, aout_input_t * p_input,
690                           const char * psz_error_message )
691 {
692     /* error message */
693     msg_Err( p_aout, "%s", psz_error_message );
694
695     /* clean up */
696     aout_FiltersDestroyPipeline( p_input->pp_filters, p_input->i_nb_filters );
697     aout_FiltersDestroyPipeline( p_input->pp_resamplers,
698                                  p_input->i_nb_resamplers );
699     var_Destroy( p_aout, "visual" );
700     var_Destroy( p_aout, "equalizer" );
701     var_Destroy( p_aout, "audio-filter" );
702     var_Destroy( p_aout, "audio-visual" );
703
704     var_Destroy( p_aout, "audio-replay-gain-mode" );
705     var_Destroy( p_aout, "audio-replay-gain-default" );
706     var_Destroy( p_aout, "audio-replay-gain-preamp" );
707     var_Destroy( p_aout, "audio-replay-gain-peak-protection" );
708
709     /* error flag */
710     p_input->b_error = 1;
711 }
712
713 static void inputDrop( aout_input_t *p_input, aout_buffer_t *p_buffer )
714 {
715     aout_BufferFree( p_buffer );
716
717     p_input->i_buffer_lost++;
718 }
719
720 static void inputResamplingStop( aout_input_t *p_input )
721 {
722     p_input->i_resampling_type = AOUT_RESAMPLING_NONE;
723     if( p_input->i_nb_resamplers != 0 )
724     {
725         p_input->pp_resamplers[0]->fmt_in.audio.i_rate =
726             ( p_input->pp_resamplers[0] == p_input->p_playback_rate_filter )
727             ? INPUT_RATE_DEFAULT * p_input->input.i_rate / p_input->i_last_input_rate
728             : p_input->input.i_rate;
729     }
730 }
731
732 static vout_thread_t *RequestVout( void *p_private,
733                                    vout_thread_t *p_vout, video_format_t *p_fmt, bool b_recycle )
734 {
735     audio_output_t *p_aout = p_private;
736     VLC_UNUSED(b_recycle);
737     vout_configuration_t cfg = {
738         .vout       = p_vout,
739         .input      = NULL,
740         .change_fmt = true,
741         .fmt        = p_fmt,
742         .dpb_size   = 1,
743     };
744     return vout_Request( p_aout, &cfg );
745 }
746
747 vout_thread_t *aout_filter_RequestVout( filter_t *p_filter,
748                                         vout_thread_t *p_vout, video_format_t *p_fmt )
749 {
750     aout_input_t *p_input = p_filter->p_owner->p_input;
751     aout_request_vout_t *p_request = &p_input->request_vout;
752
753     /* XXX: this only works from audio input */
754     /* If you want to use visualization filters from another place, you will
755      * need to add a new pf_aout_request_vout callback or store a pointer
756      * to aout_request_vout_t inside filter_t (i.e. a level of indirection). */
757
758     return p_request->pf_request_vout( p_request->p_private,
759                                        p_vout, p_fmt, p_input->b_recycle_vout );
760 }
761
762 static inline bool ChangeFiltersString (vlc_object_t *aout, const char *var,
763                                         const char *filter, bool add)
764 {
765     return aout_ChangeFilterString (aout, aout, var, filter, add);
766 }
767
768 static int VisualizationCallback (vlc_object_t *obj, char const *var,
769                                   vlc_value_t oldval, vlc_value_t newval,
770                                   void *data)
771 {
772     const char *mode = newval.psz_string;
773     aout_input_t *input = data;
774
775     if (!*mode)
776     {
777         ChangeFiltersString (obj, "audio-visual", "goom", false);
778         ChangeFiltersString (obj, "audio-visual", "visual", false);
779         ChangeFiltersString (obj, "audio-visual", "projectm", false);
780     }
781     else if (!strcmp ("goom", mode))
782     {
783         ChangeFiltersString (obj, "audio-visual", "visual", false );
784         ChangeFiltersString (obj, "audio-visual", "goom", true );
785         ChangeFiltersString (obj, "audio-visual", "projectm", false );
786     }
787     else if (!strcmp ("projectm", mode))
788     {
789         ChangeFiltersString (obj, "audio-visual", "visual", false);
790         ChangeFiltersString (obj, "audio-visual", "goom", false);
791         ChangeFiltersString (obj, "audio-visual", "projectm", true);
792     }
793     else
794     {
795         var_Create (obj, "effect-list", VLC_VAR_STRING);
796         var_SetString (obj, "effect-list", mode);
797
798         ChangeFiltersString (obj, "audio-visual", "goom", false);
799         ChangeFiltersString (obj, "audio-visual", "visual", true);
800         ChangeFiltersString (obj, "audio-visual", "projectm", false);
801     }
802
803     /* That sucks FIXME: use "input" instead of cast */
804     AoutInputsMarkToRestart ((audio_output_t *)obj);
805
806     (void) var; (void) oldval;
807     return VLC_SUCCESS;
808 }
809
810 static int EqualizerCallback (vlc_object_t *obj, char const *cmd,
811                               vlc_value_t oldval, vlc_value_t newval,
812                               void *data)
813 {
814     char *mode = newval.psz_string;
815     aout_input_t *input = data;
816     bool ret;
817
818     (void) cmd; (void) oldval;
819     if (!*mode)
820         ret = ChangeFiltersString (obj, "audio-filter", "equalizer", false);
821     else
822     {
823         var_Create (obj, "equalizer-preset", VLC_VAR_STRING);
824         var_SetString (obj, "equalizer-preset", mode);
825         ret = ChangeFiltersString (obj, "audio-filter", "equalizer", true);
826     }
827
828     /* That sucks */
829     if (ret)
830         AoutInputsMarkToRestart ((audio_output_t *)obj);
831     return VLC_SUCCESS;
832 }
833
834 static int ReplayGainCallback( vlc_object_t *p_this, char const *psz_cmd,
835                                vlc_value_t oldval, vlc_value_t newval, void *p_data )
836 {
837     VLC_UNUSED(psz_cmd); VLC_UNUSED(oldval);
838     VLC_UNUSED(newval); VLC_UNUSED(p_data);
839     audio_output_t *aout = (audio_output_t *)p_this;
840     aout_owner_t *owner = aout_owner (aout);
841
842     aout_lock (aout);
843     if (owner->input != NULL)
844         ReplayGainSelect (aout, owner->input);
845     aout_unlock (aout);
846
847     return VLC_SUCCESS;
848 }
849
850 static void ReplayGainSelect( audio_output_t *p_aout, aout_input_t *p_input )
851 {
852     char *psz_replay_gain = var_GetNonEmptyString( p_aout,
853                                                    "audio-replay-gain-mode" );
854     int i_mode;
855     int i_use;
856     float f_gain;
857
858     p_input->multiplier = 1.0;
859
860     if( !psz_replay_gain )
861         return;
862
863     /* Find select mode */
864     if( !strcmp( psz_replay_gain, "track" ) )
865         i_mode = AUDIO_REPLAY_GAIN_TRACK;
866     else if( !strcmp( psz_replay_gain, "album" ) )
867         i_mode = AUDIO_REPLAY_GAIN_ALBUM;
868     else
869         i_mode = AUDIO_REPLAY_GAIN_MAX;
870
871     /* If the select mode is not available, prefer the other one */
872     i_use = i_mode;
873     if( i_use != AUDIO_REPLAY_GAIN_MAX && !p_input->replay_gain.pb_gain[i_use] )
874     {
875         for( i_use = 0; i_use < AUDIO_REPLAY_GAIN_MAX; i_use++ )
876         {
877             if( p_input->replay_gain.pb_gain[i_use] )
878                 break;
879         }
880     }
881
882     /* */
883     if( i_use != AUDIO_REPLAY_GAIN_MAX )
884         f_gain = p_input->replay_gain.pf_gain[i_use] + var_GetFloat( p_aout, "audio-replay-gain-preamp" );
885     else if( i_mode != AUDIO_REPLAY_GAIN_MAX )
886         f_gain = var_GetFloat( p_aout, "audio-replay-gain-default" );
887     else
888         f_gain = 0.0;
889     p_input->multiplier = pow( 10.0, f_gain / 20.0 );
890
891     /* */
892     if( p_input->replay_gain.pb_peak[i_use] &&
893         var_GetBool( p_aout, "audio-replay-gain-peak-protection" ) &&
894         p_input->replay_gain.pf_peak[i_use] * p_input->multiplier > 1.0 )
895     {
896         p_input->multiplier = 1.0f / p_input->replay_gain.pf_peak[i_use];
897     }
898
899     free( psz_replay_gain );
900 }