We don't check for limits.h, so don't use HAVE_LIMITS_H
[vlc.git] / modules / video_filter / mosaic.c
1 /*****************************************************************************
2  * mosaic.c : Mosaic video plugin for vlc
3  *****************************************************************************
4  * Copyright (C) 2004-2007 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Antoine Cellerier <dionoea@via.ecp.fr>
8  *          Christophe Massiot <massiot@via.ecp.fr>
9  *
10  * This program is free software; you can redistribute it and/or modify
11  * it under the terms of the GNU General Public License as published by
12  * the Free Software Foundation; either version 2 of the License, or
13  * (at your option) any later version.
14  *
15  * This program is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18  * GNU General Public License for more details.
19  *
20  * You should have received a copy of the GNU General Public License
21  * along with this program; if not, write to the Free Software
22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
23 *****************************************************************************/
24
25 /*****************************************************************************
26  * Preamble
27  *****************************************************************************/
28 #ifdef HAVE_CONFIG_H
29 # include "config.h"
30 #endif
31
32 #include <vlc/vlc.h>
33 #include <vlc_vout.h>
34
35 #include <math.h>
36 #include <limits.h> /* INT_MAX */
37
38 #include "vlc_filter.h"
39 #include "vlc_image.h"
40
41 #include "mosaic.h"
42
43 #define BLANK_DELAY I64C(1000000)
44
45 /*****************************************************************************
46  * Local prototypes
47  *****************************************************************************/
48 static int  CreateFilter    ( vlc_object_t * );
49 static void DestroyFilter   ( vlc_object_t * );
50 static subpicture_t *Filter ( filter_t *, mtime_t );
51
52 static int MosaicCallback   ( vlc_object_t *, char const *, vlc_value_t,
53                               vlc_value_t, void * );
54
55 /*****************************************************************************
56  * filter_sys_t : filter descriptor
57  *****************************************************************************/
58 struct filter_sys_t
59 {
60     vlc_mutex_t lock;         /* Internal filter lock */
61     vlc_mutex_t *p_lock;      /* Pointer to mosaic bridge lock */
62
63     image_handler_t *p_image;
64
65     int i_position;           /* Mosaic positioning method */
66     vlc_bool_t b_ar;          /* Do we keep the aspect ratio ? */
67     vlc_bool_t b_keep;        /* Do we keep the original picture format ? */
68     int i_width, i_height;    /* Mosaic height and width */
69     int i_cols, i_rows;       /* Mosaic rows and cols */
70     int i_align;              /* Mosaic alignment in background video */
71     int i_xoffset, i_yoffset; /* Top left corner offset */
72     int i_borderw, i_borderh; /* Border width/height between miniatures */
73     int i_alpha;              /* Subfilter alpha blending */
74
75     char **ppsz_order;        /* List of picture-ids */
76     int i_order_length;
77
78     int *pi_x_offsets;        /* List of substreams x offsets */
79     int *pi_y_offsets;        /* List of substreams y offsets */
80     int i_offsets_length;
81
82     mtime_t i_delay;
83 };
84
85 /*****************************************************************************
86  * Module descriptor
87  *****************************************************************************/
88 #define ALPHA_TEXT N_("Transparency")
89 #define ALPHA_LONGTEXT N_( \
90         "Transparency of the mosaic foreground pictures. " \
91         "0 means transparent, 255 opaque (default)." )
92
93 #define HEIGHT_TEXT N_("Height")
94 #define HEIGHT_LONGTEXT N_( "Total height of the mosaic, in pixels." )
95 #define WIDTH_TEXT N_("Width")
96 #define WIDTH_LONGTEXT N_( "Total width of the mosaic, in pixels." )
97
98 #define XOFFSET_TEXT N_("Top left corner X coordinate")
99 #define XOFFSET_LONGTEXT N_( \
100         "X Coordinate of the top-left corner of the mosaic.")
101 #define YOFFSET_TEXT N_("Top left corner Y coordinate")
102 #define YOFFSET_LONGTEXT N_( \
103         "Y Coordinate of the top-left corner of the mosaic.")
104
105 #define BORDERW_TEXT N_("Border width")
106 #define BORDERW_LONGTEXT N_( \
107         "Width in pixels of the border between miniatures." )
108 #define BORDERH_TEXT N_("Border height")
109 #define BORDERH_LONGTEXT N_( \
110         "Height in pixels of the border between miniatures." )
111
112 #define ALIGN_TEXT N_("Mosaic alignment" )
113 #define ALIGN_LONGTEXT N_( \
114         "You can enforce the mosaic alignment on the video " \
115         "(0=center, 1=left, 2=right, 4=top, 8=bottom, you can " \
116         "also use combinations of these values, eg 6 = top-right).")
117
118 #define POS_TEXT N_("Positioning method")
119 #define POS_LONGTEXT N_( \
120         "Positioning method for the mosaic. auto: " \
121         "automatically choose the best number of rows and columns. " \
122         "fixed: use the user-defined number of rows and columns. " \
123         "offsets: use the user-defined offsets for each image." )
124
125 #define ROWS_TEXT N_("Number of rows")
126 #define ROWS_LONGTEXT N_( \
127         "Number of image rows in the mosaic (only used if " \
128         "positionning method is set to \"fixed\")." )
129
130 #define COLS_TEXT N_("Number of columns")
131 #define COLS_LONGTEXT N_( \
132         "Number of image columns in the mosaic (only used if " \
133         "positionning method is set to \"fixed\"." )
134
135 #define AR_TEXT N_("Keep aspect ratio")
136 #define AR_LONGTEXT N_( \
137         "Keep the original aspect ratio when resizing " \
138         "mosaic elements." )
139 #define KEEP_TEXT N_("Keep original size")
140 #define KEEP_LONGTEXT N_( \
141         "Keep the original size of mosaic elements." )
142
143 #define ORDER_TEXT N_("Elements order" )
144 #define ORDER_LONGTEXT N_( \
145         "You can enforce the order of the elements on " \
146         "the mosaic. You must give a comma-separated list of picture ID(s)." \
147         "These IDs are assigned in the \"mosaic-bridge\" module." )
148
149 #define OFFSETS_TEXT N_("Offsets in order" )
150 #define OFFSETS_LONGTEXT N_( \
151         "You can enforce the (x,y) offsets of the elements on the mosaic " \
152         "(only used if positioning method is set to \"offsets\"). You " \
153         "must give a comma-separated list of coordinates (eg: 10,10,150,10)." )
154
155 #define DELAY_TEXT N_("Delay")
156 #define DELAY_LONGTEXT N_( \
157         "Pictures coming from the mosaic elements will be delayed " \
158         "according to this value (in milliseconds). For high " \
159         "values you will need to raise caching at input.")
160
161 enum
162 {
163     position_auto = 0, position_fixed = 1, position_offsets = 2
164 };
165 static int pi_pos_values[] = { 0, 1, 2 };
166 static const char *ppsz_pos_descriptions[] =
167     { N_("auto"), N_("fixed"), N_("offsets") };
168
169 static int pi_align_values[] = { 0, 1, 2, 4, 8, 5, 6, 9, 10 };
170 static const char *ppsz_align_descriptions[] =
171      { N_("Center"), N_("Left"), N_("Right"), N_("Top"), N_("Bottom"),
172      N_("Top-Left"), N_("Top-Right"), N_("Bottom-Left"), N_("Bottom-Right") };
173
174 #define CFG_PREFIX "mosaic-"
175
176 vlc_module_begin();
177     set_description( _("Mosaic video sub filter") );
178     set_shortname( _("Mosaic") );
179     set_category( CAT_VIDEO );
180     set_subcategory( SUBCAT_VIDEO_SUBPIC);
181     set_capability( "sub filter", 0 );
182     set_callbacks( CreateFilter, DestroyFilter );
183
184     add_integer( CFG_PREFIX "alpha", 255, NULL,
185                  ALPHA_TEXT, ALPHA_LONGTEXT, VLC_FALSE );
186
187     add_integer( CFG_PREFIX "height", 100, NULL,
188                  HEIGHT_TEXT, HEIGHT_LONGTEXT, VLC_FALSE );
189     add_integer( CFG_PREFIX "width", 100, NULL,
190                  WIDTH_TEXT, WIDTH_LONGTEXT, VLC_FALSE );
191
192     add_integer( CFG_PREFIX "align", 5, NULL,
193                  ALIGN_TEXT, ALIGN_LONGTEXT, VLC_TRUE);
194         change_integer_list( pi_align_values, ppsz_align_descriptions, 0 );
195
196     add_integer( CFG_PREFIX "xoffset", 0, NULL,
197                  XOFFSET_TEXT, XOFFSET_LONGTEXT, VLC_TRUE );
198     add_integer( CFG_PREFIX "yoffset", 0, NULL,
199                  YOFFSET_TEXT, YOFFSET_LONGTEXT, VLC_TRUE );
200
201     add_integer( CFG_PREFIX "borderw", 0, NULL,
202                  BORDERW_TEXT, BORDERW_LONGTEXT, VLC_TRUE );
203         add_deprecated_alias( CFG_PREFIX "vborder" );
204     add_integer( CFG_PREFIX "borderh", 0, NULL,
205                  BORDERH_TEXT, BORDERH_LONGTEXT, VLC_TRUE );
206         add_deprecated_alias( CFG_PREFIX "hborder" );
207
208     add_integer( CFG_PREFIX "position", 0, NULL,
209                  POS_TEXT, POS_LONGTEXT, VLC_FALSE );
210         change_integer_list( pi_pos_values, ppsz_pos_descriptions, 0 );
211     add_integer( CFG_PREFIX "rows", 2, NULL,
212                  ROWS_TEXT, ROWS_LONGTEXT, VLC_FALSE );
213     add_integer( CFG_PREFIX "cols", 2, NULL,
214                  COLS_TEXT, COLS_LONGTEXT, VLC_FALSE );
215
216     add_bool( CFG_PREFIX "keep-aspect-ratio", 0, NULL,
217               AR_TEXT, AR_LONGTEXT, VLC_FALSE );
218     add_bool( CFG_PREFIX "keep-picture", 0, NULL,
219               KEEP_TEXT, KEEP_LONGTEXT, VLC_FALSE );
220
221     add_string( CFG_PREFIX "order", "", NULL,
222                 ORDER_TEXT, ORDER_LONGTEXT, VLC_FALSE );
223
224     add_string( CFG_PREFIX "offsets", "", NULL,
225                 OFFSETS_TEXT, OFFSETS_LONGTEXT, VLC_FALSE );
226
227     add_integer( CFG_PREFIX "delay", 0, NULL, DELAY_TEXT, DELAY_LONGTEXT,
228                  VLC_FALSE );
229 vlc_module_end();
230
231 static const char *ppsz_filter_options[] = {
232     "alpha", "height", "width", "align", "xoffset", "yoffset",
233     "borderw", "borderh", "position", "rows", "cols",
234     "keep-aspect-ratio", "keep-picture", "order", "offsets",
235     "delay", NULL
236 };
237
238 /*****************************************************************************
239  * mosaic_ParseSetOffsets:
240  * parse the "--mosaic-offsets x1,y1,x2,y2,x3,y3" parameter
241  * and set the corresponding struct filter_sys_t entries.
242  *****************************************************************************/
243 #define mosaic_ParseSetOffsets( a, b, c ) \
244       __mosaic_ParseSetOffsets( VLC_OBJECT( a ), b, c )
245 static void __mosaic_ParseSetOffsets( vlc_object_t *p_this,
246                                       filter_sys_t *p_sys,
247                                       char *psz_offsets )
248 {
249     if( *psz_offsets )
250     {
251         char *psz_end = NULL;
252         int i_index = 0;
253         do
254         {
255             i_index++;
256
257             p_sys->pi_x_offsets =
258                 realloc( p_sys->pi_x_offsets, i_index * sizeof(int) );
259             p_sys->pi_x_offsets[i_index - 1] = atoi( psz_offsets );
260             psz_end = strchr( psz_offsets, ',' );
261             psz_offsets = psz_end + 1;
262
263             p_sys->pi_y_offsets =
264                 realloc( p_sys->pi_y_offsets, i_index * sizeof(int) );
265             p_sys->pi_y_offsets[i_index - 1] = atoi( psz_offsets );
266             psz_end = strchr( psz_offsets, ',' );
267             psz_offsets = psz_end + 1;
268
269             msg_Dbg( p_this, CFG_PREFIX "offset: id %d, x=%d, y=%d",
270                      i_index, p_sys->pi_x_offsets[i_index - 1],
271                               p_sys->pi_y_offsets[i_index - 1]  );
272
273         } while( psz_end );
274         p_sys->i_offsets_length = i_index;
275     }
276 }
277
278 /*****************************************************************************
279  * CreateFiler: allocate mosaic video filter
280  *****************************************************************************/
281 static int CreateFilter( vlc_object_t *p_this )
282 {
283     filter_t *p_filter = (filter_t *)p_this;
284     filter_sys_t *p_sys;
285     vlc_object_t *p_libvlc = VLC_OBJECT( p_filter->p_libvlc );
286     char *psz_order;
287     char *psz_offsets;
288     int i_index;
289     vlc_value_t val;
290
291     /* The mosaic thread is more important than the decoder threads */
292     vlc_thread_set_priority( p_this, VLC_THREAD_PRIORITY_OUTPUT );
293
294     /* Allocate structure */
295     p_sys = p_filter->p_sys = malloc( sizeof( filter_sys_t ) );
296     if( p_sys == NULL )
297     {
298         msg_Err( p_filter, "out of memory" );
299         return VLC_ENOMEM;
300     }
301
302     p_filter->pf_sub_filter = Filter;
303
304     vlc_mutex_init( p_filter, &p_sys->lock );
305     vlc_mutex_lock( &p_sys->lock );
306
307     var_Create( p_libvlc, "mosaic-lock", VLC_VAR_MUTEX );
308     var_Get( p_libvlc, "mosaic-lock", &val );
309     p_sys->p_lock = val.p_address;
310
311     config_ChainParse( p_filter, CFG_PREFIX, ppsz_filter_options,
312                        p_filter->p_cfg );
313
314 #define GET_VAR( name, min, max )                                           \
315     p_sys->i_##name = __MIN( max, __MAX( min,                               \
316         var_CreateGetIntegerCommand( p_filter, CFG_PREFIX #name ) ) );      \
317     var_AddCallback( p_filter, CFG_PREFIX #name, MosaicCallback, p_sys );
318
319     GET_VAR( width, 0, INT_MAX );
320     GET_VAR( height, 0, INT_MAX );
321     GET_VAR( xoffset, 0, INT_MAX );
322     GET_VAR( yoffset, 0, INT_MAX );
323
324     GET_VAR( align, 0, 10 );
325     if( p_sys->i_align == 3 || p_sys->i_align == 7 )
326         p_sys->i_align = 5;
327
328     GET_VAR( borderw, 0, INT_MAX );
329     GET_VAR( borderh, 0, INT_MAX );
330     GET_VAR( rows, 1, INT_MAX );
331     GET_VAR( cols, 1, INT_MAX );
332     GET_VAR( alpha, 0, 255 );
333     GET_VAR( position, 0, 2 );
334     GET_VAR( delay, 100, INT_MAX );
335     p_sys->i_delay *= 1000;
336
337     p_sys->b_ar = var_CreateGetBoolCommand( p_filter,
338                                             CFG_PREFIX "keep-aspect-ratio" );
339     var_AddCallback( p_filter, CFG_PREFIX "keep-aspect-ratio", MosaicCallback,
340                      p_sys );
341
342     p_sys->b_keep = var_CreateGetBoolCommand( p_filter,
343                                               CFG_PREFIX "keep-picture" );
344     if ( !p_sys->b_keep )
345     {
346         p_sys->p_image = image_HandlerCreate( p_filter );
347     }
348
349     p_sys->i_order_length = 0;
350     p_sys->ppsz_order = NULL;
351     psz_order = var_CreateGetStringCommand( p_filter, CFG_PREFIX "order" );
352     var_AddCallback( p_filter, CFG_PREFIX "order", MosaicCallback, p_sys );
353
354     if( *psz_order )
355     {
356         char *psz_end = NULL;
357         i_index = 0;
358         do
359         {
360             psz_end = strchr( psz_order, ',' );
361             i_index++;
362             p_sys->ppsz_order = realloc( p_sys->ppsz_order,
363                                          i_index * sizeof(char *) );
364             p_sys->ppsz_order[i_index - 1] = strndup( psz_order,
365                                            psz_end - psz_order );
366             psz_order = psz_end+1;
367         } while( psz_end );
368         p_sys->i_order_length = i_index;
369     }
370
371     /* Manage specific offsets for substreams */
372     psz_offsets = var_CreateGetStringCommand( p_filter, CFG_PREFIX "offsets" );
373     p_sys->i_offsets_length = 0;
374     p_sys->pi_x_offsets = NULL;
375     p_sys->pi_y_offsets = NULL;
376     mosaic_ParseSetOffsets( p_filter, p_sys, psz_offsets );
377     var_AddCallback( p_filter, CFG_PREFIX "offsets", MosaicCallback, p_sys );
378
379     vlc_mutex_unlock( &p_sys->lock );
380
381     return VLC_SUCCESS;
382 }
383
384 /*****************************************************************************
385  * DestroyFilter: destroy mosaic video filter
386  *****************************************************************************/
387 static void DestroyFilter( vlc_object_t *p_this )
388 {
389     filter_t *p_filter = (filter_t*)p_this;
390     filter_sys_t *p_sys = p_filter->p_sys;
391     int i_index;
392
393     vlc_mutex_lock( &p_sys->lock );
394
395     if( !p_sys->b_keep )
396     {
397         image_HandlerDelete( p_sys->p_image );
398     }
399
400     if( p_sys->i_order_length )
401     {
402         for( i_index = 0; i_index < p_sys->i_order_length; i_index++ )
403         {
404             free( p_sys->ppsz_order[i_index] );
405         }
406         free( p_sys->ppsz_order );
407     }
408     if( p_sys->i_offsets_length )
409     {
410         free( p_sys->pi_x_offsets );
411         free( p_sys->pi_y_offsets );
412         p_sys->i_offsets_length = 0;
413     }
414
415     vlc_mutex_unlock( &p_sys->lock );
416     vlc_mutex_destroy( &p_sys->lock );
417     free( p_sys );
418 }
419
420 /*****************************************************************************
421  * MosaicReleasePicture : Hack to avoid picture duplication
422  *****************************************************************************/
423 static void MosaicReleasePicture( picture_t *p_picture )
424 {
425     picture_t *p_original_pic = (picture_t *)p_picture->p_sys;
426
427     p_original_pic->pf_release( p_original_pic );
428 }
429
430 /*****************************************************************************
431  * Filter
432  *****************************************************************************/
433 static subpicture_t *Filter( filter_t *p_filter, mtime_t date )
434 {
435     filter_sys_t *p_sys = p_filter->p_sys;
436     bridge_t *p_bridge;
437
438     subpicture_t *p_spu;
439
440     int i_index, i_real_index, i_row, i_col;
441     int i_greatest_real_index_used = p_sys->i_order_length - 1;
442
443     unsigned int col_inner_width, row_inner_height;
444
445     subpicture_region_t *p_region;
446     subpicture_region_t *p_region_prev = NULL;
447
448     /* Allocate the subpicture internal data. */
449     p_spu = p_filter->pf_sub_buffer_new( p_filter );
450     if( !p_spu )
451     {
452         return NULL;
453     }
454
455     /* Initialize subpicture */
456     p_spu->i_channel = 0;
457     p_spu->i_start  = date;
458     p_spu->i_stop = 0;
459     p_spu->b_ephemer = VLC_TRUE;
460     p_spu->i_alpha = p_sys->i_alpha;
461     p_spu->i_flags = p_sys->i_align;
462     p_spu->b_absolute = VLC_FALSE;
463
464     vlc_mutex_lock( &p_sys->lock );
465     vlc_mutex_lock( p_sys->p_lock );
466
467     p_bridge = GetBridge( p_filter );
468     if ( p_bridge == NULL )
469     {
470         vlc_mutex_unlock( p_sys->p_lock );
471         vlc_mutex_unlock( &p_sys->lock );
472         return p_spu;
473     }
474
475     if ( p_sys->i_position == position_offsets )
476     {
477         /* If we have either too much or not enough offsets, fall-back
478          * to automatic positioning. */
479         if ( p_sys->i_offsets_length != p_sys->i_order_length )
480         {
481             msg_Err( p_filter,
482                      "Number of specified offsets (%d) does not match number "
483                      "of input substreams in mosaic-order (%d), falling back "
484                      "to mosaic-position=0",
485                      p_sys->i_offsets_length, p_sys->i_order_length );
486             p_sys->i_position = position_auto;
487         }
488     }
489
490     if ( p_sys->i_position == position_auto )
491     {
492         int i_numpics = p_sys->i_order_length; /* keep slots and all */
493         for ( i_index = 0; i_index < p_bridge->i_es_num; i_index++ )
494         {
495             bridged_es_t *p_es = p_bridge->pp_es[i_index];
496             if ( !p_es->b_empty )
497             {
498                 i_numpics ++;
499                 if( p_sys->i_order_length && p_es->psz_id != 0 )
500                 {
501                     /* We also want to leave slots for images given in
502                      * mosaic-order that are not available in p_vout_picture */
503                     int i;
504                     for( i = 0; i < p_sys->i_order_length ; i++ )
505                     {
506                         if( !strcmp( p_sys->ppsz_order[i], p_es->psz_id ) )
507                         {
508                             i_numpics--;
509                             break;
510                         }
511                     }
512
513                 }
514             }
515         }
516         p_sys->i_rows = ceil(sqrt( (double)i_numpics ));
517         p_sys->i_cols = ( i_numpics % p_sys->i_rows == 0 ?
518                             i_numpics / p_sys->i_rows :
519                             i_numpics / p_sys->i_rows + 1 );
520     }
521
522     col_inner_width  = ( ( p_sys->i_width - ( p_sys->i_cols - 1 )
523                        * p_sys->i_borderw ) / p_sys->i_cols );
524     row_inner_height = ( ( p_sys->i_height - ( p_sys->i_rows - 1 )
525                        * p_sys->i_borderh ) / p_sys->i_rows );
526
527     i_real_index = 0;
528
529     for ( i_index = 0; i_index < p_bridge->i_es_num; i_index++ )
530     {
531         bridged_es_t *p_es = p_bridge->pp_es[i_index];
532         video_format_t fmt_in, fmt_out;
533         picture_t *p_converted;
534
535         memset( &fmt_in, 0, sizeof( video_format_t ) );
536         memset( &fmt_out, 0, sizeof( video_format_t ) );
537
538         if ( p_es->b_empty )
539             continue;
540
541         while ( p_es->p_picture != NULL
542                  && p_es->p_picture->date + p_sys->i_delay < date )
543         {
544             if ( p_es->p_picture->p_next != NULL )
545             {
546                 picture_t *p_next = p_es->p_picture->p_next;
547                 p_es->p_picture->pf_release( p_es->p_picture );
548                 p_es->p_picture = p_next;
549             }
550             else if ( p_es->p_picture->date + p_sys->i_delay + BLANK_DELAY <
551                         date )
552             {
553                 /* Display blank */
554                 p_es->p_picture->pf_release( p_es->p_picture );
555                 p_es->p_picture = NULL;
556                 p_es->pp_last = &p_es->p_picture;
557                 break;
558             }
559             else
560             {
561                 msg_Dbg( p_filter, "too late picture for %s (" I64Fd ")",
562                          p_es->psz_id,
563                          date - p_es->p_picture->date - p_sys->i_delay );
564                 break;
565             }
566         }
567
568         if ( p_es->p_picture == NULL )
569             continue;
570
571         if ( p_sys->i_order_length == 0 )
572         {
573             i_real_index++;
574         }
575         else
576         {
577             int i;
578             for ( i = 0; i <= p_sys->i_order_length; i++ )
579             {
580                 if ( i == p_sys->i_order_length ) break;
581                 if ( strcmp( p_es->psz_id, p_sys->ppsz_order[i] ) == 0 )
582                 {
583                     i_real_index = i;
584                     break;
585                 }
586             }
587             if ( i == p_sys->i_order_length )
588                 i_real_index = ++i_greatest_real_index_used;
589         }
590         i_row = ( i_real_index / p_sys->i_cols ) % p_sys->i_rows;
591         i_col = i_real_index % p_sys->i_cols ;
592
593         if ( !p_sys->b_keep )
594         {
595             /* Convert the images */
596             fmt_in.i_chroma = p_es->p_picture->format.i_chroma;
597             fmt_in.i_height = p_es->p_picture->format.i_height;
598             fmt_in.i_width = p_es->p_picture->format.i_width;
599
600             fmt_out.i_chroma = VLC_FOURCC('I','4','2','0');
601             fmt_out.i_width = col_inner_width;
602             fmt_out.i_height = row_inner_height;
603
604             if( p_sys->b_ar ) /* keep aspect ratio */
605             {
606                 if( (float)fmt_out.i_width / (float)fmt_out.i_height
607                       > (float)fmt_in.i_width / (float)fmt_in.i_height )
608                 {
609                     fmt_out.i_width = ( fmt_out.i_height * fmt_in.i_width )
610                                          / fmt_in.i_height;
611                 }
612                 else
613                 {
614                     fmt_out.i_height = ( fmt_out.i_width * fmt_in.i_height )
615                                         / fmt_in.i_width;
616                 }
617              }
618
619             fmt_out.i_visible_width = fmt_out.i_width;
620             fmt_out.i_visible_height = fmt_out.i_height;
621
622             p_converted = image_Convert( p_sys->p_image, p_es->p_picture,
623                                          &fmt_in, &fmt_out );
624             if( !p_converted )
625             {
626                 msg_Warn( p_filter,
627                            "image resizing and chroma conversion failed" );
628                 continue;
629             }
630         }
631         else
632         {
633             p_converted = p_es->p_picture;
634             p_converted->i_refcount++;
635             fmt_in.i_width = fmt_out.i_width = p_converted->format.i_width;
636             fmt_in.i_height = fmt_out.i_height = p_converted->format.i_height;
637             fmt_in.i_chroma = fmt_out.i_chroma = p_converted->format.i_chroma;
638             fmt_out.i_visible_width = fmt_out.i_width;
639             fmt_out.i_visible_height = fmt_out.i_height;
640         }
641
642         p_region = p_spu->pf_make_region( VLC_OBJECT(p_filter), &fmt_out,
643                                           p_converted );
644         if( !p_region )
645         {
646             msg_Err( p_filter, "cannot allocate SPU region" );
647             p_filter->pf_sub_buffer_del( p_filter, p_spu );
648             vlc_mutex_unlock( &p_sys->lock );
649             vlc_mutex_unlock( p_sys->p_lock );
650             return p_spu;
651         }
652
653         /* HACK ALERT: let's fix the pointers to avoid picture duplication.
654          * This is necessary because p_region->picture is not a pointer
655          * as it ought to be. */
656         if( !p_sys->b_keep )
657         {
658             free( p_converted );
659         }
660         else
661         {
662             /* Keep a pointer to the original picture (and its refcount...). */
663             p_region->picture.p_sys = (picture_sys_t *)p_converted;
664             p_region->picture.pf_release = MosaicReleasePicture;
665         }
666
667         if( p_sys->i_position == position_offsets )
668         {
669             p_region->i_x = p_sys->pi_x_offsets[i_real_index];
670         }
671         else if( fmt_out.i_width > col_inner_width ||
672             p_sys->b_ar || p_sys->b_keep )
673         {
674             /* we don't have to center the video since it takes the
675             whole rectangle area or it's larger than the rectangle */
676             p_region->i_x = p_sys->i_xoffset
677                         + i_col * ( p_sys->i_width / p_sys->i_cols )
678                         + ( i_col * p_sys->i_borderw ) / p_sys->i_cols;
679         }
680         else
681         {
682             /* center the video in the dedicated rectangle */
683             p_region->i_x = p_sys->i_xoffset
684                     + i_col * ( p_sys->i_width / p_sys->i_cols )
685                     + ( i_col * p_sys->i_borderw ) / p_sys->i_cols
686                     + ( col_inner_width - fmt_out.i_width ) / 2;
687         }
688
689         if( p_sys->i_position == position_offsets )
690         {
691             p_region->i_y = p_sys->pi_y_offsets[i_real_index];
692         }
693         else if( fmt_out.i_height < row_inner_height
694             || p_sys->b_ar || p_sys->b_keep )
695         {
696             /* we don't have to center the video since it takes the
697             whole rectangle area or it's taller than the rectangle */
698             p_region->i_y = p_sys->i_yoffset
699                     + i_row * ( p_sys->i_height / p_sys->i_rows )
700                     + ( i_row * p_sys->i_borderh ) / p_sys->i_rows;
701         }
702         else
703         {
704             /* center the video in the dedicated rectangle */
705             p_region->i_y = p_sys->i_yoffset
706                     + i_row * ( p_sys->i_height / p_sys->i_rows )
707                     + ( i_row * p_sys->i_borderh ) / p_sys->i_rows
708                     + ( row_inner_height - fmt_out.i_height ) / 2;
709         }
710         p_region->i_align = p_sys->i_align;
711
712         if( p_region_prev == NULL )
713         {
714             p_spu->p_region = p_region;
715         }
716         else
717         {
718             p_region_prev->p_next = p_region;
719         }
720
721         p_region_prev = p_region;
722     }
723
724     vlc_mutex_unlock( p_sys->p_lock );
725     vlc_mutex_unlock( &p_sys->lock );
726
727     return p_spu;
728 }
729
730 /*****************************************************************************
731 * Callback to update params on the fly
732 *****************************************************************************/
733 static int MosaicCallback( vlc_object_t *p_this, char const *psz_var,
734                             vlc_value_t oldval, vlc_value_t newval,
735                             void *p_data )
736 {
737     VLC_UNUSED(oldval);
738     filter_sys_t *p_sys = (filter_sys_t *) p_data;
739
740 #define VAR_IS( a ) !strcmp( psz_var, CFG_PREFIX a )
741     if( VAR_IS( "alpha" ) )
742     {
743         vlc_mutex_lock( &p_sys->lock );
744         msg_Dbg( p_this, "changing alpha from %d/255 to %d/255",
745                          p_sys->i_alpha, newval.i_int);
746         p_sys->i_alpha = __MIN( __MAX( newval.i_int, 0 ), 255 );
747         vlc_mutex_unlock( &p_sys->lock );
748     }
749     else if( VAR_IS( "height" ) )
750     {
751         vlc_mutex_lock( &p_sys->lock );
752         msg_Dbg( p_this, "changing height from %dpx to %dpx",
753                           p_sys->i_height, newval.i_int );
754         p_sys->i_height = __MAX( newval.i_int, 0 );
755         vlc_mutex_unlock( &p_sys->lock );
756     }
757     else if( VAR_IS( "width" ) )
758     {
759         vlc_mutex_lock( &p_sys->lock );
760         msg_Dbg( p_this, "changing width from %dpx to %dpx",
761                          p_sys->i_width, newval.i_int );
762         p_sys->i_width = __MAX( newval.i_int, 0 );
763         vlc_mutex_unlock( &p_sys->lock );
764     }
765     else if( VAR_IS( "xoffset" ) )
766     {
767         vlc_mutex_lock( &p_sys->lock );
768         msg_Dbg( p_this, "changing x offset from %dpx to %dpx",
769                          p_sys->i_xoffset, newval.i_int );
770         p_sys->i_xoffset = __MAX( newval.i_int, 0 );
771         vlc_mutex_unlock( &p_sys->lock );
772     }
773     else if( VAR_IS( "yoffset" ) )
774     {
775         vlc_mutex_lock( &p_sys->lock );
776         msg_Dbg( p_this, "changing y offset from %dpx to %dpx",
777                          p_sys->i_yoffset, newval.i_int );
778         p_sys->i_yoffset = __MAX( newval.i_int, 0 );
779         vlc_mutex_unlock( &p_sys->lock );
780     }
781     else if( VAR_IS( "align" ) )
782     {
783         int i_old = 0, i_new = 0;
784         vlc_mutex_lock( &p_sys->lock );
785         newval.i_int = __MIN( __MAX( newval.i_int, 0 ), 10 );
786         if( newval.i_int == 3 || newval.i_int == 7 )
787             newval.i_int = 5;
788         while( pi_align_values[i_old] != p_sys->i_align ) i_old++;
789         while( pi_align_values[i_new] != newval.i_int ) i_new++;
790         msg_Dbg( p_this, "changing alignment from %d (%s) to %d (%s)",
791                      p_sys->i_align, ppsz_align_descriptions[i_old],
792                      newval.i_int, ppsz_align_descriptions[i_new] );
793         p_sys->i_align = newval.i_int;
794         vlc_mutex_unlock( &p_sys->lock );
795     }
796     else if( VAR_IS( "borderw" ) )
797     {
798         vlc_mutex_lock( &p_sys->lock );
799         msg_Dbg( p_this, "changing border width from %dpx to %dpx",
800                          p_sys->i_borderw, newval.i_int );
801         p_sys->i_borderw = __MAX( newval.i_int, 0 );
802         vlc_mutex_unlock( &p_sys->lock );
803     }
804     else if( VAR_IS( "borderh" ) )
805     {
806         vlc_mutex_lock( &p_sys->lock );
807         msg_Dbg( p_this, "changing border height from %dpx to %dpx",
808                          p_sys->i_borderh, newval.i_int );
809         p_sys->i_borderh = __MAX( newval.i_int, 0 );
810         vlc_mutex_unlock( &p_sys->lock );
811     }
812     else if( VAR_IS( "position" ) )
813     {
814         if( newval.i_int > 2 || newval.i_int < 0 )
815         {
816             msg_Err( p_this,
817                      "Position is either 0 (%s), 1 (%s) or 2 (%s)",
818                      ppsz_pos_descriptions[0],
819                      ppsz_pos_descriptions[1],
820                      ppsz_pos_descriptions[2] );
821         }
822         else
823         {
824             vlc_mutex_lock( &p_sys->lock );
825             msg_Dbg( p_this, "changing position method from %d (%s) to %d (%s)",
826                     p_sys->i_position, ppsz_pos_descriptions[p_sys->i_position],
827                     newval.i_int, ppsz_pos_descriptions[newval.i_int]);
828             p_sys->i_position = newval.i_int;
829             vlc_mutex_unlock( &p_sys->lock );
830         }
831     }
832     else if( VAR_IS( "rows" ) )
833     {
834         vlc_mutex_lock( &p_sys->lock );
835         msg_Dbg( p_this, "changing number of rows from %d to %d",
836                          p_sys->i_rows, newval.i_int );
837         p_sys->i_rows = __MAX( newval.i_int, 1 );
838         vlc_mutex_unlock( &p_sys->lock );
839     }
840     else if( VAR_IS( "cols" ) )
841     {
842         vlc_mutex_lock( &p_sys->lock );
843         msg_Dbg( p_this, "changing number of columns from %d to %d",
844                          p_sys->i_cols, newval.i_int );
845         p_sys->i_cols = __MAX( newval.i_int, 1 );
846         vlc_mutex_unlock( &p_sys->lock );
847     }
848     else if( VAR_IS( "order" ) )
849     {
850         char *psz_order;
851         int i_index;
852         vlc_mutex_lock( &p_sys->lock );
853         msg_Dbg( p_this, "Changing mosaic order to %s", newval.psz_string );
854
855         psz_order = newval.psz_string;
856
857         while( p_sys->i_order_length-- )
858         {
859             free( p_sys->ppsz_order[p_sys->i_order_length] );
860         }
861         free( p_sys->ppsz_order );
862         p_sys->ppsz_order = NULL;
863
864         if( *psz_order )
865         {
866             char *psz_end = NULL;
867             i_index = 0;
868             do
869             {
870                 psz_end = strchr( psz_order, ',' );
871                 i_index++;
872                 p_sys->ppsz_order = realloc( p_sys->ppsz_order,
873                                     i_index * sizeof(char *) );
874                 p_sys->ppsz_order[i_index - 1] = strndup( psz_order,
875                                            psz_end - psz_order );
876                 psz_order = psz_end+1;
877             } while( psz_end );
878             p_sys->i_order_length = i_index;
879         }
880
881         vlc_mutex_unlock( &p_sys->lock );
882     }
883     else if( VAR_IS( "offsets" ) )
884     {
885         vlc_mutex_lock( &p_sys->lock );
886         msg_Info( p_this, "Changing mosaic-offsets to %s", newval.psz_string );
887
888         if( p_sys->i_offsets_length != 0 )
889         {
890             p_sys->i_offsets_length = 0;
891             free( p_sys->pi_x_offsets );
892             free( p_sys->pi_y_offsets );
893             p_sys->pi_x_offsets = NULL;
894             p_sys->pi_y_offsets = NULL;
895         }
896
897         mosaic_ParseSetOffsets( p_this, p_sys, newval.psz_string );
898
899         vlc_mutex_unlock( &p_sys->lock );
900     }
901     else if( VAR_IS( "keep-aspect-ratio" ) )
902     {
903         vlc_mutex_lock( &p_sys->lock );
904         if( newval.i_int )
905         {
906             msg_Dbg( p_this, "keeping aspect ratio" );
907             p_sys->b_ar = 1;
908         }
909         else
910         {
911             msg_Dbg( p_this, "won't keep aspect ratio" );
912             p_sys->b_ar = 0;
913         }
914         vlc_mutex_unlock( &p_sys->lock );
915     }
916     else if( VAR_IS( "keep-picture" ) )
917     {
918         vlc_mutex_lock( &p_sys->lock );
919         p_sys->b_keep = newval.b_bool;
920         if ( !p_sys->b_keep && !p_sys->p_image )
921         {
922             p_sys->p_image = image_HandlerCreate( p_this );
923         }
924         vlc_mutex_unlock( &p_sys->lock );
925     }
926
927     return VLC_SUCCESS;
928 }