* include/video_output.h, ALL: changed api for vout_Request()/vout_Create() to be...
[vlc.git] / modules / codec / ffmpeg / postprocess.c
1 /*****************************************************************************
2  * postprocess.c: video postprocessing using the ffmpeg library
3  *****************************************************************************
4  * Copyright (C) 1999-2001 VideoLAN
5  * $Id$
6  *
7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
8  *          Gildas Bazin <gbazin@netcourrier.com>
9  *
10  * This program is free software; you can redistribute it and/or modify
11  * it under the terms of the GNU General Public License as published by
12  * the Free Software Foundation; either version 2 of the License, or
13  * (at your option) any later version.
14  *
15  * This program is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
18  * GNU General Public License for more details.
19  *
20  * You should have received a copy of the GNU General Public License
21  * along with this program; if not, write to the Free Software
22  * Foundation, Inc., 59 Temple Place - Suite 330, Boston, MA  02111, USA.
23  *****************************************************************************/
24
25 #include <vlc/vlc.h>
26 #include <vlc/vout.h>
27 #include <vlc/decoder.h>
28
29 /* ffmpeg header */
30 #ifdef HAVE_FFMPEG_AVCODEC_H
31 #   include <ffmpeg/avcodec.h>
32 #else
33 #   include <avcodec.h>
34 #endif
35
36 #include "ffmpeg.h"
37
38 #ifdef LIBAVCODEC_PP
39
40 #ifdef HAVE_POSTPROC_POSTPROCESS_H
41 #   include <postproc/postprocess.h>
42 #else
43 #   include <libpostproc/postprocess.h>
44 #endif
45
46 #ifndef PP_CPU_CAPS_ALTIVEC
47 #   define PP_CPU_CAPS_ALTIVEC 0
48 #endif
49
50 /*****************************************************************************
51  * video_postproc_sys_t : ffmpeg video postprocessing descriptor
52  *****************************************************************************/
53 typedef struct video_postproc_sys_t
54 {
55     pp_context_t *pp_context;
56     pp_mode_t    *pp_mode;
57
58     vlc_bool_t   *pb_pp;
59
60     int i_width;
61     int i_height;
62
63 } video_postproc_sys_t;
64
65 static int PPQCallback( vlc_object_t *p_this, char const *psz_cmd,
66                         vlc_value_t oldval, vlc_value_t newval, void *p_data );
67
68 /*****************************************************************************
69  * OpenPostproc: probe and open the postproc
70  *****************************************************************************/
71 void *E_(OpenPostproc)( decoder_t *p_dec, vlc_bool_t *pb_pp )
72 {
73     video_postproc_sys_t *p_sys;
74     vlc_value_t val, val_orig, text;
75
76     p_sys = malloc( sizeof(video_postproc_sys_t) );
77     p_sys->pp_context = NULL;
78     p_sys->pp_mode = NULL;
79
80     *pb_pp = VLC_FALSE;
81     p_sys->pb_pp = pb_pp;
82
83     /* Create object variable if not already done */
84     if( var_Type( p_dec, "ffmpeg-pp-q" ) == 0 )
85     {
86         var_Create( p_dec, "ffmpeg-pp-q",
87                     VLC_VAR_INTEGER | VLC_VAR_HASCHOICE | VLC_VAR_DOINHERIT );
88         text.psz_string = _("Post processing");
89         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_SETTEXT, &text, NULL );
90
91         var_Get( p_dec, "ffmpeg-pp-q", &val_orig );
92         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_DELCHOICE, &val_orig, NULL );
93
94         val.i_int = 0; text.psz_string = _("Disable");
95         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, &text );
96         val.i_int = 1; text.psz_string = _("1 (Lowest)");
97         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, &text );
98         val.i_int = 2;
99         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, NULL );
100         val.i_int = 3;
101         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, NULL );
102         val.i_int = 4;
103         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, NULL );
104         val.i_int = 5;
105         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, NULL );
106         val.i_int = 6; text.psz_string = _("6 (Highest)");
107         var_Change( p_dec, "ffmpeg-pp-q", VLC_VAR_ADDCHOICE, &val, &text );
108         var_AddCallback( p_dec, "ffmpeg-pp-q", PPQCallback, p_sys );
109     }
110
111     /* ***** Load post processing if enabled ***** */
112     var_Get( p_dec, "ffmpeg-pp-q", &val );
113     var_Set( p_dec, "ffmpeg-pp-q", val_orig );
114
115     return p_sys;
116 }
117
118 /*****************************************************************************
119  * InitPostproc: 
120  *****************************************************************************/
121 int E_(InitPostproc)( decoder_t *p_dec, void *p_data,
122                       int i_width, int i_height, int pix_fmt )
123 {
124     video_postproc_sys_t *p_sys = (video_postproc_sys_t *)p_data;
125     int32_t i_cpu = p_dec->p_libvlc->i_cpu;
126     int i_flags = 0;
127
128     /* Set CPU capabilities */
129     if( i_cpu & CPU_CAPABILITY_MMX )
130     {
131         i_flags |= PP_CPU_CAPS_MMX;
132     }
133     if( i_cpu & CPU_CAPABILITY_MMXEXT )
134     {
135         i_flags |= PP_CPU_CAPS_MMX2;
136     }
137     if( i_cpu & CPU_CAPABILITY_3DNOW )
138     {
139         i_flags |= PP_CPU_CAPS_3DNOW;
140     }
141     if( i_cpu & CPU_CAPABILITY_ALTIVEC )
142     {
143         i_flags |= PP_CPU_CAPS_ALTIVEC;
144     }
145
146     switch( pix_fmt )
147     {
148     case PIX_FMT_YUV444P:
149         i_flags |= PP_FORMAT_444;
150         break;
151     case PIX_FMT_YUV422P:
152         i_flags |= PP_FORMAT_422;
153         break;
154     case PIX_FMT_YUV411P:
155         i_flags |= PP_FORMAT_411;
156         break;
157     default:
158         i_flags |= PP_FORMAT_420;
159         break;
160     }
161
162     p_sys->pp_context = pp_get_context( i_width, i_height, i_flags );
163     p_sys->i_width = i_width;
164     p_sys->i_height = i_height;
165
166     return VLC_SUCCESS;
167 }
168
169 /*****************************************************************************
170  * PostprocPict: 
171  *****************************************************************************/
172 int E_(PostprocPict)( decoder_t *p_dec, void *p_data,
173                       picture_t *p_pic, AVFrame *p_ff_pic )
174 {
175     video_postproc_sys_t *p_sys = (video_postproc_sys_t *)p_data;
176
177     uint8_t *src[3], *dst[3];
178     int i_plane, i_src_stride[3], i_dst_stride[3];
179
180     for( i_plane = 0; i_plane < p_pic->i_planes; i_plane++ )
181     {
182         src[i_plane] = p_ff_pic->data[i_plane];
183         dst[i_plane] = p_pic->p[i_plane].p_pixels;
184
185         i_src_stride[i_plane] = p_ff_pic->linesize[i_plane];
186         i_dst_stride[i_plane] = p_pic->p[i_plane].i_pitch;
187     }
188
189     pp_postprocess( src, i_src_stride, dst, i_dst_stride,
190                     p_sys->i_width, p_sys->i_height,
191                     p_ff_pic->qscale_table, p_ff_pic->qstride,
192                     p_sys->pp_mode, p_sys->pp_context,
193                     p_ff_pic->pict_type );
194
195     return VLC_SUCCESS;
196 }
197
198 /*****************************************************************************
199  * ClosePostproc: 
200  *****************************************************************************/
201 void E_(ClosePostproc)( decoder_t *p_dec, void *p_data )
202 {
203     video_postproc_sys_t *p_sys = (video_postproc_sys_t *)p_data;
204
205     if( p_sys && p_sys->pp_mode )
206     {
207         pp_free_mode( p_sys->pp_mode );
208         if( p_sys->pp_context ) pp_free_context( p_sys->pp_context );
209     }
210
211     var_DelCallback( p_dec, "ffmpeg-pp-q", PPQCallback, p_sys );
212
213     if( p_sys ) free( p_sys );
214 }
215
216 /*****************************************************************************
217  * object variables callbacks: a bunch of object variables are used by the
218  * interfaces to interact with the decoder.
219  *****************************************************************************/
220 static int PPQCallback( vlc_object_t *p_this, char const *psz_cmd,
221                         vlc_value_t oldval, vlc_value_t newval, void *p_data )
222 {
223     decoder_t *p_dec = (decoder_t *)p_this;
224     video_postproc_sys_t *p_sys = (video_postproc_sys_t *)p_data;
225
226     if( newval.i_int > 0 )
227     {
228         int  i_quality = newval.i_int;
229         char *psz_name = config_GetPsz( p_dec, "ffmpeg-pp-name" );
230         pp_mode_t *pp_mode;
231
232         if( !psz_name )
233         {
234             psz_name = strdup( "default" );
235         }
236         else if( *psz_name == '\0' )
237         {
238             free( psz_name );
239             psz_name = strdup( "default" );
240         }
241
242         pp_mode = pp_get_mode_by_name_and_quality( psz_name, i_quality );
243
244         if( !pp_mode )
245         {
246             msg_Err( p_dec, "failed getting mode for postproc" );
247             newval.i_int = 0;
248         }
249         else
250         {
251             msg_Dbg( p_dec, "postprocessing enabled" );
252         }
253         free( psz_name );
254
255         p_sys->pp_mode = pp_mode;
256     }
257     else
258     {
259         msg_Dbg( p_dec, "postprocessing disabled" );
260     }
261
262     *p_sys->pb_pp = newval.i_int;
263
264     return VLC_SUCCESS;
265 }
266
267 #endif /* LIBAVCODEC_PP */