Check malloc/recalloc return values.
[vlc.git] / modules / codec / x264.c
1 /*****************************************************************************
2  * x264.c: h264 video encoder
3  *****************************************************************************
4  * Copyright (C) 2004-2006 the VideoLAN team
5  * $Id$
6  *
7  * Authors: Laurent Aimar <fenrir@via.ecp.fr>
8  *
9  * This program is free software; you can redistribute it and/or modify
10  * it under the terms of the GNU General Public License as published by
11  * the Free Software Foundation; either version 2 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU General Public License for more details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston MA 02110-1301, USA.
22  *****************************************************************************/
23
24 /*****************************************************************************
25  * Preamble
26  *****************************************************************************/
27 #ifdef HAVE_CONFIG_H
28 # include "config.h"
29 #endif
30
31 #include <vlc/vlc.h>
32 #include <vlc_plugin.h>
33 #include <vlc_vout.h>
34 #include <vlc_sout.h>
35 #include <vlc_codec.h>
36
37 #ifdef PTW32_STATIC_LIB
38 #include <pthread.h>
39 #endif
40 #include <x264.h>
41
42 #define SOUT_CFG_PREFIX "sout-x264-"
43
44 /*****************************************************************************
45  * Module descriptor
46  *****************************************************************************/
47 static int  Open ( vlc_object_t * );
48 static void Close( vlc_object_t * );
49
50 /* Frame-type options */
51
52 #define KEYINT_TEXT N_("Maximum GOP size")
53 #define KEYINT_LONGTEXT N_( "Sets maximum interval between IDR-frames." \
54     "Larger values save bits, thus improving quality for a given bitrate at " \
55     "the cost of seeking precision." )
56
57 #define MIN_KEYINT_TEXT N_("Minimum GOP size")
58 #define MIN_KEYINT_LONGTEXT N_( "Sets minimum interval between IDR-frames. " \
59     "In H.264, I-frames do not necessarily bound a closed GOP because it is " \
60     "allowable for a P-frame to be predicted from more frames than just the " \
61     "one frame before it (also see reference frame option). Therefore, " \
62     "I-frames are not necessarily seekable. IDR-frames restrict subsequent " \
63     "P-frames from referring to any frame prior to the IDR-frame. \n" \
64     "If scenecuts appear within this interval, they are still encoded as " \
65     "I-frames, but do not start a new GOP." )
66
67 #define SCENE_TEXT N_("Extra I-frames aggressivity" )
68 #define SCENE_LONGTEXT N_( "Scene-cut detection. Controls how " \
69     "aggressively to insert extra I-frames. With small values of " \
70     "scenecut, the codec often has " \
71     "to force an I-frame when it would exceed keyint. " \
72     "Good values of scenecut may find a better location for the " \
73     "I-frame. Large values use more I-frames " \
74     "than necessary, thus wasting bits. -1 disables scene-cut detection, so " \
75     "I-frames are inserted only every other keyint frames, which probably " \
76     "leads to ugly encoding artifacts. Range 1 to 100." )
77
78 #if X264_BUILD >= 55 /* r607 */
79 #define PRESCENE_TEXT N_("Faster, less precise scenecut detection" )
80 #define PRESCENE_LONGTEXT N_( "Faster, less precise scenecut detection. " \
81     "Required and implied by multi-threading." )
82 #endif
83
84 #define BFRAMES_TEXT N_("B-frames between I and P")
85 #define BFRAMES_LONGTEXT N_( "Number of consecutive B-frames between I and " \
86     "P-frames. Range 1 to 16." )
87
88 #define B_ADAPT_TEXT N_("Adaptive B-frame decision")
89 #define B_ADAPT_LONGTEXT N_( "Force the specified number of " \
90     "consecutive B-frames to be used, except possibly before an I-frame." )
91
92 #define B_BIAS_TEXT N_("Influence (bias) B-frames usage")
93 #define B_BIAS_LONGTEXT N_( "Bias the choice to use B-frames. Positive values " \
94     "cause more B-frames, negative values cause less B-frames." )
95
96 #define BPYRAMID_TEXT N_("Keep some B-frames as references")
97 #define BPYRAMID_LONGTEXT N_( "Allows B-frames to be used as references for " \
98     "predicting other frames. Keeps the middle of 2+ consecutive B-frames " \
99     "as a reference, and reorders frame appropriately." )
100
101 #define CABAC_TEXT N_("CABAC")
102 #define CABAC_LONGTEXT N_( "CABAC (Context-Adaptive Binary Arithmetic "\
103     "Coding). Slightly slows down encoding and decoding, but should save " \
104     "10 to 15% bitrate." )
105
106 #define REF_TEXT N_("Number of reference frames")
107 #define REF_LONGTEXT N_( "Number of previous frames used as predictors. " \
108     "This is effective in Anime, but seems to make little difference in " \
109     "live-action source material. Some decoders are unable to deal with " \
110     "large frameref values. Range 1 to 16." )
111
112 #define NF_TEXT N_("Skip loop filter")
113 #define NF_LONGTEXT N_( "Deactivate the deblocking loop filter (decreases quality).")
114
115 #define FILTER_TEXT N_("Loop filter AlphaC0 and Beta parameters alpha:beta")
116 #define FILTER_LONGTEXT N_( "Loop filter AlphaC0 and Beta parameters. " \
117     "Range -6 to 6 for both alpha and beta parameters. -6 means light " \
118     "filter, 6 means strong.")
119  
120 #define LEVEL_TEXT N_("H.264 level")
121 #define LEVEL_LONGTEXT N_( "Specify H.264 level (as defined by Annex A " \
122     "of the standard). Levels are not enforced; it's up to the user to select " \
123     "a level compatible with the rest of the encoding options. Range 1 to 5.1 " \
124     "(10 to 51 is also allowed).")
125
126 /* In order to play an interlaced output stream encoded by x264, a decoder needs
127    mbaff support. r570 is using the 'mb' part and not 'aff' yet; so it's really
128    'pure-interlaced' mode */
129 #if X264_BUILD >= 51 /* r570 */
130 #define INTERLACED_TEXT N_("Interlaced mode")
131 #define INTERLACED_LONGTEXT N_( "Pure-interlaced mode.")
132 #endif
133
134 /* Ratecontrol */
135
136 #define QP_TEXT N_("Set QP")
137 #define QP_LONGTEXT N_( "This selects the quantizer to use. " \
138     "Lower values result in better fidelity, but higher bitrates. 26 is a " \
139     "good default value. Range 0 (lossless) to 51." )
140
141 #define CRF_TEXT N_("Quality-based VBR")
142 #define CRF_LONGTEXT N_( "1-pass Quality-based VBR. Range 0 to 51." )
143
144 #define QPMIN_TEXT N_("Min QP")
145 #define QPMIN_LONGTEXT N_( "Minimum quantizer parameter. 15 to 35 seems to " \
146     "be a useful range." )
147
148 #define QPMAX_TEXT N_("Max QP")
149 #define QPMAX_LONGTEXT N_( "Maximum quantizer parameter." )
150
151 #define QPSTEP_TEXT N_("Max QP step")
152 #define QPSTEP_LONGTEXT N_( "Max QP step between frames.")
153
154 #define RATETOL_TEXT N_("Average bitrate tolerance")
155 #define RATETOL_LONGTEXT N_( "Allowed variance in average " \
156     "bitrate (in kbits/s).")
157
158 #define VBV_MAXRATE_TEXT N_("Max local bitrate")
159 #define VBV_MAXRATE_LONGTEXT N_( "Sets a maximum local bitrate (in kbits/s).")
160
161 #define VBV_BUFSIZE_TEXT N_("VBV buffer")
162 #define VBV_BUFSIZE_LONGTEXT N_( "Averaging period for the maximum " \
163     "local bitrate (in kbits).")
164
165 #define VBV_INIT_TEXT N_("Initial VBV buffer occupancy")
166 #define VBV_INIT_LONGTEXT N_( "Sets the initial buffer occupancy as a " \
167     "fraction of the buffer size. Range 0.0 to 1.0.")
168
169 #if X264_BUILD >= 59
170 #define AQ_MODE_TEXT N_("How AQ distributes bits")
171 #define AQ_MODE_LONGTEXT N_("Defines bitdistribution mode for AQ, default 2\n" \
172         " - 0: Disabled\n"\
173         " - 1: Avoid moving bits between frames\n"\
174         " - 2: Move bits between frames")
175
176 #define AQ_STRENGTH_TEXT N_("Strength of AQ")
177 #define AQ_STRENGTH_LONGTEXT N_("Strength to reduce blocking and blurring in flat\n"\
178         "and textured areas, default 1.0 recommented to be between 0..2\n"\
179         " - 0.5: weak AQ\n"\
180         " - 1.5: strong AQ")
181 #endif
182
183 /* IP Ratio < 1 is technically valid but should never improve quality */
184 #define IPRATIO_TEXT N_("QP factor between I and P")
185 #define IPRATIO_LONGTEXT N_( "QP factor between I and P. Range 1.0 to 2.0.")
186
187 /* PB ratio < 1 is not valid and breaks ratecontrol */
188 #define PBRATIO_TEXT N_("QP factor between P and B")
189 #define PBRATIO_LONGTEXT N_( "QP factor between P and B. Range 1.0 to 2.0.")
190
191 #define CHROMA_QP_OFFSET_TEXT N_("QP difference between chroma and luma")
192 #define CHROMA_QP_OFFSET_LONGTEXT N_( "QP difference between chroma and luma.")
193
194 #define PASS_TEXT N_("Multipass ratecontrol")
195 #define PASS_LONGTEXT N_( "Multipass ratecontrol:\n" \
196     " - 1: First pass, creates stats file\n" \
197     " - 2: Last pass, does not overwrite stats file\n" \
198     " - 3: Nth pass, overwrites stats file\n" )
199
200 #define QCOMP_TEXT N_("QP curve compression")
201 #define QCOMP_LONGTEXT N_( "QP curve compression. Range 0.0 (CBR) to 1.0 (QCP).")
202
203 #define CPLXBLUR_TEXT N_("Reduce fluctuations in QP")
204 #define CPLXBLUR_LONGTEXT N_( "This reduces the fluctuations in QP " \
205     "before curve compression. Temporally blurs complexity.")
206
207 #define QBLUR_TEXT N_("Reduce fluctuations in QP")
208 #define QBLUR_LONGTEXT N_( "This reduces the fluctations in QP " \
209     "after curve compression. Temporally blurs quants.")
210
211 /* Analysis */
212
213 #define ANALYSE_TEXT N_("Partitions to consider")
214 #define ANALYSE_LONGTEXT N_( "Partitions to consider in analyse mode: \n" \
215     " - none  : \n" \
216     " - fast  : i4x4\n" \
217     " - normal: i4x4,p8x8,(i8x8)\n" \
218     " - slow  : i4x4,p8x8,(i8x8),b8x8\n" \
219     " - all   : i4x4,p8x8,(i8x8),b8x8,p4x4\n" \
220     "(p4x4 requires p8x8. i8x8 requires 8x8dct).")
221
222 #define DIRECT_PRED_TEXT N_("Direct MV prediction mode")
223 #define DIRECT_PRED_LONGTEXT N_( "Direct MV prediction mode.")
224
225 #if X264_BUILD >= 52 /* r573 */
226 #define DIRECT_PRED_SIZE_TEXT N_("Direct prediction size")
227 #define DIRECT_PRED_SIZE_LONGTEXT N_( "Direct prediction size: "\
228     " -  0: 4x4\n" \
229     " -  1: 8x8\n" \
230     " - -1: smallest possible according to level\n" )
231 #endif
232
233 #define WEIGHTB_TEXT N_("Weighted prediction for B-frames")
234 #define WEIGHTB_LONGTEXT N_( "Weighted prediction for B-frames.")
235
236 #define ME_TEXT N_("Integer pixel motion estimation method")
237 #if X264_BUILD >= 58 /* r728 */
238 #define ME_LONGTEXT N_( "Selects the motion estimation algorithm: "\
239     " - dia: diamond search, radius 1 (fast)\n" \
240     " - hex: hexagonal search, radius 2\n" \
241     " - umh: uneven multi-hexagon search (better but slower)\n" \
242     " - esa: exhaustive search (extremely slow, primarily for testing)\n" \
243     " - tesa: hadamard exhaustive search (extremely slow, primarily for testing)\n" )
244 #else
245 #define ME_LONGTEXT N_( "Selects the motion estimation algorithm: "\
246     " - dia: diamond search, radius 1 (fast)\n" \
247     " - hex: hexagonal search, radius 2\n" \
248     " - umh: uneven multi-hexagon search (better but slower)\n" \
249     " - esa: exhaustive search (extremely slow, primarily for testing)\n" )
250 #endif
251
252 #if X264_BUILD >= 24
253 #define MERANGE_TEXT N_("Maximum motion vector search range")
254 #define MERANGE_LONGTEXT N_( "Maximum distance to search for " \
255     "motion estimation, measured from predicted position(s). " \
256     "Default of 16 is good for most footage, high motion sequences may " \
257     "benefit from settings between 24 and 32. Range 0 to 64." )
258
259 #define MVRANGE_TEXT N_("Maximum motion vector length")
260 #define MVRANGE_LONGTEXT N_( "Maximum motion vector length in pixels. " \
261     "-1 is automatic, based on level." )
262 #endif
263
264 #if X264_BUILD >= 55 /* r607 */
265 #define MVRANGE_THREAD_TEXT N_("Minimum buffer space between threads")
266 #define MVRANGE_THREAD_LONGTEXT N_( "Minimum buffer space between threads. " \
267     "-1 is automatic, based on number of threads." )
268 #endif
269
270 #define SUBME_TEXT N_("Subpixel motion estimation and partition decision " \
271     "quality")
272 #if X264_BUILD >= 46 /* r477 */
273 #define SUBME_MAX 7
274 #define SUBME_LONGTEXT N_( "This parameter controls quality versus speed " \
275     "tradeoffs involved in the motion estimation decision process " \
276     "(lower = quicker and higher = better quality). Range 1 to 7." )
277 #elif X264_BUILD >= 30 /* r262 */
278 #define SUBME_MAX 6
279 #define SUBME_LONGTEXT N_( "This parameter controls quality versus speed " \
280     "tradeoffs involved in the motion estimation decision process " \
281     "(lower = quicker and higher = better quality). Range 1 to 6." )
282 #else
283 #define SUBME_MAX 5
284 #define SUBME_LONGTEXT N_( "This parameter controls quality versus speed " \
285     "tradeoffs involved in the motion estimation decision process " \
286     "(lower = quicker and higher = better quality). Range 1 to 5." )
287 #endif
288
289 #define B_RDO_TEXT N_("RD based mode decision for B-frames")
290 #define B_RDO_LONGTEXT N_( "RD based mode decision for B-frames. This " \
291     "requires subme 6 (or higher).")
292
293 #define MIXED_REFS_TEXT N_("Decide references on a per partition basis")
294 #define MIXED_REFS_LONGTEXT N_( "Allows each 8x8 or 16x8 partition to " \
295     "independently select a reference frame, as opposed to only one ref " \
296     "per macroblock." )
297
298 #define CHROMA_ME_TEXT N_("Chroma in motion estimation")
299 #define CHROMA_ME_LONGTEXT N_( "Chroma ME for subpel and mode decision in " \
300     "P-frames.")
301
302 #define BIME_TEXT N_("Jointly optimize both MVs in B-frames")
303 #define BIME_LONGTEXT N_( "Joint bidirectional motion refinement.")
304
305 #define TRANSFORM_8X8DCT_TEXT N_("Adaptive spatial transform size")
306 #define TRANSFORM_8X8DCT_LONGTEXT N_( \
307     "SATD-based decision for 8x8 transform in inter-MBs.")
308
309 #define TRELLIS_TEXT N_("Trellis RD quantization" )
310 #define TRELLIS_LONGTEXT N_( "Trellis RD quantization: \n" \
311     " - 0: disabled\n" \
312     " - 1: enabled only on the final encode of a MB\n" \
313     " - 2: enabled on all mode decisions\n" \
314     "This requires CABAC." )
315
316 #define FAST_PSKIP_TEXT N_("Early SKIP detection on P-frames")
317 #define FAST_PSKIP_LONGTEXT N_( "Early SKIP detection on P-frames.")
318
319 #define DCT_DECIMATE_TEXT N_("Coefficient thresholding on P-frames")
320 #define DCT_DECIMATE_LONGTEXT N_( "Coefficient thresholding on P-frames." \
321     "Eliminate dct blocks containing only a small single coefficient.")
322
323 /* Noise reduction 1 is too weak to measure, suggest at least 10 */
324 #define NR_TEXT N_("Noise reduction")
325 #define NR_LONGTEXT N_( "Dct-domain noise reduction. Adaptive pseudo-deadzone. " \
326     "10 to 1000 seems to be a useful range." )
327
328 #if X264_BUILD >= 52 /* r573 */
329 #define DEADZONE_INTER_TEXT N_("Inter luma quantization deadzone")
330 #define DEADZONE_INTER_LONGTEXT N_( "Set the size of the inter luma quantization deadzone. " \
331     "Range 0 to 32." )
332
333 #define DEADZONE_INTRA_TEXT N_("Intra luma quantization deadzone")
334 #define DEADZONE_INTRA_LONGTEXT N_( "Set the size of the intra luma quantization deadzone. " \
335     "Range 0 to 32." )
336 #endif
337
338 /* Input/Output */
339
340 #if X264_BUILD >= 55 /* r607 */
341 #define NON_DETERMINISTIC_TEXT N_("Non-deterministic optimizations when threaded")
342 #define NON_DETERMINISTIC_LONGTEXT N_( "Slightly improve quality of SMP, " \
343     "at the cost of repeatability.")
344 #endif
345
346 #define ASM_TEXT N_("CPU optimizations")
347 #define ASM_LONGTEXT N_( "Use assembler CPU optimizations.")
348
349 #define STATS_TEXT N_("Filename for 2 pass stats file")
350 #define STATS_LONGTEXT N_( "Filename for 2 pass stats file for multi-pass encoding.")
351
352 #define PSNR_TEXT N_("PSNR computation")
353 #define PSNR_LONGTEXT N_( "Compute and print PSNR stats. This has no effect on " \
354     "the actual encoding quality." )
355
356 #define SSIM_TEXT N_("SSIM computation")
357 #define SSIM_LONGTEXT N_( "Compute and print SSIM stats. This has no effect on " \
358     "the actual encoding quality." )
359
360 #define QUIET_TEXT N_("Quiet mode")
361 #define QUIET_LONGTEXT N_( "Quiet mode.")
362
363 #define VERBOSE_TEXT N_("Statistics")
364 #define VERBOSE_LONGTEXT N_( "Print stats for each frame.")
365
366 #if X264_BUILD >= 47 /* r518 */
367 #define SPS_ID_TEXT N_("SPS and PPS id numbers")
368 #define SPS_ID_LONGTEXT N_( "Set SPS and PPS id numbers to allow concatenating " \
369     "streams with different settings.")
370 #endif
371
372 #define AUD_TEXT N_("Access unit delimiters")
373 #define AUD_LONGTEXT N_( "Generate access unit delimiter NAL units.")
374
375 #if X264_BUILD >= 24 && X264_BUILD < 58
376 static const char *enc_me_list[] =
377   { "dia", "hex", "umh", "esa" };
378 static const char *enc_me_list_text[] =
379   { N_("dia"), N_("hex"), N_("umh"), N_("esa") };
380 #endif
381
382 #if X264_BUILD >= 58 /* r728 */
383 static const char *enc_me_list[] =
384   { "dia", "hex", "umh", "esa", "tesa" };
385 static const char *enc_me_list_text[] =
386   { N_("dia"), N_("hex"), N_("umh"), N_("esa"), N_("tesa") };
387 #endif
388
389 static const char *enc_analyse_list[] =
390   { "none", "fast", "normal", "slow", "all" };
391 static const char *enc_analyse_list_text[] =
392   { N_("none"), N_("fast"), N_("normal"), N_("slow"), N_("all") };
393
394 #if X264_BUILD >= 45 /* r457 */
395 static const char *direct_pred_list[] =
396   { "none", "spatial", "temporal", "auto" };
397 static const char *direct_pred_list_text[] =
398   { N_("none"), N_("spatial"), N_("temporal"), N_("auto") };
399 #else
400 static const char *direct_pred_list[] =
401   { "none", "spatial", "temporal" };
402 static const char *direct_pred_list_text[] =
403   { N_("none"), N_("spatial"), N_("temporal") };
404 #endif
405
406 vlc_module_begin();
407     set_description( _("H.264/MPEG4 AVC encoder (using x264 library)"));
408     set_capability( "encoder", 200 );
409     set_callbacks( Open, Close );
410     set_category( CAT_INPUT );
411     set_subcategory( SUBCAT_INPUT_VCODEC );
412
413 /* Frame-type options */
414
415     add_integer( SOUT_CFG_PREFIX "keyint", 250, NULL, KEYINT_TEXT,
416                  KEYINT_LONGTEXT, false );
417
418     add_integer( SOUT_CFG_PREFIX "min-keyint", 25, NULL, MIN_KEYINT_TEXT,
419                  MIN_KEYINT_LONGTEXT, false );
420         add_deprecated_alias( SOUT_CFG_PREFIX "keyint-min" ); /* Deprecated since 0.8.5 */
421
422     add_integer( SOUT_CFG_PREFIX "scenecut", 40, NULL, SCENE_TEXT,
423                  SCENE_LONGTEXT, false );
424         change_integer_range( -1, 100 );
425
426 #if X264_BUILD >= 55 /* r607 */
427     add_bool( SOUT_CFG_PREFIX "pre-scenecut", 0, NULL, PRESCENE_TEXT,
428               PRESCENE_LONGTEXT, false );
429 #endif
430
431     add_integer( SOUT_CFG_PREFIX "bframes", 0, NULL, BFRAMES_TEXT,
432                  BFRAMES_LONGTEXT, false );
433         change_integer_range( 0, 16 );
434
435 #if X264_BUILD >= 0x0013 /* r137 */
436     add_bool( SOUT_CFG_PREFIX "b-adapt", 1, NULL, B_ADAPT_TEXT,
437               B_ADAPT_LONGTEXT, false );
438
439     add_integer( SOUT_CFG_PREFIX "b-bias", 0, NULL, B_BIAS_TEXT,
440                  B_BIAS_LONGTEXT, false );
441         change_integer_range( -100, 100 );
442 #endif
443
444     add_bool( SOUT_CFG_PREFIX "bpyramid", 0, NULL, BPYRAMID_TEXT,
445               BPYRAMID_LONGTEXT, false );
446
447     add_bool( SOUT_CFG_PREFIX "cabac", 1, NULL, CABAC_TEXT, CABAC_LONGTEXT,
448               false );
449
450     add_integer( SOUT_CFG_PREFIX "ref", 1, NULL, REF_TEXT,
451                  REF_LONGTEXT, false );
452         change_integer_range( 1, 16 );
453         add_deprecated_alias( SOUT_CFG_PREFIX "frameref" ); /* Deprecated since 0.8.5 */
454
455     add_bool( SOUT_CFG_PREFIX "nf", 0, NULL, NF_TEXT,
456               NF_LONGTEXT, false );
457         add_deprecated_alias( SOUT_CFG_PREFIX "loopfilter" ); /* Deprecated since 0.8.5 */
458
459     add_string( SOUT_CFG_PREFIX "deblock", "0:0", NULL, FILTER_TEXT,
460                  FILTER_LONGTEXT, false );
461         add_deprecated_alias( SOUT_CFG_PREFIX "filter" ); /* Deprecated since 0.8.6 */
462
463     add_string( SOUT_CFG_PREFIX "level", "5.1", NULL, LEVEL_TEXT,
464                LEVEL_LONGTEXT, false );
465
466 #if X264_BUILD >= 51 /* r570 */
467     add_bool( SOUT_CFG_PREFIX "interlaced", 0, NULL, INTERLACED_TEXT, INTERLACED_LONGTEXT,
468               false );
469 #endif
470
471 /* Ratecontrol */
472
473     add_integer( SOUT_CFG_PREFIX "qp", 26, NULL, QP_TEXT, QP_LONGTEXT,
474                  false );
475         change_integer_range( 0, 51 ); /* QP 0 -> lossless encoding */
476
477 #if X264_BUILD >= 37 /* r334 */
478     add_integer( SOUT_CFG_PREFIX "crf", 0, NULL, CRF_TEXT,
479                  CRF_LONGTEXT, false );
480         change_integer_range( 0, 51 );
481 #endif
482
483     add_integer( SOUT_CFG_PREFIX "qpmin", 10, NULL, QPMIN_TEXT,
484                  QPMIN_LONGTEXT, false );
485         change_integer_range( 0, 51 );
486         add_deprecated_alias( SOUT_CFG_PREFIX "qp-min" ); /* Deprecated since 0.8.5 */
487
488     add_integer( SOUT_CFG_PREFIX "qpmax", 51, NULL, QPMAX_TEXT,
489                  QPMAX_LONGTEXT, false );
490         change_integer_range( 0, 51 );
491         add_deprecated_alias( SOUT_CFG_PREFIX "qp-max" ); /* Deprecated since 0.8.5 */
492
493     add_integer( SOUT_CFG_PREFIX "qpstep", 4, NULL, QPSTEP_TEXT,
494                  QPSTEP_LONGTEXT, false );
495         change_integer_range( 0, 51 );
496
497     add_float( SOUT_CFG_PREFIX "ratetol", 1.0, NULL, RATETOL_TEXT,
498                RATETOL_LONGTEXT, false );
499         change_float_range( 0, 100 );
500         add_deprecated_alias( SOUT_CFG_PREFIX "tolerance" ); /* Deprecated since 0.8.5 */
501
502     add_integer( SOUT_CFG_PREFIX "vbv-maxrate", 0, NULL, VBV_MAXRATE_TEXT,
503                  VBV_MAXRATE_LONGTEXT, false );
504
505     add_integer( SOUT_CFG_PREFIX "vbv-bufsize", 0, NULL, VBV_BUFSIZE_TEXT,
506                  VBV_BUFSIZE_LONGTEXT, false );
507
508     add_float( SOUT_CFG_PREFIX "vbv-init", 0.9, NULL, VBV_INIT_TEXT,
509                VBV_INIT_LONGTEXT, false );
510         change_float_range( 0, 1 );
511
512     add_float( SOUT_CFG_PREFIX "ipratio", 1.40, NULL, IPRATIO_TEXT,
513                IPRATIO_LONGTEXT, false );
514         change_float_range( 1, 2 );
515
516     add_float( SOUT_CFG_PREFIX "pbratio", 1.30, NULL, PBRATIO_TEXT,
517                PBRATIO_LONGTEXT, false );
518         change_float_range( 1, 2 );
519
520 #if X264_BUILD >= 23 /* r190 */
521     add_integer( SOUT_CFG_PREFIX "chroma-qp-offset", 0, NULL, CHROMA_QP_OFFSET_TEXT,
522                  CHROMA_QP_OFFSET_LONGTEXT, false );
523 #endif
524
525     add_integer( SOUT_CFG_PREFIX "pass", 0, NULL, PASS_TEXT,
526                  PASS_LONGTEXT, false );
527         change_integer_range( 0, 3 );
528
529     add_float( SOUT_CFG_PREFIX "qcomp", 0.60, NULL, QCOMP_TEXT,
530                QCOMP_LONGTEXT, false );
531         change_float_range( 0, 1 );
532
533     add_float( SOUT_CFG_PREFIX "cplxblur", 20.0, NULL, CPLXBLUR_TEXT,
534                CPLXBLUR_LONGTEXT, false );
535
536     add_float( SOUT_CFG_PREFIX "qblur", 0.5, NULL, QBLUR_TEXT,
537                QBLUR_LONGTEXT, false );
538 #if X264_BUILD >= 59
539     add_integer( SOUT_CFG_PREFIX "aq-mode", 2, NULL, AQ_MODE_TEXT,
540                  AQ_MODE_LONGTEXT, false );
541          change_integer_range( 0, 2 );
542     add_float( SOUT_CFG_PREFIX "aq-strength", 1.0, NULL, AQ_STRENGTH_TEXT,
543                AQ_STRENGTH_LONGTEXT, false );
544 #endif
545
546 /* Analysis */
547
548     /* x264 partitions = none (default). set at least "normal" mode. */
549     add_string( SOUT_CFG_PREFIX "partitions", "normal", NULL, ANALYSE_TEXT,
550                 ANALYSE_LONGTEXT, false );
551         change_string_list( enc_analyse_list, enc_analyse_list_text, 0 );
552         add_deprecated_alias( SOUT_CFG_PREFIX "analyse" ); /* Deprecated since 0.8.6 */
553
554     add_string( SOUT_CFG_PREFIX "direct", "spatial", NULL, DIRECT_PRED_TEXT,
555                 DIRECT_PRED_LONGTEXT, false );
556         change_string_list( direct_pred_list, direct_pred_list_text, 0 );
557
558 #if X264_BUILD >= 52 /* r573 */
559     add_integer( SOUT_CFG_PREFIX "direct-8x8", -1, NULL, DIRECT_PRED_SIZE_TEXT,
560                  DIRECT_PRED_SIZE_LONGTEXT, false );
561         change_integer_range( -1, 1 );
562 #endif
563
564 #if X264_BUILD >= 0x0012 /* r134 */
565     add_bool( SOUT_CFG_PREFIX "weightb", 0, NULL, WEIGHTB_TEXT,
566               WEIGHTB_LONGTEXT, false );
567 #endif
568
569 #if X264_BUILD >= 24 /* r221 */
570     add_string( SOUT_CFG_PREFIX "me", "hex", NULL, ME_TEXT,
571                 ME_LONGTEXT, false );
572         change_string_list( enc_me_list, enc_me_list_text, 0 );
573
574     add_integer( SOUT_CFG_PREFIX "merange", 16, NULL, MERANGE_TEXT,
575                  MERANGE_LONGTEXT, false );
576         change_integer_range( 1, 64 );
577 #endif
578
579     add_integer( SOUT_CFG_PREFIX "mvrange", -1, NULL, MVRANGE_TEXT,
580                  MVRANGE_LONGTEXT, false );
581
582 #if X264_BUILD >= 55 /* r607 */
583     add_integer( SOUT_CFG_PREFIX "mvrange-thread", -1, NULL, MVRANGE_THREAD_TEXT,
584                  MVRANGE_THREAD_LONGTEXT, false );
585 #endif
586
587     add_integer( SOUT_CFG_PREFIX "subme", 5, NULL, SUBME_TEXT,
588                  SUBME_LONGTEXT, false );
589         change_integer_range( 1, SUBME_MAX );
590         add_deprecated_alias( SOUT_CFG_PREFIX "subpel" ); /* Deprecated since 0.8.5 */
591
592 #if X264_BUILD >= 41 /* r368 */
593     add_bool( SOUT_CFG_PREFIX "b-rdo", 0, NULL, B_RDO_TEXT,
594               B_RDO_LONGTEXT, false );
595 #endif
596
597 #if X264_BUILD >= 36 /* r318 */
598     add_bool( SOUT_CFG_PREFIX "mixed-refs", 0, NULL, MIXED_REFS_TEXT,
599               MIXED_REFS_LONGTEXT, false );
600 #endif
601
602 #if X264_BUILD >= 23 /* r171 */
603     add_bool( SOUT_CFG_PREFIX "chroma-me", 1, NULL, CHROMA_ME_TEXT,
604               CHROMA_ME_LONGTEXT, false );
605 #endif
606
607 #if X264_BUILD >= 43 /* r390 */
608     add_bool( SOUT_CFG_PREFIX "bime", 0, NULL, BIME_TEXT,
609               BIME_LONGTEXT, false );
610 #endif
611
612 #if X264_BUILD >= 30 /* r251 */
613     add_bool( SOUT_CFG_PREFIX "8x8dct", 0, NULL, TRANSFORM_8X8DCT_TEXT,
614               TRANSFORM_8X8DCT_LONGTEXT, false );
615 #endif
616
617 #if X264_BUILD >= 39 /* r360 */
618     add_integer( SOUT_CFG_PREFIX "trellis", 0, NULL, TRELLIS_TEXT,
619                  TRELLIS_LONGTEXT, false );
620         change_integer_range( 0, 2 );
621 #endif
622
623 #if X264_BUILD >= 42 /* r384 */
624     add_bool( SOUT_CFG_PREFIX "fast-pskip", 1, NULL, FAST_PSKIP_TEXT,
625               FAST_PSKIP_LONGTEXT, false );
626 #endif
627
628 #if X264_BUILD >= 46 /* r503 */
629     add_bool( SOUT_CFG_PREFIX "dct-decimate", 1, NULL, DCT_DECIMATE_TEXT,
630               DCT_DECIMATE_LONGTEXT, false );
631 #endif
632
633 #if X264_BUILD >= 44 /* r398 */
634     add_integer( SOUT_CFG_PREFIX "nr", 0, NULL, NR_TEXT,
635                  NR_LONGTEXT, false );
636         change_integer_range( 0, 1000 );
637 #endif
638
639 #if X264_BUILD >= 52 /* r573 */
640     add_integer( SOUT_CFG_PREFIX "deadzone-inter", 21, NULL, DEADZONE_INTER_TEXT,
641                  DEADZONE_INTRA_LONGTEXT, false );
642         change_integer_range( 0, 32 );
643
644     add_integer( SOUT_CFG_PREFIX "deadzone-intra", 11, NULL, DEADZONE_INTRA_TEXT,
645                  DEADZONE_INTRA_LONGTEXT, false );
646         change_integer_range( 0, 32 );
647 #endif
648
649 /* Input/Output */
650
651 #if X264_BUILD >= 55 /* r607 */
652     add_bool( SOUT_CFG_PREFIX "non-deterministic", 0, NULL, NON_DETERMINISTIC_TEXT,
653               NON_DETERMINISTIC_LONGTEXT, false );
654 #endif
655
656     add_bool( SOUT_CFG_PREFIX "asm", 1, NULL, ASM_TEXT,
657               ASM_LONGTEXT, false );
658
659     /* x264 psnr = 1 (default). disable PSNR computation for speed. */
660     add_bool( SOUT_CFG_PREFIX "psnr", 0, NULL, PSNR_TEXT,
661               PSNR_LONGTEXT, false );
662
663 #if X264_BUILD >= 50 /* r554 */
664     /* x264 ssim = 1 (default). disable SSIM computation for speed. */
665     add_bool( SOUT_CFG_PREFIX "ssim", 0, NULL, SSIM_TEXT,
666               SSIM_LONGTEXT, false );
667 #endif
668
669     add_bool( SOUT_CFG_PREFIX "quiet", 0, NULL, QUIET_TEXT,
670               QUIET_LONGTEXT, false );
671
672 #if X264_BUILD >= 47 /* r518 */
673     add_integer( SOUT_CFG_PREFIX "sps-id", 0, NULL, SPS_ID_TEXT,
674                  SPS_ID_LONGTEXT, false );
675 #endif
676
677     add_bool( SOUT_CFG_PREFIX "aud", 0, NULL, AUD_TEXT,
678               AUD_LONGTEXT, false );
679
680 #if X264_BUILD >= 0x000e /* r81 */
681     add_bool( SOUT_CFG_PREFIX "verbose", 0, NULL, VERBOSE_TEXT,
682               VERBOSE_LONGTEXT, false );
683 #endif
684
685     add_string( SOUT_CFG_PREFIX "stats", "x264_2pass.log", NULL, STATS_TEXT,
686                 STATS_LONGTEXT, false );
687
688 vlc_module_end();
689
690 /*****************************************************************************
691  * Local prototypes
692  *****************************************************************************/
693 static const char *ppsz_sout_options[] = {
694     "8x8dct", "analyse", "asm", "aud", "bframes", "bime", "bpyramid",
695     "b-adapt", "b-bias", "b-rdo", "cabac", "chroma-me", "chroma-qp-offset",
696     "cplxblur", "crf", "dct-decimate", "deadzone-inter", "deadzone-intra",
697     "deblock", "direct", "direct-8x8", "filter", "fast-pskip", "frameref",
698     "interlaced", "ipratio", "keyint", "keyint-min", "level", "loopfilter",
699     "me", "merange", "min-keyint", "mixed-refs", "mvrange", "mvrange-thread",
700     "nf", "non-deterministic", "nr", "partitions", "pass", "pbratio",
701     "pre-scenecut", "psnr", "qblur", "qp", "qcomp", "qpstep", "qpmax",
702     "qpmin", "qp-max", "qp-min", "quiet", "ratetol", "ref", "scenecut",
703     "sps-id", "ssim", "stats", "subme", "subpel", "tolerance", "trellis",
704     "verbose", "vbv-bufsize", "vbv-init", "vbv-maxrate", "weightb", "aq-mode",
705     "aq-strength",NULL
706 };
707
708 static block_t *Encode( encoder_t *, picture_t * );
709
710 struct encoder_sys_t
711 {
712     x264_t          *h;
713     x264_param_t    param;
714
715     int             i_buffer;
716     uint8_t         *p_buffer;
717
718     mtime_t         i_interpolated_dts;
719
720     char *psz_stat_name;
721 };
722
723 /*****************************************************************************
724  * Open: probe the encoder
725  *****************************************************************************/
726 static int  Open ( vlc_object_t *p_this )
727 {
728     encoder_t     *p_enc = (encoder_t *)p_this;
729     encoder_sys_t *p_sys;
730     vlc_value_t    val;
731     int i_qmin = 0, i_qmax = 0;
732     x264_nal_t    *nal;
733     int i, i_nal;
734
735     if( p_enc->fmt_out.i_codec != VLC_FOURCC( 'h', '2', '6', '4' ) &&
736         !p_enc->b_force )
737     {
738         return VLC_EGENERIC;
739     }
740
741     /* X264_POINTVER or X264_VERSION are not available */
742     msg_Dbg ( p_enc, "version x264 0.%d.X", X264_BUILD );
743
744 #if X264_BUILD < 37
745     if( p_enc->fmt_in.video.i_width % 16 != 0 ||
746         p_enc->fmt_in.video.i_height % 16 != 0 )
747     {
748         msg_Warn( p_enc, "size is not a multiple of 16 (%ix%i)",
749                   p_enc->fmt_in.video.i_width, p_enc->fmt_in.video.i_height );
750
751         if( p_enc->fmt_in.video.i_width < 16 ||
752             p_enc->fmt_in.video.i_height < 16 )
753         {
754             msg_Err( p_enc, "video is too small to be cropped" );
755             return VLC_EGENERIC;
756         }
757
758         msg_Warn( p_enc, "cropping video to %ix%i",
759                   p_enc->fmt_in.video.i_width >> 4 << 4,
760                   p_enc->fmt_in.video.i_height >> 4 << 4 );
761     }
762 #endif
763
764     config_ChainParse( p_enc, SOUT_CFG_PREFIX, ppsz_sout_options, p_enc->p_cfg );
765
766     p_enc->fmt_out.i_codec = VLC_FOURCC( 'h', '2', '6', '4' );
767     p_enc->fmt_in.i_codec = VLC_FOURCC('I','4','2','0');
768
769     p_enc->pf_encode_video = Encode;
770     p_enc->pf_encode_audio = NULL;
771     p_enc->p_sys = p_sys = malloc( sizeof( encoder_sys_t ) );
772     if( !p_sys )
773         return VLC_ENOMEM;
774     p_sys->i_interpolated_dts = 0;
775     p_sys->psz_stat_name = NULL;
776
777     x264_param_default( &p_sys->param );
778     p_sys->param.i_width  = p_enc->fmt_in.video.i_width;
779     p_sys->param.i_height = p_enc->fmt_in.video.i_height;
780 #if X264_BUILD < 37
781     p_sys->param.i_width  = p_sys->param.i_width >> 4 << 4;
782     p_sys->param.i_height = p_sys->param.i_height >> 4 << 4;
783 #endif
784
785     /* average bitrate specified by transcode vb */
786     p_sys->param.rc.i_bitrate = p_enc->fmt_out.i_bitrate / 1000;
787
788     var_Get( p_enc, SOUT_CFG_PREFIX "qpstep", &val );
789     if( val.i_int >= 0 && val.i_int <= 51 ) p_sys->param.rc.i_qp_step = val.i_int;
790     var_Get( p_enc, SOUT_CFG_PREFIX "qpmin", &val );
791     if( val.i_int >= 0 && val.i_int <= 51 )
792     {
793         i_qmin = val.i_int;
794         p_sys->param.rc.i_qp_min = i_qmin;
795     }
796     var_Get( p_enc, SOUT_CFG_PREFIX "qpmax", &val );
797     if( val.i_int >= 0 && val.i_int <= 51 )
798     {
799         i_qmax = val.i_int;
800         p_sys->param.rc.i_qp_max = i_qmax;
801     }
802
803     var_Get( p_enc, SOUT_CFG_PREFIX "qp", &val );
804     if( val.i_int >= 0 && val.i_int <= 51 )
805     {
806         if( i_qmin > val.i_int ) i_qmin = val.i_int;
807         if( i_qmax < val.i_int ) i_qmax = val.i_int;
808
809         p_sys->param.rc.i_rc_method = X264_RC_CQP;
810 #if X264_BUILD >= 0x000a
811         p_sys->param.rc.i_qp_constant = val.i_int;
812         p_sys->param.rc.i_qp_min = i_qmin;
813         p_sys->param.rc.i_qp_max = i_qmax;
814 #else
815         p_sys->param.i_qp_constant = val.i_int;
816 #endif
817     }
818
819 #if X264_BUILD < 48
820     /* cbr = 1 overrides qp or crf and sets an average bitrate
821        but maxrate = average bitrate is needed for "real" CBR */
822     if( p_sys->param.rc.i_bitrate > 0 ) p_sys->param.rc.b_cbr = 1;
823 #else
824     if( p_sys->param.rc.i_bitrate > 0 ) p_sys->param.rc.i_rc_method = X264_RC_ABR;
825 #endif
826
827 #if X264_BUILD >= 24
828     var_Get( p_enc, SOUT_CFG_PREFIX "ratetol", &val );
829     p_sys->param.rc.f_rate_tolerance = val.f_float;
830
831     var_Get( p_enc, SOUT_CFG_PREFIX "vbv-init", &val );
832     p_sys->param.rc.f_vbv_buffer_init = val.f_float;
833
834     var_Get( p_enc, SOUT_CFG_PREFIX "vbv-bufsize", &val );
835     p_sys->param.rc.i_vbv_buffer_size = val.i_int;
836
837     /* x264 vbv-bufsize = 0 (default). if not provided set period
838        in seconds for local maximum bitrate (cache/bufsize) based
839        on average bitrate. */
840     if( !val.i_int )
841         p_sys->param.rc.i_vbv_buffer_size = p_sys->param.rc.i_bitrate * 2;
842
843     /* max bitrate = average bitrate -> CBR */
844     var_Get( p_enc, SOUT_CFG_PREFIX "vbv-maxrate", &val );
845     p_sys->param.rc.i_vbv_max_bitrate = val.i_int;
846
847 #else
848     p_sys->param.rc.i_rc_buffer_size = p_sys->param.rc.i_bitrate;
849     p_sys->param.rc.i_rc_init_buffer = p_sys->param.rc.i_bitrate / 4;
850 #endif
851
852     var_Get( p_enc, SOUT_CFG_PREFIX "cabac", &val );
853     p_sys->param.b_cabac = val.b_bool;
854
855     /* disable deblocking when nf (no loop filter) is enabled */
856     var_Get( p_enc, SOUT_CFG_PREFIX "nf", &val );
857     p_sys->param.b_deblocking_filter = !val.b_bool;
858
859     var_Get( p_enc, SOUT_CFG_PREFIX "deblock", &val );
860     if( val.psz_string )
861     {
862         char *p = strchr( val.psz_string, ':' );
863         p_sys->param.i_deblocking_filter_alphac0 = atoi( val.psz_string );
864         p_sys->param.i_deblocking_filter_beta = p ? atoi( p+1 ) : p_sys->param.i_deblocking_filter_alphac0;
865         free( val.psz_string );
866     }
867
868     var_Get( p_enc, SOUT_CFG_PREFIX "level", &val );
869     if( val.psz_string )
870     {
871         if( atof (val.psz_string) < 6 )
872             p_sys->param.i_level_idc = (int) ( 10 * atof (val.psz_string) + .5);
873         else
874             p_sys->param.i_level_idc = atoi (val.psz_string);
875         free( val.psz_string );
876     }
877
878 #if X264_BUILD >= 51 /* r570 */
879     var_Get( p_enc, SOUT_CFG_PREFIX "interlaced", &val );
880     p_sys->param.b_interlaced = val.b_bool;
881 #endif
882
883     var_Get( p_enc, SOUT_CFG_PREFIX "ipratio", &val );
884     p_sys->param.rc.f_ip_factor = val.f_float;
885
886     var_Get( p_enc, SOUT_CFG_PREFIX "pbratio", &val );
887     p_sys->param.rc.f_pb_factor = val.f_float;
888
889     var_Get( p_enc, SOUT_CFG_PREFIX "qcomp", &val );
890     p_sys->param.rc.f_qcompress = val.f_float;
891
892     var_Get( p_enc, SOUT_CFG_PREFIX "cplxblur", &val );
893     p_sys->param.rc.f_complexity_blur = val.f_float;
894
895     var_Get( p_enc, SOUT_CFG_PREFIX "qblur", &val );
896     p_sys->param.rc.f_qblur = val.f_float;
897
898 #if X264_BUILD >= 59
899     var_Get( p_enc, SOUT_CFG_PREFIX "aq-mode", &val );
900     p_sys->param.rc.i_aq_mode = val.i_int;
901
902     var_Get( p_enc, SOUT_CFG_PREFIX "aq-strength", &val );
903     p_sys->param.rc.f_aq_strength = val.f_float;
904 #endif
905
906 #if X264_BUILD >= 0x000e
907     var_Get( p_enc, SOUT_CFG_PREFIX "verbose", &val );
908     if( val.b_bool ) p_sys->param.i_log_level = X264_LOG_DEBUG;
909 #endif
910
911     var_Get( p_enc, SOUT_CFG_PREFIX "quiet", &val );
912     if( val.b_bool ) p_sys->param.i_log_level = X264_LOG_NONE;
913
914 #if X264_BUILD >= 47 /* r518 */
915     var_Get( p_enc, SOUT_CFG_PREFIX "sps-id", &val );
916     if( val.i_int >= 0 ) p_sys->param.i_sps_id = val.i_int;
917 #endif
918
919     var_Get( p_enc, SOUT_CFG_PREFIX "aud", &val );
920     if( val.b_bool ) p_sys->param.b_aud = val.b_bool;
921
922     var_Get( p_enc, SOUT_CFG_PREFIX "keyint", &val );
923 #if X264_BUILD >= 0x000e
924     if( val.i_int > 0 ) p_sys->param.i_keyint_max = val.i_int;
925 #else
926     if( val.i_int > 0 ) p_sys->param.i_iframe = val.i_int;
927 #endif
928
929     var_Get( p_enc, SOUT_CFG_PREFIX "min-keyint", &val );
930 #if X264_BUILD >= 0x000e
931     if( val.i_int > 0 ) p_sys->param.i_keyint_min = val.i_int;
932 #else
933     if( val.i_int > 0 ) p_sys->param.i_idrframe = val.i_int;
934 #endif
935
936     var_Get( p_enc, SOUT_CFG_PREFIX "bframes", &val );
937     if( val.i_int >= 0 && val.i_int <= 16 )
938         p_sys->param.i_bframe = val.i_int;
939
940 #if X264_BUILD >= 22
941     var_Get( p_enc, SOUT_CFG_PREFIX "bpyramid", &val );
942     p_sys->param.b_bframe_pyramid = val.b_bool;
943 #endif
944
945     var_Get( p_enc, SOUT_CFG_PREFIX "ref", &val );
946     if( val.i_int > 0 && val.i_int <= 15 )
947         p_sys->param.i_frame_reference = val.i_int;
948
949     var_Get( p_enc, SOUT_CFG_PREFIX "scenecut", &val );
950 #if X264_BUILD >= 0x000b
951     if( val.i_int >= -1 && val.i_int <= 100 )
952         p_sys->param.i_scenecut_threshold = val.i_int;
953 #endif
954
955 #if X264_BUILD >= 55 /* r607 */
956     var_Get( p_enc, SOUT_CFG_PREFIX "pre-scenecut", &val );
957     p_sys->param.b_pre_scenecut = val.b_bool;
958     var_Get( p_enc, SOUT_CFG_PREFIX "non-deterministic", &val );
959     p_sys->param.b_deterministic = val.b_bool;
960 #endif
961
962     var_Get( p_enc, SOUT_CFG_PREFIX "subme", &val );
963     if( val.i_int >= 1 && val.i_int <= SUBME_MAX )
964         p_sys->param.analyse.i_subpel_refine = val.i_int;
965
966 #if X264_BUILD >= 24
967     var_Get( p_enc, SOUT_CFG_PREFIX "me", &val );
968     if( !strcmp( val.psz_string, "dia" ) )
969     {
970         p_sys->param.analyse.i_me_method = X264_ME_DIA;
971     }
972     else if( !strcmp( val.psz_string, "hex" ) )
973     {
974         p_sys->param.analyse.i_me_method = X264_ME_HEX;
975     }
976     else if( !strcmp( val.psz_string, "umh" ) )
977     {
978         p_sys->param.analyse.i_me_method = X264_ME_UMH;
979     }
980     else if( !strcmp( val.psz_string, "esa" ) )
981     {
982         p_sys->param.analyse.i_me_method = X264_ME_ESA;
983     }
984 #   if X264_BUILD >= 58 /* r728 */
985     else if( !strcmp( val.psz_string, "tesa" ) )
986     {
987         p_sys->param.analyse.i_me_method = X264_ME_TESA;
988     }
989 #   endif
990     free( val.psz_string );
991
992     var_Get( p_enc, SOUT_CFG_PREFIX "merange", &val );
993     if( val.i_int >= 0 && val.i_int <= 64 )
994         p_sys->param.analyse.i_me_range = val.i_int;
995
996     var_Get( p_enc, SOUT_CFG_PREFIX "mvrange", &val );
997         p_sys->param.analyse.i_mv_range = val.i_int;
998 #endif
999
1000 #if X264_BUILD >= 55 /* r607 */
1001     var_Get( p_enc, SOUT_CFG_PREFIX "mvrange-thread", &val );
1002         p_sys->param.analyse.i_mv_range_thread = val.i_int;
1003 #endif
1004
1005     var_Get( p_enc, SOUT_CFG_PREFIX "direct", &val );
1006     if( !strcmp( val.psz_string, "none" ) )
1007     {
1008         p_sys->param.analyse.i_direct_mv_pred = X264_DIRECT_PRED_NONE;
1009     }
1010     else if( !strcmp( val.psz_string, "spatial" ) )
1011     {
1012         p_sys->param.analyse.i_direct_mv_pred = X264_DIRECT_PRED_SPATIAL;
1013     }
1014     else if( !strcmp( val.psz_string, "temporal" ) )
1015     {
1016         p_sys->param.analyse.i_direct_mv_pred = X264_DIRECT_PRED_TEMPORAL;
1017     }
1018 #if X264_BUILD >= 45 /* r457 */
1019     else if( !strcmp( val.psz_string, "auto" ) )
1020     {
1021         p_sys->param.analyse.i_direct_mv_pred = X264_DIRECT_PRED_AUTO;
1022     }
1023 #endif
1024     free( val.psz_string );
1025
1026     var_Get( p_enc, SOUT_CFG_PREFIX "psnr", &val );
1027     p_sys->param.analyse.b_psnr = val.b_bool;
1028
1029 #if X264_BUILD >= 50 /* r554 */
1030     var_Get( p_enc, SOUT_CFG_PREFIX "ssim", &val );
1031     p_sys->param.analyse.b_ssim = val.b_bool;
1032 #endif
1033
1034 #if X264_BUILD >= 0x0012
1035     var_Get( p_enc, SOUT_CFG_PREFIX "weightb", &val );
1036     p_sys->param.analyse.b_weighted_bipred = val.b_bool;
1037 #endif
1038
1039 #if X264_BUILD >= 0x0013
1040     var_Get( p_enc, SOUT_CFG_PREFIX "b-adapt", &val );
1041     p_sys->param.b_bframe_adaptive = val.b_bool;
1042
1043     var_Get( p_enc, SOUT_CFG_PREFIX "b-bias", &val );
1044     if( val.i_int >= -100 && val.i_int <= 100 )
1045         p_sys->param.i_bframe_bias = val.i_int;
1046 #endif
1047
1048 #if X264_BUILD >= 23
1049     var_Get( p_enc, SOUT_CFG_PREFIX "chroma-me", &val );
1050     p_sys->param.analyse.b_chroma_me = val.b_bool;
1051     var_Get( p_enc, SOUT_CFG_PREFIX "chroma-qp-offset", &val );
1052     p_sys->param.analyse.i_chroma_qp_offset = val.i_int;
1053 #endif
1054
1055 #if X264_BUILD >= 36
1056     var_Get( p_enc, SOUT_CFG_PREFIX "mixed-refs", &val );
1057     p_sys->param.analyse.b_mixed_references = val.b_bool;
1058 #endif
1059
1060 #if X264_BUILD >= 37
1061     var_Get( p_enc, SOUT_CFG_PREFIX "crf", &val );
1062     if( val.i_int > 0 && val.i_int <= 51 )
1063     {
1064 #   if X264_BUILD >= 54
1065         p_sys->param.rc.f_rf_constant = val.i_int;
1066 #   else
1067         p_sys->param.rc.i_rf_constant = val.i_int;
1068 #   endif
1069 #   if X264_BUILD >= 48
1070         p_sys->param.rc.i_rc_method = X264_RC_CRF;
1071 #   endif
1072     }
1073 #endif
1074
1075 #if X264_BUILD >= 39
1076     var_Get( p_enc, SOUT_CFG_PREFIX "trellis", &val );
1077     if( val.i_int >= 0 && val.i_int <= 2 )
1078         p_sys->param.analyse.i_trellis = val.i_int;
1079 #endif
1080
1081 #if X264_BUILD >= 41
1082     var_Get( p_enc, SOUT_CFG_PREFIX "b-rdo", &val );
1083     p_sys->param.analyse.b_bframe_rdo = val.b_bool;
1084 #endif
1085
1086 #if X264_BUILD >= 42
1087     var_Get( p_enc, SOUT_CFG_PREFIX "fast-pskip", &val );
1088     p_sys->param.analyse.b_fast_pskip = val.b_bool;
1089 #endif
1090
1091 #if X264_BUILD >= 43
1092     var_Get( p_enc, SOUT_CFG_PREFIX "bime", &val );
1093     p_sys->param.analyse.b_bidir_me = val.b_bool;
1094 #endif
1095
1096 #if X264_BUILD >= 44
1097     var_Get( p_enc, SOUT_CFG_PREFIX "nr", &val );
1098     if( val.i_int >= 0 && val.i_int <= 1000 )
1099         p_sys->param.analyse.i_noise_reduction = val.i_int;
1100 #endif
1101
1102 #if X264_BUILD >= 46
1103     var_Get( p_enc, SOUT_CFG_PREFIX "dct-decimate", &val );
1104     p_sys->param.analyse.b_dct_decimate = val.b_bool;
1105 #endif
1106
1107 #if X264_BUILD >= 52
1108     var_Get( p_enc, SOUT_CFG_PREFIX "deadzone-inter", &val );
1109     if( val.i_int >= 0 && val.i_int <= 32 )
1110         p_sys->param.analyse.i_luma_deadzone[0] = val.i_int;
1111
1112     var_Get( p_enc, SOUT_CFG_PREFIX "deadzone-intra", &val );
1113     if( val.i_int >= 0 && val.i_int <= 32 )
1114         p_sys->param.analyse.i_luma_deadzone[1] = val.i_int;
1115
1116     var_Get( p_enc, SOUT_CFG_PREFIX "direct-8x8", &val );
1117     if( val.i_int >= -1 && val.i_int <= 1 )
1118         p_sys->param.analyse.i_direct_8x8_inference = val.i_int;
1119 #endif
1120
1121     var_Get( p_enc, SOUT_CFG_PREFIX "asm", &val );
1122     if( !val.b_bool ) p_sys->param.cpu = 0;
1123
1124 #ifndef X264_ANALYSE_BSUB16x16
1125 #   define X264_ANALYSE_BSUB16x16 0
1126 #endif
1127     var_Get( p_enc, SOUT_CFG_PREFIX "partitions", &val );
1128     if( !strcmp( val.psz_string, "none" ) )
1129     {
1130         p_sys->param.analyse.inter = 0;
1131     }
1132     else if( !strcmp( val.psz_string, "fast" ) )
1133     {
1134         p_sys->param.analyse.inter = X264_ANALYSE_I4x4;
1135     }
1136     else if( !strcmp( val.psz_string, "normal" ) )
1137     {
1138         p_sys->param.analyse.inter =
1139             X264_ANALYSE_I4x4 |
1140             X264_ANALYSE_PSUB16x16;
1141 #ifdef X264_ANALYSE_I8x8
1142         p_sys->param.analyse.inter |= X264_ANALYSE_I8x8;
1143 #endif
1144     }
1145     else if( !strcmp( val.psz_string, "slow" ) )
1146     {
1147         p_sys->param.analyse.inter =
1148             X264_ANALYSE_I4x4 |
1149             X264_ANALYSE_PSUB16x16 |
1150             X264_ANALYSE_BSUB16x16;
1151 #ifdef X264_ANALYSE_I8x8
1152         p_sys->param.analyse.inter |= X264_ANALYSE_I8x8;
1153 #endif
1154     }
1155     else if( !strcmp( val.psz_string, "all" ) )
1156     {
1157         p_sys->param.analyse.inter =
1158             X264_ANALYSE_I4x4 |
1159             X264_ANALYSE_PSUB16x16 |
1160             X264_ANALYSE_BSUB16x16 |
1161             X264_ANALYSE_PSUB8x8;
1162 #ifdef X264_ANALYSE_I8x8
1163         p_sys->param.analyse.inter |= X264_ANALYSE_I8x8;
1164 #endif
1165     }
1166     free( val.psz_string );
1167
1168 #if X264_BUILD >= 30
1169     var_Get( p_enc, SOUT_CFG_PREFIX "8x8dct", &val );
1170     p_sys->param.analyse.b_transform_8x8 = val.b_bool;
1171 #endif
1172
1173     if( p_enc->fmt_in.video.i_aspect > 0 )
1174     {
1175         int64_t i_num, i_den;
1176         unsigned int i_dst_num, i_dst_den;
1177
1178         i_num = p_enc->fmt_in.video.i_aspect *
1179             (int64_t)p_enc->fmt_in.video.i_height;
1180         i_den = VOUT_ASPECT_FACTOR * p_enc->fmt_in.video.i_width;
1181         vlc_ureduce( &i_dst_num, &i_dst_den, i_num, i_den, 0 );
1182
1183         p_sys->param.vui.i_sar_width = i_dst_num;
1184         p_sys->param.vui.i_sar_height = i_dst_den;
1185     }
1186
1187     if( p_enc->fmt_in.video.i_frame_rate_base > 0 )
1188     {
1189         p_sys->param.i_fps_num = p_enc->fmt_in.video.i_frame_rate;
1190         p_sys->param.i_fps_den = p_enc->fmt_in.video.i_frame_rate_base;
1191     }
1192
1193     unsigned i_cpu = vlc_CPU();
1194     if( !(i_cpu & CPU_CAPABILITY_MMX) )
1195     {
1196         p_sys->param.cpu &= ~X264_CPU_MMX;
1197     }
1198     if( !(i_cpu & CPU_CAPABILITY_MMXEXT) )
1199     {
1200         p_sys->param.cpu &= ~X264_CPU_MMXEXT;
1201     }
1202     if( !(i_cpu & CPU_CAPABILITY_SSE) )
1203     {
1204         p_sys->param.cpu &= ~X264_CPU_SSE;
1205     }
1206     if( !(i_cpu & CPU_CAPABILITY_SSE2) )
1207     {
1208         p_sys->param.cpu &= ~X264_CPU_SSE2;
1209     }
1210
1211     /* BUILD 29 adds support for multi-threaded encoding while BUILD 49 (r543)
1212        also adds support for threads = 0 for automatically selecting an optimal
1213        value (cores * 1.5) based on detected CPUs. Default behavior for x264 is
1214        threads = 1, however VLC usage differs and uses threads = 0 (auto) by
1215        default unless ofcourse transcode threads is explicitly specified.. */
1216 #if X264_BUILD >= 29
1217     p_sys->param.i_threads = p_enc->i_threads;
1218 #endif
1219
1220     var_Get( p_enc, SOUT_CFG_PREFIX "stats", &val );
1221     if( val.psz_string )
1222     {
1223         p_sys->param.rc.psz_stat_in  =
1224         p_sys->param.rc.psz_stat_out =
1225         p_sys->psz_stat_name         = val.psz_string;
1226     }
1227
1228     var_Get( p_enc, SOUT_CFG_PREFIX "pass", &val );
1229     if( val.i_int > 0 && val.i_int <= 3 )
1230     {
1231         p_sys->param.rc.b_stat_write = val.i_int & 1;
1232         p_sys->param.rc.b_stat_read = val.i_int & 2;
1233     }
1234
1235     /* We need to initialize pthreadw32 before we open the encoder,
1236        but only oncce for the whole application. Since pthreadw32
1237        doesn't keep a refcount, do it ourselves. */
1238 #ifdef PTW32_STATIC_LIB
1239     vlc_value_t lock, count;
1240
1241     var_Create( p_enc->p_libvlc, "pthread_win32_mutex", VLC_VAR_MUTEX );
1242     var_Get( p_enc->p_libvlc, "pthread_win32_mutex", &lock );
1243     vlc_mutex_lock( lock.p_address );
1244
1245     var_Create( p_enc->p_libvlc, "pthread_win32_count", VLC_VAR_INTEGER );
1246     var_Get( p_enc->p_libvlc, "pthread_win32_count", &count );
1247
1248     if( count.i_int == 0 )
1249     {
1250         msg_Dbg( p_enc, "initializing pthread-win32" );
1251         if( !pthread_win32_process_attach_np() || !pthread_win32_thread_attach_np() )   
1252         {
1253             msg_Warn( p_enc, "pthread Win32 Initialization failed" );
1254             vlc_mutex_unlock( lock.p_address );
1255             return VLC_EGENERIC;
1256         }
1257     }
1258
1259     count.i_int++;
1260     var_Set( p_enc->p_libvlc, "pthread_win32_count", count );
1261     vlc_mutex_unlock( lock.p_address );
1262
1263 #endif
1264
1265     /* Open the encoder */
1266     p_sys->h = x264_encoder_open( &p_sys->param );
1267
1268     /* alloc mem */
1269     p_sys->i_buffer = 4 * p_enc->fmt_in.video.i_width *
1270         p_enc->fmt_in.video.i_height + 1000;
1271     p_sys->p_buffer = malloc( p_sys->i_buffer );
1272     if( !p_sys->p_buffer )
1273     {
1274         Close( VLC_OBJECT(p_enc) );
1275         return VLC_ENOMEM;
1276     }
1277
1278     /* get the globals headers */
1279     p_enc->fmt_out.i_extra = 0;
1280     p_enc->fmt_out.p_extra = NULL;
1281
1282     x264_encoder_headers( p_sys->h, &nal, &i_nal );
1283     for( i = 0; i < i_nal; i++ )
1284     {
1285         void *p_tmp;
1286         int i_size = p_sys->i_buffer;
1287
1288         x264_nal_encode( p_sys->p_buffer, &i_size, 1, &nal[i] );
1289
1290         p_tmp = realloc( p_enc->fmt_out.p_extra, p_enc->fmt_out.i_extra + i_size );
1291         if( !p_tmp )
1292         {
1293             Close( VLC_OBJECT(p_enc) );
1294             return VLC_ENOMEM;
1295         }
1296         p_enc->fmt_out.p_extra = p_tmp;
1297
1298         memcpy( (uint8_t*)p_enc->fmt_out.p_extra + p_enc->fmt_out.i_extra,
1299             p_sys->p_buffer, i_size );
1300
1301         p_enc->fmt_out.i_extra += i_size;
1302     }
1303
1304     return VLC_SUCCESS;
1305 }
1306
1307 /****************************************************************************
1308  * Encode:
1309  ****************************************************************************/
1310 static block_t *Encode( encoder_t *p_enc, picture_t *p_pict )
1311 {
1312     encoder_sys_t *p_sys = p_enc->p_sys;
1313     x264_picture_t pic;
1314     x264_nal_t *nal;
1315     block_t *p_block;
1316     int i_nal, i_out, i;
1317
1318     /* init pic */
1319     memset( &pic, 0, sizeof( x264_picture_t ) );
1320     pic.i_pts = p_pict->date;
1321     pic.img.i_csp = X264_CSP_I420;
1322     pic.img.i_plane = p_pict->i_planes;
1323     for( i = 0; i < p_pict->i_planes; i++ )
1324     {
1325         pic.img.plane[i] = p_pict->p[i].p_pixels;
1326         pic.img.i_stride[i] = p_pict->p[i].i_pitch;
1327     }
1328
1329 #if X264_BUILD >= 0x0013
1330     x264_encoder_encode( p_sys->h, &nal, &i_nal, &pic, &pic );
1331 #else
1332     x264_encoder_encode( p_sys->h, &nal, &i_nal, &pic );
1333 #endif
1334
1335     if( !i_nal ) return NULL;
1336
1337     for( i = 0, i_out = 0; i < i_nal; i++ )
1338     {
1339         int i_size = p_sys->i_buffer - i_out;
1340         x264_nal_encode( p_sys->p_buffer + i_out, &i_size, 1, &nal[i] );
1341
1342         i_out += i_size;
1343     }
1344
1345     p_block = block_New( p_enc, i_out );
1346     if( !p_block ) return NULL;
1347     memcpy( p_block->p_buffer, p_sys->p_buffer, i_out );
1348
1349     if( pic.i_type == X264_TYPE_IDR || pic.i_type == X264_TYPE_I )
1350         p_block->i_flags |= BLOCK_FLAG_TYPE_I;
1351     else if( pic.i_type == X264_TYPE_P )
1352         p_block->i_flags |= BLOCK_FLAG_TYPE_P;
1353     else if( pic.i_type == X264_TYPE_B )
1354         p_block->i_flags |= BLOCK_FLAG_TYPE_B;
1355
1356     /* This isn't really valid for streams with B-frames */
1357     p_block->i_length = INT64_C(1000000) *
1358         p_enc->fmt_in.video.i_frame_rate_base /
1359             p_enc->fmt_in.video.i_frame_rate;
1360
1361     p_block->i_pts = pic.i_pts;
1362
1363     if( p_sys->param.i_bframe > 0 )
1364     {
1365         if( p_block->i_flags & BLOCK_FLAG_TYPE_B )
1366         {
1367             /* FIXME : this is wrong if bpyramid is set */
1368             p_block->i_dts = p_block->i_pts;
1369             p_sys->i_interpolated_dts = p_block->i_dts;
1370         }
1371         else
1372         {
1373             if( p_sys->i_interpolated_dts )
1374             {
1375                 p_block->i_dts = p_sys->i_interpolated_dts;
1376             }
1377             else
1378             {
1379                 /* Let's put something sensible */
1380                 p_block->i_dts = p_block->i_pts;
1381             }
1382
1383             p_sys->i_interpolated_dts += p_block->i_length;
1384         }
1385     }
1386     else
1387     {
1388         p_block->i_dts = p_block->i_pts;
1389     }
1390
1391     return p_block;
1392 }
1393
1394 /*****************************************************************************
1395  * CloseEncoder: x264 encoder destruction
1396  *****************************************************************************/
1397 static void Close( vlc_object_t *p_this )
1398 {
1399     encoder_t     *p_enc = (encoder_t *)p_this;
1400     encoder_sys_t *p_sys = p_enc->p_sys;
1401
1402     free( p_sys->psz_stat_name );
1403
1404     x264_encoder_close( p_sys->h );
1405
1406 #ifdef PTW32_STATIC_LIB
1407     vlc_value_t lock, count;
1408
1409     var_Create( p_enc->p_libvlc, "pthread_win32_mutex", VLC_VAR_MUTEX );
1410     var_Get( p_enc->p_libvlc, "pthread_win32_mutex", &lock );
1411     vlc_mutex_lock( lock.p_address );
1412
1413     var_Create( p_enc->p_libvlc, "pthread_win32_count", VLC_VAR_INTEGER );
1414     var_Get( p_enc->p_libvlc, "pthread_win32_count", &count );
1415     count.i_int--;
1416     var_Set( p_enc->p_libvlc, "pthread_win32_count", count );
1417
1418     if( count.i_int == 0 )
1419     {
1420         pthread_win32_thread_detach_np();
1421         pthread_win32_process_detach_np();
1422         msg_Dbg( p_enc, "pthread-win32 deinitialized" );
1423     }
1424     vlc_mutex_unlock( lock.p_address );
1425 #endif
1426
1427     free( p_sys->p_buffer );
1428     free( p_sys );
1429 }