Merge commit '129bb238430ec45a3b5f8f1d384df590ddf7b62f'
authorMichael Niedermayer <michaelni@gmx.at>
Fri, 24 May 2013 11:47:45 +0000 (13:47 +0200)
committerMichael Niedermayer <michaelni@gmx.at>
Fri, 24 May 2013 12:07:00 +0000 (14:07 +0200)
* commit '129bb238430ec45a3b5f8f1d384df590ddf7b62f':
  lavfi: add a slice threading infrastructure

Conflicts:
Changelog
cmdutils.c
doc/APIchanges
libavfilter/Makefile
libavfilter/avfilter.c
libavfilter/avfilter.h
libavfilter/avfiltergraph.c
libavfilter/internal.h
libavfilter/version.h

Merged-by: Michael Niedermayer <michaelni@gmx.at>
1  2 
Changelog
cmdutils.c
doc/APIchanges
libavfilter/Makefile
libavfilter/avfilter.c
libavfilter/avfilter.h
libavfilter/avfiltergraph.c
libavfilter/internal.h
libavfilter/pthread.c
libavfilter/thread.h
libavfilter/version.h

diff --cc Changelog
+++ b/Changelog
  Entries are sorted chronologically from oldest to youngest within each release,
  releases are sorted from youngest to oldest.
  
 -version 10:
 -- av_strnstr
 -- support ID3v2 tags in ASF files
 +version <next>:
 +- curves filter
  - reference-counting for AVFrame and AVPacket data
 -- avconv now fails when input options are used for output file
 +- ffmpeg now fails when input options are used for output file
    or vice versa
 -- new avconv options -filter_script and -filter_complex_script, which allow a
 +- support for Monkey's Audio versions from 3.93
 +- perms and aperms filters
 +- audio filtering support in ffplay
 +- 10% faster aac encoding on x86 and MIPS
 +- sine audio filter source
 +- WebP demuxing and decoding support
 +- new ffmpeg options -filter_script and -filter_complex_script, which allow a
    filtergraph description to be read from a file
 +- OpenCL support
 +- audio phaser filter
 +- separatefields filter
 +- libquvi demuxer
  - uniform options syntax across all filters
 +- telecine filter
  - new interlace filter
 -- JPEG 2000 decoder
 -- new asetpts filter (same as setpts, but for audio)
 -- new trim and atrim filters
 -- avconv -t and -ss (output-only) options are now sample-accurate when
 +- smptehdbars source
 +- inverse telecine filters (fieldmatch and decimate)
 +- colorbalance filter
 +- colorchannelmixer filter
 +- The matroska demuxer can now output proper verbatim ASS packets. It will
 +  become the default at the next libavformat major bump.
 +- decent native animated GIF encoding
 +- asetrate filter
 +- interleave filter
 +- timeline editing with filters
 +- vidstabdetect and vidstabtransform filters for video stabilization using
 +  the vid.stab library
 +- astats filter
 +- trim and atrim filters
 +- ffmpeg -t and -ss (output-only) options are now sample-accurate when
    transcoding audio
  - Matroska muxer can now put the index at the beginning of the file.
 -- avconv -deinterlace option removed, the yadif filter should be used instead
 +- extractplanes filter
 +- avectorscope filter
 +- ADPCM DTK decoder
 +- ADP demuxer
 +- RSD demuxer
 +- RedSpark demuxer
 +- ADPCM IMA Radical decoder
 +- zmq filters
 +- DCT denoiser filter (dctdnoiz)
 +- Wavelet denoiser filter ported from libmpcodecs as owdenoise (formerly "ow")
  - Apple Intermediate Codec decoder
  - Escape 130 video decoder
 +- FTP protocol support
 +- V4L2 output device
 +- 3D LUT filter (lut3d)
 +- SMPTE 302M audio encoder
+ - support for slice multithreading in libavfilter
  
  
 -version 9:
 -- av_basename and av_dirname
 -- adobe and limelight publisher authentication in RTMP
 +version 1.2:
 +
  - VDPAU hardware acceleration through normal hwaccel
  - SRTP support
 -
 -
 -version 9_beta3:
 -- ashowinfo audio filter
 +- Error diffusion dither in Swscale
 +- Chained Ogg support
 +- Theora Midstream reconfiguration support
 +- EVRC decoder
 +- audio fade filter
 +- filtering audio with unknown channel layout
 +- allpass, bass, bandpass, bandreject, biquad, equalizer, highpass, lowpass
 +  and treble audio filter
 +- improved showspectrum filter, with multichannel support and sox-like colors
 +- histogram filter
 +- tee muxer
 +- il filter ported from libmpcodecs
 +- support ID3v2 tags in ASF files
 +- encrypted TTA stream decoding support
 +- RF64 support in WAV muxer
 +- noise filter ported from libmpcodecs
 +- Subtitles character encoding conversion
 +- blend filter
 +- stereo3d filter ported from libmpcodecs
 +
 +
 +version 1.1:
 +
 +- stream disposition information printing in ffprobe
 +- filter for loudness analysis following EBU R128
 +- Opus encoder using libopus
 +- ffprobe -select_streams option
 +- Pinnacle TARGA CineWave YUV16 decoder
 +- TAK demuxer, decoder and parser
 +- DTS-HD demuxer
 +- remove -same_quant, it hasn't worked for years
 +- FFM2 support
 +- X-Face image encoder and decoder
  - 24-bit FLAC encoding
 -- audio volume filter
 -- deprecated the avconv -vol option. the volume filter is to be used instead.
  - multi-channel ALAC encoding up to 7.1
 -- TAK demuxer, parser, and decoder
 -- adaptive frame-level multithreading for H.264
 -
 -
 -version 9_beta2:
  - metadata (INFO tag) support in WAV muxer
 +- subtitles raw text decoder
  - support for building DLLs using MSVC
 -- remove avserver daemon mode
 +- LVF demuxer
 +- ffescape tool
 +- metadata (info chunk) support in CAF muxer
 +- field filter ported from libmpcodecs
 +- AVR demuxer
 +- geq filter ported from libmpcodecs
 +- remove ffserver daemon mode
 +- AST muxer/demuxer
 +- new expansion syntax for drawtext
 +- BRender PIX image decoder
 +- ffprobe -show_entries option
 +- ffprobe -sections option
 +- ADPCM IMA Dialogic decoder
 +- BRSTM demuxer
 +- animated GIF decoder and demuxer
 +- PVF demuxer
 +- subtitles filter
 +- IRCAM muxer/demuxer
 +- Paris Audio File demuxer
 +- Virtual concatenation demuxer
 +- VobSub demuxer
 +- JSON captions for TED talks decoding support
 +- SOX Resampler support in libswresample
 +- aselect filter
 +- SGI RLE 8-bit decoder
 +- Silicon Graphics Motion Video Compressor 1 & 2 decoder
 +- Silicon Graphics Movie demuxer
 +- apad filter
 +- Resolution & pixel format change support with multithreading for H.264
 +- documentation split into per-component manuals
 +- pp (postproc) filter ported from MPlayer
 +- NIST Sphere demuxer
 +- MPL2, VPlayer, MPlayer, AQTitle, PJS and SubViewer v1 subtitles demuxers and decoders
 +- Sony Wave64 muxer
 +- adobe and limelight publisher authentication in RTMP
 +- data: URI scheme
  - support building on the Plan 9 operating system
 -- ffv1: support version 1.3
 +- kerndeint filter ported from MPlayer
 +- histeq filter ported from VirtualDub
 +- Megalux Frame demuxer
 +- 012v decoder
 +- Improved AVC Intra decoding support
  
  
 -version 9_beta1:
 +version 1.0:
  
 -- XWD encoder and decoder
 -- Support for fragmentation in the mov/mp4 muxer
 -- ISMV (Smooth Streaming) muxer
 -- CDXL demuxer and decoder
 -- Apple ProRes encoder
 -- Sun Rasterfile Encoder
 -- remove libpostproc
 -- ID3v2 attached pictures reading and writing
 -- WMA Lossless decoder
 -- XBM encoder
 -- RealAudio Lossless decoder
 -- ZeroCodec decoder
 -- drop support for avconv without libavfilter
 -- add libavresample audio conversion library
 -- audio filters support in libavfilter and avconv
 -- add fps filter
 -- audio split filter
 -- audio mix filter
 -- avprobe output is now standard INI or JSON. The old format can still
 -  be used with -of old.
 +- INI and flat output in ffprobe
 +- Scene detection in libavfilter
  - Indeo Audio decoder
  - channelsplit audio filter
 +- setnsamples audio filter
 +- atempo filter
 +- ffprobe -show_data option
  - RTMPT protocol support
  - iLBC encoding/decoding via libilbc
  - Microsoft Screen 1 decoder
diff --cc cmdutils.c
@@@ -1657,9 -1282,11 +1657,13 @@@ static void show_help_filter(const cha
          return;
      }
  
 -    printf("Filter %s [%s]:\n", f->name, f->description);
 +    printf("Filter %s\n", f->name);
 +    if (f->description)
 +        printf("  %s\n", f->description);
+     if (f->flags & AVFILTER_FLAG_SLICE_THREADS)
+         printf("    slice threading supported\n");
      printf("    Inputs:\n");
      count = avfilter_pad_count(f->inputs);
      for (i = 0; i < count; i++) {
diff --cc doc/APIchanges
@@@ -15,174 -13,19 +15,181 @@@ libavutil:     2012-10-2
  
  API changes, most recent first:
  
 -2013-05-xx - xxxxxxx - lavfi 3.10.0 - avfilter.h
 +
++2013-05-24 - xxxxxxx - lavfi 3.70.100 - avfilter.h
+   Add support for slice multithreading to lavfi. Filters supporting threading
+   are marked with AVFILTER_FLAG_SLICE_THREADS.
+   New fields AVFilterContext.thread_type, AVFilterGraph.thread_type and
+   AVFilterGraph.nb_threads (accessible directly or through AVOptions) may be
+   used to configure multithreading.
 -2013-xx-xx - xxxxxxx - lavu 52.12.0 - cpu.h
 +2013-05-24 - xxxxxxx - lavu 52.34.100 - cpu.h
    Add av_cpu_count() function for getting the number of logical CPUs.
  
 -2013-05-xx - xxxxxxx - lavc 55.7.0 - avcodec.h
 +2013-05-24 - xxxxxxx - lavc 55.12.100 - avcodec.h
    Add picture_structure to AVCodecParserContext.
  
 +2013-05-17 - xxxxxxx - lavu 52.33.100 - opt.h
 +  Add AV_OPT_TYPE_COLOR value to AVOptionType enum.
 +
 +2013-05-13 - xxxxxxx - lavu 52.31.100 - mem.h
 +  Add av_dynarray2_add().
 +
 +2013-05-12 - xxxxxxx - lavfi 3.65.100
 +  Add AVFILTER_FLAG_SUPPORT_TIMELINE* filter flags.
 +
 +2013-04-19 - xxxxxxx - lavc 55.4.100
 +  Add AV_CODEC_PROP_TEXT_SUB property for text based subtitles codec.
 +
 +2013-04-18 - xxxxxxx - lavf 55.3.100
 +  The matroska demuxer can now output proper verbatim ASS packets. It will
 +  become the default starting lavf 56.0.100.
 +
 +2013-04-10 - xxxxxxx - lavu 25.26.100 - avutil.h,opt.h
 +  Add av_int_list_length()
 +  and av_opt_set_int_list().
 +
 +2013-03-30 - xxxxxxx - lavu 52.24.100 - samplefmt.h
 +  Add av_samples_alloc_array_and_samples().
 +
 +2013-03-29 - xxxxxxx - lavf 55.1.100 - avformat.h
 +  Add av_guess_frame_rate()
 +
 +2013-03-20 - xxxxxxx - lavu 52.22.100 - opt.h
 +  Add AV_OPT_TYPE_DURATION value to AVOptionType enum.
 +
 +2013-03-17 - xxxxxx - lavu 52.20.100 - opt.h
 +  Add AV_OPT_TYPE_VIDEO_RATE value to AVOptionType enum.
 +
 +2013-03-07 - xxxxxx - lavu 52.18.100 - avstring.h,bprint.h
 +  Add av_escape() and av_bprint_escape() API.
 +
 +2013-02-24 - xxxxxx - lavfi 3.41.100 - buffersink.h
 +  Add sample_rates field to AVABufferSinkParams.
 +
 +2013-01-17 - a1a707f - lavf 54.61.100
 +  Add av_codec_get_tag2().
 +
 +2013-01-01 - 2eb2e17 - lavfi 3.34.100
 +  Add avfilter_get_audio_buffer_ref_from_arrays_channels.
 +
 +2012-12-20 - 34de47aa - lavfi 3.29.100 - avfilter.h
 +  Add AVFilterLink.channels, avfilter_link_get_channels()
 +  and avfilter_ref_get_channels().
 +
 +2012-12-15 - 2ada584d - lavc 54.80.100 - avcodec.h
 +  Add pkt_size field to AVFrame.
 +
 +2012-11-25 - c70ec631 - lavu 52.9.100 - opt.h
 +  Add the following convenience functions to opt.h:
 +   av_opt_get_image_size
 +   av_opt_get_pixel_fmt
 +   av_opt_get_sample_fmt
 +   av_opt_set_image_size
 +   av_opt_set_pixel_fmt
 +   av_opt_set_sample_fmt
 +
 +2012-11-17 - 4cd74c81 - lavu 52.8.100 - bprint.h
 +  Add av_bprint_strftime().
 +
 +2012-11-15 - 92648107 - lavu 52.7.100 - opt.h
 +  Add av_opt_get_key_value().
 +
 +2012-11-13 - 79456652 - lavfi 3.23.100 - avfilter.h
 +  Add channels field to AVFilterBufferRefAudioProps.
 +
 +2012-11-03 - 481fdeee - lavu 52.3.100 - opt.h
 +  Add AV_OPT_TYPE_SAMPLE_FMT value to AVOptionType enum.
 +
 +2012-10-21 - 6fb2fd8 - lavc  54.68.100 - avcodec.h
 +                       lavfi  3.20.100 - avfilter.h
 +  Add AV_PKT_DATA_STRINGS_METADATA side data type, used to transmit key/value
 +  strings between AVPacket and AVFrame, and add metadata field to
 +  AVCodecContext (which shall not be accessed by users; see AVFrame metadata
 +  instead).
 +
 +2012-09-27 - a70b493 - lavd 54.3.100 - version.h
 +  Add LIBAVDEVICE_IDENT symbol.
 +
 +2012-09-27 - a70b493 - lavfi 3.18.100 - version.h
 +  Add LIBAVFILTER_IDENT symbol.
 +
 +2012-09-27 - a70b493 - libswr 0.16.100 - version.h
 +  Add LIBSWRESAMPLE_VERSION, LIBSWRESAMPLE_BUILD
 +  and LIBSWRESAMPLE_IDENT symbols.
 +
 +2012-09-06 - 29e972f - lavu 51.72.100 - parseutils.h
 +  Add av_small_strptime() time parsing function.
 +
 +  Can be used as a stripped-down replacement for strptime(), on
 +  systems which do not support it.
 +
 +2012-08-25 - 2626cc4 - lavf 54.28.100
 +  Matroska demuxer now identifies SRT subtitles as AV_CODEC_ID_SUBRIP instead
 +  of AV_CODEC_ID_TEXT.
 +
 +2012-08-13 - 5c0d8bc - lavfi 3.8.100 - avfilter.h
 +  Add avfilter_get_class() function, and priv_class field to AVFilter
 +  struct.
 +
 +2012-08-12 - a25346e - lavu 51.69.100 - opt.h
 +  Add AV_OPT_FLAG_FILTERING_PARAM symbol in opt.h.
 +
 +2012-07-31 - 23fc4dd - lavc 54.46.100
 +  Add channels field to AVFrame.
 +
 +2012-07-30 - f893904 - lavu 51.66.100
 +  Add av_get_channel_description()
 +  and av_get_standard_channel_layout() functions.
 +
 +2012-07-21 - 016a472 - lavc 54.43.100
 +  Add decode_error_flags field to AVFrame.
 +
 +2012-07-20 - b062936 - lavf 54.18.100
 +  Add avformat_match_stream_specifier() function.
 +
 +2012-07-14 - f49ec1b - lavc 54.38.100 - avcodec.h
 +  Add metadata to AVFrame, and the accessor functions
 +  av_frame_get_metadata() and av_frame_set_metadata().
 +
 +2012-07-10 - 0e003d8 - lavc 54.33.100
 +  Add av_fast_padded_mallocz().
 +
 +2012-07-10 - 21d5609 - lavfi 3.2.0 - avfilter.h
 +  Add init_opaque() callback to AVFilter struct.
 +
 +2012-06-26 - e6674e4 - lavu 51.63.100 - imgutils.h
 +  Add functions to libavutil/imgutils.h:
 +  av_image_get_buffer_size()
 +  av_image_fill_arrays()
 +  av_image_copy_to_buffer()
 +
 +2012-06-24 - c41899a - lavu 51.62.100 - version.h
 +  version moved from avutil.h to version.h
 +
 +2012-04-11 - 359abb1 - lavu 51.58.100 - error.h
 +  Add av_make_error_string() and av_err2str() utilities to
 +  libavutil/error.h.
 +
 +2012-06-05 - 62b39d4 - lavc 54.24.100
 +  Add pkt_duration field to AVFrame.
 +
 +2012-05-24 - f2ee065 - lavu 51.54.100
 +  Move AVPALETTE_SIZE and AVPALETTE_COUNT macros from
 +  libavcodec/avcodec.h to libavutil/pixfmt.h.
 +
 +2012-05-14 - 94a9ac1 - lavf 54.5.100
 +  Add av_guess_sample_aspect_ratio() function.
 +
 +2012-04-20 - 65fa7bc - lavfi 2.70.100
 +  Add avfilter_unref_bufferp() to avfilter.h.
 +
 +2012-04-13 - 162e400 - lavfi 2.68.100
 +  Install libavfilter/asrc_abuffer.h public header.
 +
 +2012-03-26 - a67d9cf - lavfi 2.66.100
 +  Add avfilter_fill_frame_from_{audio_,}buffer_ref() functions.
 +
  2013-05-xx - xxxxxxx - lavu 52.11.0 - pixdesc.h
    Replace PIX_FMT_* flags with AV_PIX_FMT_FLAG_*.
  
@@@ -207,43 -92,7 +207,45 @@@ OBJS-$(CONFIG_TESTSRC_FILTER
  
  OBJS-$(CONFIG_NULLSINK_FILTER)               += vsink_nullsink.o
  
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/mp_image.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/img_format.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_dint.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_eq2.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_eq.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_fil.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_fspp.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_ilpack.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_mcdeint.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_perspective.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_phase.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_pp7.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_pullup.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_qp.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_sab.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_softpulldown.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_spp.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/vf_uspp.o
 +OBJS-$(CONFIG_MP_FILTER) += libmpcodecs/pullup.o
 +
 +# multimedia filters
 +OBJS-$(CONFIG_AVECTORSCOPE_FILTER)           += avf_avectorscope.o
 +OBJS-$(CONFIG_CONCAT_FILTER)                 += avf_concat.o
 +OBJS-$(CONFIG_SHOWSPECTRUM_FILTER)           += avf_showspectrum.o
 +OBJS-$(CONFIG_SHOWWAVES_FILTER)              += avf_showwaves.o
 +
 +# multimedia sources
 +OBJS-$(CONFIG_AMOVIE_FILTER)                 += src_movie.o
 +OBJS-$(CONFIG_MOVIE_FILTER)                  += src_movie.o
 +
 +SKIPHEADERS-$(CONFIG_LIBVIDSTAB)             += vidstabutils.h
 +SKIPHEADERS-$(CONFIG_OPENCL)                 += opencl_internal.h deshake_opencl_kernel.h unsharp_opencl_kernel.h
 +
+ OBJS-$(HAVE_THREADS)                         += pthread.o
  TOOLS     = graph2dot
 -TESTPROGS = filtfmts
 +TESTPROGS = drawutils filtfmts formats
 +
 +TOOLS-$(CONFIG_LIBZMQ) += zmqsend
 +
 +clean::
 +      $(RM) $(CLEANSUFFIXES:%=libavfilter/libmpcodecs/%)
@@@ -537,22 -353,36 +537,38 @@@ static const AVClass *filter_child_clas
  }
  
  #define OFFSET(x) offsetof(AVFilterContext, x)
 -#define FLAGS AV_OPT_FLAG_VIDEO_PARAM
 +#define FLAGS AV_OPT_FLAG_FILTERING_PARAM
- static const AVOption filters_common_options[] = {
+ static const AVOption options[] = {
+     { "thread_type", "Allowed thread types", OFFSET(thread_type), AV_OPT_TYPE_FLAGS,
+         { .i64 = AVFILTER_THREAD_SLICE }, 0, INT_MAX, FLAGS, "thread_type" },
+         { "slice", NULL, 0, AV_OPT_TYPE_CONST, { .i64 = AVFILTER_THREAD_SLICE }, .unit = "thread_type" },
 +    { "enable", "set enable expression", OFFSET(enable_str), AV_OPT_TYPE_STRING, {.str=NULL}, .flags = FLAGS },
-     { NULL }
+     { NULL },
  };
  
  static const AVClass avfilter_class = {
      .class_name = "AVFilter",
 -    .item_name  = filter_name,
 +    .item_name  = default_filter_name,
      .version    = LIBAVUTIL_VERSION_INT,
 +    .category   = AV_CLASS_CATEGORY_FILTER,
      .child_next = filter_child_next,
-     .option     = filters_common_options,
      .child_class_next = filter_child_class_next,
+     .option           = options,
  };
  
+ static int default_execute(AVFilterContext *ctx, action_func *func, void *arg,
+                            int *ret, int nb_jobs)
+ {
+     int i;
+     for (i = 0; i < nb_jobs; i++) {
+         int r = func(ctx, arg, i, nb_jobs);
+         if (ret)
+             ret[i] = r;
+     }
+     return 0;
+ }
  AVFilterContext *ff_filter_alloc(const AVFilter *filter, const char *inst_name)
  {
      AVFilterContext *ret;
@@@ -674,13 -508,7 +697,14 @@@ void avfilter_free(AVFilterContext *fil
      av_freep(&filter->inputs);
      av_freep(&filter->outputs);
      av_freep(&filter->priv);
 +    while(filter->command_queue){
 +        ff_command_queue_pop(filter);
 +    }
 +    av_opt_free(filter);
 +    av_expr_free(filter->enable);
 +    filter->enable = NULL;
 +    av_freep(&filter->var_values);
+     av_freep(&filter->internal);
      av_free(filter);
  }
  
@@@ -429,27 -402,10 +429,32 @@@ enum AVMediaType avfilter_pad_get_type(
   */
  #define AVFILTER_FLAG_DYNAMIC_OUTPUTS       (1 << 1)
  /**
+  * The filter supports multithreading by splitting frames into multiple parts
+  * and processing them concurrently.
+  */
+ #define AVFILTER_FLAG_SLICE_THREADS         (1 << 2)
++/**
 + * Some filters support a generic "enable" expression option that can be used
 + * to enable or disable a filter in the timeline. Filters supporting this
 + * option have this flag set. When the enable expression is false, the default
 + * no-op filter_frame() function is called in place of the filter_frame()
 + * callback defined on each input pad, thus the frame is passed unchanged to
 + * the next filters.
 + */
 +#define AVFILTER_FLAG_SUPPORT_TIMELINE_GENERIC  (1 << 16)
 +/**
 + * Same as AVFILTER_FLAG_SUPPORT_TIMELINE_GENERIC, except that the filter will
 + * have its filter_frame() callback(s) called as usual even when the enable
 + * expression is false. The filter will disable filtering within the
 + * filter_frame() callback(s) itself, for example executing code depending on
 + * the AVFilterContext->is_disabled value.
 + */
 +#define AVFILTER_FLAG_SUPPORT_TIMELINE_INTERNAL (1 << 17)
 +/**
 + * Handy mask to test whether the filter supports or no the timeline feature
 + * (internally or generically).
 + */
 +#define AVFILTER_FLAG_SUPPORT_TIMELINE (AVFILTER_FLAG_SUPPORT_TIMELINE_GENERIC | AVFILTER_FLAG_SUPPORT_TIMELINE_INTERNAL)
  
  /**
   * Filter definition. This defines the pads a filter contains, and all the
@@@ -519,32 -475,18 +524,39 @@@ typedef struct AVFilter 
      int priv_size;      ///< size of private data to allocate for the filter
  
      struct AVFilter *next;
 +
 +    /**
 +     * Make the filter instance process a command.
 +     *
 +     * @param cmd    the command to process, for handling simplicity all commands must be alphanumeric only
 +     * @param arg    the argument for the command
 +     * @param res    a buffer with size res_size where the filter(s) can return a response. This must not change when the command is not supported.
 +     * @param flags  if AVFILTER_CMD_FLAG_FAST is set and the command would be
 +     *               time consuming then a filter should treat it like an unsupported command
 +     *
 +     * @returns >=0 on success otherwise an error code.
 +     *          AVERROR(ENOSYS) on unsupported commands
 +     */
 +    int (*process_command)(AVFilterContext *, const char *cmd, const char *arg, char *res, int res_len, int flags);
 +
 +    /**
 +     * Filter initialization function, alternative to the init()
 +     * callback. Args contains the user-supplied parameters, opaque is
 +     * used for providing binary data.
 +     */
 +    int (*init_opaque)(AVFilterContext *ctx, void *opaque);
  } AVFilter;
  
+ /**
+  * Process multiple parts of the frame concurrently.
+  */
+ #define AVFILTER_THREAD_SLICE (1 << 0)
+ typedef struct AVFilterInternal AVFilterInternal;
  /** An instance of a filter */
  struct AVFilterContext {
 -    const AVClass *av_class;              ///< needed for av_log()
 +    const AVClass *av_class;        ///< needed for av_log() and filters common options
  
      const AVFilter *filter;         ///< the AVFilter of which this is an instance
  
  
      struct AVFilterGraph *graph;    ///< filtergraph this filter belongs to
  
+     /**
+      * Type of multithreading being allowed/used. A combination of
+      * AVFILTER_THREAD_* flags.
+      *
+      * May be set by the caller before initializing the filter to forbid some
+      * or all kinds of multithreading for this filter. The default is allowing
+      * everything.
+      *
+      * When the filter is initialized, this field is combined using bit AND with
+      * AVFilterGraph.thread_type to get the final mask used for determining
+      * allowed threading types. I.e. a threading type needs to be set in both
+      * to be allowed.
+      *
+      * After the filter is initialzed, libavfilter sets this field to the
+      * threading type that is actually used (0 for no multithreading).
+      */
+     int thread_type;
+     /**
+      * An opaque struct for libavfilter internal use.
+      */
+     AVFilterInternal *internal;
++
 +    struct AVFilterCommand *command_queue;
 +
 +    char *enable_str;               ///< enable expression string
 +    void *enable;                   ///< parsed expression (AVExpr*)
 +    double *var_values;             ///< variable values for the enable expression
 +    int is_disabled;                ///< the enabled state from the last expression evaluation
  };
  
  /**
@@@ -1036,19 -846,32 +1073,46 @@@ typedef struct AVFilterGraph 
  #if FF_API_FOO_COUNT
      unsigned nb_filters;
  #endif
+     /**
+      * Type of multithreading allowed for filters in this graph. A combination
+      * of AVFILTER_THREAD_* flags.
+      *
+      * May be set by the caller at any point, the setting will apply to all
+      * filters initialized after that. The default is allowing everything.
+      *
+      * When a filter in this graph is initialized, this field is combined using
+      * bit AND with AVFilterContext.thread_type to get the final mask used for
+      * determining allowed threading types. I.e. a threading type needs to be
+      * set in both to be allowed.
+      */
+     int thread_type;
+     /**
+      * Maximum number of threads used by filters in this graph. May be set by
+      * the caller before adding any filters to the filtergraph. Zero (the
+      * default) means that the number of threads is determined automatically.
+      */
+     int nb_threads;
+     /**
+      * Opaque object for libavfilter internal use.
+      */
+     AVFilterGraphInternal *internal;
++
 +    char *aresample_swr_opts; ///< swr options to use for the auto-inserted aresample filters, Access ONLY through AVOptions
 +
 +    /**
 +     * Private fields
 +     *
 +     * The following fields are for internal use only.
 +     * Their type, offset, number and semantic can change without notice.
 +     */
 +
 +    AVFilterLink **sink_links;
 +    int sink_links_count;
 +
 +    unsigned disable_auto_convert;
  } AVFilterGraph;
  
  /**
  
  #include "libavutil/avassert.h"
  #include "libavutil/avstring.h"
 +#include "libavutil/bprint.h"
  #include "libavutil/channel_layout.h"
 -#include "libavutil/common.h"
 -#include "libavutil/log.h"
  #include "libavutil/opt.h"
 +#include "libavutil/pixdesc.h"
 +#include "libavcodec/avcodec.h" // avcodec_find_best_pix_fmt_of_2()
  #include "avfilter.h"
  #include "formats.h"
  #include "internal.h"
- #define OFFSET(x) offsetof(AVFilterGraph,x)
- static const AVOption options[]={
- {"scale_sws_opts"       , "default scale filter options"        , OFFSET(scale_sws_opts)        ,  AV_OPT_TYPE_STRING, {.str = NULL}, 0, 0, 0 },
- {"aresample_swr_opts"   , "default aresample filter options"    , OFFSET(aresample_swr_opts)    ,  AV_OPT_TYPE_STRING, {.str = NULL}, 0, 0, 0 },
- {0}
+ #include "thread.h"
+ #define OFFSET(x) offsetof(AVFilterGraph, x)
 -#define FLAGS AV_OPT_FLAG_VIDEO_PARAM
++#define FLAGS AV_OPT_FLAG_VIDEO_PARAM|AV_OPT_FLAG_FILTERING_PARAM
+ static const AVOption filtergraph_options[] = {
+     { "thread_type", "Allowed thread types", OFFSET(thread_type), AV_OPT_TYPE_FLAGS,
+         { .i64 = AVFILTER_THREAD_SLICE }, 0, INT_MAX, FLAGS, "thread_type" },
+         { "slice", NULL, 0, AV_OPT_TYPE_CONST, { .i64 = AVFILTER_THREAD_SLICE }, .flags = FLAGS, .unit = "thread_type" },
+     { "threads",     "Maximum number of threads", OFFSET(nb_threads),
+         AV_OPT_TYPE_INT,   { .i64 = 0 }, 0, INT_MAX, FLAGS },
++    {"scale_sws_opts"       , "default scale filter options"        , OFFSET(scale_sws_opts)        ,
++        AV_OPT_TYPE_STRING, {.str = NULL}, 0, 0, FLAGS },
++    {"aresample_swr_opts"   , "default aresample filter options"    , OFFSET(aresample_swr_opts)    ,
++        AV_OPT_TYPE_STRING, {.str = NULL}, 0, 0, FLAGS },
+     { NULL },
  };
  
  static const AVClass filtergraph_class = {
      .class_name = "AVFilterGraph",
      .item_name  = av_default_item_name,
-     .option     = options,
      .version    = LIBAVUTIL_VERSION_INT,
+     .option     = filtergraph_options,
 +    .category   = AV_CLASS_CATEGORY_FILTER,
  };
  
+ #if !HAVE_THREADS
+ void ff_graph_thread_free(AVFilterGraph *graph)
+ {
+ }
+ int ff_graph_thread_init(AVFilterGraph *graph)
+ {
+     graph->thread_type = 0;
+     graph->nb_threads  = 1;
+     return 0;
+ }
+ #endif
  AVFilterGraph *avfilter_graph_alloc(void)
  {
      AVFilterGraph *ret = av_mallocz(sizeof(*ret));
@@@ -80,11 -106,12 +112,15 @@@ void avfilter_graph_free(AVFilterGraph 
      while ((*graph)->nb_filters)
          avfilter_free((*graph)->filters[0]);
  
+     ff_graph_thread_free(*graph);
 +    av_freep(&(*graph)->sink_links);
++
      av_freep(&(*graph)->scale_sws_opts);
 +    av_freep(&(*graph)->aresample_swr_opts);
      av_freep(&(*graph)->resample_lavr_opts);
      av_freep(&(*graph)->filters);
+     av_freep(&(*graph)->internal);
      av_freep(graph);
  }
  
   */
  
  #include "avfilter.h"
 +#include "avfiltergraph.h"
 +#include "formats.h"
+ #include "thread.h"
 +#include "video.h"
 +
 +#define POOL_SIZE 32
 +typedef struct AVFilterPool {
 +    AVFilterBufferRef *pic[POOL_SIZE];
 +    int count;
 +    int refcount;
 +    int draining;
 +} AVFilterPool;
 +
 +typedef struct AVFilterCommand {
 +    double time;                ///< time expressed in seconds
 +    char *command;              ///< command
 +    char *arg;                  ///< optional argument for the command
 +    int flags;
 +    struct AVFilterCommand *next;
 +} AVFilterCommand;
 +
 +/**
 + * Update the position of a link in the age heap.
 + */
 +void ff_avfilter_graph_update_heap(AVFilterGraph *graph, AVFilterLink *link);
  
  #if !FF_API_AVFILTERPAD_PUBLIC
  /**
index 0000000,374c1c3..6ceb8e6
mode 000000,100644..100644
--- /dev/null
@@@ -1,0 -1,229 +1,229 @@@
 - * This file is part of Libav.
+ /*
+  *
 - * Libav is free software; you can redistribute it and/or
++ * This file is part of FFmpeg.
+  *
 - * Libav is distributed in the hope that it will be useful,
++ * FFmpeg is free software; you can redistribute it and/or
+  * modify it under the terms of the GNU Lesser General Public
+  * License as published by the Free Software Foundation; either
+  * version 2.1 of the License, or (at your option) any later version.
+  *
 - * License along with Libav; if not, write to the Free Software
++ * FFmpeg is distributed in the hope that it will be useful,
+  * but WITHOUT ANY WARRANTY; without even the implied warranty of
+  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
+  * Lesser General Public License for more details.
+  *
+  * You should have received a copy of the GNU Lesser General Public
++ * License along with FFmpeg; if not, write to the Free Software
+  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
+  */
+ /**
+  * @file
+  * Libavfilter multithreading support
+  */
+ #include "config.h"
+ #include "libavutil/common.h"
+ #include "libavutil/cpu.h"
+ #include "libavutil/mem.h"
+ #include "avfilter.h"
+ #include "internal.h"
+ #include "thread.h"
+ #if HAVE_PTHREADS
+ #include <pthread.h>
+ #elif HAVE_W32THREADS
+ #include "compat/w32pthreads.h"
+ #endif
+ typedef struct ThreadContext {
+     AVFilterGraph *graph;
+     int nb_threads;
+     pthread_t *workers;
+     action_func *func;
+     /* per-execute perameters */
+     AVFilterContext *ctx;
+     void *arg;
+     int   *rets;
+     int nb_rets;
+     int nb_jobs;
+     pthread_cond_t last_job_cond;
+     pthread_cond_t current_job_cond;
+     pthread_mutex_t current_job_lock;
+     int current_job;
+     int done;
+ } ThreadContext;
+ static void* attribute_align_arg worker(void *v)
+ {
+     ThreadContext *c = v;
+     int our_job      = c->nb_jobs;
+     int nb_threads   = c->nb_threads;
+     int self_id;
+     pthread_mutex_lock(&c->current_job_lock);
+     self_id = c->current_job++;
+     for (;;) {
+         while (our_job >= c->nb_jobs) {
+             if (c->current_job == nb_threads + c->nb_jobs)
+                 pthread_cond_signal(&c->last_job_cond);
+             pthread_cond_wait(&c->current_job_cond, &c->current_job_lock);
+             our_job = self_id;
+             if (c->done) {
+                 pthread_mutex_unlock(&c->current_job_lock);
+                 return NULL;
+             }
+         }
+         pthread_mutex_unlock(&c->current_job_lock);
+         c->rets[our_job % c->nb_rets] = c->func(c->ctx, c->arg, our_job, c->nb_jobs);
+         pthread_mutex_lock(&c->current_job_lock);
+         our_job = c->current_job++;
+     }
+ }
+ static void slice_thread_uninit(ThreadContext *c)
+ {
+     int i;
+     pthread_mutex_lock(&c->current_job_lock);
+     c->done = 1;
+     pthread_cond_broadcast(&c->current_job_cond);
+     pthread_mutex_unlock(&c->current_job_lock);
+     for (i = 0; i < c->nb_threads; i++)
+          pthread_join(c->workers[i], NULL);
+     pthread_mutex_destroy(&c->current_job_lock);
+     pthread_cond_destroy(&c->current_job_cond);
+     pthread_cond_destroy(&c->last_job_cond);
+     av_freep(&c->workers);
+ }
+ static void slice_thread_park_workers(ThreadContext *c)
+ {
+     pthread_cond_wait(&c->last_job_cond, &c->current_job_lock);
+     pthread_mutex_unlock(&c->current_job_lock);
+ }
+ static int thread_execute(AVFilterContext *ctx, action_func *func,
+                           void *arg, int *ret, int nb_jobs)
+ {
+     ThreadContext *c = ctx->graph->internal->thread;
+     int dummy_ret;
+     if (nb_jobs <= 0)
+         return 0;
+     pthread_mutex_lock(&c->current_job_lock);
+     c->current_job = c->nb_threads;
+     c->nb_jobs     = nb_jobs;
+     c->ctx         = ctx;
+     c->arg         = arg;
+     c->func        = func;
+     if (ret) {
+         c->rets    = ret;
+         c->nb_rets = nb_jobs;
+     } else {
+         c->rets    = &dummy_ret;
+         c->nb_rets = 1;
+     }
+     pthread_cond_broadcast(&c->current_job_cond);
+     slice_thread_park_workers(c);
+     return 0;
+ }
+ static int thread_init(ThreadContext *c, int nb_threads)
+ {
+     int i, ret;
+     if (!nb_threads) {
+         int nb_cpus = av_cpu_count();
+         av_log(c->graph, AV_LOG_DEBUG, "Detected %d logical cores.\n", nb_cpus);
+         // use number of cores + 1 as thread count if there is more than one
+         if (nb_cpus > 1)
+             nb_threads = nb_cpus + 1;
+         else
+             nb_threads = 1;
+     }
+     if (nb_threads <= 1)
+         return 1;
+     c->nb_threads = nb_threads;
+     c->workers = av_mallocz(sizeof(*c->workers) * nb_threads);
+     if (!c->workers)
+         return AVERROR(ENOMEM);
+     c->current_job = 0;
+     c->nb_jobs     = 0;
+     c->done        = 0;
+     pthread_cond_init(&c->current_job_cond, NULL);
+     pthread_cond_init(&c->last_job_cond,    NULL);
+     pthread_mutex_init(&c->current_job_lock, NULL);
+     pthread_mutex_lock(&c->current_job_lock);
+     for (i = 0; i < nb_threads; i++) {
+         ret = pthread_create(&c->workers[i], NULL, worker, c);
+         if (ret) {
+            pthread_mutex_unlock(&c->current_job_lock);
+            c->nb_threads = i;
+            slice_thread_uninit(c);
+            return AVERROR(ret);
+         }
+     }
+     slice_thread_park_workers(c);
+     return c->nb_threads;
+ }
+ int ff_graph_thread_init(AVFilterGraph *graph)
+ {
+     int ret;
+ #if HAVE_W32THREADS
+     w32thread_init();
+ #endif
+     if (graph->nb_threads == 1) {
+         graph->thread_type = 0;
+         return 0;
+     }
+     graph->internal->thread = av_mallocz(sizeof(ThreadContext));
+     if (!graph->internal->thread)
+         return AVERROR(ENOMEM);
+     ret = thread_init(graph->internal->thread, graph->nb_threads);
+     if (ret <= 1) {
+         av_freep(&graph->internal->thread);
+         graph->thread_type = 0;
+         graph->nb_threads  = 1;
+         return (ret < 0) ? ret : 0;
+     }
+     graph->nb_threads = ret;
+     graph->internal->thread_execute = thread_execute;
+     return 0;
+ }
+ void ff_graph_thread_free(AVFilterGraph *graph)
+ {
+     if (graph->internal->thread)
+         slice_thread_uninit(graph->internal->thread);
+     av_freep(&graph->internal->thread);
+ }
index 0000000,49134d9..0dc3aaa
mode 000000,100644..100644
--- /dev/null
@@@ -1,0 -1,31 +1,31 @@@
 - * This file is part of Libav.
+ /*
+  *
 - * Libav is free software; you can redistribute it and/or
++ * This file is part of FFmpeg.
+  *
 - * Libav is distributed in the hope that it will be useful,
++ * FFmpeg is free software; you can redistribute it and/or
+  * modify it under the terms of the GNU Lesser General Public
+  * License as published by the Free Software Foundation; either
+  * version 2.1 of the License, or (at your option) any later version.
+  *
 - * License along with Libav; if not, write to the Free Software
++ * FFmpeg is distributed in the hope that it will be useful,
+  * but WITHOUT ANY WARRANTY; without even the implied warranty of
+  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
+  * Lesser General Public License for more details.
+  *
+  * You should have received a copy of the GNU Lesser General Public
++ * License along with FFmpeg; if not, write to the Free Software
+  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
+  */
+ #ifndef AVFILTER_THREAD_H
+ #define AVFILTER_THREAD_H
+ #include "avfilter.h"
+ typedef int (action_func)(AVFilterContext *ctx, void *arg, int jobnr, int nb_jobs);
+ int ff_graph_thread_init(AVFilterGraph *graph);
+ void ff_graph_thread_free(AVFilterGraph *graph);
+ #endif /* AVFILTER_THREAD_H */
@@@ -30,8 -30,8 +30,8 @@@
  #include "libavutil/avutil.h"
  
  #define LIBAVFILTER_VERSION_MAJOR  3
- #define LIBAVFILTER_VERSION_MINOR  69
- #define LIBAVFILTER_VERSION_MICRO 101
 -#define LIBAVFILTER_VERSION_MINOR  10
 -#define LIBAVFILTER_VERSION_MICRO  0
++#define LIBAVFILTER_VERSION_MINOR  70
++#define LIBAVFILTER_VERSION_MICRO 100
  
  #define LIBAVFILTER_VERSION_INT AV_VERSION_INT(LIBAVFILTER_VERSION_MAJOR, \
                                                 LIBAVFILTER_VERSION_MINOR, \