lavfi: USPP Filter
[ffmpeg.git] / libavfilter / vf_uspp.c
1 /*
2  * Copyright (c) 2003 Michael Niedermayer <michaelni@gmx.at>
3  * Copyright (c) 2014 Arwa Arif <arwaarif1994@gmail.com>
4  *
5  * This file is part of FFmpeg.
6  *
7  * FFmpeg is free software; you can redistribute it and/or modify
8  * it under the terms of the GNU General Public License as published by
9  * the Free Software Foundation; either version 2 of the License, or
10  * (at your option) any later version.
11  *
12  * FFmpeg is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15  * GNU General Public License for more details.
16  *
17  * You should have received a copy of the GNU General Public License along
18  * with FFmpeg; if not, write to the Free Software Foundation, Inc.,
19  * 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.
20  */
21
22 /**
23  * @file
24  * Ultra Slow/Simple Post-processing filter.
25  *
26  * Originally written by Michael Niedermayer for the MPlayer project, and
27  * ported by Arwa Arif for FFmpeg.
28  */
29
30 #include "libavutil/avassert.h"
31 #include "libavutil/imgutils.h"
32 #include "libavutil/opt.h"
33 #include "libavutil/pixdesc.h"
34 #include "internal.h"
35 #include "libavcodec/avcodec.h"
36 #include "avfilter.h"
37
38 #define MAX_LEVEL 8 /* quality levels */
39 #define BLOCK 16
40
41 typedef struct {
42     const AVClass *av_class;
43     int log2_count;
44     int qp;
45     int qscale_type;
46     int temp_stride[3];
47     uint8_t *src[3];
48     int16_t *temp[3];
49     int outbuf_size;
50     uint8_t *outbuf;
51     AVCodecContext *avctx_enc[BLOCK*BLOCK];
52     AVFrame *frame;
53     AVFrame *frame_dec;
54     uint8_t *non_b_qp_table;
55     int non_b_qp_alloc_size;
56     int use_bframe_qp;
57
58 } USPPContext;
59
60 #define OFFSET(x) offsetof(USPPContext, x)
61 #define FLAGS AV_OPT_FLAG_FILTERING_PARAM|AV_OPT_FLAG_VIDEO_PARAM
62 static const AVOption uspp_options[] = {
63     { "quality" , "set quality" , OFFSET(log2_count) , AV_OPT_TYPE_INT , {.i64 = 3} , 0 , MAX_LEVEL , FLAGS },
64     { "qp" , "force a constant quantizer parameter" , OFFSET(qp) , AV_OPT_TYPE_INT , {.i64 = 0} , 0 , 63 , FLAGS },
65     { "use_bframe_qp" , "use B-frames' QP" , OFFSET(use_bframe_qp) , AV_OPT_TYPE_INT , {.i64 = 0} , 0 , 1 , FLAGS },
66     { NULL }
67 };
68
69 static const AVClass uspp_class = {
70     .class_name       = "uspp",
71     .item_name        = av_default_item_name,
72     .option           = uspp_options,
73     .version          = LIBAVUTIL_VERSION_INT,
74     .category         = AV_CLASS_CATEGORY_FILTER,
75 };
76
77 //===========================================================================//
78 DECLARE_ALIGNED(8, static const uint8_t, dither)[8][8] = {
79     {  0*4,  48*4,  12*4,  60*4,   3*4,  51*4,  15*4,  63*4, },
80     { 32*4,  16*4,  44*4,  28*4,  35*4,  19*4,  47*4,  31*4, },
81     {  8*4,  56*4,   4*4,  52*4,  11*4,  59*4,   7*4,  55*4, },
82     { 40*4,  24*4,  36*4,  20*4,  43*4,  27*4,  39*4,  23*4, },
83     {  2*4,  50*4,  14*4,  62*4,   1*4,  49*4,  13*4,  61*4, },
84     { 34*4,  18*4,  46*4,  30*4,  33*4,  17*4,  45*4,  29*4, },
85     { 10*4,  58*4,   6*4,  54*4,   9*4,  57*4,   5*4,  53*4, },
86     { 42*4,  26*4,  38*4,  22*4,  41*4,  25*4,  37*4,  21*4, },
87 };
88
89 static const uint8_t offset[511][2]= {
90     { 0, 0},
91     { 0, 0}, { 8, 8},                                                              // quality 1
92     { 0, 0}, { 4, 4}, {12, 8}, { 8,12},                                            // quality 2
93     { 0, 0}, {10, 2}, { 4, 4}, {14, 6}, { 8, 8}, { 2,10}, {12,12}, { 6,14},        // quality 3
94
95     { 0, 0}, {10, 2}, { 4, 4}, {14, 6}, { 8, 8}, { 2,10}, {12,12}, { 6,14},
96     { 5, 1}, {15, 3}, { 9, 5}, { 3, 7}, {13, 9}, { 7,11}, { 1,13}, {11,15},        // quality 4
97
98     { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 5, 1}, {13, 1}, { 5, 9}, {13, 9},
99     { 2, 2}, {10, 2}, { 2,10}, {10,10}, { 7, 3}, {15, 3}, { 7,11}, {15,11},
100     { 4, 4}, {12, 4}, { 4,12}, {12,12}, { 1, 5}, { 9, 5}, { 1,13}, { 9,13},
101     { 6, 6}, {14, 6}, { 6,14}, {14,14}, { 3, 7}, {11, 7}, { 3,15}, {11,15},        // quality 5
102
103     { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 4, 0}, {12, 0}, { 4, 8}, {12, 8},
104     { 1, 1}, { 9, 1}, { 1, 9}, { 9, 9}, { 5, 1}, {13, 1}, { 5, 9}, {13, 9},
105     { 3, 2}, {11, 2}, { 3,10}, {11,10}, { 7, 2}, {15, 2}, { 7,10}, {15,10},
106     { 2, 3}, {10, 3}, { 2,11}, {10,11}, { 6, 3}, {14, 3}, { 6,11}, {14,11},
107     { 0, 4}, { 8, 4}, { 0,12}, { 8,12}, { 4, 4}, {12, 4}, { 4,12}, {12,12},
108     { 1, 5}, { 9, 5}, { 1,13}, { 9,13}, { 5, 5}, {13, 5}, { 5,13}, {13,13},
109     { 3, 6}, {11, 6}, { 3,14}, {11,14}, { 7, 6}, {15, 6}, { 7,14}, {15,14},
110     { 2, 7}, {10, 7}, { 2,15}, {10,15}, { 6, 7}, {14, 7}, { 6,15}, {14,15},        // quality 6
111
112     { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 0, 2}, { 8, 2}, { 0,10}, { 8,10},
113     { 0, 4}, { 8, 4}, { 0,12}, { 8,12}, { 0, 6}, { 8, 6}, { 0,14}, { 8,14},
114     { 1, 1}, { 9, 1}, { 1, 9}, { 9, 9}, { 1, 3}, { 9, 3}, { 1,11}, { 9,11},
115     { 1, 5}, { 9, 5}, { 1,13}, { 9,13}, { 1, 7}, { 9, 7}, { 1,15}, { 9,15},
116     { 2, 0}, {10, 0}, { 2, 8}, {10, 8}, { 2, 2}, {10, 2}, { 2,10}, {10,10},
117     { 2, 4}, {10, 4}, { 2,12}, {10,12}, { 2, 6}, {10, 6}, { 2,14}, {10,14},
118     { 3, 1}, {11, 1}, { 3, 9}, {11, 9}, { 3, 3}, {11, 3}, { 3,11}, {11,11},
119     { 3, 5}, {11, 5}, { 3,13}, {11,13}, { 3, 7}, {11, 7}, { 3,15}, {11,15},
120     { 4, 0}, {12, 0}, { 4, 8}, {12, 8}, { 4, 2}, {12, 2}, { 4,10}, {12,10},
121     { 4, 4}, {12, 4}, { 4,12}, {12,12}, { 4, 6}, {12, 6}, { 4,14}, {12,14},
122     { 5, 1}, {13, 1}, { 5, 9}, {13, 9}, { 5, 3}, {13, 3}, { 5,11}, {13,11},
123     { 5, 5}, {13, 5}, { 5,13}, {13,13}, { 5, 7}, {13, 7}, { 5,15}, {13,15},
124     { 6, 0}, {14, 0}, { 6, 8}, {14, 8}, { 6, 2}, {14, 2}, { 6,10}, {14,10},
125     { 6, 4}, {14, 4}, { 6,12}, {14,12}, { 6, 6}, {14, 6}, { 6,14}, {14,14},
126     { 7, 1}, {15, 1}, { 7, 9}, {15, 9}, { 7, 3}, {15, 3}, { 7,11}, {15,11},
127     { 7, 5}, {15, 5}, { 7,13}, {15,13}, { 7, 7}, {15, 7}, { 7,15}, {15,15},        // quality 7
128
129     { 0, 0}, { 8, 0}, { 0, 8}, { 8, 8}, { 4, 4}, {12, 4}, { 4,12}, {12,12},
130     { 0, 4}, { 8, 4}, { 0,12}, { 8,12}, { 4, 0}, {12, 0}, { 4, 8}, {12, 8},
131     { 2, 2}, {10, 2}, { 2,10}, {10,10}, { 6, 6}, {14, 6}, { 6,14}, {14,14},
132     { 2, 6}, {10, 6}, { 2,14}, {10,14}, { 6, 2}, {14, 2}, { 6,10}, {14,10},
133     { 0, 2}, { 8, 2}, { 0,10}, { 8,10}, { 4, 6}, {12, 6}, { 4,14}, {12,14},
134     { 0, 6}, { 8, 6}, { 0,14}, { 8,14}, { 4, 2}, {12, 2}, { 4,10}, {12,10},
135     { 2, 0}, {10, 0}, { 2, 8}, {10, 8}, { 6, 4}, {14, 4}, { 6,12}, {14,12},
136     { 2, 4}, {10, 4}, { 2,12}, {10,12}, { 6, 0}, {14, 0}, { 6, 8}, {14, 8},
137     { 1, 1}, { 9, 1}, { 1, 9}, { 9, 9}, { 5, 5}, {13, 5}, { 5,13}, {13,13},
138     { 1, 5}, { 9, 5}, { 1,13}, { 9,13}, { 5, 1}, {13, 1}, { 5, 9}, {13, 9},
139     { 3, 3}, {11, 3}, { 3,11}, {11,11}, { 7, 7}, {15, 7}, { 7,15}, {15,15},
140     { 3, 7}, {11, 7}, { 3,15}, {11,15}, { 7, 3}, {15, 3}, { 7,11}, {15,11},
141     { 1, 3}, { 9, 3}, { 1,11}, { 9,11}, { 5, 7}, {13, 7}, { 5,15}, {13,15},
142     { 1, 7}, { 9, 7}, { 1,15}, { 9,15}, { 5, 3}, {13, 3}, { 5,11}, {13,11},        // quality 8
143     { 3, 1}, {11, 1}, { 3, 9}, {11, 9}, { 7, 5}, {15, 5}, { 7,13}, {15,13},
144     { 3, 5}, {11, 5}, { 3,13}, {11,13}, { 7, 1}, {15, 1}, { 7, 9}, {15, 9},
145     { 0, 1}, { 8, 1}, { 0, 9}, { 8, 9}, { 4, 5}, {12, 5}, { 4,13}, {12,13},
146     { 0, 5}, { 8, 5}, { 0,13}, { 8,13}, { 4, 1}, {12, 1}, { 4, 9}, {12, 9},
147     { 2, 3}, {10, 3}, { 2,11}, {10,11}, { 6, 7}, {14, 7}, { 6,15}, {14,15},
148     { 2, 7}, {10, 7}, { 2,15}, {10,15}, { 6, 3}, {14, 3}, { 6,11}, {14,11},
149     { 0, 3}, { 8, 3}, { 0,11}, { 8,11}, { 4, 7}, {12, 7}, { 4,15}, {12,15},
150     { 0, 7}, { 8, 7}, { 0,15}, { 8,15}, { 4, 3}, {12, 3}, { 4,11}, {12,11},
151     { 2, 1}, {10, 1}, { 2, 9}, {10, 9}, { 6, 5}, {14, 5}, { 6,13}, {14,13},
152     { 2, 5}, {10, 5}, { 2,13}, {10,13}, { 6, 1}, {14, 1}, { 6, 9}, {14, 9},
153     { 1, 0}, { 9, 0}, { 1, 8}, { 9, 8}, { 5, 4}, {13, 4}, { 5,12}, {13,12},
154     { 1, 4}, { 9, 4}, { 1,12}, { 9,12}, { 5, 0}, {13, 0}, { 5, 8}, {13, 8},
155     { 3, 2}, {11, 2}, { 3,10}, {11,10}, { 7, 6}, {15, 6}, { 7,14}, {15,14},
156     { 3, 6}, {11, 6}, { 3,14}, {11,14}, { 7, 2}, {15, 2}, { 7,10}, {15,10},
157     { 1, 2}, { 9, 2}, { 1,10}, { 9,10}, { 5, 6}, {13, 6}, { 5,14}, {13,14},
158     { 1, 6}, { 9, 6}, { 1,14}, { 9,14}, { 5, 2}, {13, 2}, { 5,10}, {13,10},
159     { 3, 0}, {11, 0}, { 3, 8}, {11, 8}, { 7, 4}, {15, 4}, { 7,12}, {15,12},
160     { 3, 4}, {11, 4}, { 3,12}, {11,12}, { 7, 0}, {15, 0}, { 7, 8}, {15, 8},
161 };
162
163 static void store_slice_c(uint8_t *dst, int16_t *src,
164                          int dst_stride, int src_stride,
165                          int width, int height, int log2_scale )
166 {
167     int y, x;
168
169 #define STORE(pos) do {                                                  \
170     temp = ((src[x + y * src_stride + pos] << log2_scale) + d[pos]) >> 8;  \
171     if (temp & 0x100) temp = ~(temp >> 31);                              \
172     dst[x + y * dst_stride + pos] = temp;                                  \
173 } while (0);
174
175     for (y = 0 ; y < height ; y++) {
176     const uint8_t *d = dither[y&7];
177         for (x = 0 ; x < width ; x += 8) {
178             int temp;
179             STORE(0);
180             STORE(1);
181             STORE(2);
182             STORE(3);
183             STORE(4);
184             STORE(5);
185             STORE(6);
186             STORE(7);
187         }
188     }
189 }
190
191 static inline int norm_qscale(int qscale, int type)
192 {
193     switch (type) {
194     case FF_QSCALE_TYPE_MPEG1: return qscale;
195     case FF_QSCALE_TYPE_MPEG2: return qscale >> 1;
196     case FF_QSCALE_TYPE_H264:  return qscale >> 2;
197     case FF_QSCALE_TYPE_VP56:  return (63 - qscale + 2) >> 2;
198     }
199     return qscale;
200 }
201
202 static void filter(USPPContext *p, uint8_t *dst[3], uint8_t *src[3],
203                  int dst_stride[3], int src_stride[3], int width,
204                  int height, uint8_t *qp_store, int qp_stride)
205 {
206     int x, y, i, j;
207     const int count = 1<<p->log2_count;
208     for (i = 0 ; i < 3 ; i++) {
209         int is_chroma = !!i;
210         int w = width  >> is_chroma;
211         int h = height >> is_chroma;
212         int stride = p->temp_stride[i];
213         int block = BLOCK >> is_chroma;
214
215         if (!src[i] || !dst[i])
216             continue;
217         for (y = 0 ; y < h ; y++) {
218             int index = block + block * stride + y * stride;
219             memcpy( p->src[i] + index , src[i] + y * src_stride[i] , w );
220             for (x = 0 ; x < block ; x++) {
221                 p->src[i][index     - x - 1]= p->src[i][index +     x    ];
222                 p->src[i][index + w + x    ]= p->src[i][index + w - x - 1];
223             }
224         }
225         for (y = 0 ; y < block ; y++){
226             memcpy(p->src[i] + (  block-1-y) * stride , p->src[i] + (  y+block  ) * stride , stride);
227             memcpy(p->src[i] + (h+block  +y) * stride , p->src[i] + (h-y+block-1) * stride , stride);
228         }
229
230         p->frame->linesize[i] = stride;
231         memset(p->temp[i] , 0 , (h + 2 * block) * stride * sizeof(int16_t));
232     }
233
234     if (p->qp)
235         p->frame->quality = p->qp * FF_QP2LAMBDA;
236     else
237         p->frame->quality = norm_qscale(qp_store[0] , p->qscale_type) * FF_QP2LAMBDA;
238 //    init per MB qscale stuff FIXME
239     p->frame->height = height;
240     p->frame->width  = width;
241
242     for (i = 0 ; i < count ; i++) {
243         const int x1 = offset[i+count-1][0];
244         const int y1 = offset[i+count-1][1];
245         int offset;
246         AVPacket pkt;
247         int got_pkt_ptr;
248
249         av_init_packet(&pkt);
250         pkt.data = p->outbuf;
251         pkt.size = p->outbuf_size;
252
253         p->frame->data[0] = p->src[0] + x1   + y1   * p->frame->linesize[0];
254         p->frame->data[1] = p->src[1] + x1/2 + y1/2 * p->frame->linesize[1];
255         p->frame->data[2] = p->src[2] + x1/2 + y1/2 * p->frame->linesize[2];
256         p->frame->format  = p->avctx_enc[i]->pix_fmt;
257
258         avcodec_encode_video2(p->avctx_enc[i] , &pkt , p->frame , &got_pkt_ptr);
259         p->frame_dec = p->avctx_enc[i]->coded_frame;
260
261         offset = (BLOCK-x1) + (BLOCK-y1) * p->frame_dec->linesize[0];
262
263         for (y = 0 ; y < height ; y++)
264             for (x = 0 ; x < width ; x++)
265                 p->temp[0][ x + y * p->temp_stride[0] ] += p->frame_dec->data[0][ x + y * p->frame_dec->linesize[0] + offset ];
266
267         offset = (BLOCK/2-x1/2) + (BLOCK/2-y1/2) * p->frame_dec->linesize[1];
268
269         for (y = 0 ; y < height/2 ; y++) {
270             for (x = 0; x < width/2 ; x++) {
271                 p->temp[1][ x + y * p->temp_stride[1] ] += p->frame_dec->data[1][ x + y * p->frame_dec->linesize[1] + offset ];
272                 p->temp[2][ x + y * p->temp_stride[2] ] += p->frame_dec->data[2][ x + y * p->frame_dec->linesize[2] + offset ];
273             }
274         }
275     }
276
277     for (j = 0 ; j < 3 ; j++) {
278         int is_chroma = !!j;
279         if (!dst[j])
280             continue;
281         store_slice_c(dst[j] , p->temp[j] , dst_stride[j] , p->temp_stride[j] ,
282              width >> is_chroma , height >> is_chroma , 8-p->log2_count);
283     }
284 }
285
286 static int query_formats(AVFilterContext *ctx)
287 {
288     static const enum PixelFormat pix_fmts[] = {
289         AV_PIX_FMT_YUV444P,  AV_PIX_FMT_YUV422P,
290         AV_PIX_FMT_YUV420P,  AV_PIX_FMT_YUV411P,
291         AV_PIX_FMT_YUV410P,  AV_PIX_FMT_YUV440P,
292         AV_PIX_FMT_YUVJ444P, AV_PIX_FMT_YUVJ422P,
293         AV_PIX_FMT_YUVJ420P, AV_PIX_FMT_YUVJ440P,
294         AV_PIX_FMT_NONE
295     };
296     ff_set_common_formats(ctx, ff_make_format_list(pix_fmts));
297     return 0;
298 }
299
300 static int config_input(AVFilterLink *inlink)
301 {
302
303     AVFilterContext *ctx = inlink->dst;
304     USPPContext *uspp = ctx->priv;
305     const int height = inlink->h;
306     const int width  = inlink->w;
307     int i;
308
309     AVCodec *enc = avcodec_find_encoder(AV_CODEC_ID_SNOW);
310     if(!enc)
311     {
312         av_log(ctx, AV_LOG_ERROR, "SNOW encoder not found.\n");
313         return AVERROR(EINVAL);
314     }
315
316     if (!uspp->use_bframe_qp) {
317         /* we are assuming here the qp blocks will not be smaller that 16x16 */
318         uspp->non_b_qp_alloc_size = FF_CEIL_RSHIFT(width, 4) * FF_CEIL_RSHIFT(height, 4);
319         uspp->non_b_qp_table = av_calloc(uspp->non_b_qp_alloc_size, sizeof(*uspp->non_b_qp_table));
320
321         if (!uspp->non_b_qp_table)
322             return AVERROR(ENOMEM);
323     }
324
325     for (i = 0 ; i < 3; i++) {
326         int is_chroma = !!i;
327         int w = ((width  + 4 * BLOCK-1) & (~(2 * BLOCK-1))) >> is_chroma;
328         int h = ((height + 4 * BLOCK-1) & (~(2 * BLOCK-1))) >> is_chroma;
329
330         uspp->temp_stride[i] = w;
331         if (!(uspp->temp[i] = av_malloc(uspp->temp_stride[i] * h * sizeof(int16_t))))
332             return AVERROR(ENOMEM);
333         if (!(uspp->src [i] = av_malloc(uspp->temp_stride[i] * h * sizeof(uint8_t))))
334             return AVERROR(ENOMEM);
335     }
336
337     for (i = 0 ; i < (1<<uspp->log2_count) ; i++) {
338         AVCodecContext *avctx_enc;
339         AVDictionary *opts = NULL;
340         int ret;
341
342         if (!(uspp->avctx_enc[i] = avcodec_alloc_context3(NULL)))
343             return AVERROR(ENOMEM);
344
345         avctx_enc = uspp->avctx_enc[i];
346         avctx_enc->width = width + BLOCK;
347         avctx_enc->height = height + BLOCK;
348         avctx_enc->time_base = (AVRational){1,25};  // meaningless
349         avctx_enc->gop_size = 300;
350         avctx_enc->max_b_frames = 0;
351         avctx_enc->pix_fmt = AV_PIX_FMT_YUV420P;
352         avctx_enc->flags = CODEC_FLAG_QSCALE | CODEC_FLAG_LOW_DELAY;
353         avctx_enc->strict_std_compliance = FF_COMPLIANCE_EXPERIMENTAL;
354         avctx_enc->global_quality = 123;
355         av_dict_set(&opts, "no_bitstream", "1", 0);
356         ret = avcodec_open2(avctx_enc, enc, &opts);
357         if (ret < 0)
358             return ret;
359         av_dict_free(&opts);
360         av_assert0(avctx_enc->codec);
361     }
362
363     uspp->outbuf_size = (width + BLOCK) * (height + BLOCK) * 10;
364     if (!(uspp->frame = av_frame_alloc()))
365             return AVERROR(ENOMEM);
366     if (!(uspp->outbuf = av_malloc(uspp->outbuf_size)))
367             return AVERROR(ENOMEM);
368
369     return 0;
370 }
371
372 static int filter_frame(AVFilterLink *inlink, AVFrame *in)
373 {
374     AVFilterContext *ctx = inlink->dst;
375     USPPContext *uspp = ctx->priv;
376     AVFilterLink *outlink = ctx->outputs[0];
377     AVFrame *out = in;
378
379     int qp_stride = 0;
380     uint8_t *qp_table = NULL;
381
382     /* if we are not in a constant user quantizer mode and we don't want to use
383      * the quantizers from the B-frames (B-frames often have a higher QP), we
384      * need to save the qp table from the last non B-frame; this is what the
385      * following code block does */
386     if (!uspp->qp) {
387         qp_table = av_frame_get_qp_table(in, &qp_stride, &uspp->qscale_type);
388
389         if (qp_table && !uspp->use_bframe_qp && in->pict_type != AV_PICTURE_TYPE_B) {
390             int w, h;
391
392             /* if the qp stride is not set, it means the QP are only defined on
393              * a line basis */
394             if (!qp_stride) {
395                 w = FF_CEIL_RSHIFT(inlink->w, 4);
396                 h = 1;
397             } else {
398                 w = FF_CEIL_RSHIFT(qp_stride, 4);
399                 h = FF_CEIL_RSHIFT(inlink->h, 4);
400             }
401             av_assert0(w * h <= uspp->non_b_qp_alloc_size);
402             memcpy(uspp->non_b_qp_table , qp_table , w * h);
403         }
404     }
405
406     if (uspp->log2_count && !ctx->is_disabled) {
407         if (!uspp->use_bframe_qp && uspp->non_b_qp_table)
408             qp_table = uspp->non_b_qp_table;
409
410         if (qp_table || uspp->qp) {
411
412             /* get a new frame if in-place is not possible or if the dimensions
413              * are not multiple of 8 */
414             if (!av_frame_is_writable(in) || (inlink->w & 7) || (inlink->h & 7)) {
415                 const int aligned_w = FFALIGN(inlink->w, 8);
416                 const int aligned_h = FFALIGN(inlink->h, 8);
417
418                 out = ff_get_video_buffer(outlink, aligned_w, aligned_h);
419                 if (!out) {
420                     av_frame_free(&in);
421                     return AVERROR(ENOMEM);
422                 }
423                 av_frame_copy_props(out, in);
424                 out->width  = in->width;
425                 out->height = in->height;
426             }
427
428             filter(uspp , out->data , in->data , out->linesize , in->linesize , inlink->w , inlink->h , qp_table , qp_stride);
429         }
430     }
431
432     if (in != out) {
433         if (in->data[3])
434             av_image_copy_plane(out->data[3], out->linesize[3],
435                                 in ->data[3], in ->linesize[3],
436                                 inlink->w, inlink->h);
437         av_frame_free(&in);
438     }
439     return ff_filter_frame(outlink, out);
440 }
441
442 static av_cold void uninit(AVFilterContext *ctx)
443 {
444     USPPContext *uspp = ctx->priv;
445     int i;
446
447     for (i = 0 ; i < 3 ; i++) {
448         av_freep(&uspp->temp[i]);
449         av_freep(&uspp->src[i]);
450     }
451
452     for (i = 0 ; i < (1 << uspp->log2_count) ; i++) {
453         avcodec_close(uspp->avctx_enc[i]);
454         av_freep(&uspp->avctx_enc[i]);
455     }
456
457     av_freep(&uspp->non_b_qp_table);
458     av_freep(&uspp->outbuf);
459     av_frame_free(&uspp->frame);
460 }
461
462 static const AVFilterPad uspp_inputs[] = {
463     {
464         .name         = "default",
465         .type         = AVMEDIA_TYPE_VIDEO,
466         .config_props = config_input,
467         .filter_frame = filter_frame,
468     },
469     { NULL }
470 };
471
472 static const AVFilterPad uspp_outputs[] = {
473     {
474         .name = "default",
475         .type = AVMEDIA_TYPE_VIDEO,
476     },
477     { NULL }
478 };
479
480 AVFilter ff_vf_uspp = {
481     .name            = "uspp",
482     .description     = NULL_IF_CONFIG_SMALL("Apply Ultra Simple / Slow Post-processing filter."),
483     .priv_size       = sizeof(USPPContext),
484     .uninit          = uninit,
485     .query_formats   = query_formats,
486     .inputs          = uspp_inputs,
487     .outputs         = uspp_outputs,
488     .priv_class      = &uspp_class,
489     .flags           = AVFILTER_FLAG_SUPPORT_TIMELINE_INTERNAL,
490 };