rv30: return AVERROR(EINVAL) instead of EINVAL
[ffmpeg.git] / libswscale / utils.c
1 /*
2  * Copyright (C) 2001-2003 Michael Niedermayer <michaelni@gmx.at>
3  *
4  * This file is part of Libav.
5  *
6  * Libav is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * Libav is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with Libav; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 #include <inttypes.h>
22 #include <string.h>
23 #include <math.h>
24 #include <stdio.h>
25 #include "config.h"
26 #include <assert.h>
27 #if HAVE_SYS_MMAN_H
28 #include <sys/mman.h>
29 #if defined(MAP_ANON) && !defined(MAP_ANONYMOUS)
30 #define MAP_ANONYMOUS MAP_ANON
31 #endif
32 #endif
33 #if HAVE_VIRTUALALLOC
34 #define WIN32_LEAN_AND_MEAN
35 #include <windows.h>
36 #endif
37 #include "swscale.h"
38 #include "swscale_internal.h"
39 #include "rgb2rgb.h"
40 #include "libavutil/intreadwrite.h"
41 #include "libavutil/x86_cpu.h"
42 #include "libavutil/cpu.h"
43 #include "libavutil/avutil.h"
44 #include "libavutil/bswap.h"
45 #include "libavutil/opt.h"
46 #include "libavutil/pixdesc.h"
47
48 unsigned swscale_version(void)
49 {
50     return LIBSWSCALE_VERSION_INT;
51 }
52
53 const char *swscale_configuration(void)
54 {
55     return LIBAV_CONFIGURATION;
56 }
57
58 const char *swscale_license(void)
59 {
60 #define LICENSE_PREFIX "libswscale license: "
61     return LICENSE_PREFIX LIBAV_LICENSE + sizeof(LICENSE_PREFIX) - 1;
62 }
63
64 #define RET 0xC3 //near return opcode for x86
65
66 #define isSupportedIn(x)    (       \
67            (x)==PIX_FMT_YUV420P     \
68         || (x)==PIX_FMT_YUVA420P    \
69         || (x)==PIX_FMT_YUYV422     \
70         || (x)==PIX_FMT_UYVY422     \
71         || (x)==PIX_FMT_RGB48BE     \
72         || (x)==PIX_FMT_RGB48LE     \
73         || (x)==PIX_FMT_RGB32       \
74         || (x)==PIX_FMT_RGB32_1     \
75         || (x)==PIX_FMT_BGR48BE     \
76         || (x)==PIX_FMT_BGR48LE     \
77         || (x)==PIX_FMT_BGR24       \
78         || (x)==PIX_FMT_BGR565LE    \
79         || (x)==PIX_FMT_BGR565BE    \
80         || (x)==PIX_FMT_BGR555LE    \
81         || (x)==PIX_FMT_BGR555BE    \
82         || (x)==PIX_FMT_BGR32       \
83         || (x)==PIX_FMT_BGR32_1     \
84         || (x)==PIX_FMT_RGB24       \
85         || (x)==PIX_FMT_RGB565LE    \
86         || (x)==PIX_FMT_RGB565BE    \
87         || (x)==PIX_FMT_RGB555LE    \
88         || (x)==PIX_FMT_RGB555BE    \
89         || (x)==PIX_FMT_GRAY8       \
90         || (x)==PIX_FMT_Y400A       \
91         || (x)==PIX_FMT_YUV410P     \
92         || (x)==PIX_FMT_YUV440P     \
93         || (x)==PIX_FMT_NV12        \
94         || (x)==PIX_FMT_NV21        \
95         || (x)==PIX_FMT_GRAY16BE    \
96         || (x)==PIX_FMT_GRAY16LE    \
97         || (x)==PIX_FMT_YUV444P     \
98         || (x)==PIX_FMT_YUV422P     \
99         || (x)==PIX_FMT_YUV411P     \
100         || (x)==PIX_FMT_YUVJ420P    \
101         || (x)==PIX_FMT_YUVJ422P    \
102         || (x)==PIX_FMT_YUVJ440P    \
103         || (x)==PIX_FMT_YUVJ444P    \
104         || (x)==PIX_FMT_PAL8        \
105         || (x)==PIX_FMT_BGR8        \
106         || (x)==PIX_FMT_RGB8        \
107         || (x)==PIX_FMT_BGR4_BYTE   \
108         || (x)==PIX_FMT_RGB4_BYTE   \
109         || (x)==PIX_FMT_YUV440P     \
110         || (x)==PIX_FMT_MONOWHITE   \
111         || (x)==PIX_FMT_MONOBLACK   \
112         || (x)==PIX_FMT_YUV420P9LE    \
113         || (x)==PIX_FMT_YUV444P9LE    \
114         || (x)==PIX_FMT_YUV420P10LE   \
115         || (x)==PIX_FMT_YUV422P10LE   \
116         || (x)==PIX_FMT_YUV444P10LE   \
117         || (x)==PIX_FMT_YUV420P16LE   \
118         || (x)==PIX_FMT_YUV422P16LE   \
119         || (x)==PIX_FMT_YUV444P16LE   \
120         || (x)==PIX_FMT_YUV420P9BE    \
121         || (x)==PIX_FMT_YUV444P9BE    \
122         || (x)==PIX_FMT_YUV420P10BE   \
123         || (x)==PIX_FMT_YUV444P10BE   \
124         || (x)==PIX_FMT_YUV422P10BE   \
125         || (x)==PIX_FMT_YUV420P16BE   \
126         || (x)==PIX_FMT_YUV422P16BE   \
127         || (x)==PIX_FMT_YUV444P16BE   \
128     )
129
130 int sws_isSupportedInput(enum PixelFormat pix_fmt)
131 {
132     return isSupportedIn(pix_fmt);
133 }
134
135 #define isSupportedOut(x)   (       \
136            (x)==PIX_FMT_YUV420P     \
137         || (x)==PIX_FMT_YUVA420P    \
138         || (x)==PIX_FMT_YUYV422     \
139         || (x)==PIX_FMT_UYVY422     \
140         || (x)==PIX_FMT_YUV444P     \
141         || (x)==PIX_FMT_YUV422P     \
142         || (x)==PIX_FMT_YUV411P     \
143         || (x)==PIX_FMT_YUVJ420P    \
144         || (x)==PIX_FMT_YUVJ422P    \
145         || (x)==PIX_FMT_YUVJ440P    \
146         || (x)==PIX_FMT_YUVJ444P    \
147         || isRGBinBytes(x)          \
148         || isBGRinBytes(x)          \
149         || (x)==PIX_FMT_RGB565LE    \
150         || (x)==PIX_FMT_RGB565BE    \
151         || (x)==PIX_FMT_RGB555LE    \
152         || (x)==PIX_FMT_RGB555BE    \
153         || (x)==PIX_FMT_RGB444LE    \
154         || (x)==PIX_FMT_RGB444BE    \
155         || (x)==PIX_FMT_BGR565LE    \
156         || (x)==PIX_FMT_BGR565BE    \
157         || (x)==PIX_FMT_BGR555LE    \
158         || (x)==PIX_FMT_BGR555BE    \
159         || (x)==PIX_FMT_BGR444LE    \
160         || (x)==PIX_FMT_BGR444BE    \
161         || (x)==PIX_FMT_RGB8        \
162         || (x)==PIX_FMT_BGR8        \
163         || (x)==PIX_FMT_RGB4_BYTE   \
164         || (x)==PIX_FMT_BGR4_BYTE   \
165         || (x)==PIX_FMT_RGB4        \
166         || (x)==PIX_FMT_BGR4        \
167         || (x)==PIX_FMT_MONOBLACK   \
168         || (x)==PIX_FMT_MONOWHITE   \
169         || (x)==PIX_FMT_NV12        \
170         || (x)==PIX_FMT_NV21        \
171         || (x)==PIX_FMT_GRAY16BE    \
172         || (x)==PIX_FMT_GRAY16LE    \
173         || (x)==PIX_FMT_GRAY8       \
174         || (x)==PIX_FMT_YUV410P     \
175         || (x)==PIX_FMT_YUV440P     \
176         || (x)==PIX_FMT_YUV420P9LE    \
177         || (x)==PIX_FMT_YUV420P10LE   \
178         || (x)==PIX_FMT_YUV420P16LE   \
179         || (x)==PIX_FMT_YUV422P10LE   \
180         || (x)==PIX_FMT_YUV422P16LE   \
181         || (x)==PIX_FMT_YUV444P16LE   \
182         || (x)==PIX_FMT_YUV420P9BE    \
183         || (x)==PIX_FMT_YUV420P10BE   \
184         || (x)==PIX_FMT_YUV422P10BE   \
185         || (x)==PIX_FMT_YUV420P16BE   \
186         || (x)==PIX_FMT_YUV422P16BE   \
187         || (x)==PIX_FMT_YUV444P16BE   \
188     )
189
190 int sws_isSupportedOutput(enum PixelFormat pix_fmt)
191 {
192     return isSupportedOut(pix_fmt);
193 }
194
195 extern const int32_t ff_yuv2rgb_coeffs[8][4];
196
197 const char *sws_format_name(enum PixelFormat format)
198 {
199     if ((unsigned)format < PIX_FMT_NB && av_pix_fmt_descriptors[format].name)
200         return av_pix_fmt_descriptors[format].name;
201     else
202         return "Unknown format";
203 }
204
205 static double getSplineCoeff(double a, double b, double c, double d, double dist)
206 {
207     if (dist<=1.0) return ((d*dist + c)*dist + b)*dist +a;
208     else           return getSplineCoeff(        0.0,
209                                           b+ 2.0*c + 3.0*d,
210                                                  c + 3.0*d,
211                                          -b- 3.0*c - 6.0*d,
212                                          dist-1.0);
213 }
214
215 static int initFilter(int16_t **outFilter, int16_t **filterPos, int *outFilterSize, int xInc,
216                       int srcW, int dstW, int filterAlign, int one, int flags, int cpu_flags,
217                       SwsVector *srcFilter, SwsVector *dstFilter, double param[2])
218 {
219     int i;
220     int filterSize;
221     int filter2Size;
222     int minFilterSize;
223     int64_t *filter=NULL;
224     int64_t *filter2=NULL;
225     const int64_t fone= 1LL<<54;
226     int ret= -1;
227
228     emms_c(); //FIXME this should not be required but it IS (even for non-MMX versions)
229
230     // NOTE: the +1 is for the MMX scaler which reads over the end
231     FF_ALLOC_OR_GOTO(NULL, *filterPos, (dstW+1)*sizeof(int16_t), fail);
232
233     if (FFABS(xInc - 0x10000) <10) { // unscaled
234         int i;
235         filterSize= 1;
236         FF_ALLOCZ_OR_GOTO(NULL, filter, dstW*sizeof(*filter)*filterSize, fail);
237
238         for (i=0; i<dstW; i++) {
239             filter[i*filterSize]= fone;
240             (*filterPos)[i]=i;
241         }
242
243     } else if (flags&SWS_POINT) { // lame looking point sampling mode
244         int i;
245         int xDstInSrc;
246         filterSize= 1;
247         FF_ALLOC_OR_GOTO(NULL, filter, dstW*sizeof(*filter)*filterSize, fail);
248
249         xDstInSrc= xInc/2 - 0x8000;
250         for (i=0; i<dstW; i++) {
251             int xx= (xDstInSrc - ((filterSize-1)<<15) + (1<<15))>>16;
252
253             (*filterPos)[i]= xx;
254             filter[i]= fone;
255             xDstInSrc+= xInc;
256         }
257     } else if ((xInc <= (1<<16) && (flags&SWS_AREA)) || (flags&SWS_FAST_BILINEAR)) { // bilinear upscale
258         int i;
259         int xDstInSrc;
260         filterSize= 2;
261         FF_ALLOC_OR_GOTO(NULL, filter, dstW*sizeof(*filter)*filterSize, fail);
262
263         xDstInSrc= xInc/2 - 0x8000;
264         for (i=0; i<dstW; i++) {
265             int xx= (xDstInSrc - ((filterSize-1)<<15) + (1<<15))>>16;
266             int j;
267
268             (*filterPos)[i]= xx;
269             //bilinear upscale / linear interpolate / area averaging
270             for (j=0; j<filterSize; j++) {
271                 int64_t coeff= fone - FFABS((xx<<16) - xDstInSrc)*(fone>>16);
272                 if (coeff<0) coeff=0;
273                 filter[i*filterSize + j]= coeff;
274                 xx++;
275             }
276             xDstInSrc+= xInc;
277         }
278     } else {
279         int xDstInSrc;
280         int sizeFactor;
281
282         if      (flags&SWS_BICUBIC)      sizeFactor=  4;
283         else if (flags&SWS_X)            sizeFactor=  8;
284         else if (flags&SWS_AREA)         sizeFactor=  1; //downscale only, for upscale it is bilinear
285         else if (flags&SWS_GAUSS)        sizeFactor=  8;   // infinite ;)
286         else if (flags&SWS_LANCZOS)      sizeFactor= param[0] != SWS_PARAM_DEFAULT ? ceil(2*param[0]) : 6;
287         else if (flags&SWS_SINC)         sizeFactor= 20; // infinite ;)
288         else if (flags&SWS_SPLINE)       sizeFactor= 20;  // infinite ;)
289         else if (flags&SWS_BILINEAR)     sizeFactor=  2;
290         else {
291             sizeFactor= 0; //GCC warning killer
292             assert(0);
293         }
294
295         if (xInc <= 1<<16)      filterSize= 1 + sizeFactor; // upscale
296         else                    filterSize= 1 + (sizeFactor*srcW + dstW - 1)/ dstW;
297
298         if (filterSize > srcW-2) filterSize=srcW-2;
299
300         FF_ALLOC_OR_GOTO(NULL, filter, dstW*sizeof(*filter)*filterSize, fail);
301
302         xDstInSrc= xInc - 0x10000;
303         for (i=0; i<dstW; i++) {
304             int xx= (xDstInSrc - ((filterSize-2)<<16)) / (1<<17);
305             int j;
306             (*filterPos)[i]= xx;
307             for (j=0; j<filterSize; j++) {
308                 int64_t d= ((int64_t)FFABS((xx<<17) - xDstInSrc))<<13;
309                 double floatd;
310                 int64_t coeff;
311
312                 if (xInc > 1<<16)
313                     d= d*dstW/srcW;
314                 floatd= d * (1.0/(1<<30));
315
316                 if (flags & SWS_BICUBIC) {
317                     int64_t B= (param[0] != SWS_PARAM_DEFAULT ? param[0] :   0) * (1<<24);
318                     int64_t C= (param[1] != SWS_PARAM_DEFAULT ? param[1] : 0.6) * (1<<24);
319                     int64_t dd = ( d*d)>>30;
320                     int64_t ddd= (dd*d)>>30;
321
322                     if      (d < 1LL<<30)
323                         coeff = (12*(1<<24)-9*B-6*C)*ddd + (-18*(1<<24)+12*B+6*C)*dd + (6*(1<<24)-2*B)*(1<<30);
324                     else if (d < 1LL<<31)
325                         coeff = (-B-6*C)*ddd + (6*B+30*C)*dd + (-12*B-48*C)*d + (8*B+24*C)*(1<<30);
326                     else
327                         coeff=0.0;
328                     coeff *= fone>>(30+24);
329                 }
330 /*                else if (flags & SWS_X) {
331                     double p= param ? param*0.01 : 0.3;
332                     coeff = d ? sin(d*M_PI)/(d*M_PI) : 1.0;
333                     coeff*= pow(2.0, - p*d*d);
334                 }*/
335                 else if (flags & SWS_X) {
336                     double A= param[0] != SWS_PARAM_DEFAULT ? param[0] : 1.0;
337                     double c;
338
339                     if (floatd<1.0)
340                         c = cos(floatd*M_PI);
341                     else
342                         c=-1.0;
343                     if (c<0.0)      c= -pow(-c, A);
344                     else            c=  pow( c, A);
345                     coeff= (c*0.5 + 0.5)*fone;
346                 } else if (flags & SWS_AREA) {
347                     int64_t d2= d - (1<<29);
348                     if      (d2*xInc < -(1LL<<(29+16))) coeff= 1.0 * (1LL<<(30+16));
349                     else if (d2*xInc <  (1LL<<(29+16))) coeff= -d2*xInc + (1LL<<(29+16));
350                     else coeff=0.0;
351                     coeff *= fone>>(30+16);
352                 } else if (flags & SWS_GAUSS) {
353                     double p= param[0] != SWS_PARAM_DEFAULT ? param[0] : 3.0;
354                     coeff = (pow(2.0, - p*floatd*floatd))*fone;
355                 } else if (flags & SWS_SINC) {
356                     coeff = (d ? sin(floatd*M_PI)/(floatd*M_PI) : 1.0)*fone;
357                 } else if (flags & SWS_LANCZOS) {
358                     double p= param[0] != SWS_PARAM_DEFAULT ? param[0] : 3.0;
359                     coeff = (d ? sin(floatd*M_PI)*sin(floatd*M_PI/p)/(floatd*floatd*M_PI*M_PI/p) : 1.0)*fone;
360                     if (floatd>p) coeff=0;
361                 } else if (flags & SWS_BILINEAR) {
362                     coeff= (1<<30) - d;
363                     if (coeff<0) coeff=0;
364                     coeff *= fone >> 30;
365                 } else if (flags & SWS_SPLINE) {
366                     double p=-2.196152422706632;
367                     coeff = getSplineCoeff(1.0, 0.0, p, -p-1.0, floatd) * fone;
368                 } else {
369                     coeff= 0.0; //GCC warning killer
370                     assert(0);
371                 }
372
373                 filter[i*filterSize + j]= coeff;
374                 xx++;
375             }
376             xDstInSrc+= 2*xInc;
377         }
378     }
379
380     /* apply src & dst Filter to filter -> filter2
381        av_free(filter);
382     */
383     assert(filterSize>0);
384     filter2Size= filterSize;
385     if (srcFilter) filter2Size+= srcFilter->length - 1;
386     if (dstFilter) filter2Size+= dstFilter->length - 1;
387     assert(filter2Size>0);
388     FF_ALLOCZ_OR_GOTO(NULL, filter2, filter2Size*dstW*sizeof(*filter2), fail);
389
390     for (i=0; i<dstW; i++) {
391         int j, k;
392
393         if(srcFilter) {
394             for (k=0; k<srcFilter->length; k++) {
395                 for (j=0; j<filterSize; j++)
396                     filter2[i*filter2Size + k + j] += srcFilter->coeff[k]*filter[i*filterSize + j];
397             }
398         } else {
399             for (j=0; j<filterSize; j++)
400                 filter2[i*filter2Size + j]= filter[i*filterSize + j];
401         }
402         //FIXME dstFilter
403
404         (*filterPos)[i]+= (filterSize-1)/2 - (filter2Size-1)/2;
405     }
406     av_freep(&filter);
407
408     /* try to reduce the filter-size (step1 find size and shift left) */
409     // Assume it is near normalized (*0.5 or *2.0 is OK but * 0.001 is not).
410     minFilterSize= 0;
411     for (i=dstW-1; i>=0; i--) {
412         int min= filter2Size;
413         int j;
414         int64_t cutOff=0.0;
415
416         /* get rid of near zero elements on the left by shifting left */
417         for (j=0; j<filter2Size; j++) {
418             int k;
419             cutOff += FFABS(filter2[i*filter2Size]);
420
421             if (cutOff > SWS_MAX_REDUCE_CUTOFF*fone) break;
422
423             /* preserve monotonicity because the core can't handle the filter otherwise */
424             if (i<dstW-1 && (*filterPos)[i] >= (*filterPos)[i+1]) break;
425
426             // move filter coefficients left
427             for (k=1; k<filter2Size; k++)
428                 filter2[i*filter2Size + k - 1]= filter2[i*filter2Size + k];
429             filter2[i*filter2Size + k - 1]= 0;
430             (*filterPos)[i]++;
431         }
432
433         cutOff=0;
434         /* count near zeros on the right */
435         for (j=filter2Size-1; j>0; j--) {
436             cutOff += FFABS(filter2[i*filter2Size + j]);
437
438             if (cutOff > SWS_MAX_REDUCE_CUTOFF*fone) break;
439             min--;
440         }
441
442         if (min>minFilterSize) minFilterSize= min;
443     }
444
445     if (HAVE_ALTIVEC && cpu_flags & AV_CPU_FLAG_ALTIVEC) {
446         // we can handle the special case 4,
447         // so we don't want to go to the full 8
448         if (minFilterSize < 5)
449             filterAlign = 4;
450
451         // We really don't want to waste our time
452         // doing useless computation, so fall back on
453         // the scalar C code for very small filters.
454         // Vectorizing is worth it only if you have a
455         // decent-sized vector.
456         if (minFilterSize < 3)
457             filterAlign = 1;
458     }
459
460     if (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) {
461         // special case for unscaled vertical filtering
462         if (minFilterSize == 1 && filterAlign == 2)
463             filterAlign= 1;
464     }
465
466     assert(minFilterSize > 0);
467     filterSize= (minFilterSize +(filterAlign-1)) & (~(filterAlign-1));
468     assert(filterSize > 0);
469     filter= av_malloc(filterSize*dstW*sizeof(*filter));
470     if (filterSize >= MAX_FILTER_SIZE*16/((flags&SWS_ACCURATE_RND) ? APCK_SIZE : 16) || !filter)
471         goto fail;
472     *outFilterSize= filterSize;
473
474     if (flags&SWS_PRINT_INFO)
475         av_log(NULL, AV_LOG_VERBOSE, "SwScaler: reducing / aligning filtersize %d -> %d\n", filter2Size, filterSize);
476     /* try to reduce the filter-size (step2 reduce it) */
477     for (i=0; i<dstW; i++) {
478         int j;
479
480         for (j=0; j<filterSize; j++) {
481             if (j>=filter2Size) filter[i*filterSize + j]= 0;
482             else               filter[i*filterSize + j]= filter2[i*filter2Size + j];
483             if((flags & SWS_BITEXACT) && j>=minFilterSize)
484                 filter[i*filterSize + j]= 0;
485         }
486     }
487
488     //FIXME try to align filterPos if possible
489
490     //fix borders
491     for (i=0; i<dstW; i++) {
492         int j;
493         if ((*filterPos)[i] < 0) {
494             // move filter coefficients left to compensate for filterPos
495             for (j=1; j<filterSize; j++) {
496                 int left= FFMAX(j + (*filterPos)[i], 0);
497                 filter[i*filterSize + left] += filter[i*filterSize + j];
498                 filter[i*filterSize + j]=0;
499             }
500             (*filterPos)[i]= 0;
501         }
502
503         if ((*filterPos)[i] + filterSize > srcW) {
504             int shift= (*filterPos)[i] + filterSize - srcW;
505             // move filter coefficients right to compensate for filterPos
506             for (j=filterSize-2; j>=0; j--) {
507                 int right= FFMIN(j + shift, filterSize-1);
508                 filter[i*filterSize +right] += filter[i*filterSize +j];
509                 filter[i*filterSize +j]=0;
510             }
511             (*filterPos)[i]= srcW - filterSize;
512         }
513     }
514
515     // Note the +1 is for the MMX scaler which reads over the end
516     /* align at 16 for AltiVec (needed by hScale_altivec_real) */
517     FF_ALLOCZ_OR_GOTO(NULL, *outFilter, *outFilterSize*(dstW+1)*sizeof(int16_t), fail);
518
519     /* normalize & store in outFilter */
520     for (i=0; i<dstW; i++) {
521         int j;
522         int64_t error=0;
523         int64_t sum=0;
524
525         for (j=0; j<filterSize; j++) {
526             sum+= filter[i*filterSize + j];
527         }
528         sum= (sum + one/2)/ one;
529         for (j=0; j<*outFilterSize; j++) {
530             int64_t v= filter[i*filterSize + j] + error;
531             int intV= ROUNDED_DIV(v, sum);
532             (*outFilter)[i*(*outFilterSize) + j]= intV;
533             error= v - intV*sum;
534         }
535     }
536
537     (*filterPos)[dstW]= (*filterPos)[dstW-1]; // the MMX scaler will read over the end
538     for (i=0; i<*outFilterSize; i++) {
539         int j= dstW*(*outFilterSize);
540         (*outFilter)[j + i]= (*outFilter)[j + i - (*outFilterSize)];
541     }
542
543     ret=0;
544 fail:
545     av_free(filter);
546     av_free(filter2);
547     return ret;
548 }
549
550 #if HAVE_MMX2
551 static int initMMX2HScaler(int dstW, int xInc, uint8_t *filterCode, int16_t *filter, int32_t *filterPos, int numSplits)
552 {
553     uint8_t *fragmentA;
554     x86_reg imm8OfPShufW1A;
555     x86_reg imm8OfPShufW2A;
556     x86_reg fragmentLengthA;
557     uint8_t *fragmentB;
558     x86_reg imm8OfPShufW1B;
559     x86_reg imm8OfPShufW2B;
560     x86_reg fragmentLengthB;
561     int fragmentPos;
562
563     int xpos, i;
564
565     // create an optimized horizontal scaling routine
566     /* This scaler is made of runtime-generated MMX2 code using specially
567      * tuned pshufw instructions. For every four output pixels, if four
568      * input pixels are enough for the fast bilinear scaling, then a chunk
569      * of fragmentB is used. If five input pixels are needed, then a chunk
570      * of fragmentA is used.
571      */
572
573     //code fragment
574
575     __asm__ volatile(
576         "jmp                         9f                 \n\t"
577     // Begin
578         "0:                                             \n\t"
579         "movq    (%%"REG_d", %%"REG_a"), %%mm3          \n\t"
580         "movd    (%%"REG_c", %%"REG_S"), %%mm0          \n\t"
581         "movd   1(%%"REG_c", %%"REG_S"), %%mm1          \n\t"
582         "punpcklbw                %%mm7, %%mm1          \n\t"
583         "punpcklbw                %%mm7, %%mm0          \n\t"
584         "pshufw                   $0xFF, %%mm1, %%mm1   \n\t"
585         "1:                                             \n\t"
586         "pshufw                   $0xFF, %%mm0, %%mm0   \n\t"
587         "2:                                             \n\t"
588         "psubw                    %%mm1, %%mm0          \n\t"
589         "movl   8(%%"REG_b", %%"REG_a"), %%esi          \n\t"
590         "pmullw                   %%mm3, %%mm0          \n\t"
591         "psllw                       $7, %%mm1          \n\t"
592         "paddw                    %%mm1, %%mm0          \n\t"
593
594         "movq                     %%mm0, (%%"REG_D", %%"REG_a") \n\t"
595
596         "add                         $8, %%"REG_a"      \n\t"
597     // End
598         "9:                                             \n\t"
599 //        "int $3                                         \n\t"
600         "lea                 " LOCAL_MANGLE(0b) ", %0   \n\t"
601         "lea                 " LOCAL_MANGLE(1b) ", %1   \n\t"
602         "lea                 " LOCAL_MANGLE(2b) ", %2   \n\t"
603         "dec                         %1                 \n\t"
604         "dec                         %2                 \n\t"
605         "sub                         %0, %1             \n\t"
606         "sub                         %0, %2             \n\t"
607         "lea                 " LOCAL_MANGLE(9b) ", %3   \n\t"
608         "sub                         %0, %3             \n\t"
609
610
611         :"=r" (fragmentA), "=r" (imm8OfPShufW1A), "=r" (imm8OfPShufW2A),
612         "=r" (fragmentLengthA)
613     );
614
615     __asm__ volatile(
616         "jmp                         9f                 \n\t"
617     // Begin
618         "0:                                             \n\t"
619         "movq    (%%"REG_d", %%"REG_a"), %%mm3          \n\t"
620         "movd    (%%"REG_c", %%"REG_S"), %%mm0          \n\t"
621         "punpcklbw                %%mm7, %%mm0          \n\t"
622         "pshufw                   $0xFF, %%mm0, %%mm1   \n\t"
623         "1:                                             \n\t"
624         "pshufw                   $0xFF, %%mm0, %%mm0   \n\t"
625         "2:                                             \n\t"
626         "psubw                    %%mm1, %%mm0          \n\t"
627         "movl   8(%%"REG_b", %%"REG_a"), %%esi          \n\t"
628         "pmullw                   %%mm3, %%mm0          \n\t"
629         "psllw                       $7, %%mm1          \n\t"
630         "paddw                    %%mm1, %%mm0          \n\t"
631
632         "movq                     %%mm0, (%%"REG_D", %%"REG_a") \n\t"
633
634         "add                         $8, %%"REG_a"      \n\t"
635     // End
636         "9:                                             \n\t"
637 //        "int                       $3                   \n\t"
638         "lea                 " LOCAL_MANGLE(0b) ", %0   \n\t"
639         "lea                 " LOCAL_MANGLE(1b) ", %1   \n\t"
640         "lea                 " LOCAL_MANGLE(2b) ", %2   \n\t"
641         "dec                         %1                 \n\t"
642         "dec                         %2                 \n\t"
643         "sub                         %0, %1             \n\t"
644         "sub                         %0, %2             \n\t"
645         "lea                 " LOCAL_MANGLE(9b) ", %3   \n\t"
646         "sub                         %0, %3             \n\t"
647
648
649         :"=r" (fragmentB), "=r" (imm8OfPShufW1B), "=r" (imm8OfPShufW2B),
650         "=r" (fragmentLengthB)
651     );
652
653     xpos= 0; //lumXInc/2 - 0x8000; // difference between pixel centers
654     fragmentPos=0;
655
656     for (i=0; i<dstW/numSplits; i++) {
657         int xx=xpos>>16;
658
659         if ((i&3) == 0) {
660             int a=0;
661             int b=((xpos+xInc)>>16) - xx;
662             int c=((xpos+xInc*2)>>16) - xx;
663             int d=((xpos+xInc*3)>>16) - xx;
664             int inc                = (d+1<4);
665             uint8_t *fragment      = (d+1<4) ? fragmentB       : fragmentA;
666             x86_reg imm8OfPShufW1  = (d+1<4) ? imm8OfPShufW1B  : imm8OfPShufW1A;
667             x86_reg imm8OfPShufW2  = (d+1<4) ? imm8OfPShufW2B  : imm8OfPShufW2A;
668             x86_reg fragmentLength = (d+1<4) ? fragmentLengthB : fragmentLengthA;
669             int maxShift= 3-(d+inc);
670             int shift=0;
671
672             if (filterCode) {
673                 filter[i  ] = (( xpos         & 0xFFFF) ^ 0xFFFF)>>9;
674                 filter[i+1] = (((xpos+xInc  ) & 0xFFFF) ^ 0xFFFF)>>9;
675                 filter[i+2] = (((xpos+xInc*2) & 0xFFFF) ^ 0xFFFF)>>9;
676                 filter[i+3] = (((xpos+xInc*3) & 0xFFFF) ^ 0xFFFF)>>9;
677                 filterPos[i/2]= xx;
678
679                 memcpy(filterCode + fragmentPos, fragment, fragmentLength);
680
681                 filterCode[fragmentPos + imm8OfPShufW1]=
682                     (a+inc) | ((b+inc)<<2) | ((c+inc)<<4) | ((d+inc)<<6);
683                 filterCode[fragmentPos + imm8OfPShufW2]=
684                     a | (b<<2) | (c<<4) | (d<<6);
685
686                 if (i+4-inc>=dstW) shift=maxShift; //avoid overread
687                 else if ((filterPos[i/2]&3) <= maxShift) shift=filterPos[i/2]&3; //Align
688
689                 if (shift && i>=shift) {
690                     filterCode[fragmentPos + imm8OfPShufW1]+= 0x55*shift;
691                     filterCode[fragmentPos + imm8OfPShufW2]+= 0x55*shift;
692                     filterPos[i/2]-=shift;
693                 }
694             }
695
696             fragmentPos+= fragmentLength;
697
698             if (filterCode)
699                 filterCode[fragmentPos]= RET;
700         }
701         xpos+=xInc;
702     }
703     if (filterCode)
704         filterPos[((i/2)+1)&(~1)]= xpos>>16; // needed to jump to the next part
705
706     return fragmentPos + 1;
707 }
708 #endif /* HAVE_MMX2 */
709
710 static void getSubSampleFactors(int *h, int *v, enum PixelFormat format)
711 {
712     *h = av_pix_fmt_descriptors[format].log2_chroma_w;
713     *v = av_pix_fmt_descriptors[format].log2_chroma_h;
714 }
715
716 int sws_setColorspaceDetails(struct SwsContext *c, const int inv_table[4],
717                              int srcRange, const int table[4], int dstRange,
718                              int brightness, int contrast, int saturation)
719 {
720     memcpy(c->srcColorspaceTable, inv_table, sizeof(int)*4);
721     memcpy(c->dstColorspaceTable,     table, sizeof(int)*4);
722
723     c->brightness= brightness;
724     c->contrast  = contrast;
725     c->saturation= saturation;
726     c->srcRange  = srcRange;
727     c->dstRange  = dstRange;
728     if (isYUV(c->dstFormat) || isGray(c->dstFormat)) return -1;
729
730     c->dstFormatBpp = av_get_bits_per_pixel(&av_pix_fmt_descriptors[c->dstFormat]);
731     c->srcFormatBpp = av_get_bits_per_pixel(&av_pix_fmt_descriptors[c->srcFormat]);
732
733     ff_yuv2rgb_c_init_tables(c, inv_table, srcRange, brightness, contrast, saturation);
734     //FIXME factorize
735
736     if (HAVE_ALTIVEC && av_get_cpu_flags() & AV_CPU_FLAG_ALTIVEC)
737         ff_yuv2rgb_init_tables_altivec(c, inv_table, brightness, contrast, saturation);
738     return 0;
739 }
740
741 int sws_getColorspaceDetails(struct SwsContext *c, int **inv_table,
742                              int *srcRange, int **table, int *dstRange,
743                              int *brightness, int *contrast, int *saturation)
744 {
745     if (isYUV(c->dstFormat) || isGray(c->dstFormat)) return -1;
746
747     *inv_table = c->srcColorspaceTable;
748     *table     = c->dstColorspaceTable;
749     *srcRange  = c->srcRange;
750     *dstRange  = c->dstRange;
751     *brightness= c->brightness;
752     *contrast  = c->contrast;
753     *saturation= c->saturation;
754
755     return 0;
756 }
757
758 static int handle_jpeg(enum PixelFormat *format)
759 {
760     switch (*format) {
761     case PIX_FMT_YUVJ420P: *format = PIX_FMT_YUV420P; return 1;
762     case PIX_FMT_YUVJ422P: *format = PIX_FMT_YUV422P; return 1;
763     case PIX_FMT_YUVJ444P: *format = PIX_FMT_YUV444P; return 1;
764     case PIX_FMT_YUVJ440P: *format = PIX_FMT_YUV440P; return 1;
765     default:                                          return 0;
766     }
767 }
768
769 SwsContext *sws_alloc_context(void)
770 {
771     SwsContext *c= av_mallocz(sizeof(SwsContext));
772
773     c->av_class = &sws_context_class;
774     av_opt_set_defaults(c);
775
776     return c;
777 }
778
779 int sws_init_context(SwsContext *c, SwsFilter *srcFilter, SwsFilter *dstFilter)
780 {
781     int i;
782     int usesVFilter, usesHFilter;
783     int unscaled;
784     SwsFilter dummyFilter= {NULL, NULL, NULL, NULL};
785     int srcW= c->srcW;
786     int srcH= c->srcH;
787     int dstW= c->dstW;
788     int dstH= c->dstH;
789     int dst_stride = FFALIGN(dstW * sizeof(int16_t) + 16, 16), dst_stride_px = dst_stride >> 1;
790     int flags, cpu_flags;
791     enum PixelFormat srcFormat= c->srcFormat;
792     enum PixelFormat dstFormat= c->dstFormat;
793
794     cpu_flags = av_get_cpu_flags();
795     flags     = c->flags;
796     emms_c();
797     if (!rgb15to16) sws_rgb2rgb_init();
798
799     unscaled = (srcW == dstW && srcH == dstH);
800
801     if (!isSupportedIn(srcFormat)) {
802         av_log(c, AV_LOG_ERROR, "%s is not supported as input pixel format\n", sws_format_name(srcFormat));
803         return AVERROR(EINVAL);
804     }
805     if (!isSupportedOut(dstFormat)) {
806         av_log(c, AV_LOG_ERROR, "%s is not supported as output pixel format\n", sws_format_name(dstFormat));
807         return AVERROR(EINVAL);
808     }
809
810     i= flags & ( SWS_POINT
811                 |SWS_AREA
812                 |SWS_BILINEAR
813                 |SWS_FAST_BILINEAR
814                 |SWS_BICUBIC
815                 |SWS_X
816                 |SWS_GAUSS
817                 |SWS_LANCZOS
818                 |SWS_SINC
819                 |SWS_SPLINE
820                 |SWS_BICUBLIN);
821     if(!i || (i & (i-1))) {
822         av_log(c, AV_LOG_ERROR, "Exactly one scaler algorithm must be chosen\n");
823         return AVERROR(EINVAL);
824     }
825     /* sanity check */
826     if (srcW<4 || srcH<1 || dstW<8 || dstH<1) { //FIXME check if these are enough and try to lowwer them after fixing the relevant parts of the code
827         av_log(c, AV_LOG_ERROR, "%dx%d -> %dx%d is invalid scaling dimension\n",
828                srcW, srcH, dstW, dstH);
829         return AVERROR(EINVAL);
830     }
831
832     if (!dstFilter) dstFilter= &dummyFilter;
833     if (!srcFilter) srcFilter= &dummyFilter;
834
835     c->lumXInc= ((srcW<<16) + (dstW>>1))/dstW;
836     c->lumYInc= ((srcH<<16) + (dstH>>1))/dstH;
837     c->dstFormatBpp = av_get_bits_per_pixel(&av_pix_fmt_descriptors[dstFormat]);
838     c->srcFormatBpp = av_get_bits_per_pixel(&av_pix_fmt_descriptors[srcFormat]);
839     c->vRounder= 4* 0x0001000100010001ULL;
840
841     usesVFilter = (srcFilter->lumV && srcFilter->lumV->length>1) ||
842                   (srcFilter->chrV && srcFilter->chrV->length>1) ||
843                   (dstFilter->lumV && dstFilter->lumV->length>1) ||
844                   (dstFilter->chrV && dstFilter->chrV->length>1);
845     usesHFilter = (srcFilter->lumH && srcFilter->lumH->length>1) ||
846                   (srcFilter->chrH && srcFilter->chrH->length>1) ||
847                   (dstFilter->lumH && dstFilter->lumH->length>1) ||
848                   (dstFilter->chrH && dstFilter->chrH->length>1);
849
850     getSubSampleFactors(&c->chrSrcHSubSample, &c->chrSrcVSubSample, srcFormat);
851     getSubSampleFactors(&c->chrDstHSubSample, &c->chrDstVSubSample, dstFormat);
852
853     // reuse chroma for 2 pixels RGB/BGR unless user wants full chroma interpolation
854     if (flags & SWS_FULL_CHR_H_INT &&
855         dstFormat != PIX_FMT_RGBA &&
856         dstFormat != PIX_FMT_ARGB &&
857         dstFormat != PIX_FMT_BGRA &&
858         dstFormat != PIX_FMT_ABGR &&
859         dstFormat != PIX_FMT_RGB24 &&
860         dstFormat != PIX_FMT_BGR24) {
861         av_log(c, AV_LOG_ERROR,
862                "full chroma interpolation for destination format '%s' not yet implemented\n",
863                sws_format_name(dstFormat));
864         flags &= ~SWS_FULL_CHR_H_INT;
865         c->flags = flags;
866     }
867     if (isAnyRGB(dstFormat) && !(flags&SWS_FULL_CHR_H_INT)) c->chrDstHSubSample=1;
868
869     // drop some chroma lines if the user wants it
870     c->vChrDrop= (flags&SWS_SRC_V_CHR_DROP_MASK)>>SWS_SRC_V_CHR_DROP_SHIFT;
871     c->chrSrcVSubSample+= c->vChrDrop;
872
873     // drop every other pixel for chroma calculation unless user wants full chroma
874     if (isAnyRGB(srcFormat) && !(flags&SWS_FULL_CHR_H_INP)
875       && srcFormat!=PIX_FMT_RGB8      && srcFormat!=PIX_FMT_BGR8
876       && srcFormat!=PIX_FMT_RGB4      && srcFormat!=PIX_FMT_BGR4
877       && srcFormat!=PIX_FMT_RGB4_BYTE && srcFormat!=PIX_FMT_BGR4_BYTE
878       && ((dstW>>c->chrDstHSubSample) <= (srcW>>1) || (flags&SWS_FAST_BILINEAR)))
879         c->chrSrcHSubSample=1;
880
881     // Note the -((-x)>>y) is so that we always round toward +inf.
882     c->chrSrcW= -((-srcW) >> c->chrSrcHSubSample);
883     c->chrSrcH= -((-srcH) >> c->chrSrcVSubSample);
884     c->chrDstW= -((-dstW) >> c->chrDstHSubSample);
885     c->chrDstH= -((-dstH) >> c->chrDstVSubSample);
886
887     /* unscaled special cases */
888     if (unscaled && !usesHFilter && !usesVFilter && (c->srcRange == c->dstRange || isAnyRGB(dstFormat))) {
889         ff_get_unscaled_swscale(c);
890
891         if (c->swScale) {
892             if (flags&SWS_PRINT_INFO)
893                 av_log(c, AV_LOG_INFO, "using unscaled %s -> %s special converter\n",
894                        sws_format_name(srcFormat), sws_format_name(dstFormat));
895             return 0;
896         }
897     }
898
899     c->scalingBpp = FFMAX(av_pix_fmt_descriptors[srcFormat].comp[0].depth_minus1,
900                           av_pix_fmt_descriptors[dstFormat].comp[0].depth_minus1) >= 8 ? 16 : 8;
901     if (c->scalingBpp == 16)
902         dst_stride <<= 1;
903     FF_ALLOC_OR_GOTO(c, c->formatConvBuffer, FFALIGN(srcW, 16) * 2 * c->scalingBpp >> 3, fail);
904     if (HAVE_MMX2 && cpu_flags & AV_CPU_FLAG_MMX2 && c->scalingBpp == 8) {
905         c->canMMX2BeUsed= (dstW >=srcW && (dstW&31)==0 && (srcW&15)==0) ? 1 : 0;
906         if (!c->canMMX2BeUsed && dstW >=srcW && (srcW&15)==0 && (flags&SWS_FAST_BILINEAR)) {
907             if (flags&SWS_PRINT_INFO)
908                 av_log(c, AV_LOG_INFO, "output width is not a multiple of 32 -> no MMX2 scaler\n");
909         }
910         if (usesHFilter) c->canMMX2BeUsed=0;
911     }
912     else
913         c->canMMX2BeUsed=0;
914
915     c->chrXInc= ((c->chrSrcW<<16) + (c->chrDstW>>1))/c->chrDstW;
916     c->chrYInc= ((c->chrSrcH<<16) + (c->chrDstH>>1))/c->chrDstH;
917
918     // match pixel 0 of the src to pixel 0 of dst and match pixel n-2 of src to pixel n-2 of dst
919     // but only for the FAST_BILINEAR mode otherwise do correct scaling
920     // n-2 is the last chrominance sample available
921     // this is not perfect, but no one should notice the difference, the more correct variant
922     // would be like the vertical one, but that would require some special code for the
923     // first and last pixel
924     if (flags&SWS_FAST_BILINEAR) {
925         if (c->canMMX2BeUsed) {
926             c->lumXInc+= 20;
927             c->chrXInc+= 20;
928         }
929         //we don't use the x86 asm scaler if MMX is available
930         else if (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) {
931             c->lumXInc = ((srcW-2)<<16)/(dstW-2) - 20;
932             c->chrXInc = ((c->chrSrcW-2)<<16)/(c->chrDstW-2) - 20;
933         }
934     }
935
936     /* precalculate horizontal scaler filter coefficients */
937     {
938 #if HAVE_MMX2
939 // can't downscale !!!
940         if (c->canMMX2BeUsed && (flags & SWS_FAST_BILINEAR)) {
941             c->lumMmx2FilterCodeSize = initMMX2HScaler(      dstW, c->lumXInc, NULL, NULL, NULL, 8);
942             c->chrMmx2FilterCodeSize = initMMX2HScaler(c->chrDstW, c->chrXInc, NULL, NULL, NULL, 4);
943
944 #ifdef MAP_ANONYMOUS
945             c->lumMmx2FilterCode = mmap(NULL, c->lumMmx2FilterCodeSize, PROT_READ | PROT_WRITE, MAP_PRIVATE | MAP_ANONYMOUS, -1, 0);
946             c->chrMmx2FilterCode = mmap(NULL, c->chrMmx2FilterCodeSize, PROT_READ | PROT_WRITE, MAP_PRIVATE | MAP_ANONYMOUS, -1, 0);
947 #elif HAVE_VIRTUALALLOC
948             c->lumMmx2FilterCode = VirtualAlloc(NULL, c->lumMmx2FilterCodeSize, MEM_COMMIT, PAGE_EXECUTE_READWRITE);
949             c->chrMmx2FilterCode = VirtualAlloc(NULL, c->chrMmx2FilterCodeSize, MEM_COMMIT, PAGE_EXECUTE_READWRITE);
950 #else
951             c->lumMmx2FilterCode = av_malloc(c->lumMmx2FilterCodeSize);
952             c->chrMmx2FilterCode = av_malloc(c->chrMmx2FilterCodeSize);
953 #endif
954
955             if (!c->lumMmx2FilterCode || !c->chrMmx2FilterCode)
956                 return AVERROR(ENOMEM);
957             FF_ALLOCZ_OR_GOTO(c, c->hLumFilter   , (dstW        /8+8)*sizeof(int16_t), fail);
958             FF_ALLOCZ_OR_GOTO(c, c->hChrFilter   , (c->chrDstW  /4+8)*sizeof(int16_t), fail);
959             FF_ALLOCZ_OR_GOTO(c, c->hLumFilterPos, (dstW      /2/8+8)*sizeof(int32_t), fail);
960             FF_ALLOCZ_OR_GOTO(c, c->hChrFilterPos, (c->chrDstW/2/4+8)*sizeof(int32_t), fail);
961
962             initMMX2HScaler(      dstW, c->lumXInc, c->lumMmx2FilterCode, c->hLumFilter, c->hLumFilterPos, 8);
963             initMMX2HScaler(c->chrDstW, c->chrXInc, c->chrMmx2FilterCode, c->hChrFilter, c->hChrFilterPos, 4);
964
965 #ifdef MAP_ANONYMOUS
966             mprotect(c->lumMmx2FilterCode, c->lumMmx2FilterCodeSize, PROT_EXEC | PROT_READ);
967             mprotect(c->chrMmx2FilterCode, c->chrMmx2FilterCodeSize, PROT_EXEC | PROT_READ);
968 #endif
969         } else
970 #endif /* HAVE_MMX2 */
971         {
972             const int filterAlign=
973                 (HAVE_MMX     && cpu_flags & AV_CPU_FLAG_MMX) ? 4 :
974                 (HAVE_ALTIVEC && cpu_flags & AV_CPU_FLAG_ALTIVEC) ? 8 :
975                 1;
976
977             if (initFilter(&c->hLumFilter, &c->hLumFilterPos, &c->hLumFilterSize, c->lumXInc,
978                            srcW      ,       dstW, filterAlign, 1<<14,
979                            (flags&SWS_BICUBLIN) ? (flags|SWS_BICUBIC)  : flags, cpu_flags,
980                            srcFilter->lumH, dstFilter->lumH, c->param) < 0)
981                 goto fail;
982             if (initFilter(&c->hChrFilter, &c->hChrFilterPos, &c->hChrFilterSize, c->chrXInc,
983                            c->chrSrcW, c->chrDstW, filterAlign, 1<<14,
984                            (flags&SWS_BICUBLIN) ? (flags|SWS_BILINEAR) : flags, cpu_flags,
985                            srcFilter->chrH, dstFilter->chrH, c->param) < 0)
986                 goto fail;
987         }
988     } // initialize horizontal stuff
989
990     /* precalculate vertical scaler filter coefficients */
991     {
992         const int filterAlign=
993             (HAVE_MMX     && cpu_flags & AV_CPU_FLAG_MMX) && (flags & SWS_ACCURATE_RND) ? 2 :
994             (HAVE_ALTIVEC && cpu_flags & AV_CPU_FLAG_ALTIVEC) ? 8 :
995             1;
996
997         if (initFilter(&c->vLumFilter, &c->vLumFilterPos, &c->vLumFilterSize, c->lumYInc,
998                        srcH      ,        dstH, filterAlign, (1<<12),
999                        (flags&SWS_BICUBLIN) ? (flags|SWS_BICUBIC)  : flags, cpu_flags,
1000                        srcFilter->lumV, dstFilter->lumV, c->param) < 0)
1001             goto fail;
1002         if (initFilter(&c->vChrFilter, &c->vChrFilterPos, &c->vChrFilterSize, c->chrYInc,
1003                        c->chrSrcH, c->chrDstH, filterAlign, (1<<12),
1004                        (flags&SWS_BICUBLIN) ? (flags|SWS_BILINEAR) : flags, cpu_flags,
1005                        srcFilter->chrV, dstFilter->chrV, c->param) < 0)
1006             goto fail;
1007
1008 #if HAVE_ALTIVEC
1009         FF_ALLOC_OR_GOTO(c, c->vYCoeffsBank, sizeof (vector signed short)*c->vLumFilterSize*c->dstH, fail);
1010         FF_ALLOC_OR_GOTO(c, c->vCCoeffsBank, sizeof (vector signed short)*c->vChrFilterSize*c->chrDstH, fail);
1011
1012         for (i=0;i<c->vLumFilterSize*c->dstH;i++) {
1013             int j;
1014             short *p = (short *)&c->vYCoeffsBank[i];
1015             for (j=0;j<8;j++)
1016                 p[j] = c->vLumFilter[i];
1017         }
1018
1019         for (i=0;i<c->vChrFilterSize*c->chrDstH;i++) {
1020             int j;
1021             short *p = (short *)&c->vCCoeffsBank[i];
1022             for (j=0;j<8;j++)
1023                 p[j] = c->vChrFilter[i];
1024         }
1025 #endif
1026     }
1027
1028     // calculate buffer sizes so that they won't run out while handling these damn slices
1029     c->vLumBufSize= c->vLumFilterSize;
1030     c->vChrBufSize= c->vChrFilterSize;
1031     for (i=0; i<dstH; i++) {
1032         int chrI= i*c->chrDstH / dstH;
1033         int nextSlice= FFMAX(c->vLumFilterPos[i   ] + c->vLumFilterSize - 1,
1034                            ((c->vChrFilterPos[chrI] + c->vChrFilterSize - 1)<<c->chrSrcVSubSample));
1035
1036         nextSlice>>= c->chrSrcVSubSample;
1037         nextSlice<<= c->chrSrcVSubSample;
1038         if (c->vLumFilterPos[i   ] + c->vLumBufSize < nextSlice)
1039             c->vLumBufSize= nextSlice - c->vLumFilterPos[i];
1040         if (c->vChrFilterPos[chrI] + c->vChrBufSize < (nextSlice>>c->chrSrcVSubSample))
1041             c->vChrBufSize= (nextSlice>>c->chrSrcVSubSample) - c->vChrFilterPos[chrI];
1042     }
1043
1044     // allocate pixbufs (we use dynamic allocation because otherwise we would need to
1045     // allocate several megabytes to handle all possible cases)
1046     FF_ALLOC_OR_GOTO(c, c->lumPixBuf, c->vLumBufSize*2*sizeof(int16_t*), fail);
1047     FF_ALLOC_OR_GOTO(c, c->chrUPixBuf, c->vChrBufSize*2*sizeof(int16_t*), fail);
1048     FF_ALLOC_OR_GOTO(c, c->chrVPixBuf, c->vChrBufSize*2*sizeof(int16_t*), fail);
1049     if (CONFIG_SWSCALE_ALPHA && isALPHA(c->srcFormat) && isALPHA(c->dstFormat))
1050         FF_ALLOCZ_OR_GOTO(c, c->alpPixBuf, c->vLumBufSize*2*sizeof(int16_t*), fail);
1051     //Note we need at least one pixel more at the end because of the MMX code (just in case someone wanna replace the 4000/8000)
1052     /* align at 16 bytes for AltiVec */
1053     for (i=0; i<c->vLumBufSize; i++) {
1054         FF_ALLOCZ_OR_GOTO(c, c->lumPixBuf[i+c->vLumBufSize], dst_stride+16, fail);
1055         c->lumPixBuf[i] = c->lumPixBuf[i+c->vLumBufSize];
1056     }
1057     // 64 / c->scalingBpp is the same as 16 / sizeof(scaling_intermediate)
1058     c->uv_off_px   = dst_stride_px + 64 / c->scalingBpp;
1059     c->uv_off_byte = dst_stride + 16;
1060     for (i=0; i<c->vChrBufSize; i++) {
1061         FF_ALLOC_OR_GOTO(c, c->chrUPixBuf[i+c->vChrBufSize], dst_stride*2+32, fail);
1062         c->chrUPixBuf[i] = c->chrUPixBuf[i+c->vChrBufSize];
1063         c->chrVPixBuf[i] = c->chrVPixBuf[i+c->vChrBufSize] = c->chrUPixBuf[i] + (dst_stride >> 1) + 8;
1064     }
1065     if (CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1066         for (i=0; i<c->vLumBufSize; i++) {
1067             FF_ALLOCZ_OR_GOTO(c, c->alpPixBuf[i+c->vLumBufSize], dst_stride+16, fail);
1068             c->alpPixBuf[i] = c->alpPixBuf[i+c->vLumBufSize];
1069         }
1070
1071     //try to avoid drawing green stuff between the right end and the stride end
1072     for (i=0; i<c->vChrBufSize; i++)
1073         memset(c->chrUPixBuf[i], 64, dst_stride*2+1);
1074
1075     assert(c->chrDstH <= dstH);
1076
1077     if (flags&SWS_PRINT_INFO) {
1078         if      (flags&SWS_FAST_BILINEAR) av_log(c, AV_LOG_INFO, "FAST_BILINEAR scaler, ");
1079         else if (flags&SWS_BILINEAR)      av_log(c, AV_LOG_INFO, "BILINEAR scaler, ");
1080         else if (flags&SWS_BICUBIC)       av_log(c, AV_LOG_INFO, "BICUBIC scaler, ");
1081         else if (flags&SWS_X)             av_log(c, AV_LOG_INFO, "Experimental scaler, ");
1082         else if (flags&SWS_POINT)         av_log(c, AV_LOG_INFO, "Nearest Neighbor / POINT scaler, ");
1083         else if (flags&SWS_AREA)          av_log(c, AV_LOG_INFO, "Area Averaging scaler, ");
1084         else if (flags&SWS_BICUBLIN)      av_log(c, AV_LOG_INFO, "luma BICUBIC / chroma BILINEAR scaler, ");
1085         else if (flags&SWS_GAUSS)         av_log(c, AV_LOG_INFO, "Gaussian scaler, ");
1086         else if (flags&SWS_SINC)          av_log(c, AV_LOG_INFO, "Sinc scaler, ");
1087         else if (flags&SWS_LANCZOS)       av_log(c, AV_LOG_INFO, "Lanczos scaler, ");
1088         else if (flags&SWS_SPLINE)        av_log(c, AV_LOG_INFO, "Bicubic spline scaler, ");
1089         else                              av_log(c, AV_LOG_INFO, "ehh flags invalid?! ");
1090
1091         av_log(c, AV_LOG_INFO, "from %s to %s%s ",
1092                sws_format_name(srcFormat),
1093 #ifdef DITHER1XBPP
1094                dstFormat == PIX_FMT_BGR555 || dstFormat == PIX_FMT_BGR565 ||
1095                dstFormat == PIX_FMT_RGB444BE || dstFormat == PIX_FMT_RGB444LE ||
1096                dstFormat == PIX_FMT_BGR444BE || dstFormat == PIX_FMT_BGR444LE ? "dithered " : "",
1097 #else
1098                "",
1099 #endif
1100                sws_format_name(dstFormat));
1101
1102         if      (HAVE_MMX2     && cpu_flags & AV_CPU_FLAG_MMX2)    av_log(c, AV_LOG_INFO, "using MMX2\n");
1103         else if (HAVE_AMD3DNOW && cpu_flags & AV_CPU_FLAG_3DNOW)   av_log(c, AV_LOG_INFO, "using 3DNOW\n");
1104         else if (HAVE_MMX      && cpu_flags & AV_CPU_FLAG_MMX)     av_log(c, AV_LOG_INFO, "using MMX\n");
1105         else if (HAVE_ALTIVEC  && cpu_flags & AV_CPU_FLAG_ALTIVEC) av_log(c, AV_LOG_INFO, "using AltiVec\n");
1106         else                                   av_log(c, AV_LOG_INFO, "using C\n");
1107
1108         if (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) {
1109             if (c->canMMX2BeUsed && (flags&SWS_FAST_BILINEAR))
1110                 av_log(c, AV_LOG_VERBOSE, "using FAST_BILINEAR MMX2 scaler for horizontal scaling\n");
1111             else {
1112                 if (c->hLumFilterSize==4)
1113                     av_log(c, AV_LOG_VERBOSE, "using 4-tap MMX scaler for horizontal luminance scaling\n");
1114                 else if (c->hLumFilterSize==8)
1115                     av_log(c, AV_LOG_VERBOSE, "using 8-tap MMX scaler for horizontal luminance scaling\n");
1116                 else
1117                     av_log(c, AV_LOG_VERBOSE, "using n-tap MMX scaler for horizontal luminance scaling\n");
1118
1119                 if (c->hChrFilterSize==4)
1120                     av_log(c, AV_LOG_VERBOSE, "using 4-tap MMX scaler for horizontal chrominance scaling\n");
1121                 else if (c->hChrFilterSize==8)
1122                     av_log(c, AV_LOG_VERBOSE, "using 8-tap MMX scaler for horizontal chrominance scaling\n");
1123                 else
1124                     av_log(c, AV_LOG_VERBOSE, "using n-tap MMX scaler for horizontal chrominance scaling\n");
1125             }
1126         } else {
1127 #if HAVE_MMX
1128             av_log(c, AV_LOG_VERBOSE, "using x86 asm scaler for horizontal scaling\n");
1129 #else
1130             if (flags & SWS_FAST_BILINEAR)
1131                 av_log(c, AV_LOG_VERBOSE, "using FAST_BILINEAR C scaler for horizontal scaling\n");
1132             else
1133                 av_log(c, AV_LOG_VERBOSE, "using C scaler for horizontal scaling\n");
1134 #endif
1135         }
1136         if (isPlanarYUV(dstFormat)) {
1137             if (c->vLumFilterSize==1)
1138                 av_log(c, AV_LOG_VERBOSE, "using 1-tap %s \"scaler\" for vertical scaling (YV12 like)\n",
1139                        (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1140             else
1141                 av_log(c, AV_LOG_VERBOSE, "using n-tap %s scaler for vertical scaling (YV12 like)\n",
1142                        (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1143         } else {
1144             if (c->vLumFilterSize==1 && c->vChrFilterSize==2)
1145                 av_log(c, AV_LOG_VERBOSE, "using 1-tap %s \"scaler\" for vertical luminance scaling (BGR)\n"
1146                        "      2-tap scaler for vertical chrominance scaling (BGR)\n",
1147                        (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1148             else if (c->vLumFilterSize==2 && c->vChrFilterSize==2)
1149                 av_log(c, AV_LOG_VERBOSE, "using 2-tap linear %s scaler for vertical scaling (BGR)\n",
1150                        (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1151             else
1152                 av_log(c, AV_LOG_VERBOSE, "using n-tap %s scaler for vertical scaling (BGR)\n",
1153                        (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1154         }
1155
1156         if (dstFormat==PIX_FMT_BGR24)
1157             av_log(c, AV_LOG_VERBOSE, "using %s YV12->BGR24 converter\n",
1158                    (HAVE_MMX2 && cpu_flags & AV_CPU_FLAG_MMX2) ? "MMX2" :
1159                    ((HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C"));
1160         else if (dstFormat==PIX_FMT_RGB32)
1161             av_log(c, AV_LOG_VERBOSE, "using %s YV12->BGR32 converter\n",
1162                    (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1163         else if (dstFormat==PIX_FMT_BGR565)
1164             av_log(c, AV_LOG_VERBOSE, "using %s YV12->BGR16 converter\n",
1165                    (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1166         else if (dstFormat==PIX_FMT_BGR555)
1167             av_log(c, AV_LOG_VERBOSE, "using %s YV12->BGR15 converter\n",
1168                    (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1169         else if (dstFormat == PIX_FMT_RGB444BE || dstFormat == PIX_FMT_RGB444LE ||
1170                  dstFormat == PIX_FMT_BGR444BE || dstFormat == PIX_FMT_BGR444LE)
1171             av_log(c, AV_LOG_VERBOSE, "using %s YV12->BGR12 converter\n",
1172                    (HAVE_MMX && cpu_flags & AV_CPU_FLAG_MMX) ? "MMX" : "C");
1173
1174         av_log(c, AV_LOG_VERBOSE, "%dx%d -> %dx%d\n", srcW, srcH, dstW, dstH);
1175         av_log(c, AV_LOG_DEBUG, "lum srcW=%d srcH=%d dstW=%d dstH=%d xInc=%d yInc=%d\n",
1176                c->srcW, c->srcH, c->dstW, c->dstH, c->lumXInc, c->lumYInc);
1177         av_log(c, AV_LOG_DEBUG, "chr srcW=%d srcH=%d dstW=%d dstH=%d xInc=%d yInc=%d\n",
1178                c->chrSrcW, c->chrSrcH, c->chrDstW, c->chrDstH, c->chrXInc, c->chrYInc);
1179     }
1180
1181     c->swScale= ff_getSwsFunc(c);
1182     return 0;
1183 fail: //FIXME replace things by appropriate error codes
1184     return -1;
1185 }
1186
1187 #if FF_API_SWS_GETCONTEXT
1188 SwsContext *sws_getContext(int srcW, int srcH, enum PixelFormat srcFormat,
1189                            int dstW, int dstH, enum PixelFormat dstFormat, int flags,
1190                            SwsFilter *srcFilter, SwsFilter *dstFilter, const double *param)
1191 {
1192     SwsContext *c;
1193
1194     if(!(c=sws_alloc_context()))
1195         return NULL;
1196
1197     c->flags= flags;
1198     c->srcW= srcW;
1199     c->srcH= srcH;
1200     c->dstW= dstW;
1201     c->dstH= dstH;
1202     c->srcRange = handle_jpeg(&srcFormat);
1203     c->dstRange = handle_jpeg(&dstFormat);
1204     c->srcFormat= srcFormat;
1205     c->dstFormat= dstFormat;
1206
1207     if (param) {
1208         c->param[0] = param[0];
1209         c->param[1] = param[1];
1210     }
1211     sws_setColorspaceDetails(c, ff_yuv2rgb_coeffs[SWS_CS_DEFAULT], c->srcRange, ff_yuv2rgb_coeffs[SWS_CS_DEFAULT] /* FIXME*/, c->dstRange, 0, 1<<16, 1<<16);
1212
1213     if(sws_init_context(c, srcFilter, dstFilter) < 0){
1214         sws_freeContext(c);
1215         return NULL;
1216     }
1217
1218     return c;
1219 }
1220 #endif
1221
1222 SwsFilter *sws_getDefaultFilter(float lumaGBlur, float chromaGBlur,
1223                                 float lumaSharpen, float chromaSharpen,
1224                                 float chromaHShift, float chromaVShift,
1225                                 int verbose)
1226 {
1227     SwsFilter *filter= av_malloc(sizeof(SwsFilter));
1228     if (!filter)
1229         return NULL;
1230
1231     if (lumaGBlur!=0.0) {
1232         filter->lumH= sws_getGaussianVec(lumaGBlur, 3.0);
1233         filter->lumV= sws_getGaussianVec(lumaGBlur, 3.0);
1234     } else {
1235         filter->lumH= sws_getIdentityVec();
1236         filter->lumV= sws_getIdentityVec();
1237     }
1238
1239     if (chromaGBlur!=0.0) {
1240         filter->chrH= sws_getGaussianVec(chromaGBlur, 3.0);
1241         filter->chrV= sws_getGaussianVec(chromaGBlur, 3.0);
1242     } else {
1243         filter->chrH= sws_getIdentityVec();
1244         filter->chrV= sws_getIdentityVec();
1245     }
1246
1247     if (chromaSharpen!=0.0) {
1248         SwsVector *id= sws_getIdentityVec();
1249         sws_scaleVec(filter->chrH, -chromaSharpen);
1250         sws_scaleVec(filter->chrV, -chromaSharpen);
1251         sws_addVec(filter->chrH, id);
1252         sws_addVec(filter->chrV, id);
1253         sws_freeVec(id);
1254     }
1255
1256     if (lumaSharpen!=0.0) {
1257         SwsVector *id= sws_getIdentityVec();
1258         sws_scaleVec(filter->lumH, -lumaSharpen);
1259         sws_scaleVec(filter->lumV, -lumaSharpen);
1260         sws_addVec(filter->lumH, id);
1261         sws_addVec(filter->lumV, id);
1262         sws_freeVec(id);
1263     }
1264
1265     if (chromaHShift != 0.0)
1266         sws_shiftVec(filter->chrH, (int)(chromaHShift+0.5));
1267
1268     if (chromaVShift != 0.0)
1269         sws_shiftVec(filter->chrV, (int)(chromaVShift+0.5));
1270
1271     sws_normalizeVec(filter->chrH, 1.0);
1272     sws_normalizeVec(filter->chrV, 1.0);
1273     sws_normalizeVec(filter->lumH, 1.0);
1274     sws_normalizeVec(filter->lumV, 1.0);
1275
1276     if (verbose) sws_printVec2(filter->chrH, NULL, AV_LOG_DEBUG);
1277     if (verbose) sws_printVec2(filter->lumH, NULL, AV_LOG_DEBUG);
1278
1279     return filter;
1280 }
1281
1282 SwsVector *sws_allocVec(int length)
1283 {
1284     SwsVector *vec = av_malloc(sizeof(SwsVector));
1285     if (!vec)
1286         return NULL;
1287     vec->length = length;
1288     vec->coeff  = av_malloc(sizeof(double) * length);
1289     if (!vec->coeff)
1290         av_freep(&vec);
1291     return vec;
1292 }
1293
1294 SwsVector *sws_getGaussianVec(double variance, double quality)
1295 {
1296     const int length= (int)(variance*quality + 0.5) | 1;
1297     int i;
1298     double middle= (length-1)*0.5;
1299     SwsVector *vec= sws_allocVec(length);
1300
1301     if (!vec)
1302         return NULL;
1303
1304     for (i=0; i<length; i++) {
1305         double dist= i-middle;
1306         vec->coeff[i]= exp(-dist*dist/(2*variance*variance)) / sqrt(2*variance*M_PI);
1307     }
1308
1309     sws_normalizeVec(vec, 1.0);
1310
1311     return vec;
1312 }
1313
1314 SwsVector *sws_getConstVec(double c, int length)
1315 {
1316     int i;
1317     SwsVector *vec= sws_allocVec(length);
1318
1319     if (!vec)
1320         return NULL;
1321
1322     for (i=0; i<length; i++)
1323         vec->coeff[i]= c;
1324
1325     return vec;
1326 }
1327
1328 SwsVector *sws_getIdentityVec(void)
1329 {
1330     return sws_getConstVec(1.0, 1);
1331 }
1332
1333 static double sws_dcVec(SwsVector *a)
1334 {
1335     int i;
1336     double sum=0;
1337
1338     for (i=0; i<a->length; i++)
1339         sum+= a->coeff[i];
1340
1341     return sum;
1342 }
1343
1344 void sws_scaleVec(SwsVector *a, double scalar)
1345 {
1346     int i;
1347
1348     for (i=0; i<a->length; i++)
1349         a->coeff[i]*= scalar;
1350 }
1351
1352 void sws_normalizeVec(SwsVector *a, double height)
1353 {
1354     sws_scaleVec(a, height/sws_dcVec(a));
1355 }
1356
1357 static SwsVector *sws_getConvVec(SwsVector *a, SwsVector *b)
1358 {
1359     int length= a->length + b->length - 1;
1360     int i, j;
1361     SwsVector *vec= sws_getConstVec(0.0, length);
1362
1363     if (!vec)
1364         return NULL;
1365
1366     for (i=0; i<a->length; i++) {
1367         for (j=0; j<b->length; j++) {
1368             vec->coeff[i+j]+= a->coeff[i]*b->coeff[j];
1369         }
1370     }
1371
1372     return vec;
1373 }
1374
1375 static SwsVector *sws_sumVec(SwsVector *a, SwsVector *b)
1376 {
1377     int length= FFMAX(a->length, b->length);
1378     int i;
1379     SwsVector *vec= sws_getConstVec(0.0, length);
1380
1381     if (!vec)
1382         return NULL;
1383
1384     for (i=0; i<a->length; i++) vec->coeff[i + (length-1)/2 - (a->length-1)/2]+= a->coeff[i];
1385     for (i=0; i<b->length; i++) vec->coeff[i + (length-1)/2 - (b->length-1)/2]+= b->coeff[i];
1386
1387     return vec;
1388 }
1389
1390 static SwsVector *sws_diffVec(SwsVector *a, SwsVector *b)
1391 {
1392     int length= FFMAX(a->length, b->length);
1393     int i;
1394     SwsVector *vec= sws_getConstVec(0.0, length);
1395
1396     if (!vec)
1397         return NULL;
1398
1399     for (i=0; i<a->length; i++) vec->coeff[i + (length-1)/2 - (a->length-1)/2]+= a->coeff[i];
1400     for (i=0; i<b->length; i++) vec->coeff[i + (length-1)/2 - (b->length-1)/2]-= b->coeff[i];
1401
1402     return vec;
1403 }
1404
1405 /* shift left / or right if "shift" is negative */
1406 static SwsVector *sws_getShiftedVec(SwsVector *a, int shift)
1407 {
1408     int length= a->length + FFABS(shift)*2;
1409     int i;
1410     SwsVector *vec= sws_getConstVec(0.0, length);
1411
1412     if (!vec)
1413         return NULL;
1414
1415     for (i=0; i<a->length; i++) {
1416         vec->coeff[i + (length-1)/2 - (a->length-1)/2 - shift]= a->coeff[i];
1417     }
1418
1419     return vec;
1420 }
1421
1422 void sws_shiftVec(SwsVector *a, int shift)
1423 {
1424     SwsVector *shifted= sws_getShiftedVec(a, shift);
1425     av_free(a->coeff);
1426     a->coeff= shifted->coeff;
1427     a->length= shifted->length;
1428     av_free(shifted);
1429 }
1430
1431 void sws_addVec(SwsVector *a, SwsVector *b)
1432 {
1433     SwsVector *sum= sws_sumVec(a, b);
1434     av_free(a->coeff);
1435     a->coeff= sum->coeff;
1436     a->length= sum->length;
1437     av_free(sum);
1438 }
1439
1440 void sws_subVec(SwsVector *a, SwsVector *b)
1441 {
1442     SwsVector *diff= sws_diffVec(a, b);
1443     av_free(a->coeff);
1444     a->coeff= diff->coeff;
1445     a->length= diff->length;
1446     av_free(diff);
1447 }
1448
1449 void sws_convVec(SwsVector *a, SwsVector *b)
1450 {
1451     SwsVector *conv= sws_getConvVec(a, b);
1452     av_free(a->coeff);
1453     a->coeff= conv->coeff;
1454     a->length= conv->length;
1455     av_free(conv);
1456 }
1457
1458 SwsVector *sws_cloneVec(SwsVector *a)
1459 {
1460     int i;
1461     SwsVector *vec= sws_allocVec(a->length);
1462
1463     if (!vec)
1464         return NULL;
1465
1466     for (i=0; i<a->length; i++) vec->coeff[i]= a->coeff[i];
1467
1468     return vec;
1469 }
1470
1471 void sws_printVec2(SwsVector *a, AVClass *log_ctx, int log_level)
1472 {
1473     int i;
1474     double max=0;
1475     double min=0;
1476     double range;
1477
1478     for (i=0; i<a->length; i++)
1479         if (a->coeff[i]>max) max= a->coeff[i];
1480
1481     for (i=0; i<a->length; i++)
1482         if (a->coeff[i]<min) min= a->coeff[i];
1483
1484     range= max - min;
1485
1486     for (i=0; i<a->length; i++) {
1487         int x= (int)((a->coeff[i]-min)*60.0/range +0.5);
1488         av_log(log_ctx, log_level, "%1.3f ", a->coeff[i]);
1489         for (;x>0; x--) av_log(log_ctx, log_level, " ");
1490         av_log(log_ctx, log_level, "|\n");
1491     }
1492 }
1493
1494 void sws_freeVec(SwsVector *a)
1495 {
1496     if (!a) return;
1497     av_freep(&a->coeff);
1498     a->length=0;
1499     av_free(a);
1500 }
1501
1502 void sws_freeFilter(SwsFilter *filter)
1503 {
1504     if (!filter) return;
1505
1506     if (filter->lumH) sws_freeVec(filter->lumH);
1507     if (filter->lumV) sws_freeVec(filter->lumV);
1508     if (filter->chrH) sws_freeVec(filter->chrH);
1509     if (filter->chrV) sws_freeVec(filter->chrV);
1510     av_free(filter);
1511 }
1512
1513 void sws_freeContext(SwsContext *c)
1514 {
1515     int i;
1516     if (!c) return;
1517
1518     if (c->lumPixBuf) {
1519         for (i=0; i<c->vLumBufSize; i++)
1520             av_freep(&c->lumPixBuf[i]);
1521         av_freep(&c->lumPixBuf);
1522     }
1523
1524     if (c->chrUPixBuf) {
1525         for (i=0; i<c->vChrBufSize; i++)
1526             av_freep(&c->chrUPixBuf[i]);
1527         av_freep(&c->chrUPixBuf);
1528         av_freep(&c->chrVPixBuf);
1529     }
1530
1531     if (CONFIG_SWSCALE_ALPHA && c->alpPixBuf) {
1532         for (i=0; i<c->vLumBufSize; i++)
1533             av_freep(&c->alpPixBuf[i]);
1534         av_freep(&c->alpPixBuf);
1535     }
1536
1537     av_freep(&c->vLumFilter);
1538     av_freep(&c->vChrFilter);
1539     av_freep(&c->hLumFilter);
1540     av_freep(&c->hChrFilter);
1541 #if HAVE_ALTIVEC
1542     av_freep(&c->vYCoeffsBank);
1543     av_freep(&c->vCCoeffsBank);
1544 #endif
1545
1546     av_freep(&c->vLumFilterPos);
1547     av_freep(&c->vChrFilterPos);
1548     av_freep(&c->hLumFilterPos);
1549     av_freep(&c->hChrFilterPos);
1550
1551 #if HAVE_MMX
1552 #ifdef MAP_ANONYMOUS
1553     if (c->lumMmx2FilterCode) munmap(c->lumMmx2FilterCode, c->lumMmx2FilterCodeSize);
1554     if (c->chrMmx2FilterCode) munmap(c->chrMmx2FilterCode, c->chrMmx2FilterCodeSize);
1555 #elif HAVE_VIRTUALALLOC
1556     if (c->lumMmx2FilterCode) VirtualFree(c->lumMmx2FilterCode, 0, MEM_RELEASE);
1557     if (c->chrMmx2FilterCode) VirtualFree(c->chrMmx2FilterCode, 0, MEM_RELEASE);
1558 #else
1559     av_free(c->lumMmx2FilterCode);
1560     av_free(c->chrMmx2FilterCode);
1561 #endif
1562     c->lumMmx2FilterCode=NULL;
1563     c->chrMmx2FilterCode=NULL;
1564 #endif /* HAVE_MMX */
1565
1566     av_freep(&c->yuvTable);
1567     av_free(c->formatConvBuffer);
1568
1569     av_free(c);
1570 }
1571
1572 struct SwsContext *sws_getCachedContext(struct SwsContext *context,
1573                                         int srcW, int srcH, enum PixelFormat srcFormat,
1574                                         int dstW, int dstH, enum PixelFormat dstFormat, int flags,
1575                                         SwsFilter *srcFilter, SwsFilter *dstFilter, const double *param)
1576 {
1577     static const double default_param[2] = {SWS_PARAM_DEFAULT, SWS_PARAM_DEFAULT};
1578
1579     if (!param)
1580         param = default_param;
1581
1582     if (context &&
1583         (context->srcW      != srcW      ||
1584          context->srcH      != srcH      ||
1585          context->srcFormat != srcFormat ||
1586          context->dstW      != dstW      ||
1587          context->dstH      != dstH      ||
1588          context->dstFormat != dstFormat ||
1589          context->flags     != flags     ||
1590          context->param[0]  != param[0]  ||
1591          context->param[1]  != param[1])) {
1592         sws_freeContext(context);
1593         context = NULL;
1594     }
1595
1596     if (!context) {
1597         if (!(context = sws_alloc_context()))
1598             return NULL;
1599         context->srcW      = srcW;
1600         context->srcH      = srcH;
1601         context->srcRange  = handle_jpeg(&srcFormat);
1602         context->srcFormat = srcFormat;
1603         context->dstW      = dstW;
1604         context->dstH      = dstH;
1605         context->dstRange  = handle_jpeg(&dstFormat);
1606         context->dstFormat = dstFormat;
1607         context->flags     = flags;
1608         context->param[0]  = param[0];
1609         context->param[1]  = param[1];
1610         sws_setColorspaceDetails(context, ff_yuv2rgb_coeffs[SWS_CS_DEFAULT], context->srcRange, ff_yuv2rgb_coeffs[SWS_CS_DEFAULT] /* FIXME*/, context->dstRange, 0, 1<<16, 1<<16);
1611         if (sws_init_context(context, srcFilter, dstFilter) < 0) {
1612             sws_freeContext(context);
1613             return NULL;
1614         }
1615     }
1616     return context;
1617 }
1618