4394a7d9ead9f4edf57e6012714b0c808f6781e4
[ffmpeg.git] / libswscale / swscale.c
1 /*
2  * Copyright (C) 2001-2003 Michael Niedermayer <michaelni@gmx.at>
3  *
4  * This file is part of Libav.
5  *
6  * Libav is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * Libav is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with Libav; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 /*
22   supported Input formats: YV12, I420/IYUV, YUY2, UYVY, BGR32, BGR32_1, BGR24, BGR16, BGR15, RGB32, RGB32_1, RGB24, Y8/Y800, YVU9/IF09, PAL8
23   supported output formats: YV12, I420/IYUV, YUY2, UYVY, {BGR,RGB}{1,4,8,15,16,24,32}, Y8/Y800, YVU9/IF09
24   {BGR,RGB}{1,4,8,15,16} support dithering
25
26   unscaled special converters (YV12=I420=IYUV, Y800=Y8)
27   YV12 -> {BGR,RGB}{1,4,8,12,15,16,24,32}
28   x -> x
29   YUV9 -> YV12
30   YUV9/YV12 -> Y800
31   Y800 -> YUV9/YV12
32   BGR24 -> BGR32 & RGB24 -> RGB32
33   BGR32 -> BGR24 & RGB32 -> RGB24
34   BGR15 -> BGR16
35 */
36
37 /*
38 tested special converters (most are tested actually, but I did not write it down ...)
39  YV12 -> BGR12/BGR16
40  YV12 -> YV12
41  BGR15 -> BGR16
42  BGR16 -> BGR16
43  YVU9 -> YV12
44
45 untested special converters
46   YV12/I420 -> BGR15/BGR24/BGR32 (it is the yuv2rgb stuff, so it should be OK)
47   YV12/I420 -> YV12/I420
48   YUY2/BGR15/BGR24/BGR32/RGB24/RGB32 -> same format
49   BGR24 -> BGR32 & RGB24 -> RGB32
50   BGR32 -> BGR24 & RGB32 -> RGB24
51   BGR24 -> YV12
52 */
53
54 #include <inttypes.h>
55 #include <string.h>
56 #include <math.h>
57 #include <stdio.h>
58 #include "config.h"
59 #include <assert.h>
60 #include "swscale.h"
61 #include "swscale_internal.h"
62 #include "rgb2rgb.h"
63 #include "libavutil/intreadwrite.h"
64 #include "libavutil/x86_cpu.h"
65 #include "libavutil/avutil.h"
66 #include "libavutil/mathematics.h"
67 #include "libavutil/bswap.h"
68 #include "libavutil/pixdesc.h"
69
70 #undef MOVNTQ
71 #undef PAVGB
72
73 //#undef HAVE_MMX2
74 //#define HAVE_AMD3DNOW
75 //#undef HAVE_MMX
76 //#undef ARCH_X86
77 #define DITHER1XBPP
78
79 #define isPacked(x)         (       \
80            (x)==PIX_FMT_PAL8        \
81         || (x)==PIX_FMT_YUYV422     \
82         || (x)==PIX_FMT_UYVY422     \
83         || (x)==PIX_FMT_Y400A       \
84         || isAnyRGB(x)              \
85     )
86
87 #define RGB2YUV_SHIFT 15
88 #define BY ( (int)(0.114*219/255*(1<<RGB2YUV_SHIFT)+0.5))
89 #define BV (-(int)(0.081*224/255*(1<<RGB2YUV_SHIFT)+0.5))
90 #define BU ( (int)(0.500*224/255*(1<<RGB2YUV_SHIFT)+0.5))
91 #define GY ( (int)(0.587*219/255*(1<<RGB2YUV_SHIFT)+0.5))
92 #define GV (-(int)(0.419*224/255*(1<<RGB2YUV_SHIFT)+0.5))
93 #define GU (-(int)(0.331*224/255*(1<<RGB2YUV_SHIFT)+0.5))
94 #define RY ( (int)(0.299*219/255*(1<<RGB2YUV_SHIFT)+0.5))
95 #define RV ( (int)(0.500*224/255*(1<<RGB2YUV_SHIFT)+0.5))
96 #define RU (-(int)(0.169*224/255*(1<<RGB2YUV_SHIFT)+0.5))
97
98 static const double rgb2yuv_table[8][9]={
99     {0.7152, 0.0722, 0.2126, -0.386, 0.5, -0.115, -0.454, -0.046, 0.5}, //ITU709
100     {0.7152, 0.0722, 0.2126, -0.386, 0.5, -0.115, -0.454, -0.046, 0.5}, //ITU709
101     {0.587 , 0.114 , 0.299 , -0.331, 0.5, -0.169, -0.419, -0.081, 0.5}, //DEFAULT / ITU601 / ITU624 / SMPTE 170M
102     {0.587 , 0.114 , 0.299 , -0.331, 0.5, -0.169, -0.419, -0.081, 0.5}, //DEFAULT / ITU601 / ITU624 / SMPTE 170M
103     {0.59  , 0.11  , 0.30  , -0.331, 0.5, -0.169, -0.421, -0.079, 0.5}, //FCC
104     {0.587 , 0.114 , 0.299 , -0.331, 0.5, -0.169, -0.419, -0.081, 0.5}, //DEFAULT / ITU601 / ITU624 / SMPTE 170M
105     {0.587 , 0.114 , 0.299 , -0.331, 0.5, -0.169, -0.419, -0.081, 0.5}, //DEFAULT / ITU601 / ITU624 / SMPTE 170M
106     {0.701 , 0.087 , 0.212 , -0.384, 0.5, -0.116, -0.445, -0.055, 0.5}, //SMPTE 240M
107 };
108
109 /*
110 NOTES
111 Special versions: fast Y 1:1 scaling (no interpolation in y direction)
112
113 TODO
114 more intelligent misalignment avoidance for the horizontal scaler
115 write special vertical cubic upscale version
116 optimize C code (YV12 / minmax)
117 add support for packed pixel YUV input & output
118 add support for Y8 output
119 optimize BGR24 & BGR32
120 add BGR4 output support
121 write special BGR->BGR scaler
122 */
123
124 DECLARE_ALIGNED(8, static const uint8_t, dither_2x2_4)[2][8]={
125 {  1,   3,   1,   3,   1,   3,   1,   3, },
126 {  2,   0,   2,   0,   2,   0,   2,   0, },
127 };
128
129 DECLARE_ALIGNED(8, static const uint8_t, dither_2x2_8)[2][8]={
130 {  6,   2,   6,   2,   6,   2,   6,   2, },
131 {  0,   4,   0,   4,   0,   4,   0,   4, },
132 };
133
134 DECLARE_ALIGNED(8, const uint8_t, dither_4x4_16)[4][8]={
135 {  8,   4,  11,   7,   8,   4,  11,   7, },
136 {  2,  14,   1,  13,   2,  14,   1,  13, },
137 { 10,   6,   9,   5,  10,   6,   9,   5, },
138 {  0,  12,   3,  15,   0,  12,   3,  15, },
139 };
140
141 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_32)[8][8]={
142 { 17,   9,  23,  15,  16,   8,  22,  14, },
143 {  5,  29,   3,  27,   4,  28,   2,  26, },
144 { 21,  13,  19,  11,  20,  12,  18,  10, },
145 {  0,  24,   6,  30,   1,  25,   7,  31, },
146 { 16,   8,  22,  14,  17,   9,  23,  15, },
147 {  4,  28,   2,  26,   5,  29,   3,  27, },
148 { 20,  12,  18,  10,  21,  13,  19,  11, },
149 {  1,  25,   7,  31,   0,  24,   6,  30, },
150 };
151
152 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_73)[8][8]={
153 {  0,  55,  14,  68,   3,  58,  17,  72, },
154 { 37,  18,  50,  32,  40,  22,  54,  35, },
155 {  9,  64,   5,  59,  13,  67,   8,  63, },
156 { 46,  27,  41,  23,  49,  31,  44,  26, },
157 {  2,  57,  16,  71,   1,  56,  15,  70, },
158 { 39,  21,  52,  34,  38,  19,  51,  33, },
159 { 11,  66,   7,  62,  10,  65,   6,  60, },
160 { 48,  30,  43,  25,  47,  29,  42,  24, },
161 };
162
163 #if 1
164 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[8][8]={
165 {117,  62, 158, 103, 113,  58, 155, 100, },
166 { 34, 199,  21, 186,  31, 196,  17, 182, },
167 {144,  89, 131,  76, 141,  86, 127,  72, },
168 {  0, 165,  41, 206,  10, 175,  52, 217, },
169 {110,  55, 151,  96, 120,  65, 162, 107, },
170 { 28, 193,  14, 179,  38, 203,  24, 189, },
171 {138,  83, 124,  69, 148,  93, 134,  79, },
172 {  7, 172,  48, 213,   3, 168,  45, 210, },
173 };
174 #elif 1
175 // tries to correct a gamma of 1.5
176 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[8][8]={
177 {  0, 143,  18, 200,   2, 156,  25, 215, },
178 { 78,  28, 125,  64,  89,  36, 138,  74, },
179 { 10, 180,   3, 161,  16, 195,   8, 175, },
180 {109,  51,  93,  38, 121,  60, 105,  47, },
181 {  1, 152,  23, 210,   0, 147,  20, 205, },
182 { 85,  33, 134,  71,  81,  30, 130,  67, },
183 { 14, 190,   6, 171,  12, 185,   5, 166, },
184 {117,  57, 101,  44, 113,  54,  97,  41, },
185 };
186 #elif 1
187 // tries to correct a gamma of 2.0
188 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[8][8]={
189 {  0, 124,   8, 193,   0, 140,  12, 213, },
190 { 55,  14, 104,  42,  66,  19, 119,  52, },
191 {  3, 168,   1, 145,   6, 187,   3, 162, },
192 { 86,  31,  70,  21,  99,  39,  82,  28, },
193 {  0, 134,  11, 206,   0, 129,   9, 200, },
194 { 62,  17, 114,  48,  58,  16, 109,  45, },
195 {  5, 181,   2, 157,   4, 175,   1, 151, },
196 { 95,  36,  78,  26,  90,  34,  74,  24, },
197 };
198 #else
199 // tries to correct a gamma of 2.5
200 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[8][8]={
201 {  0, 107,   3, 187,   0, 125,   6, 212, },
202 { 39,   7,  86,  28,  49,  11, 102,  36, },
203 {  1, 158,   0, 131,   3, 180,   1, 151, },
204 { 68,  19,  52,  12,  81,  25,  64,  17, },
205 {  0, 119,   5, 203,   0, 113,   4, 195, },
206 { 45,   9,  96,  33,  42,   8,  91,  30, },
207 {  2, 172,   1, 144,   2, 165,   0, 137, },
208 { 77,  23,  60,  15,  72,  21,  56,  14, },
209 };
210 #endif
211
212 static av_always_inline void yuv2yuvX16inC_template(const int16_t *lumFilter, const int16_t **lumSrc, int lumFilterSize,
213                                                     const int16_t *chrFilter, const int16_t **chrSrc, int chrFilterSize,
214                                                     const int16_t **alpSrc, uint16_t *dest, uint16_t *uDest, uint16_t *vDest, uint16_t *aDest,
215                                                     int dstW, int chrDstW, int big_endian, int output_bits)
216 {
217     //FIXME Optimize (just quickly written not optimized..)
218     int i;
219     int shift = 11 + 16 - output_bits;
220
221 #define output_pixel(pos, val) \
222     if (big_endian) { \
223         if (output_bits == 16) { \
224             AV_WB16(pos, av_clip_uint16(val >> shift)); \
225         } else { \
226             AV_WB16(pos, av_clip_uintp2(val >> shift, output_bits)); \
227         } \
228     } else { \
229         if (output_bits == 16) { \
230             AV_WL16(pos, av_clip_uint16(val >> shift)); \
231         } else { \
232             AV_WL16(pos, av_clip_uintp2(val >> shift, output_bits)); \
233         } \
234     }
235     for (i = 0; i < dstW; i++) {
236         int val = 1 << 10;
237         int j;
238
239         for (j = 0; j < lumFilterSize; j++)
240             val += lumSrc[j][i] * lumFilter[j];
241
242         output_pixel(&dest[i], val);
243     }
244
245     if (uDest) {
246         for (i = 0; i < chrDstW; i++) {
247             int u = 1 << 10;
248             int v = 1 << 10;
249             int j;
250
251             for (j = 0; j < chrFilterSize; j++) {
252                 u += chrSrc[j][i       ] * chrFilter[j];
253                 v += chrSrc[j][i + VOFW] * chrFilter[j];
254             }
255
256             output_pixel(&uDest[i], u);
257             output_pixel(&vDest[i], v);
258         }
259     }
260
261     if (CONFIG_SWSCALE_ALPHA && aDest) {
262         for (i = 0; i < dstW; i++) {
263             int val = 1 << 10;
264             int j;
265
266             for (j = 0; j < lumFilterSize; j++)
267                 val += alpSrc[j][i] * lumFilter[j];
268
269             output_pixel(&aDest[i], val);
270         }
271     }
272 }
273
274 static inline void yuv2yuvX16inC(const int16_t *lumFilter, const int16_t **lumSrc, int lumFilterSize,
275                                  const int16_t *chrFilter, const int16_t **chrSrc, int chrFilterSize,
276                                  const int16_t **alpSrc, uint16_t *dest, uint16_t *uDest, uint16_t *vDest, uint16_t *aDest, int dstW, int chrDstW,
277                                  enum PixelFormat dstFormat)
278 {
279 #define conv16(bits) \
280     if (isBE(dstFormat)) { \
281         yuv2yuvX16inC_template(lumFilter, lumSrc, lumFilterSize, \
282                                chrFilter, chrSrc, chrFilterSize, \
283                                alpSrc, \
284                                dest, uDest, vDest, aDest, \
285                                dstW, chrDstW, 1, bits); \
286     } else { \
287         yuv2yuvX16inC_template(lumFilter, lumSrc, lumFilterSize, \
288                                chrFilter, chrSrc, chrFilterSize, \
289                                alpSrc, \
290                                dest, uDest, vDest, aDest, \
291                                dstW, chrDstW, 0, bits); \
292     }
293     if (is16BPS(dstFormat)) {
294         conv16(16);
295     } else if (av_pix_fmt_descriptors[dstFormat].comp[0].depth_minus1 == 8) {
296         conv16(9);
297     } else {
298         conv16(10);
299     }
300 #undef conv16
301 }
302
303 static inline void yuv2yuvXinC(const int16_t *lumFilter, const int16_t **lumSrc, int lumFilterSize,
304                                const int16_t *chrFilter, const int16_t **chrSrc, int chrFilterSize,
305                                const int16_t **alpSrc, uint8_t *dest, uint8_t *uDest, uint8_t *vDest, uint8_t *aDest, int dstW, int chrDstW)
306 {
307     //FIXME Optimize (just quickly written not optimized..)
308     int i;
309     for (i=0; i<dstW; i++) {
310         int val=1<<18;
311         int j;
312         for (j=0; j<lumFilterSize; j++)
313             val += lumSrc[j][i] * lumFilter[j];
314
315         dest[i]= av_clip_uint8(val>>19);
316     }
317
318     if (uDest)
319         for (i=0; i<chrDstW; i++) {
320             int u=1<<18;
321             int v=1<<18;
322             int j;
323             for (j=0; j<chrFilterSize; j++) {
324                 u += chrSrc[j][i] * chrFilter[j];
325                 v += chrSrc[j][i + VOFW] * chrFilter[j];
326             }
327
328             uDest[i]= av_clip_uint8(u>>19);
329             vDest[i]= av_clip_uint8(v>>19);
330         }
331
332     if (CONFIG_SWSCALE_ALPHA && aDest)
333         for (i=0; i<dstW; i++) {
334             int val=1<<18;
335             int j;
336             for (j=0; j<lumFilterSize; j++)
337                 val += alpSrc[j][i] * lumFilter[j];
338
339             aDest[i]= av_clip_uint8(val>>19);
340         }
341
342 }
343
344 static inline void yuv2nv12XinC(const int16_t *lumFilter, const int16_t **lumSrc, int lumFilterSize,
345                                 const int16_t *chrFilter, const int16_t **chrSrc, int chrFilterSize,
346                                 uint8_t *dest, uint8_t *uDest, int dstW, int chrDstW, int dstFormat)
347 {
348     //FIXME Optimize (just quickly written not optimized..)
349     int i;
350     for (i=0; i<dstW; i++) {
351         int val=1<<18;
352         int j;
353         for (j=0; j<lumFilterSize; j++)
354             val += lumSrc[j][i] * lumFilter[j];
355
356         dest[i]= av_clip_uint8(val>>19);
357     }
358
359     if (!uDest)
360         return;
361
362     if (dstFormat == PIX_FMT_NV12)
363         for (i=0; i<chrDstW; i++) {
364             int u=1<<18;
365             int v=1<<18;
366             int j;
367             for (j=0; j<chrFilterSize; j++) {
368                 u += chrSrc[j][i] * chrFilter[j];
369                 v += chrSrc[j][i + VOFW] * chrFilter[j];
370             }
371
372             uDest[2*i]= av_clip_uint8(u>>19);
373             uDest[2*i+1]= av_clip_uint8(v>>19);
374         }
375     else
376         for (i=0; i<chrDstW; i++) {
377             int u=1<<18;
378             int v=1<<18;
379             int j;
380             for (j=0; j<chrFilterSize; j++) {
381                 u += chrSrc[j][i] * chrFilter[j];
382                 v += chrSrc[j][i + VOFW] * chrFilter[j];
383             }
384
385             uDest[2*i]= av_clip_uint8(v>>19);
386             uDest[2*i+1]= av_clip_uint8(u>>19);
387         }
388 }
389
390 #define YSCALE_YUV_2_PACKEDX_NOCLIP_C(type,alpha) \
391     for (i=0; i<(dstW>>1); i++) {\
392         int j;\
393         int Y1 = 1<<18;\
394         int Y2 = 1<<18;\
395         int U  = 1<<18;\
396         int V  = 1<<18;\
397         int av_unused A1, A2;\
398         type av_unused *r, *b, *g;\
399         const int i2= 2*i;\
400         \
401         for (j=0; j<lumFilterSize; j++) {\
402             Y1 += lumSrc[j][i2] * lumFilter[j];\
403             Y2 += lumSrc[j][i2+1] * lumFilter[j];\
404         }\
405         for (j=0; j<chrFilterSize; j++) {\
406             U += chrSrc[j][i] * chrFilter[j];\
407             V += chrSrc[j][i+VOFW] * chrFilter[j];\
408         }\
409         Y1>>=19;\
410         Y2>>=19;\
411         U >>=19;\
412         V >>=19;\
413         if (alpha) {\
414             A1 = 1<<18;\
415             A2 = 1<<18;\
416             for (j=0; j<lumFilterSize; j++) {\
417                 A1 += alpSrc[j][i2  ] * lumFilter[j];\
418                 A2 += alpSrc[j][i2+1] * lumFilter[j];\
419             }\
420             A1>>=19;\
421             A2>>=19;\
422         }
423
424 #define YSCALE_YUV_2_PACKEDX_C(type,alpha) \
425         YSCALE_YUV_2_PACKEDX_NOCLIP_C(type,alpha)\
426         if ((Y1|Y2|U|V)&256) {\
427             if (Y1>255)   Y1=255; \
428             else if (Y1<0)Y1=0;   \
429             if (Y2>255)   Y2=255; \
430             else if (Y2<0)Y2=0;   \
431             if (U>255)    U=255;  \
432             else if (U<0) U=0;    \
433             if (V>255)    V=255;  \
434             else if (V<0) V=0;    \
435         }\
436         if (alpha && ((A1|A2)&256)) {\
437             A1=av_clip_uint8(A1);\
438             A2=av_clip_uint8(A2);\
439         }
440
441 #define YSCALE_YUV_2_PACKEDX_FULL_C(rnd,alpha) \
442     for (i=0; i<dstW; i++) {\
443         int j;\
444         int Y = 0;\
445         int U = -128<<19;\
446         int V = -128<<19;\
447         int av_unused A;\
448         int R,G,B;\
449         \
450         for (j=0; j<lumFilterSize; j++) {\
451             Y += lumSrc[j][i     ] * lumFilter[j];\
452         }\
453         for (j=0; j<chrFilterSize; j++) {\
454             U += chrSrc[j][i     ] * chrFilter[j];\
455             V += chrSrc[j][i+VOFW] * chrFilter[j];\
456         }\
457         Y >>=10;\
458         U >>=10;\
459         V >>=10;\
460         if (alpha) {\
461             A = rnd;\
462             for (j=0; j<lumFilterSize; j++)\
463                 A += alpSrc[j][i     ] * lumFilter[j];\
464             A >>=19;\
465             if (A&256)\
466                 A = av_clip_uint8(A);\
467         }
468
469 #define YSCALE_YUV_2_RGBX_FULL_C(rnd,alpha) \
470     YSCALE_YUV_2_PACKEDX_FULL_C(rnd>>3,alpha)\
471         Y-= c->yuv2rgb_y_offset;\
472         Y*= c->yuv2rgb_y_coeff;\
473         Y+= rnd;\
474         R= Y + V*c->yuv2rgb_v2r_coeff;\
475         G= Y + V*c->yuv2rgb_v2g_coeff + U*c->yuv2rgb_u2g_coeff;\
476         B= Y +                          U*c->yuv2rgb_u2b_coeff;\
477         if ((R|G|B)&(0xC0000000)) {\
478             if (R>=(256<<22))   R=(256<<22)-1; \
479             else if (R<0)R=0;   \
480             if (G>=(256<<22))   G=(256<<22)-1; \
481             else if (G<0)G=0;   \
482             if (B>=(256<<22))   B=(256<<22)-1; \
483             else if (B<0)B=0;   \
484         }
485
486 #define YSCALE_YUV_2_GRAY16_C \
487     for (i=0; i<(dstW>>1); i++) {\
488         int j;\
489         int Y1 = 1<<18;\
490         int Y2 = 1<<18;\
491         int U  = 1<<18;\
492         int V  = 1<<18;\
493         \
494         const int i2= 2*i;\
495         \
496         for (j=0; j<lumFilterSize; j++) {\
497             Y1 += lumSrc[j][i2] * lumFilter[j];\
498             Y2 += lumSrc[j][i2+1] * lumFilter[j];\
499         }\
500         Y1>>=11;\
501         Y2>>=11;\
502         if ((Y1|Y2|U|V)&65536) {\
503             if (Y1>65535)   Y1=65535; \
504             else if (Y1<0)Y1=0;   \
505             if (Y2>65535)   Y2=65535; \
506             else if (Y2<0)Y2=0;   \
507         }
508
509 #define YSCALE_YUV_2_RGBX_C(type,alpha) \
510     YSCALE_YUV_2_PACKEDX_C(type,alpha)  /* FIXME fix tables so that clipping is not needed and then use _NOCLIP*/\
511     r = (type *)c->table_rV[V];   \
512     g = (type *)(c->table_gU[U] + c->table_gV[V]); \
513     b = (type *)c->table_bU[U];
514
515 #define YSCALE_YUV_2_PACKED2_C(type,alpha)   \
516     for (i=0; i<(dstW>>1); i++) { \
517         const int i2= 2*i;       \
518         int Y1= (buf0[i2  ]*yalpha1+buf1[i2  ]*yalpha)>>19;           \
519         int Y2= (buf0[i2+1]*yalpha1+buf1[i2+1]*yalpha)>>19;           \
520         int U= (uvbuf0[i     ]*uvalpha1+uvbuf1[i     ]*uvalpha)>>19;  \
521         int V= (uvbuf0[i+VOFW]*uvalpha1+uvbuf1[i+VOFW]*uvalpha)>>19;  \
522         type av_unused *r, *b, *g;                                    \
523         int av_unused A1, A2;                                         \
524         if (alpha) {\
525             A1= (abuf0[i2  ]*yalpha1+abuf1[i2  ]*yalpha)>>19;         \
526             A2= (abuf0[i2+1]*yalpha1+abuf1[i2+1]*yalpha)>>19;         \
527         }
528
529 #define YSCALE_YUV_2_GRAY16_2_C   \
530     for (i=0; i<(dstW>>1); i++) { \
531         const int i2= 2*i;       \
532         int Y1= (buf0[i2  ]*yalpha1+buf1[i2  ]*yalpha)>>11;           \
533         int Y2= (buf0[i2+1]*yalpha1+buf1[i2+1]*yalpha)>>11;
534
535 #define YSCALE_YUV_2_RGB2_C(type,alpha) \
536     YSCALE_YUV_2_PACKED2_C(type,alpha)\
537     r = (type *)c->table_rV[V];\
538     g = (type *)(c->table_gU[U] + c->table_gV[V]);\
539     b = (type *)c->table_bU[U];
540
541 #define YSCALE_YUV_2_PACKED1_C(type,alpha) \
542     for (i=0; i<(dstW>>1); i++) {\
543         const int i2= 2*i;\
544         int Y1= buf0[i2  ]>>7;\
545         int Y2= buf0[i2+1]>>7;\
546         int U= (uvbuf1[i     ])>>7;\
547         int V= (uvbuf1[i+VOFW])>>7;\
548         type av_unused *r, *b, *g;\
549         int av_unused A1, A2;\
550         if (alpha) {\
551             A1= abuf0[i2  ]>>7;\
552             A2= abuf0[i2+1]>>7;\
553         }
554
555 #define YSCALE_YUV_2_GRAY16_1_C \
556     for (i=0; i<(dstW>>1); i++) {\
557         const int i2= 2*i;\
558         int Y1= buf0[i2  ]<<1;\
559         int Y2= buf0[i2+1]<<1;
560
561 #define YSCALE_YUV_2_RGB1_C(type,alpha) \
562     YSCALE_YUV_2_PACKED1_C(type,alpha)\
563     r = (type *)c->table_rV[V];\
564     g = (type *)(c->table_gU[U] + c->table_gV[V]);\
565     b = (type *)c->table_bU[U];
566
567 #define YSCALE_YUV_2_PACKED1B_C(type,alpha) \
568     for (i=0; i<(dstW>>1); i++) {\
569         const int i2= 2*i;\
570         int Y1= buf0[i2  ]>>7;\
571         int Y2= buf0[i2+1]>>7;\
572         int U= (uvbuf0[i     ] + uvbuf1[i     ])>>8;\
573         int V= (uvbuf0[i+VOFW] + uvbuf1[i+VOFW])>>8;\
574         type av_unused *r, *b, *g;\
575         int av_unused A1, A2;\
576         if (alpha) {\
577             A1= abuf0[i2  ]>>7;\
578             A2= abuf0[i2+1]>>7;\
579         }
580
581 #define YSCALE_YUV_2_RGB1B_C(type,alpha) \
582     YSCALE_YUV_2_PACKED1B_C(type,alpha)\
583     r = (type *)c->table_rV[V];\
584     g = (type *)(c->table_gU[U] + c->table_gV[V]);\
585     b = (type *)c->table_bU[U];
586
587 #define YSCALE_YUV_2_MONO2_C \
588     const uint8_t * const d128=dither_8x8_220[y&7];\
589     uint8_t *g= c->table_gU[128] + c->table_gV[128];\
590     for (i=0; i<dstW-7; i+=8) {\
591         int acc;\
592         acc =       g[((buf0[i  ]*yalpha1+buf1[i  ]*yalpha)>>19) + d128[0]];\
593         acc+= acc + g[((buf0[i+1]*yalpha1+buf1[i+1]*yalpha)>>19) + d128[1]];\
594         acc+= acc + g[((buf0[i+2]*yalpha1+buf1[i+2]*yalpha)>>19) + d128[2]];\
595         acc+= acc + g[((buf0[i+3]*yalpha1+buf1[i+3]*yalpha)>>19) + d128[3]];\
596         acc+= acc + g[((buf0[i+4]*yalpha1+buf1[i+4]*yalpha)>>19) + d128[4]];\
597         acc+= acc + g[((buf0[i+5]*yalpha1+buf1[i+5]*yalpha)>>19) + d128[5]];\
598         acc+= acc + g[((buf0[i+6]*yalpha1+buf1[i+6]*yalpha)>>19) + d128[6]];\
599         acc+= acc + g[((buf0[i+7]*yalpha1+buf1[i+7]*yalpha)>>19) + d128[7]];\
600         ((uint8_t*)dest)[0]= c->dstFormat == PIX_FMT_MONOBLACK ? acc : ~acc;\
601         dest++;\
602     }
603
604 #define YSCALE_YUV_2_MONOX_C \
605     const uint8_t * const d128=dither_8x8_220[y&7];\
606     uint8_t *g= c->table_gU[128] + c->table_gV[128];\
607     int acc=0;\
608     for (i=0; i<dstW-1; i+=2) {\
609         int j;\
610         int Y1=1<<18;\
611         int Y2=1<<18;\
612 \
613         for (j=0; j<lumFilterSize; j++) {\
614             Y1 += lumSrc[j][i] * lumFilter[j];\
615             Y2 += lumSrc[j][i+1] * lumFilter[j];\
616         }\
617         Y1>>=19;\
618         Y2>>=19;\
619         if ((Y1|Y2)&256) {\
620             if (Y1>255)   Y1=255;\
621             else if (Y1<0)Y1=0;\
622             if (Y2>255)   Y2=255;\
623             else if (Y2<0)Y2=0;\
624         }\
625         acc+= acc + g[Y1+d128[(i+0)&7]];\
626         acc+= acc + g[Y2+d128[(i+1)&7]];\
627         if ((i&7)==6) {\
628             ((uint8_t*)dest)[0]= c->dstFormat == PIX_FMT_MONOBLACK ? acc : ~acc;\
629             dest++;\
630         }\
631     }
632
633 #define YSCALE_YUV_2_ANYRGB_C(func, func2, func_g16, func_monoblack)\
634     switch(c->dstFormat) {\
635     case PIX_FMT_RGB48BE:\
636     case PIX_FMT_RGB48LE:\
637         func(uint8_t,0)\
638             ((uint8_t*)dest)[ 0]= r[Y1];\
639             ((uint8_t*)dest)[ 1]= r[Y1];\
640             ((uint8_t*)dest)[ 2]= g[Y1];\
641             ((uint8_t*)dest)[ 3]= g[Y1];\
642             ((uint8_t*)dest)[ 4]= b[Y1];\
643             ((uint8_t*)dest)[ 5]= b[Y1];\
644             ((uint8_t*)dest)[ 6]= r[Y2];\
645             ((uint8_t*)dest)[ 7]= r[Y2];\
646             ((uint8_t*)dest)[ 8]= g[Y2];\
647             ((uint8_t*)dest)[ 9]= g[Y2];\
648             ((uint8_t*)dest)[10]= b[Y2];\
649             ((uint8_t*)dest)[11]= b[Y2];\
650             dest+=12;\
651         }\
652         break;\
653     case PIX_FMT_BGR48BE:\
654     case PIX_FMT_BGR48LE:\
655         func(uint8_t,0)\
656             ((uint8_t*)dest)[ 0] = ((uint8_t*)dest)[ 1] = b[Y1];\
657             ((uint8_t*)dest)[ 2] = ((uint8_t*)dest)[ 3] = g[Y1];\
658             ((uint8_t*)dest)[ 4] = ((uint8_t*)dest)[ 5] = r[Y1];\
659             ((uint8_t*)dest)[ 6] = ((uint8_t*)dest)[ 7] = b[Y2];\
660             ((uint8_t*)dest)[ 8] = ((uint8_t*)dest)[ 9] = g[Y2];\
661             ((uint8_t*)dest)[10] = ((uint8_t*)dest)[11] = r[Y2];\
662             dest+=12;\
663         }\
664         break;\
665     case PIX_FMT_RGBA:\
666     case PIX_FMT_BGRA:\
667         if (CONFIG_SMALL) {\
668             int needAlpha = CONFIG_SWSCALE_ALPHA && c->alpPixBuf;\
669             func(uint32_t,needAlpha)\
670                 ((uint32_t*)dest)[i2+0]= r[Y1] + g[Y1] + b[Y1] + (needAlpha ? (A1<<24) : 0);\
671                 ((uint32_t*)dest)[i2+1]= r[Y2] + g[Y2] + b[Y2] + (needAlpha ? (A2<<24) : 0);\
672             }\
673         } else {\
674             if (CONFIG_SWSCALE_ALPHA && c->alpPixBuf) {\
675                 func(uint32_t,1)\
676                     ((uint32_t*)dest)[i2+0]= r[Y1] + g[Y1] + b[Y1] + (A1<<24);\
677                     ((uint32_t*)dest)[i2+1]= r[Y2] + g[Y2] + b[Y2] + (A2<<24);\
678                 }\
679             } else {\
680                 func(uint32_t,0)\
681                     ((uint32_t*)dest)[i2+0]= r[Y1] + g[Y1] + b[Y1];\
682                     ((uint32_t*)dest)[i2+1]= r[Y2] + g[Y2] + b[Y2];\
683                 }\
684             }\
685         }\
686         break;\
687     case PIX_FMT_ARGB:\
688     case PIX_FMT_ABGR:\
689         if (CONFIG_SMALL) {\
690             int needAlpha = CONFIG_SWSCALE_ALPHA && c->alpPixBuf;\
691             func(uint32_t,needAlpha)\
692                 ((uint32_t*)dest)[i2+0]= r[Y1] + g[Y1] + b[Y1] + (needAlpha ? A1 : 0);\
693                 ((uint32_t*)dest)[i2+1]= r[Y2] + g[Y2] + b[Y2] + (needAlpha ? A2 : 0);\
694             }\
695         } else {\
696             if (CONFIG_SWSCALE_ALPHA && c->alpPixBuf) {\
697                 func(uint32_t,1)\
698                     ((uint32_t*)dest)[i2+0]= r[Y1] + g[Y1] + b[Y1] + A1;\
699                     ((uint32_t*)dest)[i2+1]= r[Y2] + g[Y2] + b[Y2] + A2;\
700                 }\
701             } else {\
702                 func(uint32_t,0)\
703                     ((uint32_t*)dest)[i2+0]= r[Y1] + g[Y1] + b[Y1];\
704                     ((uint32_t*)dest)[i2+1]= r[Y2] + g[Y2] + b[Y2];\
705                 }\
706             }\
707         }                \
708         break;\
709     case PIX_FMT_RGB24:\
710         func(uint8_t,0)\
711             ((uint8_t*)dest)[0]= r[Y1];\
712             ((uint8_t*)dest)[1]= g[Y1];\
713             ((uint8_t*)dest)[2]= b[Y1];\
714             ((uint8_t*)dest)[3]= r[Y2];\
715             ((uint8_t*)dest)[4]= g[Y2];\
716             ((uint8_t*)dest)[5]= b[Y2];\
717             dest+=6;\
718         }\
719         break;\
720     case PIX_FMT_BGR24:\
721         func(uint8_t,0)\
722             ((uint8_t*)dest)[0]= b[Y1];\
723             ((uint8_t*)dest)[1]= g[Y1];\
724             ((uint8_t*)dest)[2]= r[Y1];\
725             ((uint8_t*)dest)[3]= b[Y2];\
726             ((uint8_t*)dest)[4]= g[Y2];\
727             ((uint8_t*)dest)[5]= r[Y2];\
728             dest+=6;\
729         }\
730         break;\
731     case PIX_FMT_RGB565BE:\
732     case PIX_FMT_RGB565LE:\
733     case PIX_FMT_BGR565BE:\
734     case PIX_FMT_BGR565LE:\
735         {\
736             const int dr1= dither_2x2_8[y&1    ][0];\
737             const int dg1= dither_2x2_4[y&1    ][0];\
738             const int db1= dither_2x2_8[(y&1)^1][0];\
739             const int dr2= dither_2x2_8[y&1    ][1];\
740             const int dg2= dither_2x2_4[y&1    ][1];\
741             const int db2= dither_2x2_8[(y&1)^1][1];\
742             func(uint16_t,0)\
743                 ((uint16_t*)dest)[i2+0]= r[Y1+dr1] + g[Y1+dg1] + b[Y1+db1];\
744                 ((uint16_t*)dest)[i2+1]= r[Y2+dr2] + g[Y2+dg2] + b[Y2+db2];\
745             }\
746         }\
747         break;\
748     case PIX_FMT_RGB555BE:\
749     case PIX_FMT_RGB555LE:\
750     case PIX_FMT_BGR555BE:\
751     case PIX_FMT_BGR555LE:\
752         {\
753             const int dr1= dither_2x2_8[y&1    ][0];\
754             const int dg1= dither_2x2_8[y&1    ][1];\
755             const int db1= dither_2x2_8[(y&1)^1][0];\
756             const int dr2= dither_2x2_8[y&1    ][1];\
757             const int dg2= dither_2x2_8[y&1    ][0];\
758             const int db2= dither_2x2_8[(y&1)^1][1];\
759             func(uint16_t,0)\
760                 ((uint16_t*)dest)[i2+0]= r[Y1+dr1] + g[Y1+dg1] + b[Y1+db1];\
761                 ((uint16_t*)dest)[i2+1]= r[Y2+dr2] + g[Y2+dg2] + b[Y2+db2];\
762             }\
763         }\
764         break;\
765     case PIX_FMT_RGB444BE:\
766     case PIX_FMT_RGB444LE:\
767     case PIX_FMT_BGR444BE:\
768     case PIX_FMT_BGR444LE:\
769         {\
770             const int dr1= dither_4x4_16[y&3    ][0];\
771             const int dg1= dither_4x4_16[y&3    ][1];\
772             const int db1= dither_4x4_16[(y&3)^3][0];\
773             const int dr2= dither_4x4_16[y&3    ][1];\
774             const int dg2= dither_4x4_16[y&3    ][0];\
775             const int db2= dither_4x4_16[(y&3)^3][1];\
776             func(uint16_t,0)\
777                 ((uint16_t*)dest)[i2+0]= r[Y1+dr1] + g[Y1+dg1] + b[Y1+db1];\
778                 ((uint16_t*)dest)[i2+1]= r[Y2+dr2] + g[Y2+dg2] + b[Y2+db2];\
779             }\
780         }\
781         break;\
782     case PIX_FMT_RGB8:\
783     case PIX_FMT_BGR8:\
784         {\
785             const uint8_t * const d64= dither_8x8_73[y&7];\
786             const uint8_t * const d32= dither_8x8_32[y&7];\
787             func(uint8_t,0)\
788                 ((uint8_t*)dest)[i2+0]= r[Y1+d32[(i2+0)&7]] + g[Y1+d32[(i2+0)&7]] + b[Y1+d64[(i2+0)&7]];\
789                 ((uint8_t*)dest)[i2+1]= r[Y2+d32[(i2+1)&7]] + g[Y2+d32[(i2+1)&7]] + b[Y2+d64[(i2+1)&7]];\
790             }\
791         }\
792         break;\
793     case PIX_FMT_RGB4:\
794     case PIX_FMT_BGR4:\
795         {\
796             const uint8_t * const d64= dither_8x8_73 [y&7];\
797             const uint8_t * const d128=dither_8x8_220[y&7];\
798             func(uint8_t,0)\
799                 ((uint8_t*)dest)[i]= r[Y1+d128[(i2+0)&7]] + g[Y1+d64[(i2+0)&7]] + b[Y1+d128[(i2+0)&7]]\
800                                  + ((r[Y2+d128[(i2+1)&7]] + g[Y2+d64[(i2+1)&7]] + b[Y2+d128[(i2+1)&7]])<<4);\
801             }\
802         }\
803         break;\
804     case PIX_FMT_RGB4_BYTE:\
805     case PIX_FMT_BGR4_BYTE:\
806         {\
807             const uint8_t * const d64= dither_8x8_73 [y&7];\
808             const uint8_t * const d128=dither_8x8_220[y&7];\
809             func(uint8_t,0)\
810                 ((uint8_t*)dest)[i2+0]= r[Y1+d128[(i2+0)&7]] + g[Y1+d64[(i2+0)&7]] + b[Y1+d128[(i2+0)&7]];\
811                 ((uint8_t*)dest)[i2+1]= r[Y2+d128[(i2+1)&7]] + g[Y2+d64[(i2+1)&7]] + b[Y2+d128[(i2+1)&7]];\
812             }\
813         }\
814         break;\
815     case PIX_FMT_MONOBLACK:\
816     case PIX_FMT_MONOWHITE:\
817         {\
818             func_monoblack\
819         }\
820         break;\
821     case PIX_FMT_YUYV422:\
822         func2\
823             ((uint8_t*)dest)[2*i2+0]= Y1;\
824             ((uint8_t*)dest)[2*i2+1]= U;\
825             ((uint8_t*)dest)[2*i2+2]= Y2;\
826             ((uint8_t*)dest)[2*i2+3]= V;\
827         }                \
828         break;\
829     case PIX_FMT_UYVY422:\
830         func2\
831             ((uint8_t*)dest)[2*i2+0]= U;\
832             ((uint8_t*)dest)[2*i2+1]= Y1;\
833             ((uint8_t*)dest)[2*i2+2]= V;\
834             ((uint8_t*)dest)[2*i2+3]= Y2;\
835         }                \
836         break;\
837     case PIX_FMT_GRAY16BE:\
838         func_g16\
839             ((uint8_t*)dest)[2*i2+0]= Y1>>8;\
840             ((uint8_t*)dest)[2*i2+1]= Y1;\
841             ((uint8_t*)dest)[2*i2+2]= Y2>>8;\
842             ((uint8_t*)dest)[2*i2+3]= Y2;\
843         }                \
844         break;\
845     case PIX_FMT_GRAY16LE:\
846         func_g16\
847             ((uint8_t*)dest)[2*i2+0]= Y1;\
848             ((uint8_t*)dest)[2*i2+1]= Y1>>8;\
849             ((uint8_t*)dest)[2*i2+2]= Y2;\
850             ((uint8_t*)dest)[2*i2+3]= Y2>>8;\
851         }                \
852         break;\
853     }
854
855 static inline void yuv2packedXinC(SwsContext *c, const int16_t *lumFilter, const int16_t **lumSrc, int lumFilterSize,
856                                   const int16_t *chrFilter, const int16_t **chrSrc, int chrFilterSize,
857                                   const int16_t **alpSrc, uint8_t *dest, int dstW, int y)
858 {
859     int i;
860     YSCALE_YUV_2_ANYRGB_C(YSCALE_YUV_2_RGBX_C, YSCALE_YUV_2_PACKEDX_C(void,0), YSCALE_YUV_2_GRAY16_C, YSCALE_YUV_2_MONOX_C)
861 }
862
863 static inline void yuv2rgbXinC_full(SwsContext *c, const int16_t *lumFilter, const int16_t **lumSrc, int lumFilterSize,
864                                     const int16_t *chrFilter, const int16_t **chrSrc, int chrFilterSize,
865                                     const int16_t **alpSrc, uint8_t *dest, int dstW, int y)
866 {
867     int i;
868     int step= c->dstFormatBpp/8;
869     int aidx= 3;
870
871     switch(c->dstFormat) {
872     case PIX_FMT_ARGB:
873         dest++;
874         aidx= 0;
875     case PIX_FMT_RGB24:
876         aidx--;
877     case PIX_FMT_RGBA:
878         if (CONFIG_SMALL) {
879             int needAlpha = CONFIG_SWSCALE_ALPHA && c->alpPixBuf;
880             YSCALE_YUV_2_RGBX_FULL_C(1<<21, needAlpha)
881                 dest[aidx]= needAlpha ? A : 255;
882                 dest[0]= R>>22;
883                 dest[1]= G>>22;
884                 dest[2]= B>>22;
885                 dest+= step;
886             }
887         } else {
888             if (CONFIG_SWSCALE_ALPHA && c->alpPixBuf) {
889                 YSCALE_YUV_2_RGBX_FULL_C(1<<21, 1)
890                     dest[aidx]= A;
891                     dest[0]= R>>22;
892                     dest[1]= G>>22;
893                     dest[2]= B>>22;
894                     dest+= step;
895                 }
896             } else {
897                 YSCALE_YUV_2_RGBX_FULL_C(1<<21, 0)
898                     dest[aidx]= 255;
899                     dest[0]= R>>22;
900                     dest[1]= G>>22;
901                     dest[2]= B>>22;
902                     dest+= step;
903                 }
904             }
905         }
906         break;
907     case PIX_FMT_ABGR:
908         dest++;
909         aidx= 0;
910     case PIX_FMT_BGR24:
911         aidx--;
912     case PIX_FMT_BGRA:
913         if (CONFIG_SMALL) {
914             int needAlpha = CONFIG_SWSCALE_ALPHA && c->alpPixBuf;
915             YSCALE_YUV_2_RGBX_FULL_C(1<<21, needAlpha)
916                 dest[aidx]= needAlpha ? A : 255;
917                 dest[0]= B>>22;
918                 dest[1]= G>>22;
919                 dest[2]= R>>22;
920                 dest+= step;
921             }
922         } else {
923             if (CONFIG_SWSCALE_ALPHA && c->alpPixBuf) {
924                 YSCALE_YUV_2_RGBX_FULL_C(1<<21, 1)
925                     dest[aidx]= A;
926                     dest[0]= B>>22;
927                     dest[1]= G>>22;
928                     dest[2]= R>>22;
929                     dest+= step;
930                 }
931             } else {
932                 YSCALE_YUV_2_RGBX_FULL_C(1<<21, 0)
933                     dest[aidx]= 255;
934                     dest[0]= B>>22;
935                     dest[1]= G>>22;
936                     dest[2]= R>>22;
937                     dest+= step;
938                 }
939             }
940         }
941         break;
942     default:
943         assert(0);
944     }
945 }
946
947 static void fillPlane(uint8_t* plane, int stride, int width, int height, int y, uint8_t val)
948 {
949     int i;
950     uint8_t *ptr = plane + stride*y;
951     for (i=0; i<height; i++) {
952         memset(ptr, val, width);
953         ptr += stride;
954     }
955 }
956
957 static inline void rgb48ToY(uint8_t *dst, const uint8_t *src, long width,
958                             uint32_t *unused)
959 {
960     int i;
961     for (i = 0; i < width; i++) {
962         int r = src[i*6+0];
963         int g = src[i*6+2];
964         int b = src[i*6+4];
965
966         dst[i] = (RY*r + GY*g + BY*b + (33<<(RGB2YUV_SHIFT-1))) >> RGB2YUV_SHIFT;
967     }
968 }
969
970 static inline void rgb48ToUV(uint8_t *dstU, uint8_t *dstV,
971                              const uint8_t *src1, const uint8_t *src2,
972                              long width, uint32_t *unused)
973 {
974     int i;
975     assert(src1==src2);
976     for (i = 0; i < width; i++) {
977         int r = src1[6*i + 0];
978         int g = src1[6*i + 2];
979         int b = src1[6*i + 4];
980
981         dstU[i] = (RU*r + GU*g + BU*b + (257<<(RGB2YUV_SHIFT-1))) >> RGB2YUV_SHIFT;
982         dstV[i] = (RV*r + GV*g + BV*b + (257<<(RGB2YUV_SHIFT-1))) >> RGB2YUV_SHIFT;
983     }
984 }
985
986 static inline void rgb48ToUV_half(uint8_t *dstU, uint8_t *dstV,
987                                   const uint8_t *src1, const uint8_t *src2,
988                                   long width, uint32_t *unused)
989 {
990     int i;
991     assert(src1==src2);
992     for (i = 0; i < width; i++) {
993         int r= src1[12*i + 0] + src1[12*i + 6];
994         int g= src1[12*i + 2] + src1[12*i + 8];
995         int b= src1[12*i + 4] + src1[12*i + 10];
996
997         dstU[i]= (RU*r + GU*g + BU*b + (257<<RGB2YUV_SHIFT)) >> (RGB2YUV_SHIFT+1);
998         dstV[i]= (RV*r + GV*g + BV*b + (257<<RGB2YUV_SHIFT)) >> (RGB2YUV_SHIFT+1);
999     }
1000 }
1001
1002 static inline void bgr48ToY(uint8_t *dst, const uint8_t *src, long width,
1003                             uint32_t *unused)
1004 {
1005     int i;
1006     for (i = 0; i < width; i++) {
1007         int b = src[i*6+0];
1008         int g = src[i*6+2];
1009         int r = src[i*6+4];
1010
1011         dst[i] = (RY*r + GY*g + BY*b + (33<<(RGB2YUV_SHIFT-1))) >> RGB2YUV_SHIFT;
1012     }
1013 }
1014
1015 static inline void bgr48ToUV(uint8_t *dstU, uint8_t *dstV,
1016                              const uint8_t *src1, const uint8_t *src2,
1017                              long width, uint32_t *unused)
1018 {
1019     int i;
1020     for (i = 0; i < width; i++) {
1021         int b = src1[6*i + 0];
1022         int g = src1[6*i + 2];
1023         int r = src1[6*i + 4];
1024
1025         dstU[i] = (RU*r + GU*g + BU*b + (257<<(RGB2YUV_SHIFT-1))) >> RGB2YUV_SHIFT;
1026         dstV[i] = (RV*r + GV*g + BV*b + (257<<(RGB2YUV_SHIFT-1))) >> RGB2YUV_SHIFT;
1027     }
1028 }
1029
1030 static inline void bgr48ToUV_half(uint8_t *dstU, uint8_t *dstV,
1031                                   const uint8_t *src1, const uint8_t *src2,
1032                                   long width, uint32_t *unused)
1033 {
1034     int i;
1035     for (i = 0; i < width; i++) {
1036         int b= src1[12*i + 0] + src1[12*i + 6];
1037         int g= src1[12*i + 2] + src1[12*i + 8];
1038         int r= src1[12*i + 4] + src1[12*i + 10];
1039
1040         dstU[i]= (RU*r + GU*g + BU*b + (257<<RGB2YUV_SHIFT)) >> (RGB2YUV_SHIFT+1);
1041         dstV[i]= (RV*r + GV*g + BV*b + (257<<RGB2YUV_SHIFT)) >> (RGB2YUV_SHIFT+1);
1042     }
1043 }
1044
1045 #define BGR2Y(type, name, shr, shg, shb, maskr, maskg, maskb, RY, GY, BY, S)\
1046 static inline void name(uint8_t *dst, const uint8_t *src, long width, uint32_t *unused)\
1047 {\
1048     int i;\
1049     for (i=0; i<width; i++) {\
1050         int b= (((const type*)src)[i]>>shb)&maskb;\
1051         int g= (((const type*)src)[i]>>shg)&maskg;\
1052         int r= (((const type*)src)[i]>>shr)&maskr;\
1053 \
1054         dst[i]= (((RY)*r + (GY)*g + (BY)*b + (33<<((S)-1)))>>(S));\
1055     }\
1056 }
1057
1058 BGR2Y(uint32_t, bgr32ToY,16, 0, 0, 0x00FF, 0xFF00, 0x00FF, RY<< 8, GY   , BY<< 8, RGB2YUV_SHIFT+8)
1059 BGR2Y(uint32_t,bgr321ToY,16,16, 0, 0xFF00, 0x00FF, 0xFF00, RY    , GY<<8, BY    , RGB2YUV_SHIFT+8)
1060 BGR2Y(uint32_t, rgb32ToY, 0, 0,16, 0x00FF, 0xFF00, 0x00FF, RY<< 8, GY   , BY<< 8, RGB2YUV_SHIFT+8)
1061 BGR2Y(uint32_t,rgb321ToY, 0,16,16, 0xFF00, 0x00FF, 0xFF00, RY    , GY<<8, BY    , RGB2YUV_SHIFT+8)
1062 BGR2Y(uint16_t, bgr16ToY, 0, 0, 0, 0x001F, 0x07E0, 0xF800, RY<<11, GY<<5, BY    , RGB2YUV_SHIFT+8)
1063 BGR2Y(uint16_t, bgr15ToY, 0, 0, 0, 0x001F, 0x03E0, 0x7C00, RY<<10, GY<<5, BY    , RGB2YUV_SHIFT+7)
1064 BGR2Y(uint16_t, rgb16ToY, 0, 0, 0, 0xF800, 0x07E0, 0x001F, RY    , GY<<5, BY<<11, RGB2YUV_SHIFT+8)
1065 BGR2Y(uint16_t, rgb15ToY, 0, 0, 0, 0x7C00, 0x03E0, 0x001F, RY    , GY<<5, BY<<10, RGB2YUV_SHIFT+7)
1066
1067 static inline void abgrToA(uint8_t *dst, const uint8_t *src, long width, uint32_t *unused)
1068 {
1069     int i;
1070     for (i=0; i<width; i++) {
1071         dst[i]= src[4*i];
1072     }
1073 }
1074
1075 #define BGR2UV(type, name, shr, shg, shb, shp, maskr, maskg, maskb, RU, GU, BU, RV, GV, BV, S) \
1076 static inline void name(uint8_t *dstU, uint8_t *dstV, const uint8_t *src, const uint8_t *dummy, long width, uint32_t *unused)\
1077 {\
1078     int i;\
1079     for (i=0; i<width; i++) {\
1080         int b= ((((const type*)src)[i]>>shp)&maskb)>>shb;\
1081         int g= ((((const type*)src)[i]>>shp)&maskg)>>shg;\
1082         int r= ((((const type*)src)[i]>>shp)&maskr)>>shr;\
1083 \
1084         dstU[i]= ((RU)*r + (GU)*g + (BU)*b + (257<<((S)-1)))>>(S);\
1085         dstV[i]= ((RV)*r + (GV)*g + (BV)*b + (257<<((S)-1)))>>(S);\
1086     }\
1087 }\
1088 static inline void name ## _half(uint8_t *dstU, uint8_t *dstV, const uint8_t *src, const uint8_t *dummy, long width, uint32_t *unused)\
1089 {\
1090     int i;\
1091     for (i=0; i<width; i++) {\
1092         int pix0= ((const type*)src)[2*i+0]>>shp;\
1093         int pix1= ((const type*)src)[2*i+1]>>shp;\
1094         int g= (pix0&~(maskr|maskb))+(pix1&~(maskr|maskb));\
1095         int b= ((pix0+pix1-g)&(maskb|(2*maskb)))>>shb;\
1096         int r= ((pix0+pix1-g)&(maskr|(2*maskr)))>>shr;\
1097         g&= maskg|(2*maskg);\
1098 \
1099         g>>=shg;\
1100 \
1101         dstU[i]= ((RU)*r + (GU)*g + (BU)*b + (257<<(S)))>>((S)+1);\
1102         dstV[i]= ((RV)*r + (GV)*g + (BV)*b + (257<<(S)))>>((S)+1);\
1103     }\
1104 }
1105
1106 BGR2UV(uint32_t, bgr32ToUV,16, 0, 0, 0, 0xFF0000, 0xFF00,   0x00FF, RU<< 8, GU   , BU<< 8, RV<< 8, GV   , BV<< 8, RGB2YUV_SHIFT+8)
1107 BGR2UV(uint32_t,bgr321ToUV,16, 0, 0, 8, 0xFF0000, 0xFF00,   0x00FF, RU<< 8, GU   , BU<< 8, RV<< 8, GV   , BV<< 8, RGB2YUV_SHIFT+8)
1108 BGR2UV(uint32_t, rgb32ToUV, 0, 0,16, 0,   0x00FF, 0xFF00, 0xFF0000, RU<< 8, GU   , BU<< 8, RV<< 8, GV   , BV<< 8, RGB2YUV_SHIFT+8)
1109 BGR2UV(uint32_t,rgb321ToUV, 0, 0,16, 8,   0x00FF, 0xFF00, 0xFF0000, RU<< 8, GU   , BU<< 8, RV<< 8, GV   , BV<< 8, RGB2YUV_SHIFT+8)
1110 BGR2UV(uint16_t, bgr16ToUV, 0, 0, 0, 0,   0x001F, 0x07E0,   0xF800, RU<<11, GU<<5, BU    , RV<<11, GV<<5, BV    , RGB2YUV_SHIFT+8)
1111 BGR2UV(uint16_t, bgr15ToUV, 0, 0, 0, 0,   0x001F, 0x03E0,   0x7C00, RU<<10, GU<<5, BU    , RV<<10, GV<<5, BV    , RGB2YUV_SHIFT+7)
1112 BGR2UV(uint16_t, rgb16ToUV, 0, 0, 0, 0,   0xF800, 0x07E0,   0x001F, RU    , GU<<5, BU<<11, RV    , GV<<5, BV<<11, RGB2YUV_SHIFT+8)
1113 BGR2UV(uint16_t, rgb15ToUV, 0, 0, 0, 0,   0x7C00, 0x03E0,   0x001F, RU    , GU<<5, BU<<10, RV    , GV<<5, BV<<10, RGB2YUV_SHIFT+7)
1114
1115 static inline void palToY(uint8_t *dst, const uint8_t *src, long width, uint32_t *pal)
1116 {
1117     int i;
1118     for (i=0; i<width; i++) {
1119         int d= src[i];
1120
1121         dst[i]= pal[d] & 0xFF;
1122     }
1123 }
1124
1125 static inline void palToUV(uint8_t *dstU, uint8_t *dstV,
1126                            const uint8_t *src1, const uint8_t *src2,
1127                            long width, uint32_t *pal)
1128 {
1129     int i;
1130     assert(src1 == src2);
1131     for (i=0; i<width; i++) {
1132         int p= pal[src1[i]];
1133
1134         dstU[i]= p>>8;
1135         dstV[i]= p>>16;
1136     }
1137 }
1138
1139 static inline void monowhite2Y(uint8_t *dst, const uint8_t *src, long width, uint32_t *unused)
1140 {
1141     int i, j;
1142     for (i=0; i<width/8; i++) {
1143         int d= ~src[i];
1144         for(j=0; j<8; j++)
1145             dst[8*i+j]= ((d>>(7-j))&1)*255;
1146     }
1147 }
1148
1149 static inline void monoblack2Y(uint8_t *dst, const uint8_t *src, long width, uint32_t *unused)
1150 {
1151     int i, j;
1152     for (i=0; i<width/8; i++) {
1153         int d= src[i];
1154         for(j=0; j<8; j++)
1155             dst[8*i+j]= ((d>>(7-j))&1)*255;
1156     }
1157 }
1158
1159 //Note: we have C, MMX, MMX2, 3DNOW versions, there is no 3DNOW+MMX2 one
1160 //Plain C versions
1161 #if CONFIG_RUNTIME_CPUDETECT
1162 #  define COMPILE_C 1
1163 #  if   ARCH_X86
1164 #    define COMPILE_MMX     HAVE_MMX
1165 #    define COMPILE_MMX2    HAVE_MMX2
1166 #    define COMPILE_3DNOW   HAVE_AMD3DNOW
1167 #  elif ARCH_PPC
1168 #    define COMPILE_ALTIVEC HAVE_ALTIVEC
1169 #  endif
1170 #else /* CONFIG_RUNTIME_CPUDETECT */
1171 #  if   ARCH_X86
1172 #    if   HAVE_MMX2
1173 #      define COMPILE_MMX2  1
1174 #    elif HAVE_AMD3DNOW
1175 #      define COMPILE_3DNOW 1
1176 #    elif HAVE_MMX
1177 #      define COMPILE_MMX   1
1178 #    else
1179 #      define COMPILE_C     1
1180 #    endif
1181 #  elif ARCH_PPC && HAVE_ALTIVEC
1182 #    define COMPILE_ALTIVEC 1
1183 #  else
1184 #    define COMPILE_C       1
1185 #  endif
1186 #endif
1187
1188 #ifndef COMPILE_C
1189 #  define COMPILE_C 0
1190 #endif
1191 #ifndef COMPILE_MMX
1192 #  define COMPILE_MMX 0
1193 #endif
1194 #ifndef COMPILE_MMX2
1195 #  define COMPILE_MMX2 0
1196 #endif
1197 #ifndef COMPILE_3DNOW
1198 #  define COMPILE_3DNOW 0
1199 #endif
1200 #ifndef COMPILE_ALTIVEC
1201 #  define COMPILE_ALTIVEC 0
1202 #endif
1203
1204 #define COMPILE_TEMPLATE_MMX 0
1205 #define COMPILE_TEMPLATE_MMX2 0
1206 #define COMPILE_TEMPLATE_AMD3DNOW 0
1207 #define COMPILE_TEMPLATE_ALTIVEC 0
1208
1209 #include "swscale_template.c"
1210
1211 #if COMPILE_ALTIVEC
1212 #undef RENAME
1213 #undef COMPILE_TEMPLATE_ALTIVEC
1214 #define COMPILE_TEMPLATE_ALTIVEC 1
1215 #define RENAME(a) a ## _altivec
1216 #include "ppc/swscale_template.c"
1217 #endif
1218
1219 #if ARCH_X86
1220
1221 //MMX versions
1222 #if COMPILE_MMX
1223 #undef RENAME
1224 #undef COMPILE_TEMPLATE_MMX
1225 #undef COMPILE_TEMPLATE_MMX2
1226 #undef COMPILE_TEMPLATE_AMD3DNOW
1227 #define COMPILE_TEMPLATE_MMX 1
1228 #define COMPILE_TEMPLATE_MMX2 0
1229 #define COMPILE_TEMPLATE_AMD3DNOW 0
1230 #define RENAME(a) a ## _MMX
1231 #include "x86/swscale_template.c"
1232 #endif
1233
1234 //MMX2 versions
1235 #if COMPILE_MMX2
1236 #undef RENAME
1237 #undef COMPILE_TEMPLATE_MMX
1238 #undef COMPILE_TEMPLATE_MMX2
1239 #undef COMPILE_TEMPLATE_AMD3DNOW
1240 #define COMPILE_TEMPLATE_MMX 1
1241 #define COMPILE_TEMPLATE_MMX2 1
1242 #define COMPILE_TEMPLATE_AMD3DNOW 0
1243 #define RENAME(a) a ## _MMX2
1244 #include "x86/swscale_template.c"
1245 #endif
1246
1247 //3DNOW versions
1248 #if COMPILE_3DNOW
1249 #undef RENAME
1250 #undef COMPILE_TEMPLATE_MMX
1251 #undef COMPILE_TEMPLATE_MMX2
1252 #undef COMPILE_TEMPLATE_AMD3DNOW
1253 #define COMPILE_TEMPLATE_MMX 1
1254 #define COMPILE_TEMPLATE_MMX2 0
1255 #define COMPILE_TEMPLATE_AMD3DNOW 1
1256 #define RENAME(a) a ## _3DNow
1257 #include "x86/swscale_template.c"
1258 #endif
1259
1260 #endif //ARCH_X86
1261
1262 SwsFunc ff_getSwsFunc(SwsContext *c)
1263 {
1264     sws_init_swScale_c(c);
1265
1266 #if CONFIG_RUNTIME_CPUDETECT
1267 #if ARCH_X86
1268     // ordered per speed fastest first
1269     if (c->flags & SWS_CPU_CAPS_MMX2) {
1270         sws_init_swScale_MMX2(c);
1271         return swScale_MMX2;
1272     } else if (c->flags & SWS_CPU_CAPS_3DNOW) {
1273         sws_init_swScale_3DNow(c);
1274         return swScale_3DNow;
1275     } else if (c->flags & SWS_CPU_CAPS_MMX) {
1276         sws_init_swScale_MMX(c);
1277         return swScale_MMX;
1278     }
1279
1280 #else
1281 #if COMPILE_ALTIVEC
1282     if (c->flags & SWS_CPU_CAPS_ALTIVEC) {
1283         sws_init_swScale_altivec(c);
1284         return swScale_altivec;
1285     }
1286 #endif
1287 #endif /* ARCH_X86 */
1288 #else //CONFIG_RUNTIME_CPUDETECT
1289 #if   COMPILE_TEMPLATE_MMX2
1290     sws_init_swScale_MMX2(c);
1291     return swScale_MMX2;
1292 #elif COMPILE_TEMPLATE_AMD3DNOW
1293     sws_init_swScale_3DNow(c);
1294     return swScale_3DNow;
1295 #elif COMPILE_TEMPLATE_MMX
1296     sws_init_swScale_MMX(c);
1297     return swScale_MMX;
1298 #elif COMPILE_TEMPLATE_ALTIVEC
1299     sws_init_swScale_altivec(c);
1300     return swScale_altivec;
1301 #endif
1302 #endif //!CONFIG_RUNTIME_CPUDETECT
1303
1304     return swScale_c;
1305 }
1306
1307 static void copyPlane(const uint8_t *src, int srcStride,
1308                       int srcSliceY, int srcSliceH, int width,
1309                       uint8_t *dst, int dstStride)
1310 {
1311     dst += dstStride * srcSliceY;
1312     if (dstStride == srcStride && srcStride > 0) {
1313         memcpy(dst, src, srcSliceH * dstStride);
1314     } else {
1315         int i;
1316         for (i=0; i<srcSliceH; i++) {
1317             memcpy(dst, src, width);
1318             src += srcStride;
1319             dst += dstStride;
1320         }
1321     }
1322 }
1323
1324 static int planarToNv12Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1325                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1326 {
1327     uint8_t *dst = dstParam[1] + dstStride[1]*srcSliceY/2;
1328
1329     copyPlane(src[0], srcStride[0], srcSliceY, srcSliceH, c->srcW,
1330               dstParam[0], dstStride[0]);
1331
1332     if (c->dstFormat == PIX_FMT_NV12)
1333         interleaveBytes(src[1], src[2], dst, c->srcW/2, srcSliceH/2, srcStride[1], srcStride[2], dstStride[0]);
1334     else
1335         interleaveBytes(src[2], src[1], dst, c->srcW/2, srcSliceH/2, srcStride[2], srcStride[1], dstStride[0]);
1336
1337     return srcSliceH;
1338 }
1339
1340 static int planarToYuy2Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1341                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1342 {
1343     uint8_t *dst=dstParam[0] + dstStride[0]*srcSliceY;
1344
1345     yv12toyuy2(src[0], src[1], src[2], dst, c->srcW, srcSliceH, srcStride[0], srcStride[1], dstStride[0]);
1346
1347     return srcSliceH;
1348 }
1349
1350 static int planarToUyvyWrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1351                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1352 {
1353     uint8_t *dst=dstParam[0] + dstStride[0]*srcSliceY;
1354
1355     yv12touyvy(src[0], src[1], src[2], dst, c->srcW, srcSliceH, srcStride[0], srcStride[1], dstStride[0]);
1356
1357     return srcSliceH;
1358 }
1359
1360 static int yuv422pToYuy2Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1361                                 int srcSliceH, uint8_t* dstParam[], int dstStride[])
1362 {
1363     uint8_t *dst=dstParam[0] + dstStride[0]*srcSliceY;
1364
1365     yuv422ptoyuy2(src[0],src[1],src[2],dst,c->srcW,srcSliceH,srcStride[0],srcStride[1],dstStride[0]);
1366
1367     return srcSliceH;
1368 }
1369
1370 static int yuv422pToUyvyWrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1371                                 int srcSliceH, uint8_t* dstParam[], int dstStride[])
1372 {
1373     uint8_t *dst=dstParam[0] + dstStride[0]*srcSliceY;
1374
1375     yuv422ptouyvy(src[0],src[1],src[2],dst,c->srcW,srcSliceH,srcStride[0],srcStride[1],dstStride[0]);
1376
1377     return srcSliceH;
1378 }
1379
1380 static int yuyvToYuv420Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1381                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1382 {
1383     uint8_t *ydst=dstParam[0] + dstStride[0]*srcSliceY;
1384     uint8_t *udst=dstParam[1] + dstStride[1]*srcSliceY/2;
1385     uint8_t *vdst=dstParam[2] + dstStride[2]*srcSliceY/2;
1386
1387     yuyvtoyuv420(ydst, udst, vdst, src[0], c->srcW, srcSliceH, dstStride[0], dstStride[1], srcStride[0]);
1388
1389     if (dstParam[3])
1390         fillPlane(dstParam[3], dstStride[3], c->srcW, srcSliceH, srcSliceY, 255);
1391
1392     return srcSliceH;
1393 }
1394
1395 static int yuyvToYuv422Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1396                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1397 {
1398     uint8_t *ydst=dstParam[0] + dstStride[0]*srcSliceY;
1399     uint8_t *udst=dstParam[1] + dstStride[1]*srcSliceY;
1400     uint8_t *vdst=dstParam[2] + dstStride[2]*srcSliceY;
1401
1402     yuyvtoyuv422(ydst, udst, vdst, src[0], c->srcW, srcSliceH, dstStride[0], dstStride[1], srcStride[0]);
1403
1404     return srcSliceH;
1405 }
1406
1407 static int uyvyToYuv420Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1408                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1409 {
1410     uint8_t *ydst=dstParam[0] + dstStride[0]*srcSliceY;
1411     uint8_t *udst=dstParam[1] + dstStride[1]*srcSliceY/2;
1412     uint8_t *vdst=dstParam[2] + dstStride[2]*srcSliceY/2;
1413
1414     uyvytoyuv420(ydst, udst, vdst, src[0], c->srcW, srcSliceH, dstStride[0], dstStride[1], srcStride[0]);
1415
1416     if (dstParam[3])
1417         fillPlane(dstParam[3], dstStride[3], c->srcW, srcSliceH, srcSliceY, 255);
1418
1419     return srcSliceH;
1420 }
1421
1422 static int uyvyToYuv422Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1423                                int srcSliceH, uint8_t* dstParam[], int dstStride[])
1424 {
1425     uint8_t *ydst=dstParam[0] + dstStride[0]*srcSliceY;
1426     uint8_t *udst=dstParam[1] + dstStride[1]*srcSliceY;
1427     uint8_t *vdst=dstParam[2] + dstStride[2]*srcSliceY;
1428
1429     uyvytoyuv422(ydst, udst, vdst, src[0], c->srcW, srcSliceH, dstStride[0], dstStride[1], srcStride[0]);
1430
1431     return srcSliceH;
1432 }
1433
1434 static void gray8aToPacked32(const uint8_t *src, uint8_t *dst, long num_pixels, const uint8_t *palette)
1435 {
1436     long i;
1437     for (i=0; i<num_pixels; i++)
1438         ((uint32_t *) dst)[i] = ((const uint32_t *)palette)[src[i<<1]] | (src[(i<<1)+1] << 24);
1439 }
1440
1441 static void gray8aToPacked32_1(const uint8_t *src, uint8_t *dst, long num_pixels, const uint8_t *palette)
1442 {
1443     long i;
1444
1445     for (i=0; i<num_pixels; i++)
1446         ((uint32_t *) dst)[i] = ((const uint32_t *)palette)[src[i<<1]] | src[(i<<1)+1];
1447 }
1448
1449 static void gray8aToPacked24(const uint8_t *src, uint8_t *dst, long num_pixels, const uint8_t *palette)
1450 {
1451     long i;
1452
1453     for (i=0; i<num_pixels; i++) {
1454         //FIXME slow?
1455         dst[0]= palette[src[i<<1]*4+0];
1456         dst[1]= palette[src[i<<1]*4+1];
1457         dst[2]= palette[src[i<<1]*4+2];
1458         dst+= 3;
1459     }
1460 }
1461
1462 static int palToRgbWrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1463                            int srcSliceH, uint8_t* dst[], int dstStride[])
1464 {
1465     const enum PixelFormat srcFormat= c->srcFormat;
1466     const enum PixelFormat dstFormat= c->dstFormat;
1467     void (*conv)(const uint8_t *src, uint8_t *dst, long num_pixels,
1468                  const uint8_t *palette)=NULL;
1469     int i;
1470     uint8_t *dstPtr= dst[0] + dstStride[0]*srcSliceY;
1471     const uint8_t *srcPtr= src[0];
1472
1473     if (srcFormat == PIX_FMT_Y400A) {
1474         switch (dstFormat) {
1475         case PIX_FMT_RGB32  : conv = gray8aToPacked32; break;
1476         case PIX_FMT_BGR32  : conv = gray8aToPacked32; break;
1477         case PIX_FMT_BGR32_1: conv = gray8aToPacked32_1; break;
1478         case PIX_FMT_RGB32_1: conv = gray8aToPacked32_1; break;
1479         case PIX_FMT_RGB24  : conv = gray8aToPacked24; break;
1480         case PIX_FMT_BGR24  : conv = gray8aToPacked24; break;
1481         }
1482     } else if (usePal(srcFormat)) {
1483         switch (dstFormat) {
1484         case PIX_FMT_RGB32  : conv = sws_convertPalette8ToPacked32; break;
1485         case PIX_FMT_BGR32  : conv = sws_convertPalette8ToPacked32; break;
1486         case PIX_FMT_BGR32_1: conv = sws_convertPalette8ToPacked32; break;
1487         case PIX_FMT_RGB32_1: conv = sws_convertPalette8ToPacked32; break;
1488         case PIX_FMT_RGB24  : conv = sws_convertPalette8ToPacked24; break;
1489         case PIX_FMT_BGR24  : conv = sws_convertPalette8ToPacked24; break;
1490         }
1491     }
1492
1493     if (!conv)
1494         av_log(c, AV_LOG_ERROR, "internal error %s -> %s converter\n",
1495                sws_format_name(srcFormat), sws_format_name(dstFormat));
1496     else {
1497         for (i=0; i<srcSliceH; i++) {
1498             conv(srcPtr, dstPtr, c->srcW, (uint8_t *) c->pal_rgb);
1499             srcPtr+= srcStride[0];
1500             dstPtr+= dstStride[0];
1501         }
1502     }
1503
1504     return srcSliceH;
1505 }
1506
1507 #define isRGBA32(x) (            \
1508            (x) == PIX_FMT_ARGB   \
1509         || (x) == PIX_FMT_RGBA   \
1510         || (x) == PIX_FMT_BGRA   \
1511         || (x) == PIX_FMT_ABGR   \
1512         )
1513
1514 /* {RGB,BGR}{15,16,24,32,32_1} -> {RGB,BGR}{15,16,24,32} */
1515 static int rgbToRgbWrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1516                            int srcSliceH, uint8_t* dst[], int dstStride[])
1517 {
1518     const enum PixelFormat srcFormat= c->srcFormat;
1519     const enum PixelFormat dstFormat= c->dstFormat;
1520     const int srcBpp= (c->srcFormatBpp + 7) >> 3;
1521     const int dstBpp= (c->dstFormatBpp + 7) >> 3;
1522     const int srcId= c->srcFormatBpp >> 2; /* 1:0, 4:1, 8:2, 15:3, 16:4, 24:6, 32:8 */
1523     const int dstId= c->dstFormatBpp >> 2;
1524     void (*conv)(const uint8_t *src, uint8_t *dst, long src_size)=NULL;
1525
1526 #define CONV_IS(src, dst) (srcFormat == PIX_FMT_##src && dstFormat == PIX_FMT_##dst)
1527
1528     if (isRGBA32(srcFormat) && isRGBA32(dstFormat)) {
1529         if (     CONV_IS(ABGR, RGBA)
1530               || CONV_IS(ARGB, BGRA)
1531               || CONV_IS(BGRA, ARGB)
1532               || CONV_IS(RGBA, ABGR)) conv = shuffle_bytes_3210;
1533         else if (CONV_IS(ABGR, ARGB)
1534               || CONV_IS(ARGB, ABGR)) conv = shuffle_bytes_0321;
1535         else if (CONV_IS(ABGR, BGRA)
1536               || CONV_IS(ARGB, RGBA)) conv = shuffle_bytes_1230;
1537         else if (CONV_IS(BGRA, RGBA)
1538               || CONV_IS(RGBA, BGRA)) conv = shuffle_bytes_2103;
1539         else if (CONV_IS(BGRA, ABGR)
1540               || CONV_IS(RGBA, ARGB)) conv = shuffle_bytes_3012;
1541     } else
1542     /* BGR -> BGR */
1543     if (  (isBGRinInt(srcFormat) && isBGRinInt(dstFormat))
1544        || (isRGBinInt(srcFormat) && isRGBinInt(dstFormat))) {
1545         switch(srcId | (dstId<<4)) {
1546         case 0x34: conv= rgb16to15; break;
1547         case 0x36: conv= rgb24to15; break;
1548         case 0x38: conv= rgb32to15; break;
1549         case 0x43: conv= rgb15to16; break;
1550         case 0x46: conv= rgb24to16; break;
1551         case 0x48: conv= rgb32to16; break;
1552         case 0x63: conv= rgb15to24; break;
1553         case 0x64: conv= rgb16to24; break;
1554         case 0x68: conv= rgb32to24; break;
1555         case 0x83: conv= rgb15to32; break;
1556         case 0x84: conv= rgb16to32; break;
1557         case 0x86: conv= rgb24to32; break;
1558         }
1559     } else if (  (isBGRinInt(srcFormat) && isRGBinInt(dstFormat))
1560              || (isRGBinInt(srcFormat) && isBGRinInt(dstFormat))) {
1561         switch(srcId | (dstId<<4)) {
1562         case 0x33: conv= rgb15tobgr15; break;
1563         case 0x34: conv= rgb16tobgr15; break;
1564         case 0x36: conv= rgb24tobgr15; break;
1565         case 0x38: conv= rgb32tobgr15; break;
1566         case 0x43: conv= rgb15tobgr16; break;
1567         case 0x44: conv= rgb16tobgr16; break;
1568         case 0x46: conv= rgb24tobgr16; break;
1569         case 0x48: conv= rgb32tobgr16; break;
1570         case 0x63: conv= rgb15tobgr24; break;
1571         case 0x64: conv= rgb16tobgr24; break;
1572         case 0x66: conv= rgb24tobgr24; break;
1573         case 0x68: conv= rgb32tobgr24; break;
1574         case 0x83: conv= rgb15tobgr32; break;
1575         case 0x84: conv= rgb16tobgr32; break;
1576         case 0x86: conv= rgb24tobgr32; break;
1577         }
1578     }
1579
1580     if (!conv) {
1581         av_log(c, AV_LOG_ERROR, "internal error %s -> %s converter\n",
1582                sws_format_name(srcFormat), sws_format_name(dstFormat));
1583     } else {
1584         const uint8_t *srcPtr= src[0];
1585               uint8_t *dstPtr= dst[0];
1586         if ((srcFormat == PIX_FMT_RGB32_1 || srcFormat == PIX_FMT_BGR32_1) && !isRGBA32(dstFormat))
1587             srcPtr += ALT32_CORR;
1588
1589         if ((dstFormat == PIX_FMT_RGB32_1 || dstFormat == PIX_FMT_BGR32_1) && !isRGBA32(srcFormat))
1590             dstPtr += ALT32_CORR;
1591
1592         if (dstStride[0]*srcBpp == srcStride[0]*dstBpp && srcStride[0] > 0)
1593             conv(srcPtr, dstPtr + dstStride[0]*srcSliceY, srcSliceH*srcStride[0]);
1594         else {
1595             int i;
1596             dstPtr += dstStride[0]*srcSliceY;
1597
1598             for (i=0; i<srcSliceH; i++) {
1599                 conv(srcPtr, dstPtr, c->srcW*srcBpp);
1600                 srcPtr+= srcStride[0];
1601                 dstPtr+= dstStride[0];
1602             }
1603         }
1604     }
1605     return srcSliceH;
1606 }
1607
1608 static int bgr24ToYv12Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1609                               int srcSliceH, uint8_t* dst[], int dstStride[])
1610 {
1611     rgb24toyv12(
1612         src[0],
1613         dst[0]+ srcSliceY    *dstStride[0],
1614         dst[1]+(srcSliceY>>1)*dstStride[1],
1615         dst[2]+(srcSliceY>>1)*dstStride[2],
1616         c->srcW, srcSliceH,
1617         dstStride[0], dstStride[1], srcStride[0]);
1618     if (dst[3])
1619         fillPlane(dst[3], dstStride[3], c->srcW, srcSliceH, srcSliceY, 255);
1620     return srcSliceH;
1621 }
1622
1623 static int yvu9ToYv12Wrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1624                              int srcSliceH, uint8_t* dst[], int dstStride[])
1625 {
1626     copyPlane(src[0], srcStride[0], srcSliceY, srcSliceH, c->srcW,
1627               dst[0], dstStride[0]);
1628
1629     planar2x(src[1], dst[1] + dstStride[1]*(srcSliceY >> 1), c->chrSrcW,
1630              srcSliceH >> 2, srcStride[1], dstStride[1]);
1631     planar2x(src[2], dst[2] + dstStride[2]*(srcSliceY >> 1), c->chrSrcW,
1632              srcSliceH >> 2, srcStride[2], dstStride[2]);
1633     if (dst[3])
1634         fillPlane(dst[3], dstStride[3], c->srcW, srcSliceH, srcSliceY, 255);
1635     return srcSliceH;
1636 }
1637
1638 /* unscaled copy like stuff (assumes nearly identical formats) */
1639 static int packedCopyWrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1640                              int srcSliceH, uint8_t* dst[], int dstStride[])
1641 {
1642     if (dstStride[0]==srcStride[0] && srcStride[0] > 0)
1643         memcpy(dst[0] + dstStride[0]*srcSliceY, src[0], srcSliceH*dstStride[0]);
1644     else {
1645         int i;
1646         const uint8_t *srcPtr= src[0];
1647         uint8_t *dstPtr= dst[0] + dstStride[0]*srcSliceY;
1648         int length=0;
1649
1650         /* universal length finder */
1651         while(length+c->srcW <= FFABS(dstStride[0])
1652            && length+c->srcW <= FFABS(srcStride[0])) length+= c->srcW;
1653         assert(length!=0);
1654
1655         for (i=0; i<srcSliceH; i++) {
1656             memcpy(dstPtr, srcPtr, length);
1657             srcPtr+= srcStride[0];
1658             dstPtr+= dstStride[0];
1659         }
1660     }
1661     return srcSliceH;
1662 }
1663
1664 static int planarCopyWrapper(SwsContext *c, const uint8_t* src[], int srcStride[], int srcSliceY,
1665                              int srcSliceH, uint8_t* dst[], int dstStride[])
1666 {
1667     int plane, i, j;
1668     for (plane=0; plane<4; plane++) {
1669         int length= (plane==0 || plane==3) ? c->srcW  : -((-c->srcW  )>>c->chrDstHSubSample);
1670         int y=      (plane==0 || plane==3) ? srcSliceY: -((-srcSliceY)>>c->chrDstVSubSample);
1671         int height= (plane==0 || plane==3) ? srcSliceH: -((-srcSliceH)>>c->chrDstVSubSample);
1672         const uint8_t *srcPtr= src[plane];
1673         uint8_t *dstPtr= dst[plane] + dstStride[plane]*y;
1674
1675         if (!dst[plane]) continue;
1676         // ignore palette for GRAY8
1677         if (plane == 1 && !dst[2]) continue;
1678         if (!src[plane] || (plane == 1 && !src[2])) {
1679             if(is16BPS(c->dstFormat))
1680                 length*=2;
1681             fillPlane(dst[plane], dstStride[plane], length, height, y, (plane==3) ? 255 : 128);
1682         } else {
1683             if(is9_OR_10BPS(c->srcFormat)) {
1684                 const int src_depth = av_pix_fmt_descriptors[c->srcFormat].comp[plane].depth_minus1+1;
1685                 const int dst_depth = av_pix_fmt_descriptors[c->dstFormat].comp[plane].depth_minus1+1;
1686                 const uint16_t *srcPtr2 = (const uint16_t*)srcPtr;
1687
1688                 if (is16BPS(c->dstFormat)) {
1689                     uint16_t *dstPtr2 = (uint16_t*)dstPtr;
1690 #define COPY9_OR_10TO16(rfunc, wfunc) \
1691                     for (i = 0; i < height; i++) { \
1692                         for (j = 0; j < length; j++) { \
1693                             int srcpx = rfunc(&srcPtr2[j]); \
1694                             wfunc(&dstPtr2[j], (srcpx<<(16-src_depth)) | (srcpx>>(2*src_depth-16))); \
1695                         } \
1696                         dstPtr2 += dstStride[plane]/2; \
1697                         srcPtr2 += srcStride[plane]/2; \
1698                     }
1699                     if (isBE(c->dstFormat)) {
1700                         if (isBE(c->srcFormat)) {
1701                             COPY9_OR_10TO16(AV_RB16, AV_WB16);
1702                         } else {
1703                             COPY9_OR_10TO16(AV_RL16, AV_WB16);
1704                         }
1705                     } else {
1706                         if (isBE(c->srcFormat)) {
1707                             COPY9_OR_10TO16(AV_RB16, AV_WL16);
1708                         } else {
1709                             COPY9_OR_10TO16(AV_RL16, AV_WL16);
1710                         }
1711                     }
1712                 } else if (is9_OR_10BPS(c->dstFormat)) {
1713                     uint16_t *dstPtr2 = (uint16_t*)dstPtr;
1714 #define COPY9_OR_10TO9_OR_10(loop) \
1715                     for (i = 0; i < height; i++) { \
1716                         for (j = 0; j < length; j++) { \
1717                             loop; \
1718                         } \
1719                         dstPtr2 += dstStride[plane]/2; \
1720                         srcPtr2 += srcStride[plane]/2; \
1721                     }
1722 #define COPY9_OR_10TO9_OR_10_2(rfunc, wfunc) \
1723                     if (dst_depth > src_depth) { \
1724                         COPY9_OR_10TO9_OR_10(int srcpx = rfunc(&srcPtr2[j]); \
1725                             wfunc(&dstPtr2[j], (srcpx << 1) | (srcpx >> 9))); \
1726                     } else if (dst_depth < src_depth) { \
1727                         COPY9_OR_10TO9_OR_10(wfunc(&dstPtr2[j], rfunc(&srcPtr2[j]) >> 1)); \
1728                     } else { \
1729                         COPY9_OR_10TO9_OR_10(wfunc(&dstPtr2[j], rfunc(&srcPtr2[j]))); \
1730                     }
1731                     if (isBE(c->dstFormat)) {
1732                         if (isBE(c->srcFormat)) {
1733                             COPY9_OR_10TO9_OR_10_2(AV_RB16, AV_WB16);
1734                         } else {
1735                             COPY9_OR_10TO9_OR_10_2(AV_RL16, AV_WB16);
1736                         }
1737                     } else {
1738                         if (isBE(c->srcFormat)) {
1739                             COPY9_OR_10TO9_OR_10_2(AV_RB16, AV_WL16);
1740                         } else {
1741                             COPY9_OR_10TO9_OR_10_2(AV_RL16, AV_WL16);
1742                         }
1743                     }
1744                 } else {
1745                     // FIXME Maybe dither instead.
1746 #define COPY9_OR_10TO8(rfunc) \
1747                     for (i = 0; i < height; i++) { \
1748                         for (j = 0; j < length; j++) { \
1749                             dstPtr[j] = rfunc(&srcPtr2[j])>>(src_depth-8); \
1750                         } \
1751                         dstPtr  += dstStride[plane]; \
1752                         srcPtr2 += srcStride[plane]/2; \
1753                     }
1754                     if (isBE(c->srcFormat)) {
1755                         COPY9_OR_10TO8(AV_RB16);
1756                     } else {
1757                         COPY9_OR_10TO8(AV_RL16);
1758                     }
1759                 }
1760             } else if(is9_OR_10BPS(c->dstFormat)) {
1761                 const int dst_depth = av_pix_fmt_descriptors[c->dstFormat].comp[plane].depth_minus1+1;
1762                 uint16_t *dstPtr2 = (uint16_t*)dstPtr;
1763
1764                 if (is16BPS(c->srcFormat)) {
1765                     const uint16_t *srcPtr2 = (const uint16_t*)srcPtr;
1766 #define COPY16TO9_OR_10(rfunc, wfunc) \
1767                     for (i = 0; i < height; i++) { \
1768                         for (j = 0; j < length; j++) { \
1769                             wfunc(&dstPtr2[j], rfunc(&srcPtr2[j])>>(16-dst_depth)); \
1770                         } \
1771                         dstPtr2 += dstStride[plane]/2; \
1772                         srcPtr2 += srcStride[plane]/2; \
1773                     }
1774                     if (isBE(c->dstFormat)) {
1775                         if (isBE(c->srcFormat)) {
1776                             COPY16TO9_OR_10(AV_RB16, AV_WB16);
1777                         } else {
1778                             COPY16TO9_OR_10(AV_RL16, AV_WB16);
1779                         }
1780                     } else {
1781                         if (isBE(c->srcFormat)) {
1782                             COPY16TO9_OR_10(AV_RB16, AV_WL16);
1783                         } else {
1784                             COPY16TO9_OR_10(AV_RL16, AV_WL16);
1785                         }
1786                     }
1787                 } else /* 8bit */ {
1788 #define COPY8TO9_OR_10(wfunc) \
1789                     for (i = 0; i < height; i++) { \
1790                         for (j = 0; j < length; j++) { \
1791                             const int srcpx = srcPtr[j]; \
1792                             wfunc(&dstPtr2[j], (srcpx<<(dst_depth-8)) | (srcpx >> (16-dst_depth))); \
1793                         } \
1794                         dstPtr2 += dstStride[plane]/2; \
1795                         srcPtr  += srcStride[plane]; \
1796                     }
1797                     if (isBE(c->dstFormat)) {
1798                         COPY8TO9_OR_10(AV_WB16);
1799                     } else {
1800                         COPY8TO9_OR_10(AV_WL16);
1801                     }
1802                 }
1803             } else if(is16BPS(c->srcFormat) && !is16BPS(c->dstFormat)) {
1804                 if (!isBE(c->srcFormat)) srcPtr++;
1805                 for (i=0; i<height; i++) {
1806                     for (j=0; j<length; j++) dstPtr[j] = srcPtr[j<<1];
1807                     srcPtr+= srcStride[plane];
1808                     dstPtr+= dstStride[plane];
1809                 }
1810             } else if(!is16BPS(c->srcFormat) && is16BPS(c->dstFormat)) {
1811                 for (i=0; i<height; i++) {
1812                     for (j=0; j<length; j++) {
1813                         dstPtr[ j<<1   ] = srcPtr[j];
1814                         dstPtr[(j<<1)+1] = srcPtr[j];
1815                     }
1816                     srcPtr+= srcStride[plane];
1817                     dstPtr+= dstStride[plane];
1818                 }
1819             } else if(is16BPS(c->srcFormat) && is16BPS(c->dstFormat)
1820                   && isBE(c->srcFormat) != isBE(c->dstFormat)) {
1821
1822                 for (i=0; i<height; i++) {
1823                     for (j=0; j<length; j++)
1824                         ((uint16_t*)dstPtr)[j] = av_bswap16(((const uint16_t*)srcPtr)[j]);
1825                     srcPtr+= srcStride[plane];
1826                     dstPtr+= dstStride[plane];
1827                 }
1828             } else if (dstStride[plane] == srcStride[plane] &&
1829                        srcStride[plane] > 0 && srcStride[plane] == length) {
1830                 memcpy(dst[plane] + dstStride[plane]*y, src[plane],
1831                        height*dstStride[plane]);
1832             } else {
1833                 if(is16BPS(c->srcFormat) && is16BPS(c->dstFormat))
1834                     length*=2;
1835                 for (i=0; i<height; i++) {
1836                     memcpy(dstPtr, srcPtr, length);
1837                     srcPtr+= srcStride[plane];
1838                     dstPtr+= dstStride[plane];
1839                 }
1840             }
1841         }
1842     }
1843     return srcSliceH;
1844 }
1845
1846 int ff_hardcodedcpuflags(void)
1847 {
1848     int flags = 0;
1849 #if   COMPILE_TEMPLATE_MMX2
1850     flags |= SWS_CPU_CAPS_MMX|SWS_CPU_CAPS_MMX2;
1851 #elif COMPILE_TEMPLATE_AMD3DNOW
1852     flags |= SWS_CPU_CAPS_MMX|SWS_CPU_CAPS_3DNOW;
1853 #elif COMPILE_TEMPLATE_MMX
1854     flags |= SWS_CPU_CAPS_MMX;
1855 #elif COMPILE_TEMPLATE_ALTIVEC
1856     flags |= SWS_CPU_CAPS_ALTIVEC;
1857 #elif ARCH_BFIN
1858     flags |= SWS_CPU_CAPS_BFIN;
1859 #endif
1860     return flags;
1861 }
1862
1863 void ff_get_unscaled_swscale(SwsContext *c)
1864 {
1865     const enum PixelFormat srcFormat = c->srcFormat;
1866     const enum PixelFormat dstFormat = c->dstFormat;
1867     const int flags = c->flags;
1868     const int dstH = c->dstH;
1869     int needsDither;
1870
1871     needsDither= isAnyRGB(dstFormat)
1872         &&  c->dstFormatBpp < 24
1873         && (c->dstFormatBpp < c->srcFormatBpp || (!isAnyRGB(srcFormat)));
1874
1875     /* yv12_to_nv12 */
1876     if ((srcFormat == PIX_FMT_YUV420P || srcFormat == PIX_FMT_YUVA420P) && (dstFormat == PIX_FMT_NV12 || dstFormat == PIX_FMT_NV21)) {
1877         c->swScale= planarToNv12Wrapper;
1878     }
1879     /* yuv2bgr */
1880     if ((srcFormat==PIX_FMT_YUV420P || srcFormat==PIX_FMT_YUV422P || srcFormat==PIX_FMT_YUVA420P) && isAnyRGB(dstFormat)
1881         && !(flags & SWS_ACCURATE_RND) && !(dstH&1)) {
1882         c->swScale= ff_yuv2rgb_get_func_ptr(c);
1883     }
1884
1885     if (srcFormat==PIX_FMT_YUV410P && (dstFormat==PIX_FMT_YUV420P || dstFormat==PIX_FMT_YUVA420P) && !(flags & SWS_BITEXACT)) {
1886         c->swScale= yvu9ToYv12Wrapper;
1887     }
1888
1889     /* bgr24toYV12 */
1890     if (srcFormat==PIX_FMT_BGR24 && (dstFormat==PIX_FMT_YUV420P || dstFormat==PIX_FMT_YUVA420P) && !(flags & SWS_ACCURATE_RND))
1891         c->swScale= bgr24ToYv12Wrapper;
1892
1893     /* RGB/BGR -> RGB/BGR (no dither needed forms) */
1894     if (   isAnyRGB(srcFormat)
1895         && isAnyRGB(dstFormat)
1896         && srcFormat != PIX_FMT_BGR8      && dstFormat != PIX_FMT_BGR8
1897         && srcFormat != PIX_FMT_RGB8      && dstFormat != PIX_FMT_RGB8
1898         && srcFormat != PIX_FMT_BGR4      && dstFormat != PIX_FMT_BGR4
1899         && srcFormat != PIX_FMT_RGB4      && dstFormat != PIX_FMT_RGB4
1900         && srcFormat != PIX_FMT_BGR4_BYTE && dstFormat != PIX_FMT_BGR4_BYTE
1901         && srcFormat != PIX_FMT_RGB4_BYTE && dstFormat != PIX_FMT_RGB4_BYTE
1902         && srcFormat != PIX_FMT_MONOBLACK && dstFormat != PIX_FMT_MONOBLACK
1903         && srcFormat != PIX_FMT_MONOWHITE && dstFormat != PIX_FMT_MONOWHITE
1904         && srcFormat != PIX_FMT_RGB48LE   && dstFormat != PIX_FMT_RGB48LE
1905         && srcFormat != PIX_FMT_RGB48BE   && dstFormat != PIX_FMT_RGB48BE
1906         && srcFormat != PIX_FMT_BGR48LE   && dstFormat != PIX_FMT_BGR48LE
1907         && srcFormat != PIX_FMT_BGR48BE   && dstFormat != PIX_FMT_BGR48BE
1908         && (!needsDither || (c->flags&(SWS_FAST_BILINEAR|SWS_POINT))))
1909         c->swScale= rgbToRgbWrapper;
1910
1911     if ((usePal(srcFormat) && (
1912         dstFormat == PIX_FMT_RGB32   ||
1913         dstFormat == PIX_FMT_RGB32_1 ||
1914         dstFormat == PIX_FMT_RGB24   ||
1915         dstFormat == PIX_FMT_BGR32   ||
1916         dstFormat == PIX_FMT_BGR32_1 ||
1917         dstFormat == PIX_FMT_BGR24)))
1918         c->swScale= palToRgbWrapper;
1919
1920     if (srcFormat == PIX_FMT_YUV422P) {
1921         if (dstFormat == PIX_FMT_YUYV422)
1922             c->swScale= yuv422pToYuy2Wrapper;
1923         else if (dstFormat == PIX_FMT_UYVY422)
1924             c->swScale= yuv422pToUyvyWrapper;
1925     }
1926
1927     /* LQ converters if -sws 0 or -sws 4*/
1928     if (c->flags&(SWS_FAST_BILINEAR|SWS_POINT)) {
1929         /* yv12_to_yuy2 */
1930         if (srcFormat == PIX_FMT_YUV420P || srcFormat == PIX_FMT_YUVA420P) {
1931             if (dstFormat == PIX_FMT_YUYV422)
1932                 c->swScale= planarToYuy2Wrapper;
1933             else if (dstFormat == PIX_FMT_UYVY422)
1934                 c->swScale= planarToUyvyWrapper;
1935         }
1936     }
1937     if(srcFormat == PIX_FMT_YUYV422 && (dstFormat == PIX_FMT_YUV420P || dstFormat == PIX_FMT_YUVA420P))
1938         c->swScale= yuyvToYuv420Wrapper;
1939     if(srcFormat == PIX_FMT_UYVY422 && (dstFormat == PIX_FMT_YUV420P || dstFormat == PIX_FMT_YUVA420P))
1940         c->swScale= uyvyToYuv420Wrapper;
1941     if(srcFormat == PIX_FMT_YUYV422 && dstFormat == PIX_FMT_YUV422P)
1942         c->swScale= yuyvToYuv422Wrapper;
1943     if(srcFormat == PIX_FMT_UYVY422 && dstFormat == PIX_FMT_YUV422P)
1944         c->swScale= uyvyToYuv422Wrapper;
1945
1946 #if COMPILE_ALTIVEC
1947     if ((c->flags & SWS_CPU_CAPS_ALTIVEC) &&
1948         !(c->flags & SWS_BITEXACT) &&
1949         srcFormat == PIX_FMT_YUV420P) {
1950         // unscaled YV12 -> packed YUV, we want speed
1951         if (dstFormat == PIX_FMT_YUYV422)
1952             c->swScale= yv12toyuy2_unscaled_altivec;
1953         else if (dstFormat == PIX_FMT_UYVY422)
1954             c->swScale= yv12touyvy_unscaled_altivec;
1955     }
1956 #endif
1957
1958     /* simple copy */
1959     if (  srcFormat == dstFormat
1960         || (srcFormat == PIX_FMT_YUVA420P && dstFormat == PIX_FMT_YUV420P)
1961         || (srcFormat == PIX_FMT_YUV420P && dstFormat == PIX_FMT_YUVA420P)
1962         || (isPlanarYUV(srcFormat) && isGray(dstFormat))
1963         || (isPlanarYUV(dstFormat) && isGray(srcFormat))
1964         || (isGray(dstFormat) && isGray(srcFormat))
1965         || (isPlanarYUV(srcFormat) && isPlanarYUV(dstFormat)
1966             && c->chrDstHSubSample == c->chrSrcHSubSample
1967             && c->chrDstVSubSample == c->chrSrcVSubSample
1968             && dstFormat != PIX_FMT_NV12 && dstFormat != PIX_FMT_NV21
1969             && srcFormat != PIX_FMT_NV12 && srcFormat != PIX_FMT_NV21))
1970     {
1971         if (isPacked(c->srcFormat))
1972             c->swScale= packedCopyWrapper;
1973         else /* Planar YUV or gray */
1974             c->swScale= planarCopyWrapper;
1975     }
1976 #if ARCH_BFIN
1977     if (flags & SWS_CPU_CAPS_BFIN)
1978         ff_bfin_get_unscaled_swscale (c);
1979 #endif
1980 }
1981
1982 static void reset_ptr(const uint8_t* src[], int format)
1983 {
1984     if(!isALPHA(format))
1985         src[3]=NULL;
1986     if(!isPlanarYUV(format)) {
1987         src[3]=src[2]=NULL;
1988
1989         if (!usePal(format))
1990             src[1]= NULL;
1991     }
1992 }
1993
1994 static int check_image_pointers(uint8_t *data[4], enum PixelFormat pix_fmt,
1995                                 const int linesizes[4])
1996 {
1997     const AVPixFmtDescriptor *desc = &av_pix_fmt_descriptors[pix_fmt];
1998     int i;
1999
2000     for (i = 0; i < 4; i++) {
2001         int plane = desc->comp[i].plane;
2002         if (!data[plane] || !linesizes[plane])
2003             return 0;
2004     }
2005
2006     return 1;
2007 }
2008
2009 /**
2010  * swscale wrapper, so we don't need to export the SwsContext.
2011  * Assumes planar YUV to be in YUV order instead of YVU.
2012  */
2013 int sws_scale(SwsContext *c, const uint8_t* const src[], const int srcStride[], int srcSliceY,
2014               int srcSliceH, uint8_t* const dst[], const int dstStride[])
2015 {
2016     int i;
2017     const uint8_t* src2[4]= {src[0], src[1], src[2], src[3]};
2018     uint8_t* dst2[4]= {dst[0], dst[1], dst[2], dst[3]};
2019
2020     // do not mess up sliceDir if we have a "trailing" 0-size slice
2021     if (srcSliceH == 0)
2022         return 0;
2023
2024     if (!check_image_pointers(src, c->srcFormat, srcStride)) {
2025         av_log(c, AV_LOG_ERROR, "bad src image pointers\n");
2026         return 0;
2027     }
2028     if (!check_image_pointers(dst, c->dstFormat, dstStride)) {
2029         av_log(c, AV_LOG_ERROR, "bad dst image pointers\n");
2030         return 0;
2031     }
2032
2033     if (c->sliceDir == 0 && srcSliceY != 0 && srcSliceY + srcSliceH != c->srcH) {
2034         av_log(c, AV_LOG_ERROR, "Slices start in the middle!\n");
2035         return 0;
2036     }
2037     if (c->sliceDir == 0) {
2038         if (srcSliceY == 0) c->sliceDir = 1; else c->sliceDir = -1;
2039     }
2040
2041     if (usePal(c->srcFormat)) {
2042         for (i=0; i<256; i++) {
2043             int p, r, g, b,y,u,v;
2044             if(c->srcFormat == PIX_FMT_PAL8) {
2045                 p=((const uint32_t*)(src[1]))[i];
2046                 r= (p>>16)&0xFF;
2047                 g= (p>> 8)&0xFF;
2048                 b=  p     &0xFF;
2049             } else if(c->srcFormat == PIX_FMT_RGB8) {
2050                 r= (i>>5    )*36;
2051                 g= ((i>>2)&7)*36;
2052                 b= (i&3     )*85;
2053             } else if(c->srcFormat == PIX_FMT_BGR8) {
2054                 b= (i>>6    )*85;
2055                 g= ((i>>3)&7)*36;
2056                 r= (i&7     )*36;
2057             } else if(c->srcFormat == PIX_FMT_RGB4_BYTE) {
2058                 r= (i>>3    )*255;
2059                 g= ((i>>1)&3)*85;
2060                 b= (i&1     )*255;
2061             } else if(c->srcFormat == PIX_FMT_GRAY8 || c->srcFormat == PIX_FMT_Y400A) {
2062                 r = g = b = i;
2063             } else {
2064                 assert(c->srcFormat == PIX_FMT_BGR4_BYTE);
2065                 b= (i>>3    )*255;
2066                 g= ((i>>1)&3)*85;
2067                 r= (i&1     )*255;
2068             }
2069             y= av_clip_uint8((RY*r + GY*g + BY*b + ( 33<<(RGB2YUV_SHIFT-1)))>>RGB2YUV_SHIFT);
2070             u= av_clip_uint8((RU*r + GU*g + BU*b + (257<<(RGB2YUV_SHIFT-1)))>>RGB2YUV_SHIFT);
2071             v= av_clip_uint8((RV*r + GV*g + BV*b + (257<<(RGB2YUV_SHIFT-1)))>>RGB2YUV_SHIFT);
2072             c->pal_yuv[i]= y + (u<<8) + (v<<16);
2073
2074             switch(c->dstFormat) {
2075             case PIX_FMT_BGR32:
2076 #if !HAVE_BIGENDIAN
2077             case PIX_FMT_RGB24:
2078 #endif
2079                 c->pal_rgb[i]=  r + (g<<8) + (b<<16);
2080                 break;
2081             case PIX_FMT_BGR32_1:
2082 #if HAVE_BIGENDIAN
2083             case PIX_FMT_BGR24:
2084 #endif
2085                 c->pal_rgb[i]= (r + (g<<8) + (b<<16)) << 8;
2086                 break;
2087             case PIX_FMT_RGB32_1:
2088 #if HAVE_BIGENDIAN
2089             case PIX_FMT_RGB24:
2090 #endif
2091                 c->pal_rgb[i]= (b + (g<<8) + (r<<16)) << 8;
2092                 break;
2093             case PIX_FMT_RGB32:
2094 #if !HAVE_BIGENDIAN
2095             case PIX_FMT_BGR24:
2096 #endif
2097             default:
2098                 c->pal_rgb[i]=  b + (g<<8) + (r<<16);
2099             }
2100         }
2101     }
2102
2103     // copy strides, so they can safely be modified
2104     if (c->sliceDir == 1) {
2105         // slices go from top to bottom
2106         int srcStride2[4]= {srcStride[0], srcStride[1], srcStride[2], srcStride[3]};
2107         int dstStride2[4]= {dstStride[0], dstStride[1], dstStride[2], dstStride[3]};
2108
2109         reset_ptr(src2, c->srcFormat);
2110         reset_ptr((const uint8_t**)dst2, c->dstFormat);
2111
2112         /* reset slice direction at end of frame */
2113         if (srcSliceY + srcSliceH == c->srcH)
2114             c->sliceDir = 0;
2115
2116         return c->swScale(c, src2, srcStride2, srcSliceY, srcSliceH, dst2, dstStride2);
2117     } else {
2118         // slices go from bottom to top => we flip the image internally
2119         int srcStride2[4]= {-srcStride[0], -srcStride[1], -srcStride[2], -srcStride[3]};
2120         int dstStride2[4]= {-dstStride[0], -dstStride[1], -dstStride[2], -dstStride[3]};
2121
2122         src2[0] += (srcSliceH-1)*srcStride[0];
2123         if (!usePal(c->srcFormat))
2124             src2[1] += ((srcSliceH>>c->chrSrcVSubSample)-1)*srcStride[1];
2125         src2[2] += ((srcSliceH>>c->chrSrcVSubSample)-1)*srcStride[2];
2126         src2[3] += (srcSliceH-1)*srcStride[3];
2127         dst2[0] += ( c->dstH                      -1)*dstStride[0];
2128         dst2[1] += ((c->dstH>>c->chrDstVSubSample)-1)*dstStride[1];
2129         dst2[2] += ((c->dstH>>c->chrDstVSubSample)-1)*dstStride[2];
2130         dst2[3] += ( c->dstH                      -1)*dstStride[3];
2131
2132         reset_ptr(src2, c->srcFormat);
2133         reset_ptr((const uint8_t**)dst2, c->dstFormat);
2134
2135         /* reset slice direction at end of frame */
2136         if (!srcSliceY)
2137             c->sliceDir = 0;
2138
2139         return c->swScale(c, src2, srcStride2, c->srcH-srcSliceY-srcSliceH, srcSliceH, dst2, dstStride2);
2140     }
2141 }
2142
2143 /* Convert the palette to the same packed 32-bit format as the palette */
2144 void sws_convertPalette8ToPacked32(const uint8_t *src, uint8_t *dst, long num_pixels, const uint8_t *palette)
2145 {
2146     long i;
2147
2148     for (i=0; i<num_pixels; i++)
2149         ((uint32_t *) dst)[i] = ((const uint32_t *) palette)[src[i]];
2150 }
2151
2152 /* Palette format: ABCD -> dst format: ABC */
2153 void sws_convertPalette8ToPacked24(const uint8_t *src, uint8_t *dst, long num_pixels, const uint8_t *palette)
2154 {
2155     long i;
2156
2157     for (i=0; i<num_pixels; i++) {
2158         //FIXME slow?
2159         dst[0]= palette[src[i]*4+0];
2160         dst[1]= palette[src[i]*4+1];
2161         dst[2]= palette[src[i]*4+2];
2162         dst+= 3;
2163     }
2164 }