6aa3112ca09dcd5375e8dfa21b0818f91e4a098f
[ffmpeg.git] / libswscale / output.c
1 /*
2  * Copyright (C) 2001-2012 Michael Niedermayer <michaelni@gmx.at>
3  *
4  * This file is part of FFmpeg.
5  *
6  * FFmpeg is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * FFmpeg is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with FFmpeg; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 #include <assert.h>
22 #include <math.h>
23 #include <stdint.h>
24 #include <stdio.h>
25 #include <string.h>
26
27 #include "libavutil/attributes.h"
28 #include "libavutil/avutil.h"
29 #include "libavutil/avassert.h"
30 #include "libavutil/bswap.h"
31 #include "libavutil/cpu.h"
32 #include "libavutil/intreadwrite.h"
33 #include "libavutil/mathematics.h"
34 #include "libavutil/pixdesc.h"
35 #include "config.h"
36 #include "rgb2rgb.h"
37 #include "swscale.h"
38 #include "swscale_internal.h"
39
40 DECLARE_ALIGNED(8, const uint8_t, dither_2x2_4)[][8]={
41 {  1,   3,   1,   3,   1,   3,   1,   3, },
42 {  2,   0,   2,   0,   2,   0,   2,   0, },
43 {  1,   3,   1,   3,   1,   3,   1,   3, },
44 };
45
46 DECLARE_ALIGNED(8, const uint8_t, dither_2x2_8)[][8]={
47 {  6,   2,   6,   2,   6,   2,   6,   2, },
48 {  0,   4,   0,   4,   0,   4,   0,   4, },
49 {  6,   2,   6,   2,   6,   2,   6,   2, },
50 };
51
52 DECLARE_ALIGNED(8, const uint8_t, dither_4x4_16)[][8]={
53 {  8,   4,  11,   7,   8,   4,  11,   7, },
54 {  2,  14,   1,  13,   2,  14,   1,  13, },
55 { 10,   6,   9,   5,  10,   6,   9,   5, },
56 {  0,  12,   3,  15,   0,  12,   3,  15, },
57 {  8,   4,  11,   7,   8,   4,  11,   7, },
58 };
59
60 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_32)[][8]={
61 { 17,   9,  23,  15,  16,   8,  22,  14, },
62 {  5,  29,   3,  27,   4,  28,   2,  26, },
63 { 21,  13,  19,  11,  20,  12,  18,  10, },
64 {  0,  24,   6,  30,   1,  25,   7,  31, },
65 { 16,   8,  22,  14,  17,   9,  23,  15, },
66 {  4,  28,   2,  26,   5,  29,   3,  27, },
67 { 20,  12,  18,  10,  21,  13,  19,  11, },
68 {  1,  25,   7,  31,   0,  24,   6,  30, },
69 { 17,   9,  23,  15,  16,   8,  22,  14, },
70 };
71
72 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_73)[][8]={
73 {  0,  55,  14,  68,   3,  58,  17,  72, },
74 { 37,  18,  50,  32,  40,  22,  54,  35, },
75 {  9,  64,   5,  59,  13,  67,   8,  63, },
76 { 46,  27,  41,  23,  49,  31,  44,  26, },
77 {  2,  57,  16,  71,   1,  56,  15,  70, },
78 { 39,  21,  52,  34,  38,  19,  51,  33, },
79 { 11,  66,   7,  62,  10,  65,   6,  60, },
80 { 48,  30,  43,  25,  47,  29,  42,  24, },
81 {  0,  55,  14,  68,   3,  58,  17,  72, },
82 };
83
84 #if 1
85 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[][8]={
86 {117,  62, 158, 103, 113,  58, 155, 100, },
87 { 34, 199,  21, 186,  31, 196,  17, 182, },
88 {144,  89, 131,  76, 141,  86, 127,  72, },
89 {  0, 165,  41, 206,  10, 175,  52, 217, },
90 {110,  55, 151,  96, 120,  65, 162, 107, },
91 { 28, 193,  14, 179,  38, 203,  24, 189, },
92 {138,  83, 124,  69, 148,  93, 134,  79, },
93 {  7, 172,  48, 213,   3, 168,  45, 210, },
94 {117,  62, 158, 103, 113,  58, 155, 100, },
95 };
96 #elif 1
97 // tries to correct a gamma of 1.5
98 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[][8]={
99 {  0, 143,  18, 200,   2, 156,  25, 215, },
100 { 78,  28, 125,  64,  89,  36, 138,  74, },
101 { 10, 180,   3, 161,  16, 195,   8, 175, },
102 {109,  51,  93,  38, 121,  60, 105,  47, },
103 {  1, 152,  23, 210,   0, 147,  20, 205, },
104 { 85,  33, 134,  71,  81,  30, 130,  67, },
105 { 14, 190,   6, 171,  12, 185,   5, 166, },
106 {117,  57, 101,  44, 113,  54,  97,  41, },
107 {  0, 143,  18, 200,   2, 156,  25, 215, },
108 };
109 #elif 1
110 // tries to correct a gamma of 2.0
111 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[][8]={
112 {  0, 124,   8, 193,   0, 140,  12, 213, },
113 { 55,  14, 104,  42,  66,  19, 119,  52, },
114 {  3, 168,   1, 145,   6, 187,   3, 162, },
115 { 86,  31,  70,  21,  99,  39,  82,  28, },
116 {  0, 134,  11, 206,   0, 129,   9, 200, },
117 { 62,  17, 114,  48,  58,  16, 109,  45, },
118 {  5, 181,   2, 157,   4, 175,   1, 151, },
119 { 95,  36,  78,  26,  90,  34,  74,  24, },
120 {  0, 124,   8, 193,   0, 140,  12, 213, },
121 };
122 #else
123 // tries to correct a gamma of 2.5
124 DECLARE_ALIGNED(8, const uint8_t, dither_8x8_220)[][8]={
125 {  0, 107,   3, 187,   0, 125,   6, 212, },
126 { 39,   7,  86,  28,  49,  11, 102,  36, },
127 {  1, 158,   0, 131,   3, 180,   1, 151, },
128 { 68,  19,  52,  12,  81,  25,  64,  17, },
129 {  0, 119,   5, 203,   0, 113,   4, 195, },
130 { 45,   9,  96,  33,  42,   8,  91,  30, },
131 {  2, 172,   1, 144,   2, 165,   0, 137, },
132 { 77,  23,  60,  15,  72,  21,  56,  14, },
133 {  0, 107,   3, 187,   0, 125,   6, 212, },
134 };
135 #endif
136
137 #define output_pixel(pos, val, bias, signedness) \
138     if (big_endian) { \
139         AV_WB16(pos, bias + av_clip_ ## signedness ## 16(val >> shift)); \
140     } else { \
141         AV_WL16(pos, bias + av_clip_ ## signedness ## 16(val >> shift)); \
142     }
143
144 static av_always_inline void
145 yuv2plane1_16_c_template(const int32_t *src, uint16_t *dest, int dstW,
146                          int big_endian, int output_bits)
147 {
148     int i;
149     int shift = 3;
150     av_assert0(output_bits == 16);
151
152     for (i = 0; i < dstW; i++) {
153         int val = src[i] + (1 << (shift - 1));
154         output_pixel(&dest[i], val, 0, uint);
155     }
156 }
157
158 static av_always_inline void
159 yuv2planeX_16_c_template(const int16_t *filter, int filterSize,
160                          const int32_t **src, uint16_t *dest, int dstW,
161                          int big_endian, int output_bits)
162 {
163     int i;
164     int shift = 15;
165     av_assert0(output_bits == 16);
166
167     for (i = 0; i < dstW; i++) {
168         int val = 1 << (shift - 1);
169         int j;
170
171         /* range of val is [0,0x7FFFFFFF], so 31 bits, but with lanczos/spline
172          * filters (or anything with negative coeffs, the range can be slightly
173          * wider in both directions. To account for this overflow, we subtract
174          * a constant so it always fits in the signed range (assuming a
175          * reasonable filterSize), and re-add that at the end. */
176         val -= 0x40000000;
177         for (j = 0; j < filterSize; j++)
178             val += src[j][i] * (unsigned)filter[j];
179
180         output_pixel(&dest[i], val, 0x8000, int);
181     }
182 }
183
184 #undef output_pixel
185
186 #define output_pixel(pos, val) \
187     if (big_endian) { \
188         AV_WB16(pos, av_clip_uintp2(val >> shift, output_bits)); \
189     } else { \
190         AV_WL16(pos, av_clip_uintp2(val >> shift, output_bits)); \
191     }
192
193 static av_always_inline void
194 yuv2plane1_10_c_template(const int16_t *src, uint16_t *dest, int dstW,
195                          int big_endian, int output_bits)
196 {
197     int i;
198     int shift = 15 - output_bits;
199
200     for (i = 0; i < dstW; i++) {
201         int val = src[i] + (1 << (shift - 1));
202         output_pixel(&dest[i], val);
203     }
204 }
205
206 static av_always_inline void
207 yuv2planeX_10_c_template(const int16_t *filter, int filterSize,
208                          const int16_t **src, uint16_t *dest, int dstW,
209                          int big_endian, int output_bits)
210 {
211     int i;
212     int shift = 11 + 16 - output_bits;
213
214     for (i = 0; i < dstW; i++) {
215         int val = 1 << (shift - 1);
216         int j;
217
218         for (j = 0; j < filterSize; j++)
219             val += src[j][i] * filter[j];
220
221         output_pixel(&dest[i], val);
222     }
223 }
224
225 #undef output_pixel
226
227 #define yuv2NBPS(bits, BE_LE, is_be, template_size, typeX_t) \
228 static void yuv2plane1_ ## bits ## BE_LE ## _c(const int16_t *src, \
229                               uint8_t *dest, int dstW, \
230                               const uint8_t *dither, int offset)\
231 { \
232     yuv2plane1_ ## template_size ## _c_template((const typeX_t *) src, \
233                          (uint16_t *) dest, dstW, is_be, bits); \
234 }\
235 static void yuv2planeX_ ## bits ## BE_LE ## _c(const int16_t *filter, int filterSize, \
236                               const int16_t **src, uint8_t *dest, int dstW, \
237                               const uint8_t *dither, int offset)\
238 { \
239     yuv2planeX_## template_size ## _c_template(filter, \
240                          filterSize, (const typeX_t **) src, \
241                          (uint16_t *) dest, dstW, is_be, bits); \
242 }
243 yuv2NBPS( 9, BE, 1, 10, int16_t)
244 yuv2NBPS( 9, LE, 0, 10, int16_t)
245 yuv2NBPS(10, BE, 1, 10, int16_t)
246 yuv2NBPS(10, LE, 0, 10, int16_t)
247 yuv2NBPS(12, BE, 1, 10, int16_t)
248 yuv2NBPS(12, LE, 0, 10, int16_t)
249 yuv2NBPS(14, BE, 1, 10, int16_t)
250 yuv2NBPS(14, LE, 0, 10, int16_t)
251 yuv2NBPS(16, BE, 1, 16, int32_t)
252 yuv2NBPS(16, LE, 0, 16, int32_t)
253
254 static void yuv2planeX_8_c(const int16_t *filter, int filterSize,
255                            const int16_t **src, uint8_t *dest, int dstW,
256                            const uint8_t *dither, int offset)
257 {
258     int i;
259     for (i=0; i<dstW; i++) {
260         int val = dither[(i + offset) & 7] << 12;
261         int j;
262         for (j=0; j<filterSize; j++)
263             val += src[j][i] * filter[j];
264
265         dest[i]= av_clip_uint8(val>>19);
266     }
267 }
268
269 static void yuv2plane1_8_c(const int16_t *src, uint8_t *dest, int dstW,
270                            const uint8_t *dither, int offset)
271 {
272     int i;
273     for (i=0; i<dstW; i++) {
274         int val = (src[i] + dither[(i + offset) & 7]) >> 7;
275         dest[i]= av_clip_uint8(val);
276     }
277 }
278
279 static void yuv2nv12cX_c(SwsContext *c, const int16_t *chrFilter, int chrFilterSize,
280                         const int16_t **chrUSrc, const int16_t **chrVSrc,
281                         uint8_t *dest, int chrDstW)
282 {
283     enum AVPixelFormat dstFormat = c->dstFormat;
284     const uint8_t *chrDither = c->chrDither8;
285     int i;
286
287     if (dstFormat == AV_PIX_FMT_NV12)
288         for (i=0; i<chrDstW; i++) {
289             int u = chrDither[i & 7] << 12;
290             int v = chrDither[(i + 3) & 7] << 12;
291             int j;
292             for (j=0; j<chrFilterSize; j++) {
293                 u += chrUSrc[j][i] * chrFilter[j];
294                 v += chrVSrc[j][i] * chrFilter[j];
295             }
296
297             dest[2*i]= av_clip_uint8(u>>19);
298             dest[2*i+1]= av_clip_uint8(v>>19);
299         }
300     else
301         for (i=0; i<chrDstW; i++) {
302             int u = chrDither[i & 7] << 12;
303             int v = chrDither[(i + 3) & 7] << 12;
304             int j;
305             for (j=0; j<chrFilterSize; j++) {
306                 u += chrUSrc[j][i] * chrFilter[j];
307                 v += chrVSrc[j][i] * chrFilter[j];
308             }
309
310             dest[2*i]= av_clip_uint8(v>>19);
311             dest[2*i+1]= av_clip_uint8(u>>19);
312         }
313 }
314
315 #define accumulate_bit(acc, val) \
316     acc <<= 1; \
317     acc |= (val) >= (128 + 110)
318 #define output_pixel(pos, acc) \
319     if (target == AV_PIX_FMT_MONOBLACK) { \
320         pos = acc; \
321     } else { \
322         pos = ~acc; \
323     }
324
325 static av_always_inline void
326 yuv2mono_X_c_template(SwsContext *c, const int16_t *lumFilter,
327                       const int16_t **lumSrc, int lumFilterSize,
328                       const int16_t *chrFilter, const int16_t **chrUSrc,
329                       const int16_t **chrVSrc, int chrFilterSize,
330                       const int16_t **alpSrc, uint8_t *dest, int dstW,
331                       int y, enum AVPixelFormat target)
332 {
333     const uint8_t * const d128=dither_8x8_220[y&7];
334     int i;
335     unsigned acc = 0;
336     int err = 0;
337
338     for (i = 0; i < dstW; i += 2) {
339         int j;
340         int Y1 = 1 << 18;
341         int Y2 = 1 << 18;
342
343         for (j = 0; j < lumFilterSize; j++) {
344             Y1 += lumSrc[j][i]   * lumFilter[j];
345             Y2 += lumSrc[j][i+1] * lumFilter[j];
346         }
347         Y1 >>= 19;
348         Y2 >>= 19;
349         if ((Y1 | Y2) & 0x100) {
350             Y1 = av_clip_uint8(Y1);
351             Y2 = av_clip_uint8(Y2);
352         }
353         if (c->flags & SWS_ERROR_DIFFUSION) {
354             Y1 += (7*err + 1*c->dither_error[0][i] + 5*c->dither_error[0][i+1] + 3*c->dither_error[0][i+2] + 8 - 256)>>4;
355             c->dither_error[0][i] = err;
356             acc = 2*acc + (Y1 >= 128);
357             Y1 -= 220*(acc&1);
358
359             err = Y2 + ((7*Y1 + 1*c->dither_error[0][i+1] + 5*c->dither_error[0][i+2] + 3*c->dither_error[0][i+3] + 8 - 256)>>4);
360             c->dither_error[0][i+1] = Y1;
361             acc = 2*acc + (err >= 128);
362             err -= 220*(acc&1);
363         } else {
364             accumulate_bit(acc, Y1 + d128[(i + 0) & 7]);
365             accumulate_bit(acc, Y2 + d128[(i + 1) & 7]);
366         }
367         if ((i & 7) == 6) {
368             output_pixel(*dest++, acc);
369         }
370     }
371     c->dither_error[0][i] = err;
372
373     if (i & 6) {
374         output_pixel(*dest, acc);
375     }
376 }
377
378 static av_always_inline void
379 yuv2mono_2_c_template(SwsContext *c, const int16_t *buf[2],
380                       const int16_t *ubuf[2], const int16_t *vbuf[2],
381                       const int16_t *abuf[2], uint8_t *dest, int dstW,
382                       int yalpha, int uvalpha, int y,
383                       enum AVPixelFormat target)
384 {
385     const int16_t *buf0  = buf[0],  *buf1  = buf[1];
386     const uint8_t * const d128 = dither_8x8_220[y & 7];
387     int  yalpha1 = 4096 - yalpha;
388     int i;
389
390     if (c->flags & SWS_ERROR_DIFFUSION) {
391         int err = 0;
392         int acc = 0;
393         for (i = 0; i < dstW; i +=2) {
394             int Y;
395
396             Y = (buf0[i + 0] * yalpha1 + buf1[i + 0] * yalpha) >> 19;
397             Y += (7*err + 1*c->dither_error[0][i] + 5*c->dither_error[0][i+1] + 3*c->dither_error[0][i+2] + 8 - 256)>>4;
398             c->dither_error[0][i] = err;
399             acc = 2*acc + (Y >= 128);
400             Y -= 220*(acc&1);
401
402             err = (buf0[i + 1] * yalpha1 + buf1[i + 1] * yalpha) >> 19;
403             err += (7*Y + 1*c->dither_error[0][i+1] + 5*c->dither_error[0][i+2] + 3*c->dither_error[0][i+3] + 8 - 256)>>4;
404             c->dither_error[0][i+1] = Y;
405             acc = 2*acc + (err >= 128);
406             err -= 220*(acc&1);
407
408             if ((i & 7) == 6)
409                 output_pixel(*dest++, acc);
410         }
411         c->dither_error[0][i] = err;
412     } else {
413     for (i = 0; i < dstW; i += 8) {
414         int Y, acc = 0;
415
416         Y = (buf0[i + 0] * yalpha1 + buf1[i + 0] * yalpha) >> 19;
417         accumulate_bit(acc, Y + d128[0]);
418         Y = (buf0[i + 1] * yalpha1 + buf1[i + 1] * yalpha) >> 19;
419         accumulate_bit(acc, Y + d128[1]);
420         Y = (buf0[i + 2] * yalpha1 + buf1[i + 2] * yalpha) >> 19;
421         accumulate_bit(acc, Y + d128[2]);
422         Y = (buf0[i + 3] * yalpha1 + buf1[i + 3] * yalpha) >> 19;
423         accumulate_bit(acc, Y + d128[3]);
424         Y = (buf0[i + 4] * yalpha1 + buf1[i + 4] * yalpha) >> 19;
425         accumulate_bit(acc, Y + d128[4]);
426         Y = (buf0[i + 5] * yalpha1 + buf1[i + 5] * yalpha) >> 19;
427         accumulate_bit(acc, Y + d128[5]);
428         Y = (buf0[i + 6] * yalpha1 + buf1[i + 6] * yalpha) >> 19;
429         accumulate_bit(acc, Y + d128[6]);
430         Y = (buf0[i + 7] * yalpha1 + buf1[i + 7] * yalpha) >> 19;
431         accumulate_bit(acc, Y + d128[7]);
432
433         output_pixel(*dest++, acc);
434     }
435     }
436 }
437
438 static av_always_inline void
439 yuv2mono_1_c_template(SwsContext *c, const int16_t *buf0,
440                       const int16_t *ubuf[2], const int16_t *vbuf[2],
441                       const int16_t *abuf0, uint8_t *dest, int dstW,
442                       int uvalpha, int y, enum AVPixelFormat target)
443 {
444     const uint8_t * const d128 = dither_8x8_220[y & 7];
445     int i;
446
447     if (c->flags & SWS_ERROR_DIFFUSION) {
448         int err = 0;
449         int acc = 0;
450         for (i = 0; i < dstW; i +=2) {
451             int Y;
452
453             Y = ((buf0[i + 0] + 64) >> 7);
454             Y += (7*err + 1*c->dither_error[0][i] + 5*c->dither_error[0][i+1] + 3*c->dither_error[0][i+2] + 8 - 256)>>4;
455             c->dither_error[0][i] = err;
456             acc = 2*acc + (Y >= 128);
457             Y -= 220*(acc&1);
458
459             err = ((buf0[i + 1] + 64) >> 7);
460             err += (7*Y + 1*c->dither_error[0][i+1] + 5*c->dither_error[0][i+2] + 3*c->dither_error[0][i+3] + 8 - 256)>>4;
461             c->dither_error[0][i+1] = Y;
462             acc = 2*acc + (err >= 128);
463             err -= 220*(acc&1);
464
465             if ((i & 7) == 6)
466                 output_pixel(*dest++, acc);
467         }
468         c->dither_error[0][i] = err;
469     } else {
470     for (i = 0; i < dstW; i += 8) {
471         int acc = 0;
472         accumulate_bit(acc, ((buf0[i + 0] + 64) >> 7) + d128[0]);
473         accumulate_bit(acc, ((buf0[i + 1] + 64) >> 7) + d128[1]);
474         accumulate_bit(acc, ((buf0[i + 2] + 64) >> 7) + d128[2]);
475         accumulate_bit(acc, ((buf0[i + 3] + 64) >> 7) + d128[3]);
476         accumulate_bit(acc, ((buf0[i + 4] + 64) >> 7) + d128[4]);
477         accumulate_bit(acc, ((buf0[i + 5] + 64) >> 7) + d128[5]);
478         accumulate_bit(acc, ((buf0[i + 6] + 64) >> 7) + d128[6]);
479         accumulate_bit(acc, ((buf0[i + 7] + 64) >> 7) + d128[7]);
480
481         output_pixel(*dest++, acc);
482     }
483     }
484 }
485
486 #undef output_pixel
487 #undef accumulate_bit
488
489 #define YUV2PACKEDWRAPPER(name, base, ext, fmt) \
490 static void name ## ext ## _X_c(SwsContext *c, const int16_t *lumFilter, \
491                                 const int16_t **lumSrc, int lumFilterSize, \
492                                 const int16_t *chrFilter, const int16_t **chrUSrc, \
493                                 const int16_t **chrVSrc, int chrFilterSize, \
494                                 const int16_t **alpSrc, uint8_t *dest, int dstW, \
495                                 int y) \
496 { \
497     name ## base ## _X_c_template(c, lumFilter, lumSrc, lumFilterSize, \
498                                   chrFilter, chrUSrc, chrVSrc, chrFilterSize, \
499                                   alpSrc, dest, dstW, y, fmt); \
500 } \
501  \
502 static void name ## ext ## _2_c(SwsContext *c, const int16_t *buf[2], \
503                                 const int16_t *ubuf[2], const int16_t *vbuf[2], \
504                                 const int16_t *abuf[2], uint8_t *dest, int dstW, \
505                                 int yalpha, int uvalpha, int y) \
506 { \
507     name ## base ## _2_c_template(c, buf, ubuf, vbuf, abuf, \
508                                   dest, dstW, yalpha, uvalpha, y, fmt); \
509 } \
510  \
511 static void name ## ext ## _1_c(SwsContext *c, const int16_t *buf0, \
512                                 const int16_t *ubuf[2], const int16_t *vbuf[2], \
513                                 const int16_t *abuf0, uint8_t *dest, int dstW, \
514                                 int uvalpha, int y) \
515 { \
516     name ## base ## _1_c_template(c, buf0, ubuf, vbuf, \
517                                   abuf0, dest, dstW, uvalpha, \
518                                   y, fmt); \
519 }
520
521 YUV2PACKEDWRAPPER(yuv2mono,, white, AV_PIX_FMT_MONOWHITE)
522 YUV2PACKEDWRAPPER(yuv2mono,, black, AV_PIX_FMT_MONOBLACK)
523
524 #define output_pixels(pos, Y1, U, Y2, V) \
525     if (target == AV_PIX_FMT_YUYV422) { \
526         dest[pos + 0] = Y1; \
527         dest[pos + 1] = U;  \
528         dest[pos + 2] = Y2; \
529         dest[pos + 3] = V;  \
530     } else { \
531         dest[pos + 0] = U;  \
532         dest[pos + 1] = Y1; \
533         dest[pos + 2] = V;  \
534         dest[pos + 3] = Y2; \
535     }
536
537 static av_always_inline void
538 yuv2422_X_c_template(SwsContext *c, const int16_t *lumFilter,
539                      const int16_t **lumSrc, int lumFilterSize,
540                      const int16_t *chrFilter, const int16_t **chrUSrc,
541                      const int16_t **chrVSrc, int chrFilterSize,
542                      const int16_t **alpSrc, uint8_t *dest, int dstW,
543                      int y, enum AVPixelFormat target)
544 {
545     int i;
546
547     for (i = 0; i < ((dstW + 1) >> 1); i++) {
548         int j;
549         int Y1 = 1 << 18;
550         int Y2 = 1 << 18;
551         int U  = 1 << 18;
552         int V  = 1 << 18;
553
554         for (j = 0; j < lumFilterSize; j++) {
555             Y1 += lumSrc[j][i * 2]     * lumFilter[j];
556             Y2 += lumSrc[j][i * 2 + 1] * lumFilter[j];
557         }
558         for (j = 0; j < chrFilterSize; j++) {
559             U += chrUSrc[j][i] * chrFilter[j];
560             V += chrVSrc[j][i] * chrFilter[j];
561         }
562         Y1 >>= 19;
563         Y2 >>= 19;
564         U  >>= 19;
565         V  >>= 19;
566         if ((Y1 | Y2 | U | V) & 0x100) {
567             Y1 = av_clip_uint8(Y1);
568             Y2 = av_clip_uint8(Y2);
569             U  = av_clip_uint8(U);
570             V  = av_clip_uint8(V);
571         }
572         output_pixels(4*i, Y1, U, Y2, V);
573     }
574 }
575
576 static av_always_inline void
577 yuv2422_2_c_template(SwsContext *c, const int16_t *buf[2],
578                      const int16_t *ubuf[2], const int16_t *vbuf[2],
579                      const int16_t *abuf[2], uint8_t *dest, int dstW,
580                      int yalpha, int uvalpha, int y,
581                      enum AVPixelFormat target)
582 {
583     const int16_t *buf0  = buf[0],  *buf1  = buf[1],
584                   *ubuf0 = ubuf[0], *ubuf1 = ubuf[1],
585                   *vbuf0 = vbuf[0], *vbuf1 = vbuf[1];
586     int  yalpha1 = 4096 - yalpha;
587     int uvalpha1 = 4096 - uvalpha;
588     int i;
589
590     for (i = 0; i < ((dstW + 1) >> 1); i++) {
591         int Y1 = (buf0[i * 2]     * yalpha1  + buf1[i * 2]     * yalpha)  >> 19;
592         int Y2 = (buf0[i * 2 + 1] * yalpha1  + buf1[i * 2 + 1] * yalpha)  >> 19;
593         int U  = (ubuf0[i]        * uvalpha1 + ubuf1[i]        * uvalpha) >> 19;
594         int V  = (vbuf0[i]        * uvalpha1 + vbuf1[i]        * uvalpha) >> 19;
595
596         if ((Y1 | Y2 | U | V) & 0x100) {
597             Y1 = av_clip_uint8(Y1);
598             Y2 = av_clip_uint8(Y2);
599             U  = av_clip_uint8(U);
600             V  = av_clip_uint8(V);
601         }
602
603         output_pixels(i * 4, Y1, U, Y2, V);
604     }
605 }
606
607 static av_always_inline void
608 yuv2422_1_c_template(SwsContext *c, const int16_t *buf0,
609                      const int16_t *ubuf[2], const int16_t *vbuf[2],
610                      const int16_t *abuf0, uint8_t *dest, int dstW,
611                      int uvalpha, int y, enum AVPixelFormat target)
612 {
613     const int16_t *ubuf0 = ubuf[0], *vbuf0 = vbuf[0];
614     int i;
615
616     if (uvalpha < 2048) {
617         for (i = 0; i < ((dstW + 1) >> 1); i++) {
618             int Y1 = (buf0[i * 2    ]+64) >> 7;
619             int Y2 = (buf0[i * 2 + 1]+64) >> 7;
620             int U  = (ubuf0[i]       +64) >> 7;
621             int V  = (vbuf0[i]       +64) >> 7;
622
623             if ((Y1 | Y2 | U | V) & 0x100) {
624                 Y1 = av_clip_uint8(Y1);
625                 Y2 = av_clip_uint8(Y2);
626                 U  = av_clip_uint8(U);
627                 V  = av_clip_uint8(V);
628             }
629
630             Y1 = av_clip_uint8(Y1);
631             Y2 = av_clip_uint8(Y2);
632             U  = av_clip_uint8(U);
633             V  = av_clip_uint8(V);
634
635             output_pixels(i * 4, Y1, U, Y2, V);
636         }
637     } else {
638         const int16_t *ubuf1 = ubuf[1], *vbuf1 = vbuf[1];
639         for (i = 0; i < ((dstW + 1) >> 1); i++) {
640             int Y1 = (buf0[i * 2    ]    + 64) >> 7;
641             int Y2 = (buf0[i * 2 + 1]    + 64) >> 7;
642             int U  = (ubuf0[i] + ubuf1[i]+128) >> 8;
643             int V  = (vbuf0[i] + vbuf1[i]+128) >> 8;
644
645             if ((Y1 | Y2 | U | V) & 0x100) {
646                 Y1 = av_clip_uint8(Y1);
647                 Y2 = av_clip_uint8(Y2);
648                 U  = av_clip_uint8(U);
649                 V  = av_clip_uint8(V);
650             }
651
652             Y1 = av_clip_uint8(Y1);
653             Y2 = av_clip_uint8(Y2);
654             U  = av_clip_uint8(U);
655             V  = av_clip_uint8(V);
656
657             output_pixels(i * 4, Y1, U, Y2, V);
658         }
659     }
660 }
661
662 #undef output_pixels
663
664 YUV2PACKEDWRAPPER(yuv2, 422, yuyv422, AV_PIX_FMT_YUYV422)
665 YUV2PACKEDWRAPPER(yuv2, 422, uyvy422, AV_PIX_FMT_UYVY422)
666
667 #define R_B ((target == AV_PIX_FMT_RGB48LE || target == AV_PIX_FMT_RGB48BE) ? R : B)
668 #define B_R ((target == AV_PIX_FMT_RGB48LE || target == AV_PIX_FMT_RGB48BE) ? B : R)
669 #define output_pixel(pos, val) \
670     if (isBE(target)) { \
671         AV_WB16(pos, val); \
672     } else { \
673         AV_WL16(pos, val); \
674     }
675
676 static av_always_inline void
677 yuv2rgba64_X_c_template(SwsContext *c, const int16_t *lumFilter,
678                        const int32_t **lumSrc, int lumFilterSize,
679                        const int16_t *chrFilter, const int32_t **chrUSrc,
680                        const int32_t **chrVSrc, int chrFilterSize,
681                        const int32_t **alpSrc, uint16_t *dest, int dstW,
682                        int y, enum AVPixelFormat target, int hasAlpha)
683 {
684     int i;
685     int A1 = 0xffff<<14, A2 = 0xffff<<14;
686
687     for (i = 0; i < ((dstW + 1) >> 1); i++) {
688         int j;
689         int Y1 = -0x40000000;
690         int Y2 = -0x40000000;
691         int U  = -128 << 23; // 19
692         int V  = -128 << 23;
693         int R, G, B;
694
695         for (j = 0; j < lumFilterSize; j++) {
696             Y1 += lumSrc[j][i * 2]     * (unsigned)lumFilter[j];
697             Y2 += lumSrc[j][i * 2 + 1] * (unsigned)lumFilter[j];
698         }
699         for (j = 0; j < chrFilterSize; j++) {;
700             U += chrUSrc[j][i] * (unsigned)chrFilter[j];
701             V += chrVSrc[j][i] * (unsigned)chrFilter[j];
702         }
703
704         if (hasAlpha) {
705             A1 = -0x40000000;
706             A2 = -0x40000000;
707             for (j = 0; j < lumFilterSize; j++) {
708                 A1 += alpSrc[j][i * 2]     * (unsigned)lumFilter[j];
709                 A2 += alpSrc[j][i * 2 + 1] * (unsigned)lumFilter[j];
710             }
711             A1 >>= 1;
712             A1 += 0x20002000;
713             A2 >>= 1;
714             A2 += 0x20002000;
715         }
716
717         // 8bit: 12+15=27; 16-bit: 12+19=31
718         Y1 >>= 14; // 10
719         Y1 += 0x10000;
720         Y2 >>= 14;
721         Y2 += 0x10000;
722         U  >>= 14;
723         V  >>= 14;
724
725         // 8bit: 27 -> 17bit, 16bit: 31 - 14 = 17bit
726         Y1 -= c->yuv2rgb_y_offset;
727         Y2 -= c->yuv2rgb_y_offset;
728         Y1 *= c->yuv2rgb_y_coeff;
729         Y2 *= c->yuv2rgb_y_coeff;
730         Y1 += 1 << 13; // 21
731         Y2 += 1 << 13;
732         // 8bit: 17 + 13bit = 30bit, 16bit: 17 + 13bit = 30bit
733
734         R = V * c->yuv2rgb_v2r_coeff;
735         G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
736         B =                            U * c->yuv2rgb_u2b_coeff;
737
738         // 8bit: 30 - 22 = 8bit, 16bit: 30bit - 14 = 16bit
739         output_pixel(&dest[0], av_clip_uintp2(B_R + Y1, 30) >> 14);
740         output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
741         output_pixel(&dest[2], av_clip_uintp2(R_B + Y1, 30) >> 14);
742         output_pixel(&dest[3], av_clip_uintp2(A1      , 30) >> 14);
743         output_pixel(&dest[4], av_clip_uintp2(B_R + Y2, 30) >> 14);
744         output_pixel(&dest[5], av_clip_uintp2(  G + Y2, 30) >> 14);
745         output_pixel(&dest[6], av_clip_uintp2(R_B + Y2, 30) >> 14);
746         output_pixel(&dest[7], av_clip_uintp2(A2      , 30) >> 14);
747         dest += 8;
748     }
749 }
750
751 static av_always_inline void
752 yuv2rgba64_2_c_template(SwsContext *c, const int32_t *buf[2],
753                        const int32_t *ubuf[2], const int32_t *vbuf[2],
754                        const int32_t *abuf[2], uint16_t *dest, int dstW,
755                        int yalpha, int uvalpha, int y,
756                        enum AVPixelFormat target, int hasAlpha)
757 {
758     const int32_t *buf0  = buf[0],  *buf1  = buf[1],
759                   *ubuf0 = ubuf[0], *ubuf1 = ubuf[1],
760                   *vbuf0 = vbuf[0], *vbuf1 = vbuf[1],
761                   *abuf0 = hasAlpha ? abuf[0] : NULL,
762                   *abuf1 = hasAlpha ? abuf[1] : NULL;
763     int  yalpha1 = 4096 - yalpha;
764     int uvalpha1 = 4096 - uvalpha;
765     int i;
766     int A1 = 0xffff<<14, A2 = 0xffff<<14;
767
768     for (i = 0; i < ((dstW + 1) >> 1); i++) {
769         int Y1 = (buf0[i * 2]     * yalpha1  + buf1[i * 2]     * yalpha) >> 14;
770         int Y2 = (buf0[i * 2 + 1] * yalpha1  + buf1[i * 2 + 1] * yalpha) >> 14;
771         int U  = (ubuf0[i]        * uvalpha1 + ubuf1[i]        * uvalpha + (-128 << 23)) >> 14;
772         int V  = (vbuf0[i]        * uvalpha1 + vbuf1[i]        * uvalpha + (-128 << 23)) >> 14;
773         int R, G, B;
774
775         Y1 -= c->yuv2rgb_y_offset;
776         Y2 -= c->yuv2rgb_y_offset;
777         Y1 *= c->yuv2rgb_y_coeff;
778         Y2 *= c->yuv2rgb_y_coeff;
779         Y1 += 1 << 13;
780         Y2 += 1 << 13;
781
782         R = V * c->yuv2rgb_v2r_coeff;
783         G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
784         B =                            U * c->yuv2rgb_u2b_coeff;
785
786         if (hasAlpha) {
787             A1 = (abuf0[i * 2    ] * yalpha1 + abuf1[i * 2    ] * yalpha) >> 1;
788             A2 = (abuf0[i * 2 + 1] * yalpha1 + abuf1[i * 2 + 1] * yalpha) >> 1;
789
790             A1 += 1 << 13;
791             A2 += 1 << 13;
792         }
793
794         output_pixel(&dest[0], av_clip_uintp2(B_R + Y1, 30) >> 14);
795         output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
796         output_pixel(&dest[2], av_clip_uintp2(R_B + Y1, 30) >> 14);
797         output_pixel(&dest[3], av_clip_uintp2(A1      , 30) >> 14);
798         output_pixel(&dest[4], av_clip_uintp2(B_R + Y2, 30) >> 14);
799         output_pixel(&dest[5], av_clip_uintp2(  G + Y2, 30) >> 14);
800         output_pixel(&dest[6], av_clip_uintp2(R_B + Y2, 30) >> 14);
801         output_pixel(&dest[7], av_clip_uintp2(A2      , 30) >> 14);
802         dest += 8;
803     }
804 }
805
806 static av_always_inline void
807 yuv2rgba64_1_c_template(SwsContext *c, const int32_t *buf0,
808                        const int32_t *ubuf[2], const int32_t *vbuf[2],
809                        const int32_t *abuf0, uint16_t *dest, int dstW,
810                        int uvalpha, int y, enum AVPixelFormat target, int hasAlpha)
811 {
812     const int32_t *ubuf0 = ubuf[0], *vbuf0 = vbuf[0];
813     int i;
814     int A1 = 0xffff<<14, A2= 0xffff<<14;
815
816     if (uvalpha < 2048) {
817         for (i = 0; i < ((dstW + 1) >> 1); i++) {
818             int Y1 = (buf0[i * 2]    ) >> 2;
819             int Y2 = (buf0[i * 2 + 1]) >> 2;
820             int U  = (ubuf0[i] + (-128 << 11)) >> 2;
821             int V  = (vbuf0[i] + (-128 << 11)) >> 2;
822             int R, G, B;
823
824             Y1 -= c->yuv2rgb_y_offset;
825             Y2 -= c->yuv2rgb_y_offset;
826             Y1 *= c->yuv2rgb_y_coeff;
827             Y2 *= c->yuv2rgb_y_coeff;
828             Y1 += 1 << 13;
829             Y2 += 1 << 13;
830
831             if (hasAlpha) {
832                 A1 = abuf0[i * 2    ] << 11;
833                 A2 = abuf0[i * 2 + 1] << 11;
834
835                 A1 += 1 << 13;
836                 A2 += 1 << 13;
837             }
838
839             R = V * c->yuv2rgb_v2r_coeff;
840             G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
841             B =                            U * c->yuv2rgb_u2b_coeff;
842
843             output_pixel(&dest[0], av_clip_uintp2(B_R + Y1, 30) >> 14);
844             output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
845             output_pixel(&dest[2], av_clip_uintp2(R_B + Y1, 30) >> 14);
846             output_pixel(&dest[3], av_clip_uintp2(A1      , 30) >> 14);
847             output_pixel(&dest[4], av_clip_uintp2(B_R + Y2, 30) >> 14);
848             output_pixel(&dest[5], av_clip_uintp2(  G + Y2, 30) >> 14);
849             output_pixel(&dest[6], av_clip_uintp2(R_B + Y2, 30) >> 14);
850             output_pixel(&dest[7], av_clip_uintp2(A2      , 30) >> 14);
851             dest += 8;
852         }
853     } else {
854         const int32_t *ubuf1 = ubuf[1], *vbuf1 = vbuf[1];
855         int A1 = 0xffff<<14, A2 = 0xffff<<14;
856         for (i = 0; i < ((dstW + 1) >> 1); i++) {
857             int Y1 = (buf0[i * 2]    ) >> 2;
858             int Y2 = (buf0[i * 2 + 1]) >> 2;
859             int U  = (ubuf0[i] + ubuf1[i] + (-128 << 12)) >> 3;
860             int V  = (vbuf0[i] + vbuf1[i] + (-128 << 12)) >> 3;
861             int R, G, B;
862
863             Y1 -= c->yuv2rgb_y_offset;
864             Y2 -= c->yuv2rgb_y_offset;
865             Y1 *= c->yuv2rgb_y_coeff;
866             Y2 *= c->yuv2rgb_y_coeff;
867             Y1 += 1 << 13;
868             Y2 += 1 << 13;
869
870             if (hasAlpha) {
871                 A1 = abuf0[i * 2    ] << 11;
872                 A2 = abuf0[i * 2 + 1] << 11;
873
874                 A1 += 1 << 13;
875                 A2 += 1 << 13;
876             }
877
878             R = V * c->yuv2rgb_v2r_coeff;
879             G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
880             B =                            U * c->yuv2rgb_u2b_coeff;
881
882             output_pixel(&dest[0], av_clip_uintp2(B_R + Y1, 30) >> 14);
883             output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
884             output_pixel(&dest[2], av_clip_uintp2(R_B + Y1, 30) >> 14);
885             output_pixel(&dest[3], av_clip_uintp2(A1      , 30) >> 14);
886             output_pixel(&dest[4], av_clip_uintp2(B_R + Y2, 30) >> 14);
887             output_pixel(&dest[5], av_clip_uintp2(  G + Y2, 30) >> 14);
888             output_pixel(&dest[6], av_clip_uintp2(R_B + Y2, 30) >> 14);
889             output_pixel(&dest[7], av_clip_uintp2(A2      , 30) >> 14);
890             dest += 8;
891         }
892     }
893 }
894
895 static av_always_inline void
896 yuv2rgb48_X_c_template(SwsContext *c, const int16_t *lumFilter,
897                        const int32_t **lumSrc, int lumFilterSize,
898                        const int16_t *chrFilter, const int32_t **chrUSrc,
899                        const int32_t **chrVSrc, int chrFilterSize,
900                        const int32_t **alpSrc, uint16_t *dest, int dstW,
901                        int y, enum AVPixelFormat target, int hasAlpha)
902 {
903     int i;
904
905     for (i = 0; i < ((dstW + 1) >> 1); i++) {
906         int j;
907         int Y1 = -0x40000000;
908         int Y2 = -0x40000000;
909         int U  = -128 << 23; // 19
910         int V  = -128 << 23;
911         int R, G, B;
912
913         for (j = 0; j < lumFilterSize; j++) {
914             Y1 += lumSrc[j][i * 2]     * (unsigned)lumFilter[j];
915             Y2 += lumSrc[j][i * 2 + 1] * (unsigned)lumFilter[j];
916         }
917         for (j = 0; j < chrFilterSize; j++) {;
918             U += chrUSrc[j][i] * (unsigned)chrFilter[j];
919             V += chrVSrc[j][i] * (unsigned)chrFilter[j];
920         }
921
922         // 8bit: 12+15=27; 16-bit: 12+19=31
923         Y1 >>= 14; // 10
924         Y1 += 0x10000;
925         Y2 >>= 14;
926         Y2 += 0x10000;
927         U  >>= 14;
928         V  >>= 14;
929
930         // 8bit: 27 -> 17bit, 16bit: 31 - 14 = 17bit
931         Y1 -= c->yuv2rgb_y_offset;
932         Y2 -= c->yuv2rgb_y_offset;
933         Y1 *= c->yuv2rgb_y_coeff;
934         Y2 *= c->yuv2rgb_y_coeff;
935         Y1 += 1 << 13; // 21
936         Y2 += 1 << 13;
937         // 8bit: 17 + 13bit = 30bit, 16bit: 17 + 13bit = 30bit
938
939         R = V * c->yuv2rgb_v2r_coeff;
940         G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
941         B =                            U * c->yuv2rgb_u2b_coeff;
942
943         // 8bit: 30 - 22 = 8bit, 16bit: 30bit - 14 = 16bit
944         output_pixel(&dest[0], av_clip_uintp2(R_B + Y1, 30) >> 14);
945         output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
946         output_pixel(&dest[2], av_clip_uintp2(B_R + Y1, 30) >> 14);
947         output_pixel(&dest[3], av_clip_uintp2(R_B + Y2, 30) >> 14);
948         output_pixel(&dest[4], av_clip_uintp2(  G + Y2, 30) >> 14);
949         output_pixel(&dest[5], av_clip_uintp2(B_R + Y2, 30) >> 14);
950         dest += 6;
951     }
952 }
953
954 static av_always_inline void
955 yuv2rgb48_2_c_template(SwsContext *c, const int32_t *buf[2],
956                        const int32_t *ubuf[2], const int32_t *vbuf[2],
957                        const int32_t *abuf[2], uint16_t *dest, int dstW,
958                        int yalpha, int uvalpha, int y,
959                        enum AVPixelFormat target, int hasAlpha)
960 {
961     const int32_t *buf0  = buf[0],  *buf1  = buf[1],
962                   *ubuf0 = ubuf[0], *ubuf1 = ubuf[1],
963                   *vbuf0 = vbuf[0], *vbuf1 = vbuf[1];
964     int  yalpha1 = 4096 - yalpha;
965     int uvalpha1 = 4096 - uvalpha;
966     int i;
967
968     for (i = 0; i < ((dstW + 1) >> 1); i++) {
969         int Y1 = (buf0[i * 2]     * yalpha1  + buf1[i * 2]     * yalpha) >> 14;
970         int Y2 = (buf0[i * 2 + 1] * yalpha1  + buf1[i * 2 + 1] * yalpha) >> 14;
971         int U  = (ubuf0[i]        * uvalpha1 + ubuf1[i]        * uvalpha + (-128 << 23)) >> 14;
972         int V  = (vbuf0[i]        * uvalpha1 + vbuf1[i]        * uvalpha + (-128 << 23)) >> 14;
973         int R, G, B;
974
975         Y1 -= c->yuv2rgb_y_offset;
976         Y2 -= c->yuv2rgb_y_offset;
977         Y1 *= c->yuv2rgb_y_coeff;
978         Y2 *= c->yuv2rgb_y_coeff;
979         Y1 += 1 << 13;
980         Y2 += 1 << 13;
981
982         R = V * c->yuv2rgb_v2r_coeff;
983         G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
984         B =                            U * c->yuv2rgb_u2b_coeff;
985
986         output_pixel(&dest[0], av_clip_uintp2(R_B + Y1, 30) >> 14);
987         output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
988         output_pixel(&dest[2], av_clip_uintp2(B_R + Y1, 30) >> 14);
989         output_pixel(&dest[3], av_clip_uintp2(R_B + Y2, 30) >> 14);
990         output_pixel(&dest[4], av_clip_uintp2(  G + Y2, 30) >> 14);
991         output_pixel(&dest[5], av_clip_uintp2(B_R + Y2, 30) >> 14);
992         dest += 6;
993     }
994 }
995
996 static av_always_inline void
997 yuv2rgb48_1_c_template(SwsContext *c, const int32_t *buf0,
998                        const int32_t *ubuf[2], const int32_t *vbuf[2],
999                        const int32_t *abuf0, uint16_t *dest, int dstW,
1000                        int uvalpha, int y, enum AVPixelFormat target, int hasAlpha)
1001 {
1002     const int32_t *ubuf0 = ubuf[0], *vbuf0 = vbuf[0];
1003     int i;
1004
1005     if (uvalpha < 2048) {
1006         for (i = 0; i < ((dstW + 1) >> 1); i++) {
1007             int Y1 = (buf0[i * 2]    ) >> 2;
1008             int Y2 = (buf0[i * 2 + 1]) >> 2;
1009             int U  = (ubuf0[i] + (-128 << 11)) >> 2;
1010             int V  = (vbuf0[i] + (-128 << 11)) >> 2;
1011             int R, G, B;
1012
1013             Y1 -= c->yuv2rgb_y_offset;
1014             Y2 -= c->yuv2rgb_y_offset;
1015             Y1 *= c->yuv2rgb_y_coeff;
1016             Y2 *= c->yuv2rgb_y_coeff;
1017             Y1 += 1 << 13;
1018             Y2 += 1 << 13;
1019
1020             R = V * c->yuv2rgb_v2r_coeff;
1021             G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
1022             B =                            U * c->yuv2rgb_u2b_coeff;
1023
1024             output_pixel(&dest[0], av_clip_uintp2(R_B + Y1, 30) >> 14);
1025             output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
1026             output_pixel(&dest[2], av_clip_uintp2(B_R + Y1, 30) >> 14);
1027             output_pixel(&dest[3], av_clip_uintp2(R_B + Y2, 30) >> 14);
1028             output_pixel(&dest[4], av_clip_uintp2(  G + Y2, 30) >> 14);
1029             output_pixel(&dest[5], av_clip_uintp2(B_R + Y2, 30) >> 14);
1030             dest += 6;
1031         }
1032     } else {
1033         const int32_t *ubuf1 = ubuf[1], *vbuf1 = vbuf[1];
1034         for (i = 0; i < ((dstW + 1) >> 1); i++) {
1035             int Y1 = (buf0[i * 2]    ) >> 2;
1036             int Y2 = (buf0[i * 2 + 1]) >> 2;
1037             int U  = (ubuf0[i] + ubuf1[i] + (-128 << 12)) >> 3;
1038             int V  = (vbuf0[i] + vbuf1[i] + (-128 << 12)) >> 3;
1039             int R, G, B;
1040
1041             Y1 -= c->yuv2rgb_y_offset;
1042             Y2 -= c->yuv2rgb_y_offset;
1043             Y1 *= c->yuv2rgb_y_coeff;
1044             Y2 *= c->yuv2rgb_y_coeff;
1045             Y1 += 1 << 13;
1046             Y2 += 1 << 13;
1047
1048             R = V * c->yuv2rgb_v2r_coeff;
1049             G = V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
1050             B =                            U * c->yuv2rgb_u2b_coeff;
1051
1052             output_pixel(&dest[0], av_clip_uintp2(R_B + Y1, 30) >> 14);
1053             output_pixel(&dest[1], av_clip_uintp2(  G + Y1, 30) >> 14);
1054             output_pixel(&dest[2], av_clip_uintp2(B_R + Y1, 30) >> 14);
1055             output_pixel(&dest[3], av_clip_uintp2(R_B + Y2, 30) >> 14);
1056             output_pixel(&dest[4], av_clip_uintp2(  G + Y2, 30) >> 14);
1057             output_pixel(&dest[5], av_clip_uintp2(B_R + Y2, 30) >> 14);
1058             dest += 6;
1059         }
1060     }
1061 }
1062
1063 #undef output_pixel
1064 #undef r_b
1065 #undef b_r
1066
1067 #define YUV2PACKED16WRAPPER(name, base, ext, fmt, hasAlpha) \
1068 static void name ## ext ## _X_c(SwsContext *c, const int16_t *lumFilter, \
1069                         const int16_t **_lumSrc, int lumFilterSize, \
1070                         const int16_t *chrFilter, const int16_t **_chrUSrc, \
1071                         const int16_t **_chrVSrc, int chrFilterSize, \
1072                         const int16_t **_alpSrc, uint8_t *_dest, int dstW, \
1073                         int y) \
1074 { \
1075     const int32_t **lumSrc  = (const int32_t **) _lumSrc, \
1076                   **chrUSrc = (const int32_t **) _chrUSrc, \
1077                   **chrVSrc = (const int32_t **) _chrVSrc, \
1078                   **alpSrc  = (const int32_t **) _alpSrc; \
1079     uint16_t *dest = (uint16_t *) _dest; \
1080     name ## base ## _X_c_template(c, lumFilter, lumSrc, lumFilterSize, \
1081                           chrFilter, chrUSrc, chrVSrc, chrFilterSize, \
1082                           alpSrc, dest, dstW, y, fmt, hasAlpha); \
1083 } \
1084  \
1085 static void name ## ext ## _2_c(SwsContext *c, const int16_t *_buf[2], \
1086                         const int16_t *_ubuf[2], const int16_t *_vbuf[2], \
1087                         const int16_t *_abuf[2], uint8_t *_dest, int dstW, \
1088                         int yalpha, int uvalpha, int y) \
1089 { \
1090     const int32_t **buf  = (const int32_t **) _buf, \
1091                   **ubuf = (const int32_t **) _ubuf, \
1092                   **vbuf = (const int32_t **) _vbuf, \
1093                   **abuf = (const int32_t **) _abuf; \
1094     uint16_t *dest = (uint16_t *) _dest; \
1095     name ## base ## _2_c_template(c, buf, ubuf, vbuf, abuf, \
1096                           dest, dstW, yalpha, uvalpha, y, fmt, hasAlpha); \
1097 } \
1098  \
1099 static void name ## ext ## _1_c(SwsContext *c, const int16_t *_buf0, \
1100                         const int16_t *_ubuf[2], const int16_t *_vbuf[2], \
1101                         const int16_t *_abuf0, uint8_t *_dest, int dstW, \
1102                         int uvalpha, int y) \
1103 { \
1104     const int32_t *buf0  = (const int32_t *)  _buf0, \
1105                  **ubuf  = (const int32_t **) _ubuf, \
1106                  **vbuf  = (const int32_t **) _vbuf, \
1107                   *abuf0 = (const int32_t *)  _abuf0; \
1108     uint16_t *dest = (uint16_t *) _dest; \
1109     name ## base ## _1_c_template(c, buf0, ubuf, vbuf, abuf0, dest, \
1110                                   dstW, uvalpha, y, fmt, hasAlpha); \
1111 }
1112
1113 YUV2PACKED16WRAPPER(yuv2, rgb48, rgb48be, AV_PIX_FMT_RGB48BE, 0)
1114 YUV2PACKED16WRAPPER(yuv2, rgb48, rgb48le, AV_PIX_FMT_RGB48LE, 0)
1115 YUV2PACKED16WRAPPER(yuv2, rgb48, bgr48be, AV_PIX_FMT_BGR48BE, 0)
1116 YUV2PACKED16WRAPPER(yuv2, rgb48, bgr48le, AV_PIX_FMT_BGR48LE, 0)
1117 YUV2PACKED16WRAPPER(yuv2, rgba64, rgba64be, AV_PIX_FMT_RGBA64BE, 1)
1118 YUV2PACKED16WRAPPER(yuv2, rgba64, rgba64le, AV_PIX_FMT_RGBA64LE, 1)
1119 YUV2PACKED16WRAPPER(yuv2, rgba64, rgbx64be, AV_PIX_FMT_RGBA64BE, 0)
1120 YUV2PACKED16WRAPPER(yuv2, rgba64, rgbx64le, AV_PIX_FMT_RGBA64LE, 0)
1121
1122 /*
1123  * Write out 2 RGB pixels in the target pixel format. This function takes a
1124  * R/G/B LUT as generated by ff_yuv2rgb_c_init_tables(), which takes care of
1125  * things like endianness conversion and shifting. The caller takes care of
1126  * setting the correct offset in these tables from the chroma (U/V) values.
1127  * This function then uses the luminance (Y1/Y2) values to write out the
1128  * correct RGB values into the destination buffer.
1129  */
1130 static av_always_inline void
1131 yuv2rgb_write(uint8_t *_dest, int i, int Y1, int Y2,
1132               unsigned A1, unsigned A2,
1133               const void *_r, const void *_g, const void *_b, int y,
1134               enum AVPixelFormat target, int hasAlpha)
1135 {
1136     if (target == AV_PIX_FMT_ARGB || target == AV_PIX_FMT_RGBA ||
1137         target == AV_PIX_FMT_ABGR || target == AV_PIX_FMT_BGRA) {
1138         uint32_t *dest = (uint32_t *) _dest;
1139         const uint32_t *r = (const uint32_t *) _r;
1140         const uint32_t *g = (const uint32_t *) _g;
1141         const uint32_t *b = (const uint32_t *) _b;
1142
1143 #if CONFIG_SMALL
1144         int sh = hasAlpha ? ((target == AV_PIX_FMT_RGB32_1 || target == AV_PIX_FMT_BGR32_1) ? 0 : 24) : 0;
1145
1146         dest[i * 2 + 0] = r[Y1] + g[Y1] + b[Y1] + (hasAlpha ? A1 << sh : 0);
1147         dest[i * 2 + 1] = r[Y2] + g[Y2] + b[Y2] + (hasAlpha ? A2 << sh : 0);
1148 #else
1149         if (hasAlpha) {
1150             int sh = (target == AV_PIX_FMT_RGB32_1 || target == AV_PIX_FMT_BGR32_1) ? 0 : 24;
1151
1152             av_assert2((((r[Y1] + g[Y1] + b[Y1]) >> sh) & 0xFF) == 0);
1153             dest[i * 2 + 0] = r[Y1] + g[Y1] + b[Y1] + (A1 << sh);
1154             dest[i * 2 + 1] = r[Y2] + g[Y2] + b[Y2] + (A2 << sh);
1155         } else {
1156 #if ASSERT_LEVEL > 1
1157             int sh = (target == AV_PIX_FMT_RGB32_1 || target == AV_PIX_FMT_BGR32_1) ? 0 : 24;
1158
1159             av_assert2((((r[Y1] + g[Y1] + b[Y1]) >> sh) & 0xFF) == 0xFF);
1160 #endif
1161             dest[i * 2 + 0] = r[Y1] + g[Y1] + b[Y1];
1162             dest[i * 2 + 1] = r[Y2] + g[Y2] + b[Y2];
1163         }
1164 #endif
1165     } else if (target == AV_PIX_FMT_RGB24 || target == AV_PIX_FMT_BGR24) {
1166         uint8_t *dest = (uint8_t *) _dest;
1167         const uint8_t *r = (const uint8_t *) _r;
1168         const uint8_t *g = (const uint8_t *) _g;
1169         const uint8_t *b = (const uint8_t *) _b;
1170
1171 #define r_b ((target == AV_PIX_FMT_RGB24) ? r : b)
1172 #define b_r ((target == AV_PIX_FMT_RGB24) ? b : r)
1173
1174         dest[i * 6 + 0] = r_b[Y1];
1175         dest[i * 6 + 1] =   g[Y1];
1176         dest[i * 6 + 2] = b_r[Y1];
1177         dest[i * 6 + 3] = r_b[Y2];
1178         dest[i * 6 + 4] =   g[Y2];
1179         dest[i * 6 + 5] = b_r[Y2];
1180 #undef r_b
1181 #undef b_r
1182     } else if (target == AV_PIX_FMT_RGB565 || target == AV_PIX_FMT_BGR565 ||
1183                target == AV_PIX_FMT_RGB555 || target == AV_PIX_FMT_BGR555 ||
1184                target == AV_PIX_FMT_RGB444 || target == AV_PIX_FMT_BGR444) {
1185         uint16_t *dest = (uint16_t *) _dest;
1186         const uint16_t *r = (const uint16_t *) _r;
1187         const uint16_t *g = (const uint16_t *) _g;
1188         const uint16_t *b = (const uint16_t *) _b;
1189         int dr1, dg1, db1, dr2, dg2, db2;
1190
1191         if (target == AV_PIX_FMT_RGB565 || target == AV_PIX_FMT_BGR565) {
1192             dr1 = dither_2x2_8[ y & 1     ][0];
1193             dg1 = dither_2x2_4[ y & 1     ][0];
1194             db1 = dither_2x2_8[(y & 1) ^ 1][0];
1195             dr2 = dither_2x2_8[ y & 1     ][1];
1196             dg2 = dither_2x2_4[ y & 1     ][1];
1197             db2 = dither_2x2_8[(y & 1) ^ 1][1];
1198         } else if (target == AV_PIX_FMT_RGB555 || target == AV_PIX_FMT_BGR555) {
1199             dr1 = dither_2x2_8[ y & 1     ][0];
1200             dg1 = dither_2x2_8[ y & 1     ][1];
1201             db1 = dither_2x2_8[(y & 1) ^ 1][0];
1202             dr2 = dither_2x2_8[ y & 1     ][1];
1203             dg2 = dither_2x2_8[ y & 1     ][0];
1204             db2 = dither_2x2_8[(y & 1) ^ 1][1];
1205         } else {
1206             dr1 = dither_4x4_16[ y & 3     ][0];
1207             dg1 = dither_4x4_16[ y & 3     ][1];
1208             db1 = dither_4x4_16[(y & 3) ^ 3][0];
1209             dr2 = dither_4x4_16[ y & 3     ][1];
1210             dg2 = dither_4x4_16[ y & 3     ][0];
1211             db2 = dither_4x4_16[(y & 3) ^ 3][1];
1212         }
1213
1214         dest[i * 2 + 0] = r[Y1 + dr1] + g[Y1 + dg1] + b[Y1 + db1];
1215         dest[i * 2 + 1] = r[Y2 + dr2] + g[Y2 + dg2] + b[Y2 + db2];
1216     } else /* 8/4-bit */ {
1217         uint8_t *dest = (uint8_t *) _dest;
1218         const uint8_t *r = (const uint8_t *) _r;
1219         const uint8_t *g = (const uint8_t *) _g;
1220         const uint8_t *b = (const uint8_t *) _b;
1221         int dr1, dg1, db1, dr2, dg2, db2;
1222
1223         if (target == AV_PIX_FMT_RGB8 || target == AV_PIX_FMT_BGR8) {
1224             const uint8_t * const d64 = dither_8x8_73[y & 7];
1225             const uint8_t * const d32 = dither_8x8_32[y & 7];
1226             dr1 = dg1 = d32[(i * 2 + 0) & 7];
1227             db1 =       d64[(i * 2 + 0) & 7];
1228             dr2 = dg2 = d32[(i * 2 + 1) & 7];
1229             db2 =       d64[(i * 2 + 1) & 7];
1230         } else {
1231             const uint8_t * const d64  = dither_8x8_73 [y & 7];
1232             const uint8_t * const d128 = dither_8x8_220[y & 7];
1233             dr1 = db1 = d128[(i * 2 + 0) & 7];
1234             dg1 =        d64[(i * 2 + 0) & 7];
1235             dr2 = db2 = d128[(i * 2 + 1) & 7];
1236             dg2 =        d64[(i * 2 + 1) & 7];
1237         }
1238
1239         if (target == AV_PIX_FMT_RGB4 || target == AV_PIX_FMT_BGR4) {
1240             dest[i] = r[Y1 + dr1] + g[Y1 + dg1] + b[Y1 + db1] +
1241                     ((r[Y2 + dr2] + g[Y2 + dg2] + b[Y2 + db2]) << 4);
1242         } else {
1243             dest[i * 2 + 0] = r[Y1 + dr1] + g[Y1 + dg1] + b[Y1 + db1];
1244             dest[i * 2 + 1] = r[Y2 + dr2] + g[Y2 + dg2] + b[Y2 + db2];
1245         }
1246     }
1247 }
1248
1249 static av_always_inline void
1250 yuv2rgb_X_c_template(SwsContext *c, const int16_t *lumFilter,
1251                      const int16_t **lumSrc, int lumFilterSize,
1252                      const int16_t *chrFilter, const int16_t **chrUSrc,
1253                      const int16_t **chrVSrc, int chrFilterSize,
1254                      const int16_t **alpSrc, uint8_t *dest, int dstW,
1255                      int y, enum AVPixelFormat target, int hasAlpha)
1256 {
1257     int i;
1258
1259     for (i = 0; i < ((dstW + 1) >> 1); i++) {
1260         int j, A1, A2;
1261         int Y1 = 1 << 18;
1262         int Y2 = 1 << 18;
1263         int U  = 1 << 18;
1264         int V  = 1 << 18;
1265         const void *r, *g, *b;
1266
1267         for (j = 0; j < lumFilterSize; j++) {
1268             Y1 += lumSrc[j][i * 2]     * lumFilter[j];
1269             Y2 += lumSrc[j][i * 2 + 1] * lumFilter[j];
1270         }
1271         for (j = 0; j < chrFilterSize; j++) {
1272             U += chrUSrc[j][i] * chrFilter[j];
1273             V += chrVSrc[j][i] * chrFilter[j];
1274         }
1275         Y1 >>= 19;
1276         Y2 >>= 19;
1277         U  >>= 19;
1278         V  >>= 19;
1279         if (hasAlpha) {
1280             A1 = 1 << 18;
1281             A2 = 1 << 18;
1282             for (j = 0; j < lumFilterSize; j++) {
1283                 A1 += alpSrc[j][i * 2    ] * lumFilter[j];
1284                 A2 += alpSrc[j][i * 2 + 1] * lumFilter[j];
1285             }
1286             A1 >>= 19;
1287             A2 >>= 19;
1288             if ((A1 | A2) & 0x100) {
1289                 A1 = av_clip_uint8(A1);
1290                 A2 = av_clip_uint8(A2);
1291             }
1292         }
1293
1294         r =  c->table_rV[V + YUVRGB_TABLE_HEADROOM];
1295         g = (c->table_gU[U + YUVRGB_TABLE_HEADROOM] + c->table_gV[V + YUVRGB_TABLE_HEADROOM]);
1296         b =  c->table_bU[U + YUVRGB_TABLE_HEADROOM];
1297
1298         yuv2rgb_write(dest, i, Y1, Y2, hasAlpha ? A1 : 0, hasAlpha ? A2 : 0,
1299                       r, g, b, y, target, hasAlpha);
1300     }
1301 }
1302
1303 static av_always_inline void
1304 yuv2rgb_2_c_template(SwsContext *c, const int16_t *buf[2],
1305                      const int16_t *ubuf[2], const int16_t *vbuf[2],
1306                      const int16_t *abuf[2], uint8_t *dest, int dstW,
1307                      int yalpha, int uvalpha, int y,
1308                      enum AVPixelFormat target, int hasAlpha)
1309 {
1310     const int16_t *buf0  = buf[0],  *buf1  = buf[1],
1311                   *ubuf0 = ubuf[0], *ubuf1 = ubuf[1],
1312                   *vbuf0 = vbuf[0], *vbuf1 = vbuf[1],
1313                   *abuf0 = hasAlpha ? abuf[0] : NULL,
1314                   *abuf1 = hasAlpha ? abuf[1] : NULL;
1315     int  yalpha1 = 4096 - yalpha;
1316     int uvalpha1 = 4096 - uvalpha;
1317     int i;
1318
1319     for (i = 0; i < ((dstW + 1) >> 1); i++) {
1320         int Y1 = (buf0[i * 2]     * yalpha1  + buf1[i * 2]     * yalpha)  >> 19;
1321         int Y2 = (buf0[i * 2 + 1] * yalpha1  + buf1[i * 2 + 1] * yalpha)  >> 19;
1322         int U  = (ubuf0[i]        * uvalpha1 + ubuf1[i]        * uvalpha) >> 19;
1323         int V  = (vbuf0[i]        * uvalpha1 + vbuf1[i]        * uvalpha) >> 19;
1324         int A1, A2;
1325         const void *r =  c->table_rV[V + YUVRGB_TABLE_HEADROOM],
1326                    *g = (c->table_gU[U + YUVRGB_TABLE_HEADROOM] + c->table_gV[V + YUVRGB_TABLE_HEADROOM]),
1327                    *b =  c->table_bU[U + YUVRGB_TABLE_HEADROOM];
1328
1329         if (hasAlpha) {
1330             A1 = (abuf0[i * 2    ] * yalpha1 + abuf1[i * 2    ] * yalpha) >> 19;
1331             A2 = (abuf0[i * 2 + 1] * yalpha1 + abuf1[i * 2 + 1] * yalpha) >> 19;
1332             A1 = av_clip_uint8(A1);
1333             A2 = av_clip_uint8(A2);
1334         }
1335
1336         yuv2rgb_write(dest, i, Y1, Y2, hasAlpha ? A1 : 0, hasAlpha ? A2 : 0,
1337                       r, g, b, y, target, hasAlpha);
1338     }
1339 }
1340
1341 static av_always_inline void
1342 yuv2rgb_1_c_template(SwsContext *c, const int16_t *buf0,
1343                      const int16_t *ubuf[2], const int16_t *vbuf[2],
1344                      const int16_t *abuf0, uint8_t *dest, int dstW,
1345                      int uvalpha, int y, enum AVPixelFormat target,
1346                      int hasAlpha)
1347 {
1348     const int16_t *ubuf0 = ubuf[0], *vbuf0 = vbuf[0];
1349     int i;
1350
1351     if (uvalpha < 2048) {
1352         for (i = 0; i < ((dstW + 1) >> 1); i++) {
1353             int Y1 = (buf0[i * 2    ] + 64) >> 7;
1354             int Y2 = (buf0[i * 2 + 1] + 64) >> 7;
1355             int U  = (ubuf0[i]        + 64) >> 7;
1356             int V  = (vbuf0[i]        + 64) >> 7;
1357             int A1, A2;
1358             const void *r =  c->table_rV[V + YUVRGB_TABLE_HEADROOM],
1359                        *g = (c->table_gU[U + YUVRGB_TABLE_HEADROOM] + c->table_gV[V + YUVRGB_TABLE_HEADROOM]),
1360                        *b =  c->table_bU[U + YUVRGB_TABLE_HEADROOM];
1361
1362             if (hasAlpha) {
1363                 A1 = abuf0[i * 2    ] * 255 + 16384 >> 15;
1364                 A2 = abuf0[i * 2 + 1] * 255 + 16384 >> 15;
1365                 A1 = av_clip_uint8(A1);
1366                 A2 = av_clip_uint8(A2);
1367             }
1368
1369             yuv2rgb_write(dest, i, Y1, Y2, hasAlpha ? A1 : 0, hasAlpha ? A2 : 0,
1370                           r, g, b, y, target, hasAlpha);
1371         }
1372     } else {
1373         const int16_t *ubuf1 = ubuf[1], *vbuf1 = vbuf[1];
1374         for (i = 0; i < ((dstW + 1) >> 1); i++) {
1375             int Y1 = (buf0[i * 2    ]     +  64) >> 7;
1376             int Y2 = (buf0[i * 2 + 1]     +  64) >> 7;
1377             int U  = (ubuf0[i] + ubuf1[i] + 128) >> 8;
1378             int V  = (vbuf0[i] + vbuf1[i] + 128) >> 8;
1379             int A1, A2;
1380             const void *r =  c->table_rV[V + YUVRGB_TABLE_HEADROOM],
1381                        *g = (c->table_gU[U + YUVRGB_TABLE_HEADROOM] + c->table_gV[V + YUVRGB_TABLE_HEADROOM]),
1382                        *b =  c->table_bU[U + YUVRGB_TABLE_HEADROOM];
1383
1384             if (hasAlpha) {
1385                 A1 = (abuf0[i * 2    ] + 64) >> 7;
1386                 A2 = (abuf0[i * 2 + 1] + 64) >> 7;
1387                 A1 = av_clip_uint8(A1);
1388                 A2 = av_clip_uint8(A2);
1389             }
1390
1391             yuv2rgb_write(dest, i, Y1, Y2, hasAlpha ? A1 : 0, hasAlpha ? A2 : 0,
1392                           r, g, b, y, target, hasAlpha);
1393         }
1394     }
1395 }
1396
1397 #define YUV2RGBWRAPPERX(name, base, ext, fmt, hasAlpha) \
1398 static void name ## ext ## _X_c(SwsContext *c, const int16_t *lumFilter, \
1399                                 const int16_t **lumSrc, int lumFilterSize, \
1400                                 const int16_t *chrFilter, const int16_t **chrUSrc, \
1401                                 const int16_t **chrVSrc, int chrFilterSize, \
1402                                 const int16_t **alpSrc, uint8_t *dest, int dstW, \
1403                                 int y) \
1404 { \
1405     name ## base ## _X_c_template(c, lumFilter, lumSrc, lumFilterSize, \
1406                                   chrFilter, chrUSrc, chrVSrc, chrFilterSize, \
1407                                   alpSrc, dest, dstW, y, fmt, hasAlpha); \
1408 }
1409
1410 #define YUV2RGBWRAPPERX2(name, base, ext, fmt, hasAlpha) \
1411 YUV2RGBWRAPPERX(name, base, ext, fmt, hasAlpha) \
1412 static void name ## ext ## _2_c(SwsContext *c, const int16_t *buf[2], \
1413                                 const int16_t *ubuf[2], const int16_t *vbuf[2], \
1414                                 const int16_t *abuf[2], uint8_t *dest, int dstW, \
1415                                 int yalpha, int uvalpha, int y) \
1416 { \
1417     name ## base ## _2_c_template(c, buf, ubuf, vbuf, abuf, \
1418                                   dest, dstW, yalpha, uvalpha, y, fmt, hasAlpha); \
1419 }
1420
1421 #define YUV2RGBWRAPPER(name, base, ext, fmt, hasAlpha) \
1422 YUV2RGBWRAPPERX2(name, base, ext, fmt, hasAlpha) \
1423 static void name ## ext ## _1_c(SwsContext *c, const int16_t *buf0, \
1424                                 const int16_t *ubuf[2], const int16_t *vbuf[2], \
1425                                 const int16_t *abuf0, uint8_t *dest, int dstW, \
1426                                 int uvalpha, int y) \
1427 { \
1428     name ## base ## _1_c_template(c, buf0, ubuf, vbuf, abuf0, dest, \
1429                                   dstW, uvalpha, y, fmt, hasAlpha); \
1430 }
1431
1432 #if CONFIG_SMALL
1433 YUV2RGBWRAPPER(yuv2rgb,,  32_1,  AV_PIX_FMT_RGB32_1,   CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1434 YUV2RGBWRAPPER(yuv2rgb,,  32,    AV_PIX_FMT_RGB32,     CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1435 #else
1436 #if CONFIG_SWSCALE_ALPHA
1437 YUV2RGBWRAPPER(yuv2rgb,, a32_1,  AV_PIX_FMT_RGB32_1,   1)
1438 YUV2RGBWRAPPER(yuv2rgb,, a32,    AV_PIX_FMT_RGB32,     1)
1439 #endif
1440 YUV2RGBWRAPPER(yuv2rgb,, x32_1,  AV_PIX_FMT_RGB32_1,   0)
1441 YUV2RGBWRAPPER(yuv2rgb,, x32,    AV_PIX_FMT_RGB32,     0)
1442 #endif
1443 YUV2RGBWRAPPER(yuv2, rgb, rgb24, AV_PIX_FMT_RGB24,   0)
1444 YUV2RGBWRAPPER(yuv2, rgb, bgr24, AV_PIX_FMT_BGR24,   0)
1445 YUV2RGBWRAPPER(yuv2rgb,,  16,    AV_PIX_FMT_RGB565,    0)
1446 YUV2RGBWRAPPER(yuv2rgb,,  15,    AV_PIX_FMT_RGB555,    0)
1447 YUV2RGBWRAPPER(yuv2rgb,,  12,    AV_PIX_FMT_RGB444,    0)
1448 YUV2RGBWRAPPER(yuv2rgb,,   8,    AV_PIX_FMT_RGB8,      0)
1449 YUV2RGBWRAPPER(yuv2rgb,,   4,    AV_PIX_FMT_RGB4,      0)
1450 YUV2RGBWRAPPER(yuv2rgb,,   4b,   AV_PIX_FMT_RGB4_BYTE, 0)
1451
1452 static av_always_inline void yuv2rgb_write_full(SwsContext *c,
1453     uint8_t *dest, int i, int Y, int A, int U, int V,
1454     int y, enum AVPixelFormat target, int hasAlpha, int err[4])
1455 {
1456     int R, G, B;
1457     int isrgb8 = target == AV_PIX_FMT_BGR8 || target == AV_PIX_FMT_RGB8;
1458
1459     Y -= c->yuv2rgb_y_offset;
1460     Y *= c->yuv2rgb_y_coeff;
1461     Y += 1 << 21;
1462     R = Y + V*c->yuv2rgb_v2r_coeff;
1463     G = Y + V*c->yuv2rgb_v2g_coeff + U*c->yuv2rgb_u2g_coeff;
1464     B = Y +                          U*c->yuv2rgb_u2b_coeff;
1465     if ((R | G | B) & 0xC0000000) {
1466         R = av_clip_uintp2(R, 30);
1467         G = av_clip_uintp2(G, 30);
1468         B = av_clip_uintp2(B, 30);
1469     }
1470
1471     switch(target) {
1472     case AV_PIX_FMT_ARGB:
1473         dest[0] = hasAlpha ? A : 255;
1474         dest[1] = R >> 22;
1475         dest[2] = G >> 22;
1476         dest[3] = B >> 22;
1477         break;
1478     case AV_PIX_FMT_RGB24:
1479         dest[0] = R >> 22;
1480         dest[1] = G >> 22;
1481         dest[2] = B >> 22;
1482         break;
1483     case AV_PIX_FMT_RGBA:
1484         dest[0] = R >> 22;
1485         dest[1] = G >> 22;
1486         dest[2] = B >> 22;
1487         dest[3] = hasAlpha ? A : 255;
1488         break;
1489     case AV_PIX_FMT_ABGR:
1490         dest[0] = hasAlpha ? A : 255;
1491         dest[1] = B >> 22;
1492         dest[2] = G >> 22;
1493         dest[3] = R >> 22;
1494         break;
1495     case AV_PIX_FMT_BGR24:
1496         dest[0] = B >> 22;
1497         dest[1] = G >> 22;
1498         dest[2] = R >> 22;
1499         break;
1500     case AV_PIX_FMT_BGRA:
1501         dest[0] = B >> 22;
1502         dest[1] = G >> 22;
1503         dest[2] = R >> 22;
1504         dest[3] = hasAlpha ? A : 255;
1505         break;
1506     case AV_PIX_FMT_BGR4_BYTE:
1507     case AV_PIX_FMT_RGB4_BYTE:
1508     case AV_PIX_FMT_BGR8:
1509     case AV_PIX_FMT_RGB8:
1510     {
1511         int r,g,b;
1512         R >>= 22;
1513         G >>= 22;
1514         B >>= 22;
1515         R += (7*err[0] + 1*c->dither_error[0][i] + 5*c->dither_error[0][i+1] + 3*c->dither_error[0][i+2])>>4;
1516         G += (7*err[1] + 1*c->dither_error[1][i] + 5*c->dither_error[1][i+1] + 3*c->dither_error[1][i+2])>>4;
1517         B += (7*err[2] + 1*c->dither_error[2][i] + 5*c->dither_error[2][i+1] + 3*c->dither_error[2][i+2])>>4;
1518         c->dither_error[0][i] = err[0];
1519         c->dither_error[1][i] = err[1];
1520         c->dither_error[2][i] = err[2];
1521         r = R >> (isrgb8 ? 5 : 7);
1522         g = G >> (isrgb8 ? 5 : 6);
1523         b = B >> (isrgb8 ? 6 : 7);
1524         r = av_clip(r, 0, isrgb8 ? 7 : 1);
1525         g = av_clip(g, 0, isrgb8 ? 7 : 3);
1526         b = av_clip(b, 0, isrgb8 ? 3 : 1);
1527         err[0] = R - r*(isrgb8 ? 36 : 255);
1528         err[1] = G - g*(isrgb8 ? 36 : 85);
1529         err[2] = B - b*(isrgb8 ? 85 : 255);
1530         if(target == AV_PIX_FMT_BGR4_BYTE) {
1531             dest[0] = r + 2*g + 8*b;
1532         } else if(target == AV_PIX_FMT_RGB4_BYTE) {
1533             dest[0] = b + 2*g + 8*r;
1534         } else if(target == AV_PIX_FMT_BGR8) {
1535             dest[0] = r + 8*g + 64*b;
1536         } else if(target == AV_PIX_FMT_RGB8) {
1537             dest[0] = b + 4*g + 32*r;
1538         } else
1539             av_assert2(0);
1540         break;}
1541     }
1542 }
1543
1544 static av_always_inline void
1545 yuv2rgb_full_X_c_template(SwsContext *c, const int16_t *lumFilter,
1546                           const int16_t **lumSrc, int lumFilterSize,
1547                           const int16_t *chrFilter, const int16_t **chrUSrc,
1548                           const int16_t **chrVSrc, int chrFilterSize,
1549                           const int16_t **alpSrc, uint8_t *dest,
1550                           int dstW, int y, enum AVPixelFormat target, int hasAlpha)
1551 {
1552     int i;
1553     int step = (target == AV_PIX_FMT_RGB24 || target == AV_PIX_FMT_BGR24) ? 3 : 4;
1554     int err[4] = {0};
1555     int A = 0; //init to silence warning
1556
1557     if(   target == AV_PIX_FMT_BGR4_BYTE || target == AV_PIX_FMT_RGB4_BYTE
1558        || target == AV_PIX_FMT_BGR8      || target == AV_PIX_FMT_RGB8)
1559         step = 1;
1560
1561     for (i = 0; i < dstW; i++) {
1562         int j;
1563         int Y = 1<<9;
1564         int U = (1<<9)-(128 << 19);
1565         int V = (1<<9)-(128 << 19);
1566
1567         for (j = 0; j < lumFilterSize; j++) {
1568             Y += lumSrc[j][i] * lumFilter[j];
1569         }
1570         for (j = 0; j < chrFilterSize; j++) {
1571             U += chrUSrc[j][i] * chrFilter[j];
1572             V += chrVSrc[j][i] * chrFilter[j];
1573         }
1574         Y >>= 10;
1575         U >>= 10;
1576         V >>= 10;
1577         if (hasAlpha) {
1578             A = 1 << 18;
1579             for (j = 0; j < lumFilterSize; j++) {
1580                 A += alpSrc[j][i] * lumFilter[j];
1581             }
1582             A >>= 19;
1583             if (A & 0x100)
1584                 A = av_clip_uint8(A);
1585         }
1586         yuv2rgb_write_full(c, dest, i, Y, A, U, V, y, target, hasAlpha, err);
1587         dest += step;
1588     }
1589     c->dither_error[0][i] = err[0];
1590     c->dither_error[1][i] = err[1];
1591     c->dither_error[2][i] = err[2];
1592 }
1593
1594 static av_always_inline void
1595 yuv2rgb_full_2_c_template(SwsContext *c, const int16_t *buf[2],
1596                      const int16_t *ubuf[2], const int16_t *vbuf[2],
1597                      const int16_t *abuf[2], uint8_t *dest, int dstW,
1598                      int yalpha, int uvalpha, int y,
1599                      enum AVPixelFormat target, int hasAlpha)
1600 {
1601     const int16_t *buf0  = buf[0],  *buf1  = buf[1],
1602                   *ubuf0 = ubuf[0], *ubuf1 = ubuf[1],
1603                   *vbuf0 = vbuf[0], *vbuf1 = vbuf[1],
1604                   *abuf0 = hasAlpha ? abuf[0] : NULL,
1605                   *abuf1 = hasAlpha ? abuf[1] : NULL;
1606     int  yalpha1 = 4096 - yalpha;
1607     int uvalpha1 = 4096 - uvalpha;
1608     int i;
1609     int step = (target == AV_PIX_FMT_RGB24 || target == AV_PIX_FMT_BGR24) ? 3 : 4;
1610     int err[4] = {0};
1611     int A = 0; // init to silcene warning
1612
1613     if(   target == AV_PIX_FMT_BGR4_BYTE || target == AV_PIX_FMT_RGB4_BYTE
1614        || target == AV_PIX_FMT_BGR8      || target == AV_PIX_FMT_RGB8)
1615         step = 1;
1616
1617     for (i = 0; i < dstW; i++) {
1618         int Y = ( buf0[i] * yalpha1  +  buf1[i] * yalpha             ) >> 10; //FIXME rounding
1619         int U = (ubuf0[i] * uvalpha1 + ubuf1[i] * uvalpha-(128 << 19)) >> 10;
1620         int V = (vbuf0[i] * uvalpha1 + vbuf1[i] * uvalpha-(128 << 19)) >> 10;
1621
1622         if (hasAlpha) {
1623             A = (abuf0[i] * yalpha1 + abuf1[i] * yalpha + (1<<18)) >> 19;
1624             if (A & 0x100)
1625                 A = av_clip_uint8(A);
1626         }
1627
1628         yuv2rgb_write_full(c, dest, i, Y, A, U, V, y, target, hasAlpha, err);
1629         dest += step;
1630     }
1631     c->dither_error[0][i] = err[0];
1632     c->dither_error[1][i] = err[1];
1633     c->dither_error[2][i] = err[2];
1634 }
1635
1636 static av_always_inline void
1637 yuv2rgb_full_1_c_template(SwsContext *c, const int16_t *buf0,
1638                      const int16_t *ubuf[2], const int16_t *vbuf[2],
1639                      const int16_t *abuf0, uint8_t *dest, int dstW,
1640                      int uvalpha, int y, enum AVPixelFormat target,
1641                      int hasAlpha)
1642 {
1643     const int16_t *ubuf0 = ubuf[0], *vbuf0 = vbuf[0];
1644     int i;
1645     int step = (target == AV_PIX_FMT_RGB24 || target == AV_PIX_FMT_BGR24) ? 3 : 4;
1646     int err[4] = {0};
1647
1648     if(   target == AV_PIX_FMT_BGR4_BYTE || target == AV_PIX_FMT_RGB4_BYTE
1649        || target == AV_PIX_FMT_BGR8      || target == AV_PIX_FMT_RGB8)
1650         step = 1;
1651
1652     if (uvalpha < 2048) {
1653         int A = 0; //init to silence warning
1654         for (i = 0; i < dstW; i++) {
1655             int Y = buf0[i] << 2;
1656             int U = (ubuf0[i] - (128<<7)) << 2;
1657             int V = (vbuf0[i] - (128<<7)) << 2;
1658
1659             if (hasAlpha) {
1660                 A = (abuf0[i] + 64) >> 7;
1661                 if (A & 0x100)
1662                     A = av_clip_uint8(A);
1663             }
1664
1665             yuv2rgb_write_full(c, dest, i, Y, A, U, V, y, target, hasAlpha, err);
1666             dest += step;
1667         }
1668     } else {
1669         const int16_t *ubuf1 = ubuf[1], *vbuf1 = vbuf[1];
1670         int A = 0; //init to silence warning
1671         for (i = 0; i < dstW; i++) {
1672             int Y = buf0[i] << 2;
1673             int U = (ubuf0[i] + ubuf1[i] - (128<<8)) << 1;
1674             int V = (vbuf0[i] + vbuf1[i] - (128<<8)) << 1;
1675
1676             if (hasAlpha) {
1677                 A = (abuf0[i] + 64) >> 7;
1678                 if (A & 0x100)
1679                     A = av_clip_uint8(A);
1680             }
1681
1682             yuv2rgb_write_full(c, dest, i, Y, A, U, V, y, target, hasAlpha, err);
1683             dest += step;
1684         }
1685     }
1686
1687     c->dither_error[0][i] = err[0];
1688     c->dither_error[1][i] = err[1];
1689     c->dither_error[2][i] = err[2];
1690 }
1691
1692 #if CONFIG_SMALL
1693 YUV2RGBWRAPPER(yuv2, rgb_full, bgra32_full, AV_PIX_FMT_BGRA,  CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1694 YUV2RGBWRAPPER(yuv2, rgb_full, abgr32_full, AV_PIX_FMT_ABGR,  CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1695 YUV2RGBWRAPPER(yuv2, rgb_full, rgba32_full, AV_PIX_FMT_RGBA,  CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1696 YUV2RGBWRAPPER(yuv2, rgb_full, argb32_full, AV_PIX_FMT_ARGB,  CONFIG_SWSCALE_ALPHA && c->alpPixBuf)
1697 #else
1698 #if CONFIG_SWSCALE_ALPHA
1699 YUV2RGBWRAPPER(yuv2, rgb_full, bgra32_full, AV_PIX_FMT_BGRA,  1)
1700 YUV2RGBWRAPPER(yuv2, rgb_full, abgr32_full, AV_PIX_FMT_ABGR,  1)
1701 YUV2RGBWRAPPER(yuv2, rgb_full, rgba32_full, AV_PIX_FMT_RGBA,  1)
1702 YUV2RGBWRAPPER(yuv2, rgb_full, argb32_full, AV_PIX_FMT_ARGB,  1)
1703 #endif
1704 YUV2RGBWRAPPER(yuv2, rgb_full, bgrx32_full, AV_PIX_FMT_BGRA,  0)
1705 YUV2RGBWRAPPER(yuv2, rgb_full, xbgr32_full, AV_PIX_FMT_ABGR,  0)
1706 YUV2RGBWRAPPER(yuv2, rgb_full, rgbx32_full, AV_PIX_FMT_RGBA,  0)
1707 YUV2RGBWRAPPER(yuv2, rgb_full, xrgb32_full, AV_PIX_FMT_ARGB,  0)
1708 #endif
1709 YUV2RGBWRAPPER(yuv2, rgb_full, bgr24_full,  AV_PIX_FMT_BGR24, 0)
1710 YUV2RGBWRAPPER(yuv2, rgb_full, rgb24_full,  AV_PIX_FMT_RGB24, 0)
1711
1712 YUV2RGBWRAPPER(yuv2, rgb_full, bgr4_byte_full,  AV_PIX_FMT_BGR4_BYTE, 0)
1713 YUV2RGBWRAPPER(yuv2, rgb_full, rgb4_byte_full,  AV_PIX_FMT_RGB4_BYTE, 0)
1714 YUV2RGBWRAPPER(yuv2, rgb_full, bgr8_full,   AV_PIX_FMT_BGR8,  0)
1715 YUV2RGBWRAPPER(yuv2, rgb_full, rgb8_full,   AV_PIX_FMT_RGB8,  0)
1716
1717 static void
1718 yuv2gbrp_full_X_c(SwsContext *c, const int16_t *lumFilter,
1719                   const int16_t **lumSrc, int lumFilterSize,
1720                   const int16_t *chrFilter, const int16_t **chrUSrc,
1721                   const int16_t **chrVSrc, int chrFilterSize,
1722                   const int16_t **alpSrc, uint8_t **dest,
1723                   int dstW, int y)
1724 {
1725     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(c->dstFormat);
1726     int i;
1727     int hasAlpha = (desc->flags & AV_PIX_FMT_FLAG_ALPHA) && alpSrc;
1728     uint16_t **dest16 = (uint16_t**)dest;
1729     int SH = 22 + 7 - desc->comp[0].depth_minus1;
1730     int A = 0; // init to silence warning
1731
1732     for (i = 0; i < dstW; i++) {
1733         int j;
1734         int Y = 1 << 9;
1735         int U = (1 << 9) - (128 << 19);
1736         int V = (1 << 9) - (128 << 19);
1737         int R, G, B;
1738
1739         for (j = 0; j < lumFilterSize; j++)
1740             Y += lumSrc[j][i] * lumFilter[j];
1741
1742         for (j = 0; j < chrFilterSize; j++) {
1743             U += chrUSrc[j][i] * chrFilter[j];
1744             V += chrVSrc[j][i] * chrFilter[j];
1745         }
1746
1747         Y >>= 10;
1748         U >>= 10;
1749         V >>= 10;
1750
1751         if (hasAlpha) {
1752             A = 1 << 18;
1753
1754             for (j = 0; j < lumFilterSize; j++)
1755                 A += alpSrc[j][i] * lumFilter[j];
1756
1757             A >>= 19;
1758
1759             if (A & 0x100)
1760                 A = av_clip_uint8(A);
1761         }
1762
1763         Y -= c->yuv2rgb_y_offset;
1764         Y *= c->yuv2rgb_y_coeff;
1765         Y += 1 << 21;
1766         R = Y + V * c->yuv2rgb_v2r_coeff;
1767         G = Y + V * c->yuv2rgb_v2g_coeff + U * c->yuv2rgb_u2g_coeff;
1768         B = Y +                            U * c->yuv2rgb_u2b_coeff;
1769
1770         if ((R | G | B) & 0xC0000000) {
1771             R = av_clip_uintp2(R, 30);
1772             G = av_clip_uintp2(G, 30);
1773             B = av_clip_uintp2(B, 30);
1774         }
1775
1776         if (SH != 22) {
1777             dest16[0][i] = G >> SH;
1778             dest16[1][i] = B >> SH;
1779             dest16[2][i] = R >> SH;
1780             if (hasAlpha)
1781                 dest16[3][i] = A;
1782         } else {
1783             dest[0][i] = G >> 22;
1784             dest[1][i] = B >> 22;
1785             dest[2][i] = R >> 22;
1786             if (hasAlpha)
1787                 dest[3][i] = A;
1788         }
1789     }
1790     if (SH != 22 && (!isBE(c->dstFormat)) != (!HAVE_BIGENDIAN)) {
1791         for (i = 0; i < dstW; i++) {
1792             dest16[0][i] = av_bswap16(dest16[0][i]);
1793             dest16[1][i] = av_bswap16(dest16[1][i]);
1794             dest16[2][i] = av_bswap16(dest16[2][i]);
1795             if (hasAlpha)
1796                 dest16[3][i] = av_bswap16(dest16[3][i]);
1797         }
1798     }
1799 }
1800
1801 av_cold void ff_sws_init_output_funcs(SwsContext *c,
1802                                       yuv2planar1_fn *yuv2plane1,
1803                                       yuv2planarX_fn *yuv2planeX,
1804                                       yuv2interleavedX_fn *yuv2nv12cX,
1805                                       yuv2packed1_fn *yuv2packed1,
1806                                       yuv2packed2_fn *yuv2packed2,
1807                                       yuv2packedX_fn *yuv2packedX,
1808                                       yuv2anyX_fn *yuv2anyX)
1809 {
1810     enum AVPixelFormat dstFormat = c->dstFormat;
1811     const AVPixFmtDescriptor *desc = av_pix_fmt_desc_get(dstFormat);
1812
1813     if (is16BPS(dstFormat)) {
1814         *yuv2planeX = isBE(dstFormat) ? yuv2planeX_16BE_c  : yuv2planeX_16LE_c;
1815         *yuv2plane1 = isBE(dstFormat) ? yuv2plane1_16BE_c  : yuv2plane1_16LE_c;
1816     } else if (is9_OR_10BPS(dstFormat)) {
1817         if (desc->comp[0].depth_minus1 == 8) {
1818             *yuv2planeX = isBE(dstFormat) ? yuv2planeX_9BE_c  : yuv2planeX_9LE_c;
1819             *yuv2plane1 = isBE(dstFormat) ? yuv2plane1_9BE_c  : yuv2plane1_9LE_c;
1820         } else if (desc->comp[0].depth_minus1 == 9) {
1821             *yuv2planeX = isBE(dstFormat) ? yuv2planeX_10BE_c  : yuv2planeX_10LE_c;
1822             *yuv2plane1 = isBE(dstFormat) ? yuv2plane1_10BE_c  : yuv2plane1_10LE_c;
1823         } else if (desc->comp[0].depth_minus1 == 11) {
1824             *yuv2planeX = isBE(dstFormat) ? yuv2planeX_12BE_c  : yuv2planeX_12LE_c;
1825             *yuv2plane1 = isBE(dstFormat) ? yuv2plane1_12BE_c  : yuv2plane1_12LE_c;
1826         } else if (desc->comp[0].depth_minus1 == 13) {
1827             *yuv2planeX = isBE(dstFormat) ? yuv2planeX_14BE_c  : yuv2planeX_14LE_c;
1828             *yuv2plane1 = isBE(dstFormat) ? yuv2plane1_14BE_c  : yuv2plane1_14LE_c;
1829         } else
1830             av_assert0(0);
1831     } else {
1832         *yuv2plane1 = yuv2plane1_8_c;
1833         *yuv2planeX = yuv2planeX_8_c;
1834         if (dstFormat == AV_PIX_FMT_NV12 || dstFormat == AV_PIX_FMT_NV21)
1835             *yuv2nv12cX = yuv2nv12cX_c;
1836     }
1837
1838     if(c->flags & SWS_FULL_CHR_H_INT) {
1839         switch (dstFormat) {
1840             case AV_PIX_FMT_RGBA:
1841 #if CONFIG_SMALL
1842                 *yuv2packedX = yuv2rgba32_full_X_c;
1843                 *yuv2packed2 = yuv2rgba32_full_2_c;
1844                 *yuv2packed1 = yuv2rgba32_full_1_c;
1845 #else
1846 #if CONFIG_SWSCALE_ALPHA
1847                 if (c->alpPixBuf) {
1848                     *yuv2packedX = yuv2rgba32_full_X_c;
1849                     *yuv2packed2 = yuv2rgba32_full_2_c;
1850                     *yuv2packed1 = yuv2rgba32_full_1_c;
1851                 } else
1852 #endif /* CONFIG_SWSCALE_ALPHA */
1853                 {
1854                     *yuv2packedX = yuv2rgbx32_full_X_c;
1855                     *yuv2packed2 = yuv2rgbx32_full_2_c;
1856                     *yuv2packed1 = yuv2rgbx32_full_1_c;
1857                 }
1858 #endif /* !CONFIG_SMALL */
1859                 break;
1860             case AV_PIX_FMT_ARGB:
1861 #if CONFIG_SMALL
1862                 *yuv2packedX = yuv2argb32_full_X_c;
1863                 *yuv2packed2 = yuv2argb32_full_2_c;
1864                 *yuv2packed1 = yuv2argb32_full_1_c;
1865 #else
1866 #if CONFIG_SWSCALE_ALPHA
1867                 if (c->alpPixBuf) {
1868                     *yuv2packedX = yuv2argb32_full_X_c;
1869                     *yuv2packed2 = yuv2argb32_full_2_c;
1870                     *yuv2packed1 = yuv2argb32_full_1_c;
1871                 } else
1872 #endif /* CONFIG_SWSCALE_ALPHA */
1873                 {
1874                     *yuv2packedX = yuv2xrgb32_full_X_c;
1875                     *yuv2packed2 = yuv2xrgb32_full_2_c;
1876                     *yuv2packed1 = yuv2xrgb32_full_1_c;
1877                 }
1878 #endif /* !CONFIG_SMALL */
1879                 break;
1880             case AV_PIX_FMT_BGRA:
1881 #if CONFIG_SMALL
1882                 *yuv2packedX = yuv2bgra32_full_X_c;
1883                 *yuv2packed2 = yuv2bgra32_full_2_c;
1884                 *yuv2packed1 = yuv2bgra32_full_1_c;
1885 #else
1886 #if CONFIG_SWSCALE_ALPHA
1887                 if (c->alpPixBuf) {
1888                     *yuv2packedX = yuv2bgra32_full_X_c;
1889                     *yuv2packed2 = yuv2bgra32_full_2_c;
1890                     *yuv2packed1 = yuv2bgra32_full_1_c;
1891                 } else
1892 #endif /* CONFIG_SWSCALE_ALPHA */
1893                 {
1894                     *yuv2packedX = yuv2bgrx32_full_X_c;
1895                     *yuv2packed2 = yuv2bgrx32_full_2_c;
1896                     *yuv2packed1 = yuv2bgrx32_full_1_c;
1897                 }
1898 #endif /* !CONFIG_SMALL */
1899                 break;
1900             case AV_PIX_FMT_ABGR:
1901 #if CONFIG_SMALL
1902                 *yuv2packedX = yuv2abgr32_full_X_c;
1903                 *yuv2packed2 = yuv2abgr32_full_2_c;
1904                 *yuv2packed1 = yuv2abgr32_full_1_c;
1905 #else
1906 #if CONFIG_SWSCALE_ALPHA
1907                 if (c->alpPixBuf) {
1908                     *yuv2packedX = yuv2abgr32_full_X_c;
1909                     *yuv2packed2 = yuv2abgr32_full_2_c;
1910                     *yuv2packed1 = yuv2abgr32_full_1_c;
1911                 } else
1912 #endif /* CONFIG_SWSCALE_ALPHA */
1913                 {
1914                     *yuv2packedX = yuv2xbgr32_full_X_c;
1915                     *yuv2packed2 = yuv2xbgr32_full_2_c;
1916                     *yuv2packed1 = yuv2xbgr32_full_1_c;
1917                 }
1918 #endif /* !CONFIG_SMALL */
1919                 break;
1920             case AV_PIX_FMT_RGB24:
1921             *yuv2packedX = yuv2rgb24_full_X_c;
1922             *yuv2packed2 = yuv2rgb24_full_2_c;
1923             *yuv2packed1 = yuv2rgb24_full_1_c;
1924             break;
1925         case AV_PIX_FMT_BGR24:
1926             *yuv2packedX = yuv2bgr24_full_X_c;
1927             *yuv2packed2 = yuv2bgr24_full_2_c;
1928             *yuv2packed1 = yuv2bgr24_full_1_c;
1929             break;
1930         case AV_PIX_FMT_BGR4_BYTE:
1931             *yuv2packedX = yuv2bgr4_byte_full_X_c;
1932             *yuv2packed2 = yuv2bgr4_byte_full_2_c;
1933             *yuv2packed1 = yuv2bgr4_byte_full_1_c;
1934             break;
1935         case AV_PIX_FMT_RGB4_BYTE:
1936             *yuv2packedX = yuv2rgb4_byte_full_X_c;
1937             *yuv2packed2 = yuv2rgb4_byte_full_2_c;
1938             *yuv2packed1 = yuv2rgb4_byte_full_1_c;
1939             break;
1940         case AV_PIX_FMT_BGR8:
1941             *yuv2packedX = yuv2bgr8_full_X_c;
1942             *yuv2packed2 = yuv2bgr8_full_2_c;
1943             *yuv2packed1 = yuv2bgr8_full_1_c;
1944             break;
1945         case AV_PIX_FMT_RGB8:
1946             *yuv2packedX = yuv2rgb8_full_X_c;
1947             *yuv2packed2 = yuv2rgb8_full_2_c;
1948             *yuv2packed1 = yuv2rgb8_full_1_c;
1949             break;
1950         case AV_PIX_FMT_GBRP:
1951         case AV_PIX_FMT_GBRP9BE:
1952         case AV_PIX_FMT_GBRP9LE:
1953         case AV_PIX_FMT_GBRP10BE:
1954         case AV_PIX_FMT_GBRP10LE:
1955         case AV_PIX_FMT_GBRP12BE:
1956         case AV_PIX_FMT_GBRP12LE:
1957         case AV_PIX_FMT_GBRP14BE:
1958         case AV_PIX_FMT_GBRP14LE:
1959         case AV_PIX_FMT_GBRP16BE:
1960         case AV_PIX_FMT_GBRP16LE:
1961         case AV_PIX_FMT_GBRAP:
1962             *yuv2anyX = yuv2gbrp_full_X_c;
1963             break;
1964         }
1965         if (!*yuv2packedX && !*yuv2anyX)
1966             goto YUV_PACKED;
1967     } else {
1968         YUV_PACKED:
1969         switch (dstFormat) {
1970         case AV_PIX_FMT_RGBA64LE:
1971 #if CONFIG_SWSCALE_ALPHA
1972             if (c->alpPixBuf) {
1973                 *yuv2packed1 = yuv2rgba64le_1_c;
1974                 *yuv2packed2 = yuv2rgba64le_2_c;
1975                 *yuv2packedX = yuv2rgba64le_X_c;
1976             } else
1977 #endif /* CONFIG_SWSCALE_ALPHA */
1978             {
1979                 *yuv2packed1 = yuv2rgbx64le_1_c;
1980                 *yuv2packed2 = yuv2rgbx64le_2_c;
1981                 *yuv2packedX = yuv2rgbx64le_X_c;
1982             }
1983             break;
1984         case AV_PIX_FMT_RGBA64BE:
1985 #if CONFIG_SWSCALE_ALPHA
1986             if (c->alpPixBuf) {
1987                 *yuv2packed1 = yuv2rgba64be_1_c;
1988                 *yuv2packed2 = yuv2rgba64be_2_c;
1989                 *yuv2packedX = yuv2rgba64be_X_c;
1990             } else
1991 #endif /* CONFIG_SWSCALE_ALPHA */
1992             {
1993                 *yuv2packed1 = yuv2rgbx64be_1_c;
1994                 *yuv2packed2 = yuv2rgbx64be_2_c;
1995                 *yuv2packedX = yuv2rgbx64be_X_c;
1996             }
1997             break;
1998         case AV_PIX_FMT_RGB48LE:
1999             *yuv2packed1 = yuv2rgb48le_1_c;
2000             *yuv2packed2 = yuv2rgb48le_2_c;
2001             *yuv2packedX = yuv2rgb48le_X_c;
2002             break;
2003         case AV_PIX_FMT_RGB48BE:
2004             *yuv2packed1 = yuv2rgb48be_1_c;
2005             *yuv2packed2 = yuv2rgb48be_2_c;
2006             *yuv2packedX = yuv2rgb48be_X_c;
2007             break;
2008         case AV_PIX_FMT_BGR48LE:
2009             *yuv2packed1 = yuv2bgr48le_1_c;
2010             *yuv2packed2 = yuv2bgr48le_2_c;
2011             *yuv2packedX = yuv2bgr48le_X_c;
2012             break;
2013         case AV_PIX_FMT_BGR48BE:
2014             *yuv2packed1 = yuv2bgr48be_1_c;
2015             *yuv2packed2 = yuv2bgr48be_2_c;
2016             *yuv2packedX = yuv2bgr48be_X_c;
2017             break;
2018         case AV_PIX_FMT_RGB32:
2019         case AV_PIX_FMT_BGR32:
2020 #if CONFIG_SMALL
2021             *yuv2packed1 = yuv2rgb32_1_c;
2022             *yuv2packed2 = yuv2rgb32_2_c;
2023             *yuv2packedX = yuv2rgb32_X_c;
2024 #else
2025 #if CONFIG_SWSCALE_ALPHA
2026                 if (c->alpPixBuf) {
2027                     *yuv2packed1 = yuv2rgba32_1_c;
2028                     *yuv2packed2 = yuv2rgba32_2_c;
2029                     *yuv2packedX = yuv2rgba32_X_c;
2030                 } else
2031 #endif /* CONFIG_SWSCALE_ALPHA */
2032                 {
2033                     *yuv2packed1 = yuv2rgbx32_1_c;
2034                     *yuv2packed2 = yuv2rgbx32_2_c;
2035                     *yuv2packedX = yuv2rgbx32_X_c;
2036                 }
2037 #endif /* !CONFIG_SMALL */
2038             break;
2039         case AV_PIX_FMT_RGB32_1:
2040         case AV_PIX_FMT_BGR32_1:
2041 #if CONFIG_SMALL
2042                 *yuv2packed1 = yuv2rgb32_1_1_c;
2043                 *yuv2packed2 = yuv2rgb32_1_2_c;
2044                 *yuv2packedX = yuv2rgb32_1_X_c;
2045 #else
2046 #if CONFIG_SWSCALE_ALPHA
2047                 if (c->alpPixBuf) {
2048                     *yuv2packed1 = yuv2rgba32_1_1_c;
2049                     *yuv2packed2 = yuv2rgba32_1_2_c;
2050                     *yuv2packedX = yuv2rgba32_1_X_c;
2051                 } else
2052 #endif /* CONFIG_SWSCALE_ALPHA */
2053                 {
2054                     *yuv2packed1 = yuv2rgbx32_1_1_c;
2055                     *yuv2packed2 = yuv2rgbx32_1_2_c;
2056                     *yuv2packedX = yuv2rgbx32_1_X_c;
2057                 }
2058 #endif /* !CONFIG_SMALL */
2059                 break;
2060         case AV_PIX_FMT_RGB24:
2061             *yuv2packed1 = yuv2rgb24_1_c;
2062             *yuv2packed2 = yuv2rgb24_2_c;
2063             *yuv2packedX = yuv2rgb24_X_c;
2064             break;
2065         case AV_PIX_FMT_BGR24:
2066             *yuv2packed1 = yuv2bgr24_1_c;
2067             *yuv2packed2 = yuv2bgr24_2_c;
2068             *yuv2packedX = yuv2bgr24_X_c;
2069             break;
2070         case AV_PIX_FMT_RGB565LE:
2071         case AV_PIX_FMT_RGB565BE:
2072         case AV_PIX_FMT_BGR565LE:
2073         case AV_PIX_FMT_BGR565BE:
2074             *yuv2packed1 = yuv2rgb16_1_c;
2075             *yuv2packed2 = yuv2rgb16_2_c;
2076             *yuv2packedX = yuv2rgb16_X_c;
2077             break;
2078         case AV_PIX_FMT_RGB555LE:
2079         case AV_PIX_FMT_RGB555BE:
2080         case AV_PIX_FMT_BGR555LE:
2081         case AV_PIX_FMT_BGR555BE:
2082             *yuv2packed1 = yuv2rgb15_1_c;
2083             *yuv2packed2 = yuv2rgb15_2_c;
2084             *yuv2packedX = yuv2rgb15_X_c;
2085             break;
2086         case AV_PIX_FMT_RGB444LE:
2087         case AV_PIX_FMT_RGB444BE:
2088         case AV_PIX_FMT_BGR444LE:
2089         case AV_PIX_FMT_BGR444BE:
2090             *yuv2packed1 = yuv2rgb12_1_c;
2091             *yuv2packed2 = yuv2rgb12_2_c;
2092             *yuv2packedX = yuv2rgb12_X_c;
2093             break;
2094         case AV_PIX_FMT_RGB8:
2095         case AV_PIX_FMT_BGR8:
2096             *yuv2packed1 = yuv2rgb8_1_c;
2097             *yuv2packed2 = yuv2rgb8_2_c;
2098             *yuv2packedX = yuv2rgb8_X_c;
2099             break;
2100         case AV_PIX_FMT_RGB4:
2101         case AV_PIX_FMT_BGR4:
2102             *yuv2packed1 = yuv2rgb4_1_c;
2103             *yuv2packed2 = yuv2rgb4_2_c;
2104             *yuv2packedX = yuv2rgb4_X_c;
2105             break;
2106         case AV_PIX_FMT_RGB4_BYTE:
2107         case AV_PIX_FMT_BGR4_BYTE:
2108             *yuv2packed1 = yuv2rgb4b_1_c;
2109             *yuv2packed2 = yuv2rgb4b_2_c;
2110             *yuv2packedX = yuv2rgb4b_X_c;
2111             break;
2112         }
2113     }
2114     switch (dstFormat) {
2115     case AV_PIX_FMT_MONOWHITE:
2116         *yuv2packed1 = yuv2monowhite_1_c;
2117         *yuv2packed2 = yuv2monowhite_2_c;
2118         *yuv2packedX = yuv2monowhite_X_c;
2119         break;
2120     case AV_PIX_FMT_MONOBLACK:
2121         *yuv2packed1 = yuv2monoblack_1_c;
2122         *yuv2packed2 = yuv2monoblack_2_c;
2123         *yuv2packedX = yuv2monoblack_X_c;
2124         break;
2125     case AV_PIX_FMT_YUYV422:
2126         *yuv2packed1 = yuv2yuyv422_1_c;
2127         *yuv2packed2 = yuv2yuyv422_2_c;
2128         *yuv2packedX = yuv2yuyv422_X_c;
2129         break;
2130     case AV_PIX_FMT_UYVY422:
2131         *yuv2packed1 = yuv2uyvy422_1_c;
2132         *yuv2packed2 = yuv2uyvy422_2_c;
2133         *yuv2packedX = yuv2uyvy422_X_c;
2134         break;
2135     }
2136 }