x86/float_dsp: add ff_vector_dmac_scalar_{sse2,avx,fma3}
[ffmpeg.git] / libavutil / x86 / float_dsp_init.c
1 /*
2  * This file is part of FFmpeg.
3  *
4  * FFmpeg is free software; you can redistribute it and/or
5  * modify it under the terms of the GNU Lesser General Public
6  * License as published by the Free Software Foundation; either
7  * version 2.1 of the License, or (at your option) any later version.
8  *
9  * FFmpeg is distributed in the hope that it will be useful,
10  * but WITHOUT ANY WARRANTY; without even the implied warranty of
11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
12  * Lesser General Public License for more details.
13  *
14  * You should have received a copy of the GNU Lesser General Public
15  * License along with FFmpeg; if not, write to the Free Software
16  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
17  */
18
19 #include "config.h"
20
21 #include "libavutil/attributes.h"
22 #include "libavutil/cpu.h"
23 #include "libavutil/float_dsp.h"
24 #include "cpu.h"
25 #include "asm.h"
26
27 void ff_vector_fmul_sse(float *dst, const float *src0, const float *src1,
28                         int len);
29 void ff_vector_fmul_avx(float *dst, const float *src0, const float *src1,
30                         int len);
31
32 void ff_vector_fmac_scalar_sse(float *dst, const float *src, float mul,
33                                int len);
34 void ff_vector_fmac_scalar_avx(float *dst, const float *src, float mul,
35                                int len);
36 void ff_vector_fmac_scalar_fma3(float *dst, const float *src, float mul,
37                                 int len);
38
39 void ff_vector_fmul_scalar_sse(float *dst, const float *src, float mul,
40                                int len);
41
42 void ff_vector_dmac_scalar_sse2(double *dst, const double *src, double mul,
43                                 int len);
44 void ff_vector_dmac_scalar_avx(double *dst, const double *src, double mul,
45                                int len);
46 void ff_vector_dmac_scalar_fma3(double *dst, const double *src, double mul,
47                                 int len);
48
49 void ff_vector_dmul_scalar_sse2(double *dst, const double *src,
50                                 double mul, int len);
51 void ff_vector_dmul_scalar_avx(double *dst, const double *src,
52                                double mul, int len);
53
54 void ff_vector_fmul_window_3dnowext(float *dst, const float *src0,
55                                     const float *src1, const float *win, int len);
56 void ff_vector_fmul_window_sse(float *dst, const float *src0,
57                                const float *src1, const float *win, int len);
58
59 void ff_vector_fmul_add_sse(float *dst, const float *src0, const float *src1,
60                             const float *src2, int len);
61 void ff_vector_fmul_add_avx(float *dst, const float *src0, const float *src1,
62                             const float *src2, int len);
63 void ff_vector_fmul_add_fma3(float *dst, const float *src0, const float *src1,
64                              const float *src2, int len);
65
66 void ff_vector_fmul_reverse_sse(float *dst, const float *src0,
67                                 const float *src1, int len);
68 void ff_vector_fmul_reverse_avx(float *dst, const float *src0,
69                                 const float *src1, int len);
70
71 float ff_scalarproduct_float_sse(const float *v1, const float *v2, int order);
72
73 void ff_butterflies_float_sse(float *av_restrict src0, float *av_restrict src1, int len);
74
75 av_cold void ff_float_dsp_init_x86(AVFloatDSPContext *fdsp)
76 {
77     int cpu_flags = av_get_cpu_flags();
78
79     if (EXTERNAL_AMD3DNOWEXT(cpu_flags)) {
80         fdsp->vector_fmul_window = ff_vector_fmul_window_3dnowext;
81     }
82     if (EXTERNAL_SSE(cpu_flags)) {
83         fdsp->vector_fmul = ff_vector_fmul_sse;
84         fdsp->vector_fmac_scalar = ff_vector_fmac_scalar_sse;
85         fdsp->vector_fmul_scalar = ff_vector_fmul_scalar_sse;
86         fdsp->vector_fmul_window = ff_vector_fmul_window_sse;
87         fdsp->vector_fmul_add    = ff_vector_fmul_add_sse;
88         fdsp->vector_fmul_reverse = ff_vector_fmul_reverse_sse;
89         fdsp->scalarproduct_float = ff_scalarproduct_float_sse;
90         fdsp->butterflies_float   = ff_butterflies_float_sse;
91     }
92     if (EXTERNAL_SSE2(cpu_flags)) {
93         fdsp->vector_dmac_scalar = ff_vector_dmac_scalar_sse2;
94         fdsp->vector_dmul_scalar = ff_vector_dmul_scalar_sse2;
95     }
96     if (EXTERNAL_AVX_FAST(cpu_flags)) {
97         fdsp->vector_fmul = ff_vector_fmul_avx;
98         fdsp->vector_fmac_scalar = ff_vector_fmac_scalar_avx;
99         fdsp->vector_dmul_scalar = ff_vector_dmul_scalar_avx;
100         fdsp->vector_dmac_scalar = ff_vector_dmac_scalar_avx;
101         fdsp->vector_fmul_add    = ff_vector_fmul_add_avx;
102         fdsp->vector_fmul_reverse = ff_vector_fmul_reverse_avx;
103     }
104     if (EXTERNAL_FMA3_FAST(cpu_flags)) {
105         fdsp->vector_fmac_scalar = ff_vector_fmac_scalar_fma3;
106         fdsp->vector_fmul_add    = ff_vector_fmul_add_fma3;
107         fdsp->vector_dmac_scalar = ff_vector_dmac_scalar_fma3;
108     }
109 }