Port pred8x8l_horizontal_down_sse2/ssse3 (H.264 intra prediction) from x264
[ffmpeg.git] / libavcodec / x86 / h264_intrapred_init.c
1 /*
2  * Copyright (c) 2010 Jason Garrett-Glaser
3  *
4  * This file is part of FFmpeg.
5  *
6  * FFmpeg is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * FFmpeg is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with FFmpeg; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 #include "libavutil/cpu.h"
22 #include "libavcodec/h264pred.h"
23
24 void ff_pred16x16_vertical_mmx     (uint8_t *src, int stride);
25 void ff_pred16x16_vertical_sse     (uint8_t *src, int stride);
26 void ff_pred16x16_horizontal_mmx   (uint8_t *src, int stride);
27 void ff_pred16x16_horizontal_mmxext(uint8_t *src, int stride);
28 void ff_pred16x16_horizontal_ssse3 (uint8_t *src, int stride);
29 void ff_pred16x16_dc_mmxext        (uint8_t *src, int stride);
30 void ff_pred16x16_dc_sse2          (uint8_t *src, int stride);
31 void ff_pred16x16_dc_ssse3         (uint8_t *src, int stride);
32 void ff_pred16x16_plane_h264_mmx   (uint8_t *src, int stride);
33 void ff_pred16x16_plane_h264_mmx2  (uint8_t *src, int stride);
34 void ff_pred16x16_plane_h264_sse2  (uint8_t *src, int stride);
35 void ff_pred16x16_plane_h264_ssse3 (uint8_t *src, int stride);
36 void ff_pred16x16_plane_rv40_mmx   (uint8_t *src, int stride);
37 void ff_pred16x16_plane_rv40_mmx2  (uint8_t *src, int stride);
38 void ff_pred16x16_plane_rv40_sse2  (uint8_t *src, int stride);
39 void ff_pred16x16_plane_rv40_ssse3 (uint8_t *src, int stride);
40 void ff_pred16x16_plane_svq3_mmx   (uint8_t *src, int stride);
41 void ff_pred16x16_plane_svq3_mmx2  (uint8_t *src, int stride);
42 void ff_pred16x16_plane_svq3_sse2  (uint8_t *src, int stride);
43 void ff_pred16x16_plane_svq3_ssse3 (uint8_t *src, int stride);
44 void ff_pred16x16_tm_vp8_mmx       (uint8_t *src, int stride);
45 void ff_pred16x16_tm_vp8_mmxext    (uint8_t *src, int stride);
46 void ff_pred16x16_tm_vp8_sse2      (uint8_t *src, int stride);
47 void ff_pred8x8_top_dc_mmxext      (uint8_t *src, int stride);
48 void ff_pred8x8_dc_rv40_mmxext     (uint8_t *src, int stride);
49 void ff_pred8x8_dc_mmxext          (uint8_t *src, int stride);
50 void ff_pred8x8_vertical_mmx       (uint8_t *src, int stride);
51 void ff_pred8x8_horizontal_mmx     (uint8_t *src, int stride);
52 void ff_pred8x8_horizontal_mmxext  (uint8_t *src, int stride);
53 void ff_pred8x8_horizontal_ssse3   (uint8_t *src, int stride);
54 void ff_pred8x8_plane_mmx          (uint8_t *src, int stride);
55 void ff_pred8x8_plane_mmx2         (uint8_t *src, int stride);
56 void ff_pred8x8_plane_sse2         (uint8_t *src, int stride);
57 void ff_pred8x8_plane_ssse3        (uint8_t *src, int stride);
58 void ff_pred8x8_tm_vp8_mmx         (uint8_t *src, int stride);
59 void ff_pred8x8_tm_vp8_mmxext      (uint8_t *src, int stride);
60 void ff_pred8x8_tm_vp8_sse2        (uint8_t *src, int stride);
61 void ff_pred8x8_tm_vp8_ssse3       (uint8_t *src, int stride);
62 void ff_pred8x8l_top_dc_mmxext     (uint8_t *src, int has_topleft, int has_topright, int stride);
63 void ff_pred8x8l_top_dc_ssse3      (uint8_t *src, int has_topleft, int has_topright, int stride);
64 void ff_pred8x8l_dc_mmxext         (uint8_t *src, int has_topleft, int has_topright, int stride);
65 void ff_pred8x8l_dc_ssse3          (uint8_t *src, int has_topleft, int has_topright, int stride);
66 void ff_pred8x8l_horizontal_mmxext (uint8_t *src, int has_topleft, int has_topright, int stride);
67 void ff_pred8x8l_horizontal_ssse3  (uint8_t *src, int has_topleft, int has_topright, int stride);
68 void ff_pred8x8l_vertical_mmxext   (uint8_t *src, int has_topleft, int has_topright, int stride);
69 void ff_pred8x8l_vertical_ssse3    (uint8_t *src, int has_topleft, int has_topright, int stride);
70 void ff_pred8x8l_down_left_sse2    (uint8_t *src, int has_topleft, int has_topright, int stride);
71 void ff_pred8x8l_down_left_ssse3   (uint8_t *src, int has_topleft, int has_topright, int stride);
72 void ff_pred8x8l_down_right_mmxext (uint8_t *src, int has_topleft, int has_topright, int stride);
73 void ff_pred8x8l_down_right_sse2   (uint8_t *src, int has_topleft, int has_topright, int stride);
74 void ff_pred8x8l_down_right_ssse3  (uint8_t *src, int has_topleft, int has_topright, int stride);
75 void ff_pred8x8l_vertical_right_mmxext(uint8_t *src, int has_topleft, int has_topright, int stride);
76 void ff_pred8x8l_vertical_right_sse2(uint8_t *src, int has_topleft, int has_topright, int stride);
77 void ff_pred8x8l_vertical_right_ssse3(uint8_t *src, int has_topleft, int has_topright, int stride);
78 void ff_pred8x8l_vertical_left_sse2(uint8_t *src, int has_topleft, int has_topright, int stride);
79 void ff_pred8x8l_vertical_left_ssse3(uint8_t *src, int has_topleft, int has_topright, int stride);
80 void ff_pred8x8l_horizontal_up_mmxext(uint8_t *src, int has_topleft, int has_topright, int stride);
81 void ff_pred8x8l_horizontal_up_ssse3(uint8_t *src, int has_topleft, int has_topright, int stride);
82 void ff_pred8x8l_horizontal_down_mmxext(uint8_t *src, int has_topleft, int has_topright, int stride);
83 void ff_pred8x8l_horizontal_down_sse2(uint8_t *src, int has_topleft, int has_topright, int stride);
84 void ff_pred8x8l_horizontal_down_ssse3(uint8_t *src, int has_topleft, int has_topright, int stride);
85 void ff_pred4x4_dc_mmxext          (uint8_t *src, const uint8_t *topright, int stride);
86 void ff_pred4x4_down_left_mmxext   (uint8_t *src, const uint8_t *topright, int stride);
87 void ff_pred4x4_tm_vp8_mmx         (uint8_t *src, const uint8_t *topright, int stride);
88 void ff_pred4x4_tm_vp8_mmxext      (uint8_t *src, const uint8_t *topright, int stride);
89 void ff_pred4x4_tm_vp8_ssse3       (uint8_t *src, const uint8_t *topright, int stride);
90 void ff_pred4x4_vertical_vp8_mmxext(uint8_t *src, const uint8_t *topright, int stride);
91
92 void ff_h264_pred_init_x86(H264PredContext *h, int codec_id)
93 {
94     int mm_flags = av_get_cpu_flags();
95
96 #if HAVE_YASM
97     if (mm_flags & AV_CPU_FLAG_MMX) {
98         h->pred16x16[VERT_PRED8x8] = ff_pred16x16_vertical_mmx;
99         h->pred16x16[HOR_PRED8x8 ] = ff_pred16x16_horizontal_mmx;
100         h->pred8x8  [VERT_PRED8x8] = ff_pred8x8_vertical_mmx;
101         h->pred8x8  [HOR_PRED8x8 ] = ff_pred8x8_horizontal_mmx;
102         if (codec_id == CODEC_ID_VP8) {
103             h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_tm_vp8_mmx;
104             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_mmx;
105             h->pred4x4  [TM_VP8_PRED  ] = ff_pred4x4_tm_vp8_mmx;
106         } else {
107             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_mmx;
108             if (codec_id == CODEC_ID_SVQ3) {
109                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_mmx;
110             } else if (codec_id == CODEC_ID_RV40) {
111                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_mmx;
112             } else {
113                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_mmx;
114             }
115         }
116     }
117
118     if (mm_flags & AV_CPU_FLAG_MMX2) {
119         h->pred16x16[HOR_PRED8x8 ] = ff_pred16x16_horizontal_mmxext;
120         h->pred16x16[DC_PRED8x8  ] = ff_pred16x16_dc_mmxext;
121         h->pred8x8  [HOR_PRED8x8 ] = ff_pred8x8_horizontal_mmxext;
122 #if CONFIG_GPL
123         h->pred8x8l [TOP_DC_PRED ] = ff_pred8x8l_top_dc_mmxext;
124         h->pred8x8l [DC_PRED     ] = ff_pred8x8l_dc_mmxext;
125         h->pred8x8l [HOR_PRED    ] = ff_pred8x8l_horizontal_mmxext;
126         h->pred8x8l [VERT_PRED   ] = ff_pred8x8l_vertical_mmxext;
127         h->pred8x8l [DIAG_DOWN_RIGHT_PRED] = ff_pred8x8l_down_right_mmxext;
128         h->pred8x8l [VERT_RIGHT_PRED     ] = ff_pred8x8l_vertical_right_mmxext;
129         h->pred8x8l [HOR_UP_PRED         ] = ff_pred8x8l_horizontal_up_mmxext;
130         h->pred8x8l [HOR_DOWN_PRED       ] = ff_pred8x8l_horizontal_down_mmxext;
131 #endif
132         h->pred4x4  [DC_PRED     ] = ff_pred4x4_dc_mmxext;
133 #if CONFIG_GPL
134         if (codec_id == CODEC_ID_VP8 || codec_id == CODEC_ID_H264)
135             h->pred4x4  [DIAG_DOWN_LEFT_PRED ] = ff_pred4x4_down_left_mmxext;
136         if (codec_id == CODEC_ID_SVQ3 || codec_id == CODEC_ID_H264) {
137             h->pred8x8  [TOP_DC_PRED8x8      ] = ff_pred8x8_top_dc_mmxext;
138             h->pred8x8  [DC_PRED8x8          ] = ff_pred8x8_dc_mmxext;
139         }
140 #endif
141         if (codec_id == CODEC_ID_VP8) {
142             h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_tm_vp8_mmxext;
143             h->pred8x8  [DC_PRED8x8   ] = ff_pred8x8_dc_rv40_mmxext;
144             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_mmxext;
145             h->pred4x4  [TM_VP8_PRED  ] = ff_pred4x4_tm_vp8_mmxext;
146             h->pred4x4  [VERT_PRED    ] = ff_pred4x4_vertical_vp8_mmxext;
147         } else {
148             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_mmx2;
149             if (codec_id == CODEC_ID_SVQ3) {
150                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_mmx2;
151             } else if (codec_id == CODEC_ID_RV40) {
152                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_mmx2;
153             } else {
154                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_mmx2;
155             }
156         }
157     }
158
159     if (mm_flags & AV_CPU_FLAG_SSE) {
160         h->pred16x16[VERT_PRED8x8] = ff_pred16x16_vertical_sse;
161     }
162
163     if (mm_flags & AV_CPU_FLAG_SSE2) {
164         h->pred16x16[DC_PRED8x8  ] = ff_pred16x16_dc_sse2;
165 #if CONFIG_GPL
166         h->pred8x8l [DIAG_DOWN_LEFT_PRED] = ff_pred8x8l_down_left_sse2;
167         h->pred8x8l [DIAG_DOWN_RIGHT_PRED] = ff_pred8x8l_down_right_sse2;
168         h->pred8x8l [VERT_RIGHT_PRED     ] = ff_pred8x8l_vertical_right_sse2;
169         h->pred8x8l [VERT_LEFT_PRED      ] = ff_pred8x8l_vertical_left_sse2;
170         h->pred8x8l [HOR_DOWN_PRED       ] = ff_pred8x8l_horizontal_down_sse2;
171 #endif
172         if (codec_id == CODEC_ID_VP8) {
173             h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_tm_vp8_sse2;
174             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_sse2;
175         } else {
176             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_sse2;
177             if (codec_id == CODEC_ID_SVQ3) {
178                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_sse2;
179             } else if (codec_id == CODEC_ID_RV40) {
180                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_sse2;
181             } else {
182                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_sse2;
183             }
184         }
185     }
186
187     if (mm_flags & AV_CPU_FLAG_SSSE3) {
188         h->pred16x16[HOR_PRED8x8 ] = ff_pred16x16_horizontal_ssse3;
189         h->pred16x16[DC_PRED8x8  ] = ff_pred16x16_dc_ssse3;
190         h->pred8x8  [HOR_PRED8x8 ] = ff_pred8x8_horizontal_ssse3;
191 #if CONFIG_GPL
192         h->pred8x8l [TOP_DC_PRED ] = ff_pred8x8l_top_dc_ssse3;
193         h->pred8x8l [DC_PRED     ] = ff_pred8x8l_dc_ssse3;
194         h->pred8x8l [HOR_PRED    ] = ff_pred8x8l_horizontal_ssse3;
195         h->pred8x8l [VERT_PRED   ] = ff_pred8x8l_vertical_ssse3;
196         h->pred8x8l [DIAG_DOWN_LEFT_PRED] = ff_pred8x8l_down_left_ssse3;
197         h->pred8x8l [DIAG_DOWN_RIGHT_PRED] = ff_pred8x8l_down_right_ssse3;
198         h->pred8x8l [VERT_RIGHT_PRED     ] = ff_pred8x8l_vertical_right_ssse3;
199         h->pred8x8l [VERT_LEFT_PRED      ] = ff_pred8x8l_vertical_left_ssse3;
200         h->pred8x8l [HOR_UP_PRED         ] = ff_pred8x8l_horizontal_up_ssse3;
201         h->pred8x8l [HOR_DOWN_PRED       ] = ff_pred8x8l_horizontal_down_ssse3;
202 #endif
203         if (codec_id == CODEC_ID_VP8) {
204             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_ssse3;
205             h->pred4x4  [TM_VP8_PRED  ] = ff_pred4x4_tm_vp8_ssse3;
206         } else {
207             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_ssse3;
208             if (codec_id == CODEC_ID_SVQ3) {
209                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_ssse3;
210             } else if (codec_id == CODEC_ID_RV40) {
211                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_ssse3;
212             } else {
213                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_ssse3;
214             }
215         }
216     }
217 #endif
218 }