Port pred8x8l_down_right_sse2/ssse3 (H.264 intra prediction) from x264
[ffmpeg.git] / libavcodec / x86 / h264_intrapred_init.c
1 /*
2  * Copyright (c) 2010 Jason Garrett-Glaser
3  *
4  * This file is part of FFmpeg.
5  *
6  * FFmpeg is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * FFmpeg is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with FFmpeg; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 #include "libavutil/cpu.h"
22 #include "libavcodec/h264pred.h"
23
24 void ff_pred16x16_vertical_mmx     (uint8_t *src, int stride);
25 void ff_pred16x16_vertical_sse     (uint8_t *src, int stride);
26 void ff_pred16x16_horizontal_mmx   (uint8_t *src, int stride);
27 void ff_pred16x16_horizontal_mmxext(uint8_t *src, int stride);
28 void ff_pred16x16_horizontal_ssse3 (uint8_t *src, int stride);
29 void ff_pred16x16_dc_mmxext        (uint8_t *src, int stride);
30 void ff_pred16x16_dc_sse2          (uint8_t *src, int stride);
31 void ff_pred16x16_dc_ssse3         (uint8_t *src, int stride);
32 void ff_pred16x16_plane_h264_mmx   (uint8_t *src, int stride);
33 void ff_pred16x16_plane_h264_mmx2  (uint8_t *src, int stride);
34 void ff_pred16x16_plane_h264_sse2  (uint8_t *src, int stride);
35 void ff_pred16x16_plane_h264_ssse3 (uint8_t *src, int stride);
36 void ff_pred16x16_plane_rv40_mmx   (uint8_t *src, int stride);
37 void ff_pred16x16_plane_rv40_mmx2  (uint8_t *src, int stride);
38 void ff_pred16x16_plane_rv40_sse2  (uint8_t *src, int stride);
39 void ff_pred16x16_plane_rv40_ssse3 (uint8_t *src, int stride);
40 void ff_pred16x16_plane_svq3_mmx   (uint8_t *src, int stride);
41 void ff_pred16x16_plane_svq3_mmx2  (uint8_t *src, int stride);
42 void ff_pred16x16_plane_svq3_sse2  (uint8_t *src, int stride);
43 void ff_pred16x16_plane_svq3_ssse3 (uint8_t *src, int stride);
44 void ff_pred16x16_tm_vp8_mmx       (uint8_t *src, int stride);
45 void ff_pred16x16_tm_vp8_mmxext    (uint8_t *src, int stride);
46 void ff_pred16x16_tm_vp8_sse2      (uint8_t *src, int stride);
47 void ff_pred8x8_top_dc_mmxext      (uint8_t *src, int stride);
48 void ff_pred8x8_dc_rv40_mmxext     (uint8_t *src, int stride);
49 void ff_pred8x8_dc_mmxext          (uint8_t *src, int stride);
50 void ff_pred8x8_vertical_mmx       (uint8_t *src, int stride);
51 void ff_pred8x8_horizontal_mmx     (uint8_t *src, int stride);
52 void ff_pred8x8_horizontal_mmxext  (uint8_t *src, int stride);
53 void ff_pred8x8_horizontal_ssse3   (uint8_t *src, int stride);
54 void ff_pred8x8_plane_mmx          (uint8_t *src, int stride);
55 void ff_pred8x8_plane_mmx2         (uint8_t *src, int stride);
56 void ff_pred8x8_plane_sse2         (uint8_t *src, int stride);
57 void ff_pred8x8_plane_ssse3        (uint8_t *src, int stride);
58 void ff_pred8x8_tm_vp8_mmx         (uint8_t *src, int stride);
59 void ff_pred8x8_tm_vp8_mmxext      (uint8_t *src, int stride);
60 void ff_pred8x8_tm_vp8_sse2        (uint8_t *src, int stride);
61 void ff_pred8x8_tm_vp8_ssse3       (uint8_t *src, int stride);
62 void ff_pred8x8l_top_dc_mmxext     (uint8_t *src, int has_topleft, int has_topright, int stride);
63 void ff_pred8x8l_top_dc_ssse3      (uint8_t *src, int has_topleft, int has_topright, int stride);
64 void ff_pred8x8l_dc_mmxext         (uint8_t *src, int has_topleft, int has_topright, int stride);
65 void ff_pred8x8l_dc_ssse3          (uint8_t *src, int has_topleft, int has_topright, int stride);
66 void ff_pred8x8l_horizontal_mmxext (uint8_t *src, int has_topleft, int has_topright, int stride);
67 void ff_pred8x8l_horizontal_ssse3  (uint8_t *src, int has_topleft, int has_topright, int stride);
68 void ff_pred8x8l_vertical_mmxext   (uint8_t *src, int has_topleft, int has_topright, int stride);
69 void ff_pred8x8l_vertical_ssse3    (uint8_t *src, int has_topleft, int has_topright, int stride);
70 void ff_pred8x8l_down_left_sse2    (uint8_t *src, int has_topleft, int has_topright, int stride);
71 void ff_pred8x8l_down_left_ssse3   (uint8_t *src, int has_topleft, int has_topright, int stride);
72 void ff_pred8x8l_down_right_mmxext (uint8_t *src, int has_topleft, int has_topright, int stride);
73 void ff_pred8x8l_down_right_sse2   (uint8_t *src, int has_topleft, int has_topright, int stride);
74 void ff_pred8x8l_down_right_ssse3  (uint8_t *src, int has_topleft, int has_topright, int stride);
75 void ff_pred4x4_dc_mmxext          (uint8_t *src, const uint8_t *topright, int stride);
76 void ff_pred4x4_down_left_mmxext   (uint8_t *src, const uint8_t *topright, int stride);
77 void ff_pred4x4_tm_vp8_mmx         (uint8_t *src, const uint8_t *topright, int stride);
78 void ff_pred4x4_tm_vp8_mmxext      (uint8_t *src, const uint8_t *topright, int stride);
79 void ff_pred4x4_tm_vp8_ssse3       (uint8_t *src, const uint8_t *topright, int stride);
80 void ff_pred4x4_vertical_vp8_mmxext(uint8_t *src, const uint8_t *topright, int stride);
81
82 void ff_h264_pred_init_x86(H264PredContext *h, int codec_id)
83 {
84     int mm_flags = av_get_cpu_flags();
85
86 #if HAVE_YASM
87     if (mm_flags & AV_CPU_FLAG_MMX) {
88         h->pred16x16[VERT_PRED8x8] = ff_pred16x16_vertical_mmx;
89         h->pred16x16[HOR_PRED8x8 ] = ff_pred16x16_horizontal_mmx;
90         h->pred8x8  [VERT_PRED8x8] = ff_pred8x8_vertical_mmx;
91         h->pred8x8  [HOR_PRED8x8 ] = ff_pred8x8_horizontal_mmx;
92         if (codec_id == CODEC_ID_VP8) {
93             h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_tm_vp8_mmx;
94             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_mmx;
95             h->pred4x4  [TM_VP8_PRED  ] = ff_pred4x4_tm_vp8_mmx;
96         } else {
97             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_mmx;
98             if (codec_id == CODEC_ID_SVQ3) {
99                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_mmx;
100             } else if (codec_id == CODEC_ID_RV40) {
101                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_mmx;
102             } else {
103                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_mmx;
104             }
105         }
106     }
107
108     if (mm_flags & AV_CPU_FLAG_MMX2) {
109         h->pred16x16[HOR_PRED8x8 ] = ff_pred16x16_horizontal_mmxext;
110         h->pred16x16[DC_PRED8x8  ] = ff_pred16x16_dc_mmxext;
111         h->pred8x8  [HOR_PRED8x8 ] = ff_pred8x8_horizontal_mmxext;
112 #if CONFIG_GPL
113         h->pred8x8l [TOP_DC_PRED ] = ff_pred8x8l_top_dc_mmxext;
114         h->pred8x8l [DC_PRED     ] = ff_pred8x8l_dc_mmxext;
115         h->pred8x8l [HOR_PRED    ] = ff_pred8x8l_horizontal_mmxext;
116         h->pred8x8l [VERT_PRED   ] = ff_pred8x8l_vertical_mmxext;
117         h->pred8x8l [DIAG_DOWN_RIGHT_PRED] = ff_pred8x8l_down_right_mmxext;
118 #endif
119         h->pred4x4  [DC_PRED     ] = ff_pred4x4_dc_mmxext;
120 #if CONFIG_GPL
121         if (codec_id == CODEC_ID_VP8 || codec_id == CODEC_ID_H264)
122             h->pred4x4  [DIAG_DOWN_LEFT_PRED ] = ff_pred4x4_down_left_mmxext;
123         if (codec_id == CODEC_ID_SVQ3 || codec_id == CODEC_ID_H264) {
124             h->pred8x8  [TOP_DC_PRED8x8      ] = ff_pred8x8_top_dc_mmxext;
125             h->pred8x8  [DC_PRED8x8          ] = ff_pred8x8_dc_mmxext;
126         }
127 #endif
128         if (codec_id == CODEC_ID_VP8) {
129             h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_tm_vp8_mmxext;
130             h->pred8x8  [DC_PRED8x8   ] = ff_pred8x8_dc_rv40_mmxext;
131             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_mmxext;
132             h->pred4x4  [TM_VP8_PRED  ] = ff_pred4x4_tm_vp8_mmxext;
133             h->pred4x4  [VERT_PRED    ] = ff_pred4x4_vertical_vp8_mmxext;
134         } else {
135             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_mmx2;
136             if (codec_id == CODEC_ID_SVQ3) {
137                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_mmx2;
138             } else if (codec_id == CODEC_ID_RV40) {
139                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_mmx2;
140             } else {
141                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_mmx2;
142             }
143         }
144     }
145
146     if (mm_flags & AV_CPU_FLAG_SSE) {
147         h->pred16x16[VERT_PRED8x8] = ff_pred16x16_vertical_sse;
148     }
149
150     if (mm_flags & AV_CPU_FLAG_SSE2) {
151         h->pred16x16[DC_PRED8x8  ] = ff_pred16x16_dc_sse2;
152 #if CONFIG_GPL
153         h->pred8x8l [DIAG_DOWN_LEFT_PRED] = ff_pred8x8l_down_left_sse2;
154         h->pred8x8l [DIAG_DOWN_RIGHT_PRED] = ff_pred8x8l_down_right_sse2;
155 #endif
156         if (codec_id == CODEC_ID_VP8) {
157             h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_tm_vp8_sse2;
158             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_sse2;
159         } else {
160             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_sse2;
161             if (codec_id == CODEC_ID_SVQ3) {
162                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_sse2;
163             } else if (codec_id == CODEC_ID_RV40) {
164                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_sse2;
165             } else {
166                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_sse2;
167             }
168         }
169     }
170
171     if (mm_flags & AV_CPU_FLAG_SSSE3) {
172         h->pred16x16[HOR_PRED8x8 ] = ff_pred16x16_horizontal_ssse3;
173         h->pred16x16[DC_PRED8x8  ] = ff_pred16x16_dc_ssse3;
174         h->pred8x8  [HOR_PRED8x8 ] = ff_pred8x8_horizontal_ssse3;
175 #if CONFIG_GPL
176         h->pred8x8l [TOP_DC_PRED ] = ff_pred8x8l_top_dc_ssse3;
177         h->pred8x8l [DC_PRED     ] = ff_pred8x8l_dc_ssse3;
178         h->pred8x8l [HOR_PRED    ] = ff_pred8x8l_horizontal_ssse3;
179         h->pred8x8l [VERT_PRED   ] = ff_pred8x8l_vertical_ssse3;
180         h->pred8x8l [DIAG_DOWN_LEFT_PRED] = ff_pred8x8l_down_left_ssse3;
181         h->pred8x8l [DIAG_DOWN_RIGHT_PRED] = ff_pred8x8l_down_right_ssse3;
182 #endif
183         if (codec_id == CODEC_ID_VP8) {
184             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_tm_vp8_ssse3;
185             h->pred4x4  [TM_VP8_PRED  ] = ff_pred4x4_tm_vp8_ssse3;
186         } else {
187             h->pred8x8  [PLANE_PRED8x8] = ff_pred8x8_plane_ssse3;
188             if (codec_id == CODEC_ID_SVQ3) {
189                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_svq3_ssse3;
190             } else if (codec_id == CODEC_ID_RV40) {
191                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_rv40_ssse3;
192             } else {
193                 h->pred16x16[PLANE_PRED8x8] = ff_pred16x16_plane_h264_ssse3;
194             }
195         }
196     }
197 #endif
198 }