unused stuff removial
[ffmpeg.git] / libavutil / aes.c
1 /*
2  * copyright (c) 2007 Michael Niedermayer <michaelni@gmx.at> and Reimar Doeffinger
3  *
4  * This file is part of FFmpeg.
5  *
6  * FFmpeg is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * FFmpeg is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with FFmpeg; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20
21 #include "common.h"
22 #include "log.h"
23 #include "aes.h"
24
25 typedef struct AVAES{
26     uint8_t round_enc_key[15][4][4];
27     uint8_t round_dec_key[15][4][4];
28     uint8_t state[4][4];
29     int rounds;
30 }AVAES;
31
32 static const uint8_t rcon[11] = {
33   0x01, 0x02, 0x04, 0x08, 0x10, 0x20, 0x40, 0x80, 0x1b, 0x36, 0x6c
34 };
35
36 static uint8_t     sbox[256];
37 static uint8_t inv_sbox[256];
38 #ifdef CONFIG_SMALL
39 static uint32_t enc_multbl[1][256];
40 static uint32_t dec_multbl[1][256];
41 #else
42 static uint32_t enc_multbl[4][256];
43 static uint32_t dec_multbl[4][256];
44 #endif
45
46 static inline void addkey(uint64_t state[2], uint64_t round_key[2]){
47     state[0] ^= round_key[0];
48     state[1] ^= round_key[1];
49 }
50
51 #define SUBSHIFT0(s, box)         s[0]=box[s[ 0]]; s[ 4]=box[s[ 4]];          s[ 8]=box[s[ 8]]; s[12]=box[s[12]];
52 #define SUBSHIFT1(s, box) t=s[0]; s[0]=box[s[ 4]]; s[ 4]=box[s[ 8]];          s[ 8]=box[s[12]]; s[12]=box[t];
53 #define SUBSHIFT2(s, box) t=s[0]; s[0]=box[s[ 8]]; s[ 8]=box[    t]; t=s[ 4]; s[ 4]=box[s[12]]; s[12]=box[t];
54 #define SUBSHIFT3(s, box) t=s[0]; s[0]=box[s[12]]; s[12]=box[s[ 8]];          s[ 8]=box[s[ 4]]; s[ 4]=box[t];
55
56 #define SUBSHIFT1x(s) t=s[0]; s[0]=s[ 4]; s[ 4]=s[ 8];          s[ 8]=s[12]; s[12]=t;
57 #define SUBSHIFT2x(s) t=s[0]; s[0]=s[ 8]; s[ 8]=    t; t=s[ 4]; s[ 4]=s[12]; s[12]=t;
58 #define SUBSHIFT3x(s) t=s[0]; s[0]=s[12]; s[12]=s[ 8];          s[ 8]=s[ 4]; s[ 4]=t;
59
60 #define ROT(x,s) ((x<<s)|(x>>(32-s)))
61
62 static inline void mix(uint8_t state[4][4], uint32_t multbl[4][256]){
63     int i;
64     for(i=0; i<4; i++)
65 #ifdef CONFIG_SMALL
66         ((uint32_t *)(state))[i] =     multbl[0][state[i][0]]     ^ ROT(multbl[0][state[i][1]], 8)
67                                   ^ROT(multbl[0][state[i][2]],16) ^ ROT(multbl[0][state[i][3]],24);
68
69 #else
70         ((uint32_t *)(state))[i] = multbl[0][state[i][0]] ^ multbl[1][state[i][1]]
71                                   ^multbl[2][state[i][2]] ^ multbl[3][state[i][3]];
72 #endif
73 }
74
75 void av_aes_decrypt(AVAES *a){
76     int t, r;
77
78     addkey(a->state, a->round_enc_key[a->rounds]);
79     for(r=a->rounds-2; r>=0; r--){
80         SUBSHIFT3x((a->state[0]+1))
81         SUBSHIFT2x((a->state[0]+2))
82         SUBSHIFT1x((a->state[0]+3))
83         mix(a->state, dec_multbl);
84         addkey(a->state, a->round_dec_key[r+1]);
85     }
86     SUBSHIFT0((a->state[0]+0), inv_sbox)
87     SUBSHIFT3((a->state[0]+1), inv_sbox)
88     SUBSHIFT2((a->state[0]+2), inv_sbox)
89     SUBSHIFT1((a->state[0]+3), inv_sbox)
90     addkey(a->state, a->round_enc_key[0]);
91 }
92
93 void av_aes_encrypt(AVAES *a){
94     int r, t;
95
96     for(r=0; r<a->rounds-1; r++){
97         addkey(a->state, a->round_enc_key[r]);
98         SUBSHIFT1x((a->state[0]+1))
99         SUBSHIFT2x((a->state[0]+2))
100         SUBSHIFT3x((a->state[0]+3))
101         mix(a->state, enc_multbl); //FIXME replace log8 by const / optimze mix as this can be simplified alot
102     }
103     addkey(a->state, a->round_enc_key[r]);
104     SUBSHIFT0((a->state[0]+0), sbox)
105     SUBSHIFT1((a->state[0]+1), sbox)
106     SUBSHIFT2((a->state[0]+2), sbox)
107     SUBSHIFT3((a->state[0]+3), sbox)
108     addkey(a->state, a->round_enc_key[r+1]);
109 }
110
111 static init_multbl2(uint8_t tbl[1024], int c[4], uint8_t *log8, uint8_t *alog8, uint8_t *sbox){
112     int i;
113     for(i=0; i<1024; i++){
114         int x= sbox[i/4];
115         if(x) tbl[i]= alog8[ log8[x] + log8[c[i&3]] ];
116     }
117 }
118
119
120 // this is based on the reference AES code by Paulo Barreto and Vincent Rijmen
121 AVAES *av_aes_init(uint8_t *key, int key_bits) {
122     AVAES *a;
123     int i, j, t, rconpointer = 0;
124     uint8_t tk[8][4];
125     int KC= key_bits/32;
126     int rounds= KC + 6;
127     uint8_t  log8[256];
128     uint8_t alog8[512];
129
130     if(!sbox[255]){
131         j=1;
132         for(i=0; i<255; i++){
133             alog8[i]=
134             alog8[i+255]= j;
135             log8[j]= i;
136             j^= j+j;
137             if(j>255) j^= 0x11B;
138         }
139         log8[0]= 255;
140         for(i=0; i<256; i++){
141             j= i ? alog8[255-log8[i]] : 0;
142             j ^= (j<<1) ^ (j<<2) ^ (j<<3) ^ (j<<4);
143             j = (j ^ (j>>8) ^ 99) & 255;
144             inv_sbox[j]= i;
145             sbox    [i]= j;
146 //            av_log(NULL, AV_LOG_ERROR, "%d, ", log8[i]);
147         }
148         init_multbl2(dec_multbl[0], (int[4]){0xe, 0x9, 0xd, 0xb}, log8, alog8, inv_sbox);
149 #ifndef CONFIG_SMALL
150         init_multbl2(dec_multbl[1], (int[4]){0xb, 0xe, 0x9, 0xd}, log8, alog8, inv_sbox);
151         init_multbl2(dec_multbl[2], (int[4]){0xd, 0xb, 0xe, 0x9}, log8, alog8, inv_sbox);
152         init_multbl2(dec_multbl[3], (int[4]){0x9, 0xd, 0xb, 0xe}, log8, alog8, inv_sbox);
153 #endif
154         init_multbl2(enc_multbl[0], (int[4]){0x2, 0x1, 0x1, 0x3}, log8, alog8, sbox);
155 #ifndef CONFIG_SMALL
156         init_multbl2(enc_multbl[1], (int[4]){0x3, 0x2, 0x1, 0x1}, log8, alog8, sbox);
157         init_multbl2(enc_multbl[2], (int[4]){0x1, 0x3, 0x2, 0x1}, log8, alog8, sbox);
158         init_multbl2(enc_multbl[3], (int[4]){0x1, 0x1, 0x3, 0x2}, log8, alog8, sbox);
159 #endif
160     }
161
162     if(key_bits!=128 && key_bits!=192 && key_bits!=256)
163         return NULL;
164
165     a= av_malloc(sizeof(AVAES));
166     a->rounds= rounds;
167
168     memcpy(tk, key, KC*4);
169
170     for(t= 0; t < (rounds+1)*4;) {
171         memcpy(a->round_enc_key[0][t], tk, KC*4);
172         t+= KC;
173
174         for(i = 0; i < 4; i++)
175             tk[0][i] ^= sbox[tk[KC-1][(i+1)&3]];
176         tk[0][0] ^= rcon[rconpointer++];
177
178         for(j = 1; j < KC; j++){
179             if(KC != 8 || j != KC/2)
180                 for(i = 0; i < 4; i++) tk[j][i] ^=      tk[j-1][i];
181             else
182                 for(i = 0; i < 4; i++) tk[j][i] ^= sbox[tk[j-1][i]];
183         }
184     }
185
186     for(i=0; i<sizeof(a->round_enc_key); i++)
187         a->round_dec_key[0][0][i]= sbox[a->round_enc_key[0][0][i]];
188     for(i=1; i<rounds; i++)
189         mix(a->round_dec_key[i], dec_multbl);
190
191     return a;
192 }
193
194 #ifdef TEST
195
196 int main(){
197     int i,j,k;
198     AVAES *a= av_aes_init("PI=3.141592654..", 128);
199     uint8_t zero[16]= {0};
200     uint8_t pt[16]= {0x6a, 0x84, 0x86, 0x7c, 0xd7, 0x7e, 0x12, 0xad, 0x07, 0xea, 0x1b, 0xe8, 0x95, 0xc5, 0x3f, 0xa3};
201     uint8_t ct[16]= {0x73, 0x22, 0x81, 0xc0, 0xa0, 0xaa, 0xb8, 0xf7, 0xa5, 0x4a, 0x0c, 0x67, 0xa0, 0xc4, 0x5e, 0xcf};
202     AVAES *b= av_aes_init(zero, 128);
203
204 /*    uint8_t key[16]= {0x42, 0x78, 0xb8, 0x40, 0xfb, 0x44, 0xaa, 0xa7, 0x57, 0xc1, 0xbf, 0x04, 0xac, 0xbe, 0x1a, 0x3e};
205     uint8_t IV[16] = {0x57, 0xf0, 0x2a, 0x5c, 0x53, 0x39, 0xda, 0xeb, 0x0a, 0x29, 0x08, 0xa0, 0x6a, 0xc6, 0x39, 0x3f};
206     uint8_t pt[16] = {0x3c, 0x88, 0x8b, 0xbb, 0xb1, 0xa8, 0xeb, 0x9f, 0x3e, 0x9b, 0x87, 0xac, 0xaa, 0xd9, 0x86, 0xc4};
207 //            66e2f7071c83083b8a557971918850e5
208     uint8_t ct[16] = {0x47, 0x9c, 0x89, 0xec, 0x14, 0xbc, 0x98, 0x99, 0x4e, 0x62, 0xb2, 0xc7, 0x05, 0xb5, 0x0, 0x14e};
209 //             175bd7832e7e60a1e92aac568a861eb7*/
210     uint8_t ckey[16]= {0x10, 0xa5, 0x88, 0x69, 0xd7, 0x4b, 0xe5, 0xa3, 0x74, 0xcf, 0x86, 0x7c, 0xfb, 0x47, 0x38, 0x59};
211     uint8_t cct[16] = {0x6d, 0x25, 0x1e, 0x69, 0x44, 0xb0, 0x51, 0xe0, 0x4e, 0xaa, 0x6f, 0xb4, 0xdb, 0xf7, 0x84, 0x65};
212     AVAES *c= av_aes_init(ckey, 128);
213
214     av_log_level= AV_LOG_DEBUG;
215
216     memcpy(b->state, ct, 16);
217     av_aes_decrypt(b);
218     for(j=0; j<16; j++)
219         if(pt[j] != b->state[0][j]){
220             av_log(NULL, AV_LOG_ERROR, "%d %02X %02X\n", j, pt[j], b->state[0][j]);
221         }
222
223     memcpy(c->state, cct, 16);
224     av_aes_decrypt(c);
225     for(j=0; j<16; j++)
226         if(zero[j] != c->state[0][j]){
227             av_log(NULL, AV_LOG_ERROR, "%d %02X %02X\n", j, zero[j], c->state[0][j]);
228         }
229
230     for(i=0; i<10000; i++){
231         for(j=0; j<16; j++){
232             pt[j]= random();
233         }
234         memcpy(a->state, pt, 16);
235 {START_TIMER
236         av_aes_encrypt(a);
237         if(!(i&(i-1)))
238             av_log(NULL, AV_LOG_ERROR, "%02X %02X %02X %02X\n", a->state[0][0], a->state[1][1], a->state[2][2], a->state[3][3]);
239         av_aes_decrypt(a);
240 STOP_TIMER("aes")}
241         for(j=0; j<16; j++){
242             if(pt[j] != a->state[0][j]){
243                 av_log(NULL, AV_LOG_ERROR, "%d %d %02X %02X\n", i,j, pt[j], a->state[0][j]);
244             }
245         }
246     }
247     return 0;
248 }
249 #endif