aic: Fix slice size computation for widths multiples of 32 macroblocks
[ffmpeg.git] / libavcodec / motion_est_template.c
1 /*
2  * Motion estimation
3  * Copyright (c) 2002-2004 Michael Niedermayer
4  *
5  * This file is part of Libav.
6  *
7  * Libav is free software; you can redistribute it and/or
8  * modify it under the terms of the GNU Lesser General Public
9  * License as published by the Free Software Foundation; either
10  * version 2.1 of the License, or (at your option) any later version.
11  *
12  * Libav is distributed in the hope that it will be useful,
13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
15  * Lesser General Public License for more details.
16  *
17  * You should have received a copy of the GNU Lesser General Public
18  * License along with Libav; if not, write to the Free Software
19  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
20  */
21
22 /**
23  * @file
24  * Motion estimation template.
25  */
26
27 #include "mpegvideo.h"
28
29 //Let us hope gcc will remove the unused vars ...(gcc 3.2.2 seems to do it ...)
30 #define LOAD_COMMON\
31     uint32_t av_unused * const score_map= c->score_map;\
32     const int av_unused xmin= c->xmin;\
33     const int av_unused ymin= c->ymin;\
34     const int av_unused xmax= c->xmax;\
35     const int av_unused ymax= c->ymax;\
36     uint8_t *mv_penalty= c->current_mv_penalty;\
37     const int pred_x= c->pred_x;\
38     const int pred_y= c->pred_y;\
39
40 #define CHECK_HALF_MV(dx, dy, x, y)\
41 {\
42     const int hx= 2*(x)+(dx);\
43     const int hy= 2*(y)+(dy);\
44     d= cmp_hpel(s, x, y, dx, dy, size, h, ref_index, src_index, cmp_sub, chroma_cmp_sub, flags);\
45     d += (mv_penalty[hx - pred_x] + mv_penalty[hy - pred_y])*penalty_factor;\
46     COPY3_IF_LT(dmin, d, bx, hx, by, hy)\
47 }
48
49 static int hpel_motion_search(MpegEncContext * s,
50                                   int *mx_ptr, int *my_ptr, int dmin,
51                                   int src_index, int ref_index,
52                                   int size, int h)
53 {
54     MotionEstContext * const c= &s->me;
55     const int mx = *mx_ptr;
56     const int my = *my_ptr;
57     const int penalty_factor= c->sub_penalty_factor;
58     me_cmp_func cmp_sub, chroma_cmp_sub;
59     int bx=2*mx, by=2*my;
60
61     LOAD_COMMON
62     int flags= c->sub_flags;
63
64  //FIXME factorize
65
66     cmp_sub        = s->mecc.me_sub_cmp[size];
67     chroma_cmp_sub = s->mecc.me_sub_cmp[size + 1];
68
69     if(c->skip){ //FIXME move out of hpel?
70         *mx_ptr = 0;
71         *my_ptr = 0;
72         return dmin;
73     }
74
75     if(c->avctx->me_cmp != c->avctx->me_sub_cmp){
76         dmin= cmp(s, mx, my, 0, 0, size, h, ref_index, src_index, cmp_sub, chroma_cmp_sub, flags);
77         if(mx || my || size>0)
78             dmin += (mv_penalty[2*mx - pred_x] + mv_penalty[2*my - pred_y])*penalty_factor;
79     }
80
81     if (mx > xmin && mx < xmax &&
82         my > ymin && my < ymax) {
83         int d= dmin;
84         const int index= (my<<ME_MAP_SHIFT) + mx;
85         const int t= score_map[(index-(1<<ME_MAP_SHIFT))&(ME_MAP_SIZE-1)]
86                      + (mv_penalty[bx   - pred_x] + mv_penalty[by-2 - pred_y])*c->penalty_factor;
87         const int l= score_map[(index- 1               )&(ME_MAP_SIZE-1)]
88                      + (mv_penalty[bx-2 - pred_x] + mv_penalty[by   - pred_y])*c->penalty_factor;
89         const int r= score_map[(index+ 1               )&(ME_MAP_SIZE-1)]
90                      + (mv_penalty[bx+2 - pred_x] + mv_penalty[by   - pred_y])*c->penalty_factor;
91         const int b= score_map[(index+(1<<ME_MAP_SHIFT))&(ME_MAP_SIZE-1)]
92                      + (mv_penalty[bx   - pred_x] + mv_penalty[by+2 - pred_y])*c->penalty_factor;
93
94         unsigned key;
95         unsigned map_generation= c->map_generation;
96 #ifndef NDEBUG
97         uint32_t *map= c->map;
98 #endif
99         key= ((my-1)<<ME_MAP_MV_BITS) + (mx) + map_generation;
100         assert(map[(index-(1<<ME_MAP_SHIFT))&(ME_MAP_SIZE-1)] == key);
101         key= ((my+1)<<ME_MAP_MV_BITS) + (mx) + map_generation;
102         assert(map[(index+(1<<ME_MAP_SHIFT))&(ME_MAP_SIZE-1)] == key);
103         key= ((my)<<ME_MAP_MV_BITS) + (mx+1) + map_generation;
104         assert(map[(index+1)&(ME_MAP_SIZE-1)] == key);
105         key= ((my)<<ME_MAP_MV_BITS) + (mx-1) + map_generation;
106         assert(map[(index-1)&(ME_MAP_SIZE-1)] == key);
107         if(t<=b){
108             CHECK_HALF_MV(0, 1, mx  ,my-1)
109             if(l<=r){
110                 CHECK_HALF_MV(1, 1, mx-1, my-1)
111                 if(t+r<=b+l){
112                     CHECK_HALF_MV(1, 1, mx  , my-1)
113                 }else{
114                     CHECK_HALF_MV(1, 1, mx-1, my  )
115                 }
116                 CHECK_HALF_MV(1, 0, mx-1, my  )
117             }else{
118                 CHECK_HALF_MV(1, 1, mx  , my-1)
119                 if(t+l<=b+r){
120                     CHECK_HALF_MV(1, 1, mx-1, my-1)
121                 }else{
122                     CHECK_HALF_MV(1, 1, mx  , my  )
123                 }
124                 CHECK_HALF_MV(1, 0, mx  , my  )
125             }
126         }else{
127             if(l<=r){
128                 if(t+l<=b+r){
129                     CHECK_HALF_MV(1, 1, mx-1, my-1)
130                 }else{
131                     CHECK_HALF_MV(1, 1, mx  , my  )
132                 }
133                 CHECK_HALF_MV(1, 0, mx-1, my)
134                 CHECK_HALF_MV(1, 1, mx-1, my)
135             }else{
136                 if(t+r<=b+l){
137                     CHECK_HALF_MV(1, 1, mx  , my-1)
138                 }else{
139                     CHECK_HALF_MV(1, 1, mx-1, my)
140                 }
141                 CHECK_HALF_MV(1, 0, mx  , my)
142                 CHECK_HALF_MV(1, 1, mx  , my)
143             }
144             CHECK_HALF_MV(0, 1, mx  , my)
145         }
146         assert(bx >= xmin*2 && bx <= xmax*2 && by >= ymin*2 && by <= ymax*2);
147     }
148
149     *mx_ptr = bx;
150     *my_ptr = by;
151
152     return dmin;
153 }
154
155 static int no_sub_motion_search(MpegEncContext * s,
156           int *mx_ptr, int *my_ptr, int dmin,
157                                   int src_index, int ref_index,
158                                   int size, int h)
159 {
160     (*mx_ptr)<<=1;
161     (*my_ptr)<<=1;
162     return dmin;
163 }
164
165 static inline int get_mb_score(MpegEncContext *s, int mx, int my,
166                                int src_index, int ref_index, int size,
167                                int h, int add_rate)
168 {
169     MotionEstContext * const c= &s->me;
170     const int penalty_factor= c->mb_penalty_factor;
171     const int flags= c->mb_flags;
172     const int qpel= flags & FLAG_QPEL;
173     const int mask= 1+2*qpel;
174     me_cmp_func cmp_sub, chroma_cmp_sub;
175     int d;
176
177     LOAD_COMMON
178
179  //FIXME factorize
180
181     cmp_sub        = s->mecc.mb_cmp[size];
182     chroma_cmp_sub = s->mecc.mb_cmp[size + 1];
183
184 //    assert(!c->skip);
185 //    assert(c->avctx->me_sub_cmp != c->avctx->mb_cmp);
186
187     d= cmp(s, mx>>(qpel+1), my>>(qpel+1), mx&mask, my&mask, size, h, ref_index, src_index, cmp_sub, chroma_cmp_sub, flags);
188     //FIXME check cbp before adding penalty for (0,0) vector
189     if(add_rate && (mx || my || size>0))
190         d += (mv_penalty[mx - pred_x] + mv_penalty[my - pred_y])*penalty_factor;
191
192     return d;
193 }
194
195 int ff_get_mb_score(MpegEncContext *s, int mx, int my, int src_index,
196                     int ref_index, int size, int h, int add_rate)
197 {
198     return get_mb_score(s, mx, my, src_index, ref_index, size, h, add_rate);
199 }
200
201 #define CHECK_QUARTER_MV(dx, dy, x, y)\
202 {\
203     const int hx= 4*(x)+(dx);\
204     const int hy= 4*(y)+(dy);\
205     d= cmp_qpel(s, x, y, dx, dy, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);\
206     d += (mv_penalty[hx - pred_x] + mv_penalty[hy - pred_y])*penalty_factor;\
207     COPY3_IF_LT(dmin, d, bx, hx, by, hy)\
208 }
209
210 static int qpel_motion_search(MpegEncContext * s,
211                                   int *mx_ptr, int *my_ptr, int dmin,
212                                   int src_index, int ref_index,
213                                   int size, int h)
214 {
215     MotionEstContext * const c= &s->me;
216     const int mx = *mx_ptr;
217     const int my = *my_ptr;
218     const int penalty_factor= c->sub_penalty_factor;
219     const unsigned map_generation = c->map_generation;
220     const int subpel_quality= c->avctx->me_subpel_quality;
221     uint32_t *map= c->map;
222     me_cmp_func cmpf, chroma_cmpf;
223     me_cmp_func cmp_sub, chroma_cmp_sub;
224
225     LOAD_COMMON
226     int flags= c->sub_flags;
227
228     cmpf        = s->mecc.me_cmp[size];
229     chroma_cmpf = s->mecc.me_cmp[size + 1]; // FIXME: factorize
230  //FIXME factorize
231
232     cmp_sub        = s->mecc.me_sub_cmp[size];
233     chroma_cmp_sub = s->mecc.me_sub_cmp[size + 1];
234
235     if(c->skip){ //FIXME somehow move up (benchmark)
236         *mx_ptr = 0;
237         *my_ptr = 0;
238         return dmin;
239     }
240
241     if(c->avctx->me_cmp != c->avctx->me_sub_cmp){
242         dmin= cmp(s, mx, my, 0, 0, size, h, ref_index, src_index, cmp_sub, chroma_cmp_sub, flags);
243         if(mx || my || size>0)
244             dmin += (mv_penalty[4*mx - pred_x] + mv_penalty[4*my - pred_y])*penalty_factor;
245     }
246
247     if (mx > xmin && mx < xmax &&
248         my > ymin && my < ymax) {
249         int bx=4*mx, by=4*my;
250         int d= dmin;
251         int i, nx, ny;
252         const int index= (my<<ME_MAP_SHIFT) + mx;
253         const int t= score_map[(index-(1<<ME_MAP_SHIFT)  )&(ME_MAP_SIZE-1)];
254         const int l= score_map[(index- 1                 )&(ME_MAP_SIZE-1)];
255         const int r= score_map[(index+ 1                 )&(ME_MAP_SIZE-1)];
256         const int b= score_map[(index+(1<<ME_MAP_SHIFT)  )&(ME_MAP_SIZE-1)];
257         const int c= score_map[(index                    )&(ME_MAP_SIZE-1)];
258         int best[8];
259         int best_pos[8][2];
260
261         memset(best, 64, sizeof(int)*8);
262         if(s->me.dia_size>=2){
263             const int tl= score_map[(index-(1<<ME_MAP_SHIFT)-1)&(ME_MAP_SIZE-1)];
264             const int bl= score_map[(index+(1<<ME_MAP_SHIFT)-1)&(ME_MAP_SIZE-1)];
265             const int tr= score_map[(index-(1<<ME_MAP_SHIFT)+1)&(ME_MAP_SIZE-1)];
266             const int br= score_map[(index+(1<<ME_MAP_SHIFT)+1)&(ME_MAP_SIZE-1)];
267
268             for(ny= -3; ny <= 3; ny++){
269                 for(nx= -3; nx <= 3; nx++){
270                     //FIXME this could overflow (unlikely though)
271                     const int64_t t2= nx*nx*(tr + tl - 2*t) + 4*nx*(tr-tl) + 32*t;
272                     const int64_t c2= nx*nx*( r +  l - 2*c) + 4*nx*( r- l) + 32*c;
273                     const int64_t b2= nx*nx*(br + bl - 2*b) + 4*nx*(br-bl) + 32*b;
274                     int score= (ny*ny*(b2 + t2 - 2*c2) + 4*ny*(b2 - t2) + 32*c2 + 512)>>10;
275                     int i;
276
277                     if((nx&3)==0 && (ny&3)==0) continue;
278
279                     score += (mv_penalty[4*mx + nx - pred_x] + mv_penalty[4*my + ny - pred_y])*penalty_factor;
280
281 //                    if(nx&1) score-=1024*c->penalty_factor;
282 //                    if(ny&1) score-=1024*c->penalty_factor;
283
284                     for(i=0; i<8; i++){
285                         if(score < best[i]){
286                             memmove(&best[i+1], &best[i], sizeof(int)*(7-i));
287                             memmove(&best_pos[i+1][0], &best_pos[i][0], sizeof(int)*2*(7-i));
288                             best[i]= score;
289                             best_pos[i][0]= nx + 4*mx;
290                             best_pos[i][1]= ny + 4*my;
291                             break;
292                         }
293                     }
294                 }
295             }
296         }else{
297             int tl;
298             //FIXME this could overflow (unlikely though)
299             const int cx = 4*(r - l);
300             const int cx2= r + l - 2*c;
301             const int cy = 4*(b - t);
302             const int cy2= b + t - 2*c;
303             int cxy;
304
305             if(map[(index-(1<<ME_MAP_SHIFT)-1)&(ME_MAP_SIZE-1)] == (my<<ME_MAP_MV_BITS) + mx + map_generation && 0){ //FIXME
306                 tl= score_map[(index-(1<<ME_MAP_SHIFT)-1)&(ME_MAP_SIZE-1)];
307             }else{
308                 tl= cmp(s, mx-1, my-1, 0, 0, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);//FIXME wrong if chroma me is different
309             }
310
311             cxy= 2*tl + (cx + cy)/4 - (cx2 + cy2) - 2*c;
312
313             assert(16*cx2 + 4*cx + 32*c == 32*r);
314             assert(16*cx2 - 4*cx + 32*c == 32*l);
315             assert(16*cy2 + 4*cy + 32*c == 32*b);
316             assert(16*cy2 - 4*cy + 32*c == 32*t);
317             assert(16*cxy + 16*cy2 + 16*cx2 - 4*cy - 4*cx + 32*c == 32*tl);
318
319             for(ny= -3; ny <= 3; ny++){
320                 for(nx= -3; nx <= 3; nx++){
321                     //FIXME this could overflow (unlikely though)
322                     int score= ny*nx*cxy + nx*nx*cx2 + ny*ny*cy2 + nx*cx + ny*cy + 32*c; //FIXME factor
323                     int i;
324
325                     if((nx&3)==0 && (ny&3)==0) continue;
326
327                     score += 32*(mv_penalty[4*mx + nx - pred_x] + mv_penalty[4*my + ny - pred_y])*penalty_factor;
328 //                    if(nx&1) score-=32*c->penalty_factor;
329   //                  if(ny&1) score-=32*c->penalty_factor;
330
331                     for(i=0; i<8; i++){
332                         if(score < best[i]){
333                             memmove(&best[i+1], &best[i], sizeof(int)*(7-i));
334                             memmove(&best_pos[i+1][0], &best_pos[i][0], sizeof(int)*2*(7-i));
335                             best[i]= score;
336                             best_pos[i][0]= nx + 4*mx;
337                             best_pos[i][1]= ny + 4*my;
338                             break;
339                         }
340                     }
341                 }
342             }
343         }
344         for(i=0; i<subpel_quality; i++){
345             nx= best_pos[i][0];
346             ny= best_pos[i][1];
347             CHECK_QUARTER_MV(nx&3, ny&3, nx>>2, ny>>2)
348         }
349
350         assert(bx >= xmin*4 && bx <= xmax*4 && by >= ymin*4 && by <= ymax*4);
351
352         *mx_ptr = bx;
353         *my_ptr = by;
354     }else{
355         *mx_ptr =4*mx;
356         *my_ptr =4*my;
357     }
358
359     return dmin;
360 }
361
362
363 #define CHECK_MV(x,y)\
364 {\
365     const unsigned key = ((y)<<ME_MAP_MV_BITS) + (x) + map_generation;\
366     const int index= (((y)<<ME_MAP_SHIFT) + (x))&(ME_MAP_SIZE-1);\
367     assert((x) >= xmin);\
368     assert((x) <= xmax);\
369     assert((y) >= ymin);\
370     assert((y) <= ymax);\
371     if(map[index]!=key){\
372         d= cmp(s, x, y, 0, 0, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);\
373         map[index]= key;\
374         score_map[index]= d;\
375         d += (mv_penalty[((x)<<shift)-pred_x] + mv_penalty[((y)<<shift)-pred_y])*penalty_factor;\
376         COPY3_IF_LT(dmin, d, best[0], x, best[1], y)\
377     }\
378 }
379
380 #define CHECK_CLIPPED_MV(ax,ay)\
381 {\
382     const int Lx= ax;\
383     const int Ly= ay;\
384     const int Lx2= FFMAX(xmin, FFMIN(Lx, xmax));\
385     const int Ly2= FFMAX(ymin, FFMIN(Ly, ymax));\
386     CHECK_MV(Lx2, Ly2)\
387 }
388
389 #define CHECK_MV_DIR(x,y,new_dir)\
390 {\
391     const unsigned key = ((y)<<ME_MAP_MV_BITS) + (x) + map_generation;\
392     const int index= (((y)<<ME_MAP_SHIFT) + (x))&(ME_MAP_SIZE-1);\
393     if(map[index]!=key){\
394         d= cmp(s, x, y, 0, 0, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);\
395         map[index]= key;\
396         score_map[index]= d;\
397         d += (mv_penalty[((x)<<shift)-pred_x] + mv_penalty[((y)<<shift)-pred_y])*penalty_factor;\
398         if(d<dmin){\
399             best[0]=x;\
400             best[1]=y;\
401             dmin=d;\
402             next_dir= new_dir;\
403         }\
404     }\
405 }
406
407 #define check(x,y,S,v)\
408 if( (x)<(xmin<<(S)) ) printf("%d %d %d %d %d xmin" #v, xmin, (x), (y), s->mb_x, s->mb_y);\
409 if( (x)>(xmax<<(S)) ) printf("%d %d %d %d %d xmax" #v, xmax, (x), (y), s->mb_x, s->mb_y);\
410 if( (y)<(ymin<<(S)) ) printf("%d %d %d %d %d ymin" #v, ymin, (x), (y), s->mb_x, s->mb_y);\
411 if( (y)>(ymax<<(S)) ) printf("%d %d %d %d %d ymax" #v, ymax, (x), (y), s->mb_x, s->mb_y);\
412
413 #define LOAD_COMMON2\
414     uint32_t *map= c->map;\
415     const int qpel= flags&FLAG_QPEL;\
416     const int shift= 1+qpel;\
417
418 static av_always_inline int small_diamond_search(MpegEncContext * s, int *best, int dmin,
419                                        int src_index, int ref_index, int const penalty_factor,
420                                        int size, int h, int flags)
421 {
422     MotionEstContext * const c= &s->me;
423     me_cmp_func cmpf, chroma_cmpf;
424     int next_dir=-1;
425     LOAD_COMMON
426     LOAD_COMMON2
427     unsigned map_generation = c->map_generation;
428
429     cmpf        = s->mecc.me_cmp[size];
430     chroma_cmpf = s->mecc.me_cmp[size + 1];
431
432     { /* ensure that the best point is in the MAP as h/qpel refinement needs it */
433         const unsigned key = (best[1]<<ME_MAP_MV_BITS) + best[0] + map_generation;
434         const int index= ((best[1]<<ME_MAP_SHIFT) + best[0])&(ME_MAP_SIZE-1);
435         if(map[index]!=key){ //this will be executed only very rarey
436             score_map[index]= cmp(s, best[0], best[1], 0, 0, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);
437             map[index]= key;
438         }
439     }
440
441     for(;;){
442         int d;
443         const int dir= next_dir;
444         const int x= best[0];
445         const int y= best[1];
446         next_dir=-1;
447
448         if(dir!=2 && x>xmin) CHECK_MV_DIR(x-1, y  , 0)
449         if(dir!=3 && y>ymin) CHECK_MV_DIR(x  , y-1, 1)
450         if(dir!=0 && x<xmax) CHECK_MV_DIR(x+1, y  , 2)
451         if(dir!=1 && y<ymax) CHECK_MV_DIR(x  , y+1, 3)
452
453         if(next_dir==-1){
454             return dmin;
455         }
456     }
457 }
458
459 static int funny_diamond_search(MpegEncContext * s, int *best, int dmin,
460                                        int src_index, int ref_index, int const penalty_factor,
461                                        int size, int h, int flags)
462 {
463     MotionEstContext * const c= &s->me;
464     me_cmp_func cmpf, chroma_cmpf;
465     int dia_size;
466     LOAD_COMMON
467     LOAD_COMMON2
468     unsigned map_generation = c->map_generation;
469
470     cmpf        = s->mecc.me_cmp[size];
471     chroma_cmpf = s->mecc.me_cmp[size + 1];
472
473     for(dia_size=1; dia_size<=4; dia_size++){
474         int dir;
475         const int x= best[0];
476         const int y= best[1];
477
478         if(dia_size&(dia_size-1)) continue;
479
480         if(   x + dia_size > xmax
481            || x - dia_size < xmin
482            || y + dia_size > ymax
483            || y - dia_size < ymin)
484            continue;
485
486         for(dir= 0; dir<dia_size; dir+=2){
487             int d;
488
489             CHECK_MV(x + dir           , y + dia_size - dir);
490             CHECK_MV(x + dia_size - dir, y - dir           );
491             CHECK_MV(x - dir           , y - dia_size + dir);
492             CHECK_MV(x - dia_size + dir, y + dir           );
493         }
494
495         if(x!=best[0] || y!=best[1])
496             dia_size=0;
497     }
498     return dmin;
499 }
500
501 static int hex_search(MpegEncContext * s, int *best, int dmin,
502                                        int src_index, int ref_index, int const penalty_factor,
503                                        int size, int h, int flags, int dia_size)
504 {
505     MotionEstContext * const c= &s->me;
506     me_cmp_func cmpf, chroma_cmpf;
507     LOAD_COMMON
508     LOAD_COMMON2
509     unsigned map_generation = c->map_generation;
510     int x,y,d;
511     const int dec= dia_size & (dia_size-1);
512
513     cmpf        = s->mecc.me_cmp[size];
514     chroma_cmpf = s->mecc.me_cmp[size + 1];
515
516     for(;dia_size; dia_size= dec ? dia_size-1 : dia_size>>1){
517         do{
518             x= best[0];
519             y= best[1];
520
521             CHECK_CLIPPED_MV(x  -dia_size    , y);
522             CHECK_CLIPPED_MV(x+  dia_size    , y);
523             CHECK_CLIPPED_MV(x+( dia_size>>1), y+dia_size);
524             CHECK_CLIPPED_MV(x+( dia_size>>1), y-dia_size);
525             if(dia_size>1){
526                 CHECK_CLIPPED_MV(x+(-dia_size>>1), y+dia_size);
527                 CHECK_CLIPPED_MV(x+(-dia_size>>1), y-dia_size);
528             }
529         }while(best[0] != x || best[1] != y);
530     }
531
532     return dmin;
533 }
534
535 static int l2s_dia_search(MpegEncContext * s, int *best, int dmin,
536                                        int src_index, int ref_index, int const penalty_factor,
537                                        int size, int h, int flags)
538 {
539     MotionEstContext * const c= &s->me;
540     me_cmp_func cmpf, chroma_cmpf;
541     LOAD_COMMON
542     LOAD_COMMON2
543     unsigned map_generation = c->map_generation;
544     int x,y,i,d;
545     int dia_size= c->dia_size&0xFF;
546     const int dec= dia_size & (dia_size-1);
547     static const int hex[8][2]={{-2, 0}, {-1,-1}, { 0,-2}, { 1,-1},
548                                 { 2, 0}, { 1, 1}, { 0, 2}, {-1, 1}};
549
550     cmpf        = s->mecc.me_cmp[size];
551     chroma_cmpf = s->mecc.me_cmp[size + 1];
552
553     for(; dia_size; dia_size= dec ? dia_size-1 : dia_size>>1){
554         do{
555             x= best[0];
556             y= best[1];
557             for(i=0; i<8; i++){
558                 CHECK_CLIPPED_MV(x+hex[i][0]*dia_size, y+hex[i][1]*dia_size);
559             }
560         }while(best[0] != x || best[1] != y);
561     }
562
563     x= best[0];
564     y= best[1];
565     CHECK_CLIPPED_MV(x+1, y);
566     CHECK_CLIPPED_MV(x, y+1);
567     CHECK_CLIPPED_MV(x-1, y);
568     CHECK_CLIPPED_MV(x, y-1);
569
570     return dmin;
571 }
572
573 static int umh_search(MpegEncContext * s, int *best, int dmin,
574                                        int src_index, int ref_index, int const penalty_factor,
575                                        int size, int h, int flags)
576 {
577     MotionEstContext * const c= &s->me;
578     me_cmp_func cmpf, chroma_cmpf;
579     LOAD_COMMON
580     LOAD_COMMON2
581     unsigned map_generation = c->map_generation;
582     int x,y,x2,y2, i, j, d;
583     const int dia_size= c->dia_size&0xFE;
584     static const int hex[16][2]={{-4,-2}, {-4,-1}, {-4, 0}, {-4, 1}, {-4, 2},
585                                  { 4,-2}, { 4,-1}, { 4, 0}, { 4, 1}, { 4, 2},
586                                  {-2, 3}, { 0, 4}, { 2, 3},
587                                  {-2,-3}, { 0,-4}, { 2,-3},};
588
589     cmpf        = s->mecc.me_cmp[size];
590     chroma_cmpf = s->mecc.me_cmp[size + 1];
591
592     x= best[0];
593     y= best[1];
594     for(x2=FFMAX(x-dia_size+1, xmin); x2<=FFMIN(x+dia_size-1,xmax); x2+=2){
595         CHECK_MV(x2, y);
596     }
597     for(y2=FFMAX(y-dia_size/2+1, ymin); y2<=FFMIN(y+dia_size/2-1,ymax); y2+=2){
598         CHECK_MV(x, y2);
599     }
600
601     x= best[0];
602     y= best[1];
603     for(y2=FFMAX(y-2, ymin); y2<=FFMIN(y+2,ymax); y2++){
604         for(x2=FFMAX(x-2, xmin); x2<=FFMIN(x+2,xmax); x2++){
605             CHECK_MV(x2, y2);
606         }
607     }
608
609 //FIXME prevent the CLIP stuff
610
611     for(j=1; j<=dia_size/4; j++){
612         for(i=0; i<16; i++){
613             CHECK_CLIPPED_MV(x+hex[i][0]*j, y+hex[i][1]*j);
614         }
615     }
616
617     return hex_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags, 2);
618 }
619
620 static int full_search(MpegEncContext * s, int *best, int dmin,
621                                        int src_index, int ref_index, int const penalty_factor,
622                                        int size, int h, int flags)
623 {
624     MotionEstContext * const c= &s->me;
625     me_cmp_func cmpf, chroma_cmpf;
626     LOAD_COMMON
627     LOAD_COMMON2
628     unsigned map_generation = c->map_generation;
629     int x,y, d;
630     const int dia_size= c->dia_size&0xFF;
631
632     cmpf        = s->mecc.me_cmp[size];
633     chroma_cmpf = s->mecc.me_cmp[size + 1];
634
635     for(y=FFMAX(-dia_size, ymin); y<=FFMIN(dia_size,ymax); y++){
636         for(x=FFMAX(-dia_size, xmin); x<=FFMIN(dia_size,xmax); x++){
637             CHECK_MV(x, y);
638         }
639     }
640
641     x= best[0];
642     y= best[1];
643     d= dmin;
644     CHECK_CLIPPED_MV(x  , y);
645     CHECK_CLIPPED_MV(x+1, y);
646     CHECK_CLIPPED_MV(x, y+1);
647     CHECK_CLIPPED_MV(x-1, y);
648     CHECK_CLIPPED_MV(x, y-1);
649     best[0]= x;
650     best[1]= y;
651
652     return d;
653 }
654
655 #define SAB_CHECK_MV(ax,ay)\
656 {\
657     const unsigned key = ((ay)<<ME_MAP_MV_BITS) + (ax) + map_generation;\
658     const int index= (((ay)<<ME_MAP_SHIFT) + (ax))&(ME_MAP_SIZE-1);\
659     if(map[index]!=key){\
660         d= cmp(s, ax, ay, 0, 0, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);\
661         map[index]= key;\
662         score_map[index]= d;\
663         d += (mv_penalty[((ax)<<shift)-pred_x] + mv_penalty[((ay)<<shift)-pred_y])*penalty_factor;\
664         if(d < minima[minima_count-1].height){\
665             int j=0;\
666             \
667             while(d >= minima[j].height) j++;\
668 \
669             memmove(&minima [j+1], &minima [j], (minima_count - j - 1)*sizeof(Minima));\
670 \
671             minima[j].checked= 0;\
672             minima[j].height= d;\
673             minima[j].x= ax;\
674             minima[j].y= ay;\
675             \
676             i=-1;\
677             continue;\
678         }\
679     }\
680 }
681
682 #define MAX_SAB_SIZE ME_MAP_SIZE
683 static int sab_diamond_search(MpegEncContext * s, int *best, int dmin,
684                                        int src_index, int ref_index, int const penalty_factor,
685                                        int size, int h, int flags)
686 {
687     MotionEstContext * const c= &s->me;
688     me_cmp_func cmpf, chroma_cmpf;
689     Minima minima[MAX_SAB_SIZE];
690     const int minima_count= FFABS(c->dia_size);
691     int i, j;
692     LOAD_COMMON
693     LOAD_COMMON2
694     unsigned map_generation = c->map_generation;
695
696     cmpf        = s->mecc.me_cmp[size];
697     chroma_cmpf = s->mecc.me_cmp[size + 1];
698
699     /*Note j<MAX_SAB_SIZE is needed if MAX_SAB_SIZE < ME_MAP_SIZE as j can
700       become larger due to MVs overflowing their ME_MAP_MV_BITS bits space in map
701      */
702     for(j=i=0; i<ME_MAP_SIZE && j<MAX_SAB_SIZE; i++){
703         uint32_t key= map[i];
704
705         key += (1<<(ME_MAP_MV_BITS-1)) + (1<<(2*ME_MAP_MV_BITS-1));
706
707         if((key&((-1)<<(2*ME_MAP_MV_BITS))) != map_generation) continue;
708
709         minima[j].height= score_map[i];
710         minima[j].x= key & ((1<<ME_MAP_MV_BITS)-1); key>>=ME_MAP_MV_BITS;
711         minima[j].y= key & ((1<<ME_MAP_MV_BITS)-1);
712         minima[j].x-= (1<<(ME_MAP_MV_BITS-1));
713         minima[j].y-= (1<<(ME_MAP_MV_BITS-1));
714
715         // all entries in map should be in range except if the mv overflows their ME_MAP_MV_BITS bits space
716         if(   minima[j].x > xmax || minima[j].x < xmin
717            || minima[j].y > ymax || minima[j].y < ymin)
718             continue;
719
720         minima[j].checked=0;
721         if(minima[j].x || minima[j].y)
722             minima[j].height+= (mv_penalty[((minima[j].x)<<shift)-pred_x] + mv_penalty[((minima[j].y)<<shift)-pred_y])*penalty_factor;
723
724         j++;
725     }
726
727     qsort(minima, j, sizeof(Minima), minima_cmp);
728
729     for(; j<minima_count; j++){
730         minima[j].height=256*256*256*64;
731         minima[j].checked=0;
732         minima[j].x= minima[j].y=0;
733     }
734
735     for(i=0; i<minima_count; i++){
736         const int x= minima[i].x;
737         const int y= minima[i].y;
738         int d;
739
740         if(minima[i].checked) continue;
741
742         if(   x >= xmax || x <= xmin
743            || y >= ymax || y <= ymin)
744            continue;
745
746         SAB_CHECK_MV(x-1, y)
747         SAB_CHECK_MV(x+1, y)
748         SAB_CHECK_MV(x  , y-1)
749         SAB_CHECK_MV(x  , y+1)
750
751         minima[i].checked= 1;
752     }
753
754     best[0]= minima[0].x;
755     best[1]= minima[0].y;
756     dmin= minima[0].height;
757
758     if(   best[0] < xmax && best[0] > xmin
759        && best[1] < ymax && best[1] > ymin){
760         int d;
761         //ensure that the refernece samples for hpel refinement are in the map
762         CHECK_MV(best[0]-1, best[1])
763         CHECK_MV(best[0]+1, best[1])
764         CHECK_MV(best[0], best[1]-1)
765         CHECK_MV(best[0], best[1]+1)
766     }
767     return dmin;
768 }
769
770 static int var_diamond_search(MpegEncContext * s, int *best, int dmin,
771                                        int src_index, int ref_index, int const penalty_factor,
772                                        int size, int h, int flags)
773 {
774     MotionEstContext * const c= &s->me;
775     me_cmp_func cmpf, chroma_cmpf;
776     int dia_size;
777     LOAD_COMMON
778     LOAD_COMMON2
779     unsigned map_generation = c->map_generation;
780
781     cmpf        = s->mecc.me_cmp[size];
782     chroma_cmpf = s->mecc.me_cmp[size + 1];
783
784     for(dia_size=1; dia_size<=c->dia_size; dia_size++){
785         int dir, start, end;
786         const int x= best[0];
787         const int y= best[1];
788
789         start= FFMAX(0, y + dia_size - ymax);
790         end  = FFMIN(dia_size, xmax - x + 1);
791         for(dir= start; dir<end; dir++){
792             int d;
793
794 //check(x + dir,y + dia_size - dir,0, a0)
795             CHECK_MV(x + dir           , y + dia_size - dir);
796         }
797
798         start= FFMAX(0, x + dia_size - xmax);
799         end  = FFMIN(dia_size, y - ymin + 1);
800         for(dir= start; dir<end; dir++){
801             int d;
802
803 //check(x + dia_size - dir, y - dir,0, a1)
804             CHECK_MV(x + dia_size - dir, y - dir           );
805         }
806
807         start= FFMAX(0, -y + dia_size + ymin );
808         end  = FFMIN(dia_size, x - xmin + 1);
809         for(dir= start; dir<end; dir++){
810             int d;
811
812 //check(x - dir,y - dia_size + dir,0, a2)
813             CHECK_MV(x - dir           , y - dia_size + dir);
814         }
815
816         start= FFMAX(0, -x + dia_size + xmin );
817         end  = FFMIN(dia_size, ymax - y + 1);
818         for(dir= start; dir<end; dir++){
819             int d;
820
821 //check(x - dia_size + dir, y + dir,0, a3)
822             CHECK_MV(x - dia_size + dir, y + dir           );
823         }
824
825         if(x!=best[0] || y!=best[1])
826             dia_size=0;
827     }
828     return dmin;
829 }
830
831 static av_always_inline int diamond_search(MpegEncContext * s, int *best, int dmin,
832                                        int src_index, int ref_index, int const penalty_factor,
833                                        int size, int h, int flags){
834     MotionEstContext * const c= &s->me;
835     if(c->dia_size==-1)
836         return funny_diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
837     else if(c->dia_size<-1)
838         return   sab_diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
839     else if(c->dia_size<2)
840         return small_diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
841     else if(c->dia_size>1024)
842         return          full_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
843     else if(c->dia_size>768)
844         return           umh_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
845     else if(c->dia_size>512)
846         return           hex_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags, c->dia_size&0xFF);
847     else if(c->dia_size>256)
848         return       l2s_dia_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
849     else
850         return   var_diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
851 }
852
853 /**
854    @param P a list of candidate mvs to check before starting the
855    iterative search. If one of the candidates is close to the optimal mv, then
856    it takes fewer iterations. And it increases the chance that we find the
857    optimal mv.
858  */
859 static av_always_inline int epzs_motion_search_internal(MpegEncContext * s, int *mx_ptr, int *my_ptr,
860                              int P[10][2], int src_index, int ref_index, int16_t (*last_mv)[2],
861                              int ref_mv_scale, int flags, int size, int h)
862 {
863     MotionEstContext * const c= &s->me;
864     int best[2]={0, 0};      /**< x and y coordinates of the best motion vector.
865                                i.e. the difference between the position of the
866                                block currently being encoded and the position of
867                                the block chosen to predict it from. */
868     int d;                   ///< the score (cmp + penalty) of any given mv
869     int dmin;                /**< the best value of d, i.e. the score
870                                corresponding to the mv stored in best[]. */
871     unsigned map_generation;
872     int penalty_factor;
873     const int ref_mv_stride= s->mb_stride; //pass as arg  FIXME
874     const int ref_mv_xy= s->mb_x + s->mb_y*ref_mv_stride; //add to last_mv beforepassing FIXME
875     me_cmp_func cmpf, chroma_cmpf;
876
877     LOAD_COMMON
878     LOAD_COMMON2
879
880     if(c->pre_pass){
881         penalty_factor= c->pre_penalty_factor;
882         cmpf           = s->mecc.me_pre_cmp[size];
883         chroma_cmpf    = s->mecc.me_pre_cmp[size + 1];
884     }else{
885         penalty_factor= c->penalty_factor;
886         cmpf           = s->mecc.me_cmp[size];
887         chroma_cmpf    = s->mecc.me_cmp[size + 1];
888     }
889
890     map_generation= update_map_generation(c);
891
892     assert(cmpf);
893     dmin= cmp(s, 0, 0, 0, 0, size, h, ref_index, src_index, cmpf, chroma_cmpf, flags);
894     map[0]= map_generation;
895     score_map[0]= dmin;
896
897     //FIXME precalc first term below?
898     if ((s->pict_type == AV_PICTURE_TYPE_B && !(c->flags & FLAG_DIRECT)) ||
899         s->mpv_flags & FF_MPV_FLAG_MV0)
900         dmin += (mv_penalty[pred_x] + mv_penalty[pred_y])*penalty_factor;
901
902     /* first line */
903     if (s->first_slice_line) {
904         CHECK_MV(P_LEFT[0]>>shift, P_LEFT[1]>>shift)
905         CHECK_CLIPPED_MV((last_mv[ref_mv_xy][0]*ref_mv_scale + (1<<15))>>16,
906                         (last_mv[ref_mv_xy][1]*ref_mv_scale + (1<<15))>>16)
907     }else{
908         if(dmin<((h*h*s->avctx->mv0_threshold)>>8)
909                     && ( P_LEFT[0]    |P_LEFT[1]
910                         |P_TOP[0]     |P_TOP[1]
911                         |P_TOPRIGHT[0]|P_TOPRIGHT[1])==0){
912             *mx_ptr= 0;
913             *my_ptr= 0;
914             c->skip=1;
915             return dmin;
916         }
917         CHECK_MV(    P_MEDIAN[0] >>shift ,    P_MEDIAN[1] >>shift)
918         CHECK_CLIPPED_MV((P_MEDIAN[0]>>shift)  , (P_MEDIAN[1]>>shift)-1)
919         CHECK_CLIPPED_MV((P_MEDIAN[0]>>shift)  , (P_MEDIAN[1]>>shift)+1)
920         CHECK_CLIPPED_MV((P_MEDIAN[0]>>shift)-1, (P_MEDIAN[1]>>shift)  )
921         CHECK_CLIPPED_MV((P_MEDIAN[0]>>shift)+1, (P_MEDIAN[1]>>shift)  )
922         CHECK_CLIPPED_MV((last_mv[ref_mv_xy][0]*ref_mv_scale + (1<<15))>>16,
923                         (last_mv[ref_mv_xy][1]*ref_mv_scale + (1<<15))>>16)
924         CHECK_MV(P_LEFT[0]    >>shift, P_LEFT[1]    >>shift)
925         CHECK_MV(P_TOP[0]     >>shift, P_TOP[1]     >>shift)
926         CHECK_MV(P_TOPRIGHT[0]>>shift, P_TOPRIGHT[1]>>shift)
927     }
928     if(dmin>h*h*4){
929         if(c->pre_pass){
930             CHECK_CLIPPED_MV((last_mv[ref_mv_xy-1][0]*ref_mv_scale + (1<<15))>>16,
931                             (last_mv[ref_mv_xy-1][1]*ref_mv_scale + (1<<15))>>16)
932             if(!s->first_slice_line)
933                 CHECK_CLIPPED_MV((last_mv[ref_mv_xy-ref_mv_stride][0]*ref_mv_scale + (1<<15))>>16,
934                                 (last_mv[ref_mv_xy-ref_mv_stride][1]*ref_mv_scale + (1<<15))>>16)
935         }else{
936             CHECK_CLIPPED_MV((last_mv[ref_mv_xy+1][0]*ref_mv_scale + (1<<15))>>16,
937                             (last_mv[ref_mv_xy+1][1]*ref_mv_scale + (1<<15))>>16)
938             if(s->mb_y+1<s->end_mb_y)  //FIXME replace at least with last_slice_line
939                 CHECK_CLIPPED_MV((last_mv[ref_mv_xy+ref_mv_stride][0]*ref_mv_scale + (1<<15))>>16,
940                                 (last_mv[ref_mv_xy+ref_mv_stride][1]*ref_mv_scale + (1<<15))>>16)
941         }
942     }
943
944     if(c->avctx->last_predictor_count){
945         const int count= c->avctx->last_predictor_count;
946         const int xstart= FFMAX(0, s->mb_x - count);
947         const int ystart= FFMAX(0, s->mb_y - count);
948         const int xend= FFMIN(s->mb_width , s->mb_x + count + 1);
949         const int yend= FFMIN(s->mb_height, s->mb_y + count + 1);
950         int mb_y;
951
952         for(mb_y=ystart; mb_y<yend; mb_y++){
953             int mb_x;
954             for(mb_x=xstart; mb_x<xend; mb_x++){
955                 const int xy= mb_x + 1 + (mb_y + 1)*ref_mv_stride;
956                 int mx= (last_mv[xy][0]*ref_mv_scale + (1<<15))>>16;
957                 int my= (last_mv[xy][1]*ref_mv_scale + (1<<15))>>16;
958
959                 if(mx>xmax || mx<xmin || my>ymax || my<ymin) continue;
960                 CHECK_MV(mx,my)
961             }
962         }
963     }
964
965 //check(best[0],best[1],0, b0)
966     dmin= diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
967
968 //check(best[0],best[1],0, b1)
969     *mx_ptr= best[0];
970     *my_ptr= best[1];
971
972     return dmin;
973 }
974
975 //this function is dedicated to the braindamaged gcc
976 int ff_epzs_motion_search(MpegEncContext *s, int *mx_ptr, int *my_ptr,
977                           int P[10][2], int src_index, int ref_index,
978                           int16_t (*last_mv)[2], int ref_mv_scale,
979                           int size, int h)
980 {
981     MotionEstContext * const c= &s->me;
982 //FIXME convert other functions in the same way if faster
983     if(c->flags==0 && h==16 && size==0){
984         return epzs_motion_search_internal(s, mx_ptr, my_ptr, P, src_index, ref_index, last_mv, ref_mv_scale, 0, 0, 16);
985 //    case FLAG_QPEL:
986 //        return epzs_motion_search_internal(s, mx_ptr, my_ptr, P, src_index, ref_index, last_mv, ref_mv_scale, FLAG_QPEL);
987     }else{
988         return epzs_motion_search_internal(s, mx_ptr, my_ptr, P, src_index, ref_index, last_mv, ref_mv_scale, c->flags, size, h);
989     }
990 }
991
992 static int epzs_motion_search4(MpegEncContext * s,
993                              int *mx_ptr, int *my_ptr, int P[10][2],
994                              int src_index, int ref_index, int16_t (*last_mv)[2],
995                              int ref_mv_scale)
996 {
997     MotionEstContext * const c= &s->me;
998     int best[2]={0, 0};
999     int d, dmin;
1000     unsigned map_generation;
1001     const int penalty_factor= c->penalty_factor;
1002     const int size=1;
1003     const int h=8;
1004     const int ref_mv_stride= s->mb_stride;
1005     const int ref_mv_xy= s->mb_x + s->mb_y *ref_mv_stride;
1006     me_cmp_func cmpf, chroma_cmpf;
1007     LOAD_COMMON
1008     int flags= c->flags;
1009     LOAD_COMMON2
1010
1011     cmpf        = s->mecc.me_cmp[size];
1012     chroma_cmpf = s->mecc.me_cmp[size + 1];
1013
1014     map_generation= update_map_generation(c);
1015
1016     dmin = 1000000;
1017
1018     /* first line */
1019     if (s->first_slice_line) {
1020         CHECK_MV(P_LEFT[0]>>shift, P_LEFT[1]>>shift)
1021         CHECK_CLIPPED_MV((last_mv[ref_mv_xy][0]*ref_mv_scale + (1<<15))>>16,
1022                         (last_mv[ref_mv_xy][1]*ref_mv_scale + (1<<15))>>16)
1023         CHECK_MV(P_MV1[0]>>shift, P_MV1[1]>>shift)
1024     }else{
1025         CHECK_MV(P_MV1[0]>>shift, P_MV1[1]>>shift)
1026         //FIXME try some early stop
1027         CHECK_MV(P_MEDIAN[0]>>shift, P_MEDIAN[1]>>shift)
1028         CHECK_MV(P_LEFT[0]>>shift, P_LEFT[1]>>shift)
1029         CHECK_MV(P_TOP[0]>>shift, P_TOP[1]>>shift)
1030         CHECK_MV(P_TOPRIGHT[0]>>shift, P_TOPRIGHT[1]>>shift)
1031         CHECK_CLIPPED_MV((last_mv[ref_mv_xy][0]*ref_mv_scale + (1<<15))>>16,
1032                         (last_mv[ref_mv_xy][1]*ref_mv_scale + (1<<15))>>16)
1033     }
1034     if(dmin>64*4){
1035         CHECK_CLIPPED_MV((last_mv[ref_mv_xy+1][0]*ref_mv_scale + (1<<15))>>16,
1036                         (last_mv[ref_mv_xy+1][1]*ref_mv_scale + (1<<15))>>16)
1037         if(s->mb_y+1<s->end_mb_y)  //FIXME replace at least with last_slice_line
1038             CHECK_CLIPPED_MV((last_mv[ref_mv_xy+ref_mv_stride][0]*ref_mv_scale + (1<<15))>>16,
1039                             (last_mv[ref_mv_xy+ref_mv_stride][1]*ref_mv_scale + (1<<15))>>16)
1040     }
1041
1042     dmin= diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
1043
1044     *mx_ptr= best[0];
1045     *my_ptr= best[1];
1046
1047     return dmin;
1048 }
1049
1050 //try to merge with above FIXME (needs PSNR test)
1051 static int epzs_motion_search2(MpegEncContext * s,
1052                              int *mx_ptr, int *my_ptr, int P[10][2],
1053                              int src_index, int ref_index, int16_t (*last_mv)[2],
1054                              int ref_mv_scale)
1055 {
1056     MotionEstContext * const c= &s->me;
1057     int best[2]={0, 0};
1058     int d, dmin;
1059     unsigned map_generation;
1060     const int penalty_factor= c->penalty_factor;
1061     const int size=0; //FIXME pass as arg
1062     const int h=8;
1063     const int ref_mv_stride= s->mb_stride;
1064     const int ref_mv_xy= s->mb_x + s->mb_y *ref_mv_stride;
1065     me_cmp_func cmpf, chroma_cmpf;
1066     LOAD_COMMON
1067     int flags= c->flags;
1068     LOAD_COMMON2
1069
1070     cmpf        = s->mecc.me_cmp[size];
1071     chroma_cmpf = s->mecc.me_cmp[size + 1];
1072
1073     map_generation= update_map_generation(c);
1074
1075     dmin = 1000000;
1076
1077     /* first line */
1078     if (s->first_slice_line) {
1079         CHECK_MV(P_LEFT[0]>>shift, P_LEFT[1]>>shift)
1080         CHECK_CLIPPED_MV((last_mv[ref_mv_xy][0]*ref_mv_scale + (1<<15))>>16,
1081                         (last_mv[ref_mv_xy][1]*ref_mv_scale + (1<<15))>>16)
1082         CHECK_MV(P_MV1[0]>>shift, P_MV1[1]>>shift)
1083     }else{
1084         CHECK_MV(P_MV1[0]>>shift, P_MV1[1]>>shift)
1085         //FIXME try some early stop
1086         CHECK_MV(P_MEDIAN[0]>>shift, P_MEDIAN[1]>>shift)
1087         CHECK_MV(P_LEFT[0]>>shift, P_LEFT[1]>>shift)
1088         CHECK_MV(P_TOP[0]>>shift, P_TOP[1]>>shift)
1089         CHECK_MV(P_TOPRIGHT[0]>>shift, P_TOPRIGHT[1]>>shift)
1090         CHECK_CLIPPED_MV((last_mv[ref_mv_xy][0]*ref_mv_scale + (1<<15))>>16,
1091                         (last_mv[ref_mv_xy][1]*ref_mv_scale + (1<<15))>>16)
1092     }
1093     if(dmin>64*4){
1094         CHECK_CLIPPED_MV((last_mv[ref_mv_xy+1][0]*ref_mv_scale + (1<<15))>>16,
1095                         (last_mv[ref_mv_xy+1][1]*ref_mv_scale + (1<<15))>>16)
1096         if(s->mb_y+1<s->end_mb_y)  //FIXME replace at least with last_slice_line
1097             CHECK_CLIPPED_MV((last_mv[ref_mv_xy+ref_mv_stride][0]*ref_mv_scale + (1<<15))>>16,
1098                             (last_mv[ref_mv_xy+ref_mv_stride][1]*ref_mv_scale + (1<<15))>>16)
1099     }
1100
1101     dmin= diamond_search(s, best, dmin, src_index, ref_index, penalty_factor, size, h, flags);
1102
1103     *mx_ptr= best[0];
1104     *my_ptr= best[1];
1105
1106     return dmin;
1107 }