hevc_deblock: Fix compilation with nasm
[ffmpeg.git] / libavcodec / h263.h
1 /*
2  * H263 internal header
3  *
4  * This file is part of Libav.
5  *
6  * Libav is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2.1 of the License, or (at your option) any later version.
10  *
11  * Libav is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with Libav; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
19  */
20 #ifndef AVCODEC_H263_H
21 #define AVCODEC_H263_H
22
23 #include <stdint.h>
24 #include "libavutil/rational.h"
25 #include "get_bits.h"
26 #include "mpegvideo.h"
27 #include "rl.h"
28
29 #if !FF_API_ASPECT_EXTENDED
30 #define FF_ASPECT_EXTENDED 15
31 #endif
32 #define INT_BIT (CHAR_BIT * sizeof(int))
33
34 // The defines below define the number of bits that are read at once for
35 // reading vlc values. Changing these may improve speed and data cache needs
36 // be aware though that decreasing them may need the number of stages that is
37 // passed to get_vlc* to be increased.
38 #define INTRA_MCBPC_VLC_BITS 6
39 #define INTER_MCBPC_VLC_BITS 7
40 #define CBPY_VLC_BITS 6
41 #define TEX_VLC_BITS 9
42
43 extern const AVRational ff_h263_pixel_aspect[16];
44 extern const uint8_t ff_h263_cbpy_tab[16][2];
45
46 extern const uint8_t ff_cbpc_b_tab[4][2];
47
48 extern const uint8_t ff_mvtab[33][2];
49
50 extern const uint8_t ff_h263_intra_MCBPC_code[9];
51 extern const uint8_t ff_h263_intra_MCBPC_bits[9];
52
53 extern const uint8_t ff_h263_inter_MCBPC_code[28];
54 extern const uint8_t ff_h263_inter_MCBPC_bits[28];
55 extern const uint8_t ff_h263_mbtype_b_tab[15][2];
56
57 extern VLC ff_h263_intra_MCBPC_vlc;
58 extern VLC ff_h263_inter_MCBPC_vlc;
59 extern VLC ff_h263_cbpy_vlc;
60
61 extern const uint16_t ff_inter_vlc[103][2];
62 extern const int8_t ff_inter_level[102];
63 extern const int8_t ff_inter_run[102];
64
65 extern RLTable ff_h263_rl_inter;
66
67 extern RLTable ff_rl_intra_aic;
68
69 extern const uint16_t ff_h263_format[8][2];
70 extern const uint8_t ff_modified_quant_tab[2][32];
71 extern uint16_t ff_mba_max[6];
72 extern uint8_t ff_mba_length[7];
73
74 extern uint8_t ff_h263_static_rl_table_store[2][2][2*MAX_RUN + MAX_LEVEL + 3];
75
76 extern const enum AVPixelFormat ff_h263_hwaccel_pixfmt_list_420[];
77
78
79 int ff_h263_decode_motion(MpegEncContext * s, int pred, int f_code);
80 av_const int ff_h263_aspect_to_info(AVRational aspect);
81 int ff_h263_decode_init(AVCodecContext *avctx);
82 int ff_h263_decode_frame(AVCodecContext *avctx,
83                              void *data, int *got_frame,
84                              AVPacket *avpkt);
85 int ff_h263_decode_end(AVCodecContext *avctx);
86 void ff_h263_encode_mb(MpegEncContext *s,
87                        int16_t block[6][64],
88                        int motion_x, int motion_y);
89 void ff_h263_encode_picture_header(MpegEncContext *s, int picture_number);
90 void ff_h263_encode_gob_header(MpegEncContext * s, int mb_line);
91 int16_t *ff_h263_pred_motion(MpegEncContext * s, int block, int dir,
92                              int *px, int *py);
93 void ff_h263_encode_init(MpegEncContext *s);
94 void ff_h263_decode_init_vlc(void);
95 int ff_h263_decode_picture_header(MpegEncContext *s);
96 int ff_h263_decode_gob_header(MpegEncContext *s);
97 void ff_h263_update_motion_val(MpegEncContext * s);
98 void ff_h263_loop_filter(MpegEncContext * s);
99 int ff_h263_decode_mba(MpegEncContext *s);
100 void ff_h263_encode_mba(MpegEncContext *s);
101 void ff_init_qscale_tab(MpegEncContext *s);
102 int ff_h263_pred_dc(MpegEncContext * s, int n, int16_t **dc_val_ptr);
103 void ff_h263_pred_acdc(MpegEncContext * s, int16_t *block, int n);
104
105
106 /**
107  * Print picture info if FF_DEBUG_PICT_INFO is set.
108  */
109 void ff_h263_show_pict_info(MpegEncContext *s);
110
111 int ff_intel_h263_decode_picture_header(MpegEncContext *s);
112 int ff_h263_decode_mb(MpegEncContext *s,
113                       int16_t block[6][64]);
114
115 /**
116  * Return the value of the 3bit "source format" syntax element.
117  * This represents some standard picture dimensions or indicates that
118  * width&height are explicitly stored later.
119  */
120 int av_const h263_get_picture_format(int width, int height);
121
122 void ff_clean_h263_qscales(MpegEncContext *s);
123 int ff_h263_resync(MpegEncContext *s);
124 const uint8_t *ff_h263_find_resync_marker(const uint8_t *p, const uint8_t *end);
125 int ff_h263_get_gob_height(MpegEncContext *s);
126 void ff_h263_encode_motion(MpegEncContext * s, int val, int f_code);
127
128
129 static inline int h263_get_motion_length(MpegEncContext * s, int val, int f_code){
130     int l, bit_size, code;
131
132     if (val == 0) {
133         return ff_mvtab[0][1];
134     } else {
135         bit_size = f_code - 1;
136         /* modulo encoding */
137         l= INT_BIT - 6 - bit_size;
138         val = (val<<l)>>l;
139         val--;
140         code = (val >> bit_size) + 1;
141
142         return ff_mvtab[code][1] + 1 + bit_size;
143     }
144 }
145
146 static inline void ff_h263_encode_motion_vector(MpegEncContext * s, int x, int y, int f_code){
147     if(s->flags2 & CODEC_FLAG2_NO_OUTPUT){
148         skip_put_bits(&s->pb,
149             h263_get_motion_length(s, x, f_code)
150            +h263_get_motion_length(s, y, f_code));
151     }else{
152         ff_h263_encode_motion(s, x, f_code);
153         ff_h263_encode_motion(s, y, f_code);
154     }
155 }
156
157 static inline int get_p_cbp(MpegEncContext * s,
158                       int16_t block[6][64],
159                       int motion_x, int motion_y){
160     int cbp, i;
161
162     if (s->mpv_flags & FF_MPV_FLAG_CBP_RD) {
163         int best_cbpy_score= INT_MAX;
164         int best_cbpc_score= INT_MAX;
165         int cbpc = (-1), cbpy= (-1);
166         const int offset= (s->mv_type==MV_TYPE_16X16 ? 0 : 16) + (s->dquant ? 8 : 0);
167         const int lambda= s->lambda2 >> (FF_LAMBDA_SHIFT - 6);
168
169         for(i=0; i<4; i++){
170             int score= ff_h263_inter_MCBPC_bits[i + offset] * lambda;
171             if(i&1) score += s->coded_score[5];
172             if(i&2) score += s->coded_score[4];
173
174             if(score < best_cbpc_score){
175                 best_cbpc_score= score;
176                 cbpc= i;
177             }
178         }
179
180         for(i=0; i<16; i++){
181             int score= ff_h263_cbpy_tab[i ^ 0xF][1] * lambda;
182             if(i&1) score += s->coded_score[3];
183             if(i&2) score += s->coded_score[2];
184             if(i&4) score += s->coded_score[1];
185             if(i&8) score += s->coded_score[0];
186
187             if(score < best_cbpy_score){
188                 best_cbpy_score= score;
189                 cbpy= i;
190             }
191         }
192         cbp= cbpc + 4*cbpy;
193         if ((motion_x | motion_y | s->dquant) == 0 && s->mv_type==MV_TYPE_16X16){
194             if(best_cbpy_score + best_cbpc_score + 2*lambda >= 0)
195                 cbp= 0;
196         }
197
198         for (i = 0; i < 6; i++) {
199             if (s->block_last_index[i] >= 0 && ((cbp >> (5 - i))&1)==0 ){
200                 s->block_last_index[i]= -1;
201                 s->bdsp.clear_block(s->block[i]);
202             }
203         }
204     }else{
205         cbp= 0;
206         for (i = 0; i < 6; i++) {
207             if (s->block_last_index[i] >= 0)
208                 cbp |= 1 << (5 - i);
209         }
210     }
211     return cbp;
212 }
213
214 static inline void memsetw(short *tab, int val, int n)
215 {
216     int i;
217     for(i=0;i<n;i++)
218         tab[i] = val;
219 }
220
221 #endif /* AVCODEC_H263_H */