Merge remote-tracking branch 'qatar/master'
[ffmpeg.git] / libavcodec / qdm2.c
1 /*
2  * QDM2 compatible decoder
3  * Copyright (c) 2003 Ewald Snel
4  * Copyright (c) 2005 Benjamin Larsson
5  * Copyright (c) 2005 Alex Beregszaszi
6  * Copyright (c) 2005 Roberto Togni
7  *
8  * This file is part of FFmpeg.
9  *
10  * FFmpeg is free software; you can redistribute it and/or
11  * modify it under the terms of the GNU Lesser General Public
12  * License as published by the Free Software Foundation; either
13  * version 2.1 of the License, or (at your option) any later version.
14  *
15  * FFmpeg is distributed in the hope that it will be useful,
16  * but WITHOUT ANY WARRANTY; without even the implied warranty of
17  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
18  * Lesser General Public License for more details.
19  *
20  * You should have received a copy of the GNU Lesser General Public
21  * License along with FFmpeg; if not, write to the Free Software
22  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
23  */
24
25 /**
26  * @file
27  * QDM2 decoder
28  * @author Ewald Snel, Benjamin Larsson, Alex Beregszaszi, Roberto Togni
29  *
30  * The decoder is not perfect yet, there are still some distortions
31  * especially on files encoded with 16 or 8 subbands.
32  */
33
34 #include <math.h>
35 #include <stddef.h>
36 #include <stdio.h>
37
38 #define BITSTREAM_READER_LE
39 #include "libavutil/channel_layout.h"
40 #include "avcodec.h"
41 #include "get_bits.h"
42 #include "internal.h"
43 #include "rdft.h"
44 #include "mpegaudiodsp.h"
45 #include "mpegaudio.h"
46
47 #include "qdm2data.h"
48 #include "qdm2_tablegen.h"
49
50 #undef NDEBUG
51 #include <assert.h>
52
53
54 #define QDM2_LIST_ADD(list, size, packet) \
55 do { \
56       if (size > 0) { \
57     list[size - 1].next = &list[size]; \
58       } \
59       list[size].packet = packet; \
60       list[size].next = NULL; \
61       size++; \
62 } while(0)
63
64 // Result is 8, 16 or 30
65 #define QDM2_SB_USED(sub_sampling) (((sub_sampling) >= 2) ? 30 : 8 << (sub_sampling))
66
67 #define FIX_NOISE_IDX(noise_idx) \
68   if ((noise_idx) >= 3840) \
69     (noise_idx) -= 3840; \
70
71 #define SB_DITHERING_NOISE(sb,noise_idx) (noise_table[(noise_idx)++] * sb_noise_attenuation[(sb)])
72
73 #define SAMPLES_NEEDED \
74      av_log (NULL,AV_LOG_INFO,"This file triggers some untested code. Please contact the developers.\n");
75
76 #define SAMPLES_NEEDED_2(why) \
77      av_log (NULL,AV_LOG_INFO,"This file triggers some missing code. Please contact the developers.\nPosition: %s\n",why);
78
79 #define QDM2_MAX_FRAME_SIZE 512
80
81 typedef int8_t sb_int8_array[2][30][64];
82
83 /**
84  * Subpacket
85  */
86 typedef struct {
87     int type;            ///< subpacket type
88     unsigned int size;   ///< subpacket size
89     const uint8_t *data; ///< pointer to subpacket data (points to input data buffer, it's not a private copy)
90 } QDM2SubPacket;
91
92 /**
93  * A node in the subpacket list
94  */
95 typedef struct QDM2SubPNode {
96     QDM2SubPacket *packet;      ///< packet
97     struct QDM2SubPNode *next; ///< pointer to next packet in the list, NULL if leaf node
98 } QDM2SubPNode;
99
100 typedef struct {
101     float re;
102     float im;
103 } QDM2Complex;
104
105 typedef struct {
106     float level;
107     QDM2Complex *complex;
108     const float *table;
109     int   phase;
110     int   phase_shift;
111     int   duration;
112     short time_index;
113     short cutoff;
114 } FFTTone;
115
116 typedef struct {
117     int16_t sub_packet;
118     uint8_t channel;
119     int16_t offset;
120     int16_t exp;
121     uint8_t phase;
122 } FFTCoefficient;
123
124 typedef struct {
125     DECLARE_ALIGNED(32, QDM2Complex, complex)[MPA_MAX_CHANNELS][256];
126 } QDM2FFT;
127
128 /**
129  * QDM2 decoder context
130  */
131 typedef struct {
132     /// Parameters from codec header, do not change during playback
133     int nb_channels;         ///< number of channels
134     int channels;            ///< number of channels
135     int group_size;          ///< size of frame group (16 frames per group)
136     int fft_size;            ///< size of FFT, in complex numbers
137     int checksum_size;       ///< size of data block, used also for checksum
138
139     /// Parameters built from header parameters, do not change during playback
140     int group_order;         ///< order of frame group
141     int fft_order;           ///< order of FFT (actually fftorder+1)
142     int frame_size;          ///< size of data frame
143     int frequency_range;
144     int sub_sampling;        ///< subsampling: 0=25%, 1=50%, 2=100% */
145     int coeff_per_sb_select; ///< selector for "num. of coeffs. per subband" tables. Can be 0, 1, 2
146     int cm_table_select;     ///< selector for "coding method" tables. Can be 0, 1 (from init: 0-4)
147
148     /// Packets and packet lists
149     QDM2SubPacket sub_packets[16];      ///< the packets themselves
150     QDM2SubPNode sub_packet_list_A[16]; ///< list of all packets
151     QDM2SubPNode sub_packet_list_B[16]; ///< FFT packets B are on list
152     int sub_packets_B;                  ///< number of packets on 'B' list
153     QDM2SubPNode sub_packet_list_C[16]; ///< packets with errors?
154     QDM2SubPNode sub_packet_list_D[16]; ///< DCT packets
155
156     /// FFT and tones
157     FFTTone fft_tones[1000];
158     int fft_tone_start;
159     int fft_tone_end;
160     FFTCoefficient fft_coefs[1000];
161     int fft_coefs_index;
162     int fft_coefs_min_index[5];
163     int fft_coefs_max_index[5];
164     int fft_level_exp[6];
165     RDFTContext rdft_ctx;
166     QDM2FFT fft;
167
168     /// I/O data
169     const uint8_t *compressed_data;
170     int compressed_size;
171     float output_buffer[QDM2_MAX_FRAME_SIZE * MPA_MAX_CHANNELS * 2];
172
173     /// Synthesis filter
174     MPADSPContext mpadsp;
175     DECLARE_ALIGNED(32, float, synth_buf)[MPA_MAX_CHANNELS][512*2];
176     int synth_buf_offset[MPA_MAX_CHANNELS];
177     DECLARE_ALIGNED(32, float, sb_samples)[MPA_MAX_CHANNELS][128][SBLIMIT];
178     DECLARE_ALIGNED(32, float, samples)[MPA_MAX_CHANNELS * MPA_FRAME_SIZE];
179
180     /// Mixed temporary data used in decoding
181     float tone_level[MPA_MAX_CHANNELS][30][64];
182     int8_t coding_method[MPA_MAX_CHANNELS][30][64];
183     int8_t quantized_coeffs[MPA_MAX_CHANNELS][10][8];
184     int8_t tone_level_idx_base[MPA_MAX_CHANNELS][30][8];
185     int8_t tone_level_idx_hi1[MPA_MAX_CHANNELS][3][8][8];
186     int8_t tone_level_idx_mid[MPA_MAX_CHANNELS][26][8];
187     int8_t tone_level_idx_hi2[MPA_MAX_CHANNELS][26];
188     int8_t tone_level_idx[MPA_MAX_CHANNELS][30][64];
189     int8_t tone_level_idx_temp[MPA_MAX_CHANNELS][30][64];
190
191     // Flags
192     int has_errors;         ///< packet has errors
193     int superblocktype_2_3; ///< select fft tables and some algorithm based on superblock type
194     int do_synth_filter;    ///< used to perform or skip synthesis filter
195
196     int sub_packet;
197     int noise_idx; ///< index for dithering noise table
198 } QDM2Context;
199
200
201 static VLC vlc_tab_level;
202 static VLC vlc_tab_diff;
203 static VLC vlc_tab_run;
204 static VLC fft_level_exp_alt_vlc;
205 static VLC fft_level_exp_vlc;
206 static VLC fft_stereo_exp_vlc;
207 static VLC fft_stereo_phase_vlc;
208 static VLC vlc_tab_tone_level_idx_hi1;
209 static VLC vlc_tab_tone_level_idx_mid;
210 static VLC vlc_tab_tone_level_idx_hi2;
211 static VLC vlc_tab_type30;
212 static VLC vlc_tab_type34;
213 static VLC vlc_tab_fft_tone_offset[5];
214
215 static const uint16_t qdm2_vlc_offs[] = {
216     0,260,566,598,894,1166,1230,1294,1678,1950,2214,2278,2310,2570,2834,3124,3448,3838,
217 };
218
219 static const int switchtable[23] = {
220     0, 5, 1, 5, 5, 5, 5, 5, 2, 5, 5, 5, 5, 5, 5, 5, 3, 5, 5, 5, 5, 5, 4
221 };
222
223 static av_cold void qdm2_init_vlc(void)
224 {
225     static VLC_TYPE qdm2_table[3838][2];
226
227     vlc_tab_level.table           = &qdm2_table[qdm2_vlc_offs[0]];
228     vlc_tab_level.table_allocated = qdm2_vlc_offs[1] - qdm2_vlc_offs[0];
229     init_vlc(&vlc_tab_level, 8, 24,
230              vlc_tab_level_huffbits, 1, 1,
231              vlc_tab_level_huffcodes, 2, 2,
232              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
233
234     vlc_tab_diff.table           = &qdm2_table[qdm2_vlc_offs[1]];
235     vlc_tab_diff.table_allocated = qdm2_vlc_offs[2] - qdm2_vlc_offs[1];
236     init_vlc(&vlc_tab_diff, 8, 37,
237              vlc_tab_diff_huffbits, 1, 1,
238              vlc_tab_diff_huffcodes, 2, 2,
239              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
240
241     vlc_tab_run.table           = &qdm2_table[qdm2_vlc_offs[2]];
242     vlc_tab_run.table_allocated = qdm2_vlc_offs[3] - qdm2_vlc_offs[2];
243     init_vlc(&vlc_tab_run, 5, 6,
244              vlc_tab_run_huffbits, 1, 1,
245              vlc_tab_run_huffcodes, 1, 1,
246              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
247
248     fft_level_exp_alt_vlc.table           = &qdm2_table[qdm2_vlc_offs[3]];
249     fft_level_exp_alt_vlc.table_allocated = qdm2_vlc_offs[4] -
250                                             qdm2_vlc_offs[3];
251     init_vlc(&fft_level_exp_alt_vlc, 8, 28,
252              fft_level_exp_alt_huffbits, 1, 1,
253              fft_level_exp_alt_huffcodes, 2, 2,
254              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
255
256     fft_level_exp_vlc.table           = &qdm2_table[qdm2_vlc_offs[4]];
257     fft_level_exp_vlc.table_allocated = qdm2_vlc_offs[5] - qdm2_vlc_offs[4];
258     init_vlc(&fft_level_exp_vlc, 8, 20,
259              fft_level_exp_huffbits, 1, 1,
260              fft_level_exp_huffcodes, 2, 2,
261              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
262
263     fft_stereo_exp_vlc.table           = &qdm2_table[qdm2_vlc_offs[5]];
264     fft_stereo_exp_vlc.table_allocated = qdm2_vlc_offs[6] -
265                                          qdm2_vlc_offs[5];
266     init_vlc(&fft_stereo_exp_vlc, 6, 7,
267              fft_stereo_exp_huffbits, 1, 1,
268              fft_stereo_exp_huffcodes, 1, 1,
269              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
270
271     fft_stereo_phase_vlc.table           = &qdm2_table[qdm2_vlc_offs[6]];
272     fft_stereo_phase_vlc.table_allocated = qdm2_vlc_offs[7] -
273                                            qdm2_vlc_offs[6];
274     init_vlc(&fft_stereo_phase_vlc, 6, 9,
275              fft_stereo_phase_huffbits, 1, 1,
276              fft_stereo_phase_huffcodes, 1, 1,
277              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
278
279     vlc_tab_tone_level_idx_hi1.table =
280         &qdm2_table[qdm2_vlc_offs[7]];
281     vlc_tab_tone_level_idx_hi1.table_allocated = qdm2_vlc_offs[8] -
282                                                  qdm2_vlc_offs[7];
283     init_vlc(&vlc_tab_tone_level_idx_hi1, 8, 20,
284              vlc_tab_tone_level_idx_hi1_huffbits, 1, 1,
285              vlc_tab_tone_level_idx_hi1_huffcodes, 2, 2,
286              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
287
288     vlc_tab_tone_level_idx_mid.table =
289         &qdm2_table[qdm2_vlc_offs[8]];
290     vlc_tab_tone_level_idx_mid.table_allocated = qdm2_vlc_offs[9] -
291                                                  qdm2_vlc_offs[8];
292     init_vlc(&vlc_tab_tone_level_idx_mid, 8, 24,
293              vlc_tab_tone_level_idx_mid_huffbits, 1, 1,
294              vlc_tab_tone_level_idx_mid_huffcodes, 2, 2,
295              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
296
297     vlc_tab_tone_level_idx_hi2.table =
298         &qdm2_table[qdm2_vlc_offs[9]];
299     vlc_tab_tone_level_idx_hi2.table_allocated = qdm2_vlc_offs[10] -
300                                                  qdm2_vlc_offs[9];
301     init_vlc(&vlc_tab_tone_level_idx_hi2, 8, 24,
302              vlc_tab_tone_level_idx_hi2_huffbits, 1, 1,
303              vlc_tab_tone_level_idx_hi2_huffcodes, 2, 2,
304              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
305
306     vlc_tab_type30.table           = &qdm2_table[qdm2_vlc_offs[10]];
307     vlc_tab_type30.table_allocated = qdm2_vlc_offs[11] - qdm2_vlc_offs[10];
308     init_vlc(&vlc_tab_type30, 6, 9,
309              vlc_tab_type30_huffbits, 1, 1,
310              vlc_tab_type30_huffcodes, 1, 1,
311              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
312
313     vlc_tab_type34.table           = &qdm2_table[qdm2_vlc_offs[11]];
314     vlc_tab_type34.table_allocated = qdm2_vlc_offs[12] - qdm2_vlc_offs[11];
315     init_vlc(&vlc_tab_type34, 5, 10,
316              vlc_tab_type34_huffbits, 1, 1,
317              vlc_tab_type34_huffcodes, 1, 1,
318              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
319
320     vlc_tab_fft_tone_offset[0].table =
321         &qdm2_table[qdm2_vlc_offs[12]];
322     vlc_tab_fft_tone_offset[0].table_allocated = qdm2_vlc_offs[13] -
323                                                  qdm2_vlc_offs[12];
324     init_vlc(&vlc_tab_fft_tone_offset[0], 8, 23,
325              vlc_tab_fft_tone_offset_0_huffbits, 1, 1,
326              vlc_tab_fft_tone_offset_0_huffcodes, 2, 2,
327              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
328
329     vlc_tab_fft_tone_offset[1].table =
330         &qdm2_table[qdm2_vlc_offs[13]];
331     vlc_tab_fft_tone_offset[1].table_allocated = qdm2_vlc_offs[14] -
332                                                  qdm2_vlc_offs[13];
333     init_vlc(&vlc_tab_fft_tone_offset[1], 8, 28,
334              vlc_tab_fft_tone_offset_1_huffbits, 1, 1,
335              vlc_tab_fft_tone_offset_1_huffcodes, 2, 2,
336              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
337
338     vlc_tab_fft_tone_offset[2].table =
339         &qdm2_table[qdm2_vlc_offs[14]];
340     vlc_tab_fft_tone_offset[2].table_allocated = qdm2_vlc_offs[15] -
341                                                  qdm2_vlc_offs[14];
342     init_vlc(&vlc_tab_fft_tone_offset[2], 8, 32,
343              vlc_tab_fft_tone_offset_2_huffbits, 1, 1,
344              vlc_tab_fft_tone_offset_2_huffcodes, 2, 2,
345              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
346
347     vlc_tab_fft_tone_offset[3].table =
348         &qdm2_table[qdm2_vlc_offs[15]];
349     vlc_tab_fft_tone_offset[3].table_allocated = qdm2_vlc_offs[16] -
350                                                  qdm2_vlc_offs[15];
351     init_vlc(&vlc_tab_fft_tone_offset[3], 8, 35,
352              vlc_tab_fft_tone_offset_3_huffbits, 1, 1,
353              vlc_tab_fft_tone_offset_3_huffcodes, 2, 2,
354              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
355
356     vlc_tab_fft_tone_offset[4].table =
357         &qdm2_table[qdm2_vlc_offs[16]];
358     vlc_tab_fft_tone_offset[4].table_allocated = qdm2_vlc_offs[17] -
359                                                  qdm2_vlc_offs[16];
360     init_vlc(&vlc_tab_fft_tone_offset[4], 8, 38,
361              vlc_tab_fft_tone_offset_4_huffbits, 1, 1,
362              vlc_tab_fft_tone_offset_4_huffcodes, 2, 2,
363              INIT_VLC_USE_NEW_STATIC | INIT_VLC_LE);
364 }
365
366 static int qdm2_get_vlc(GetBitContext *gb, VLC *vlc, int flag, int depth)
367 {
368     int value;
369
370     value = get_vlc2(gb, vlc->table, vlc->bits, depth);
371
372     /* stage-2, 3 bits exponent escape sequence */
373     if (value-- == 0)
374         value = get_bits(gb, get_bits(gb, 3) + 1);
375
376     /* stage-3, optional */
377     if (flag) {
378         int tmp;
379
380         if (value >= 60) {
381             av_log(NULL, AV_LOG_ERROR, "value %d in qdm2_get_vlc too large\n", value);
382             return 0;
383         }
384
385         tmp= vlc_stage3_values[value];
386
387         if ((value & ~3) > 0)
388             tmp += get_bits(gb, (value >> 2));
389         value = tmp;
390     }
391
392     return value;
393 }
394
395 static int qdm2_get_se_vlc(VLC *vlc, GetBitContext *gb, int depth)
396 {
397     int value = qdm2_get_vlc(gb, vlc, 0, depth);
398
399     return (value & 1) ? ((value + 1) >> 1) : -(value >> 1);
400 }
401
402 /**
403  * QDM2 checksum
404  *
405  * @param data      pointer to data to be checksum'ed
406  * @param length    data length
407  * @param value     checksum value
408  *
409  * @return          0 if checksum is OK
410  */
411 static uint16_t qdm2_packet_checksum(const uint8_t *data, int length, int value)
412 {
413     int i;
414
415     for (i = 0; i < length; i++)
416         value -= data[i];
417
418     return (uint16_t)(value & 0xffff);
419 }
420
421 /**
422  * Fill a QDM2SubPacket structure with packet type, size, and data pointer.
423  *
424  * @param gb            bitreader context
425  * @param sub_packet    packet under analysis
426  */
427 static void qdm2_decode_sub_packet_header(GetBitContext *gb,
428                                           QDM2SubPacket *sub_packet)
429 {
430     sub_packet->type = get_bits(gb, 8);
431
432     if (sub_packet->type == 0) {
433         sub_packet->size = 0;
434         sub_packet->data = NULL;
435     } else {
436         sub_packet->size = get_bits(gb, 8);
437
438         if (sub_packet->type & 0x80) {
439             sub_packet->size <<= 8;
440             sub_packet->size  |= get_bits(gb, 8);
441             sub_packet->type  &= 0x7f;
442         }
443
444         if (sub_packet->type == 0x7f)
445             sub_packet->type |= (get_bits(gb, 8) << 8);
446
447         // FIXME: this depends on bitreader-internal data
448         sub_packet->data = &gb->buffer[get_bits_count(gb) / 8];
449     }
450
451     av_log(NULL, AV_LOG_DEBUG, "Subpacket: type=%d size=%d start_offs=%x\n",
452            sub_packet->type, sub_packet->size, get_bits_count(gb) / 8);
453 }
454
455 /**
456  * Return node pointer to first packet of requested type in list.
457  *
458  * @param list    list of subpackets to be scanned
459  * @param type    type of searched subpacket
460  * @return        node pointer for subpacket if found, else NULL
461  */
462 static QDM2SubPNode *qdm2_search_subpacket_type_in_list(QDM2SubPNode *list,
463                                                         int type)
464 {
465     while (list != NULL && list->packet != NULL) {
466         if (list->packet->type == type)
467             return list;
468         list = list->next;
469     }
470     return NULL;
471 }
472
473 /**
474  * Replace 8 elements with their average value.
475  * Called by qdm2_decode_superblock before starting subblock decoding.
476  *
477  * @param q       context
478  */
479 static void average_quantized_coeffs(QDM2Context *q)
480 {
481     int i, j, n, ch, sum;
482
483     n = coeff_per_sb_for_avg[q->coeff_per_sb_select][QDM2_SB_USED(q->sub_sampling) - 1] + 1;
484
485     for (ch = 0; ch < q->nb_channels; ch++)
486         for (i = 0; i < n; i++) {
487             sum = 0;
488
489             for (j = 0; j < 8; j++)
490                 sum += q->quantized_coeffs[ch][i][j];
491
492             sum /= 8;
493             if (sum > 0)
494                 sum--;
495
496             for (j = 0; j < 8; j++)
497                 q->quantized_coeffs[ch][i][j] = sum;
498         }
499 }
500
501 /**
502  * Build subband samples with noise weighted by q->tone_level.
503  * Called by synthfilt_build_sb_samples.
504  *
505  * @param q     context
506  * @param sb    subband index
507  */
508 static void build_sb_samples_from_noise(QDM2Context *q, int sb)
509 {
510     int ch, j;
511
512     FIX_NOISE_IDX(q->noise_idx);
513
514     if (!q->nb_channels)
515         return;
516
517     for (ch = 0; ch < q->nb_channels; ch++) {
518         for (j = 0; j < 64; j++) {
519             q->sb_samples[ch][j * 2][sb] =
520                 SB_DITHERING_NOISE(sb, q->noise_idx) * q->tone_level[ch][sb][j];
521             q->sb_samples[ch][j * 2 + 1][sb] =
522                 SB_DITHERING_NOISE(sb, q->noise_idx) * q->tone_level[ch][sb][j];
523         }
524     }
525 }
526
527 /**
528  * Called while processing data from subpackets 11 and 12.
529  * Used after making changes to coding_method array.
530  *
531  * @param sb               subband index
532  * @param channels         number of channels
533  * @param coding_method    q->coding_method[0][0][0]
534  */
535 static int fix_coding_method_array(int sb, int channels,
536                                    sb_int8_array coding_method)
537 {
538     int j, k;
539     int ch;
540     int run, case_val;
541
542     for (ch = 0; ch < channels; ch++) {
543         for (j = 0; j < 64; ) {
544             if (coding_method[ch][sb][j] < 8)
545                 return -1;
546             if ((coding_method[ch][sb][j] - 8) > 22) {
547                 run      = 1;
548                 case_val = 8;
549             } else {
550                 switch (switchtable[coding_method[ch][sb][j] - 8]) {
551                 case 0: run  = 10;
552                     case_val = 10;
553                     break;
554                 case 1: run  = 1;
555                     case_val = 16;
556                     break;
557                 case 2: run  = 5;
558                     case_val = 24;
559                     break;
560                 case 3: run  = 3;
561                     case_val = 30;
562                     break;
563                 case 4: run  = 1;
564                     case_val = 30;
565                     break;
566                 case 5: run  = 1;
567                     case_val = 8;
568                     break;
569                 default: run = 1;
570                     case_val = 8;
571                     break;
572                 }
573             }
574             for (k = 0; k < run; k++) {
575                 if (j + k < 128) {
576                     if (coding_method[ch][sb + (j + k) / 64][(j + k) % 64] > coding_method[ch][sb][j]) {
577                         if (k > 0) {
578                             SAMPLES_NEEDED
579                             //not debugged, almost never used
580                             memset(&coding_method[ch][sb][j + k], case_val,
581                                    k *sizeof(int8_t));
582                             memset(&coding_method[ch][sb][j + k], case_val,
583                                    3 * sizeof(int8_t));
584                         }
585                     }
586                 }
587             }
588             j += run;
589         }
590     }
591     return 0;
592 }
593
594 /**
595  * Related to synthesis filter
596  * Called by process_subpacket_10
597  *
598  * @param q       context
599  * @param flag    1 if called after getting data from subpacket 10, 0 if no subpacket 10
600  */
601 static void fill_tone_level_array(QDM2Context *q, int flag)
602 {
603     int i, sb, ch, sb_used;
604     int tmp, tab;
605
606     for (ch = 0; ch < q->nb_channels; ch++)
607         for (sb = 0; sb < 30; sb++)
608             for (i = 0; i < 8; i++) {
609                 if ((tab=coeff_per_sb_for_dequant[q->coeff_per_sb_select][sb]) < (last_coeff[q->coeff_per_sb_select] - 1))
610                     tmp = q->quantized_coeffs[ch][tab + 1][i] * dequant_table[q->coeff_per_sb_select][tab + 1][sb]+
611                           q->quantized_coeffs[ch][tab][i] * dequant_table[q->coeff_per_sb_select][tab][sb];
612                 else
613                     tmp = q->quantized_coeffs[ch][tab][i] * dequant_table[q->coeff_per_sb_select][tab][sb];
614                 if(tmp < 0)
615                     tmp += 0xff;
616                 q->tone_level_idx_base[ch][sb][i] = (tmp / 256) & 0xff;
617             }
618
619     sb_used = QDM2_SB_USED(q->sub_sampling);
620
621     if ((q->superblocktype_2_3 != 0) && !flag) {
622         for (sb = 0; sb < sb_used; sb++)
623             for (ch = 0; ch < q->nb_channels; ch++)
624                 for (i = 0; i < 64; i++) {
625                     q->tone_level_idx[ch][sb][i] = q->tone_level_idx_base[ch][sb][i / 8];
626                     if (q->tone_level_idx[ch][sb][i] < 0)
627                         q->tone_level[ch][sb][i] = 0;
628                     else
629                         q->tone_level[ch][sb][i] = fft_tone_level_table[0][q->tone_level_idx[ch][sb][i] & 0x3f];
630                 }
631     } else {
632         tab = q->superblocktype_2_3 ? 0 : 1;
633         for (sb = 0; sb < sb_used; sb++) {
634             if ((sb >= 4) && (sb <= 23)) {
635                 for (ch = 0; ch < q->nb_channels; ch++)
636                     for (i = 0; i < 64; i++) {
637                         tmp = q->tone_level_idx_base[ch][sb][i / 8] -
638                               q->tone_level_idx_hi1[ch][sb / 8][i / 8][i % 8] -
639                               q->tone_level_idx_mid[ch][sb - 4][i / 8] -
640                               q->tone_level_idx_hi2[ch][sb - 4];
641                         q->tone_level_idx[ch][sb][i] = tmp & 0xff;
642                         if ((tmp < 0) || (!q->superblocktype_2_3 && !tmp))
643                             q->tone_level[ch][sb][i] = 0;
644                         else
645                             q->tone_level[ch][sb][i] = fft_tone_level_table[tab][tmp & 0x3f];
646                 }
647             } else {
648                 if (sb > 4) {
649                     for (ch = 0; ch < q->nb_channels; ch++)
650                         for (i = 0; i < 64; i++) {
651                             tmp = q->tone_level_idx_base[ch][sb][i / 8] -
652                                   q->tone_level_idx_hi1[ch][2][i / 8][i % 8] -
653                                   q->tone_level_idx_hi2[ch][sb - 4];
654                             q->tone_level_idx[ch][sb][i] = tmp & 0xff;
655                             if ((tmp < 0) || (!q->superblocktype_2_3 && !tmp))
656                                 q->tone_level[ch][sb][i] = 0;
657                             else
658                                 q->tone_level[ch][sb][i] = fft_tone_level_table[tab][tmp & 0x3f];
659                     }
660                 } else {
661                     for (ch = 0; ch < q->nb_channels; ch++)
662                         for (i = 0; i < 64; i++) {
663                             tmp = q->tone_level_idx[ch][sb][i] = q->tone_level_idx_base[ch][sb][i / 8];
664                             if ((tmp < 0) || (!q->superblocktype_2_3 && !tmp))
665                                 q->tone_level[ch][sb][i] = 0;
666                             else
667                                 q->tone_level[ch][sb][i] = fft_tone_level_table[tab][tmp & 0x3f];
668                         }
669                 }
670             }
671         }
672     }
673 }
674
675 /**
676  * Related to synthesis filter
677  * Called by process_subpacket_11
678  * c is built with data from subpacket 11
679  * Most of this function is used only if superblock_type_2_3 == 0,
680  * never seen it in samples.
681  *
682  * @param tone_level_idx
683  * @param tone_level_idx_temp
684  * @param coding_method        q->coding_method[0][0][0]
685  * @param nb_channels          number of channels
686  * @param c                    coming from subpacket 11, passed as 8*c
687  * @param superblocktype_2_3   flag based on superblock packet type
688  * @param cm_table_select      q->cm_table_select
689  */
690 static void fill_coding_method_array(sb_int8_array tone_level_idx,
691                                      sb_int8_array tone_level_idx_temp,
692                                      sb_int8_array coding_method,
693                                      int nb_channels,
694                                      int c, int superblocktype_2_3,
695                                      int cm_table_select)
696 {
697     int ch, sb, j;
698     int tmp, acc, esp_40, comp;
699     int add1, add2, add3, add4;
700     int64_t multres;
701
702     if (!superblocktype_2_3) {
703         /* This case is untested, no samples available */
704         avpriv_request_sample(NULL, "!superblocktype_2_3");
705         return;
706         for (ch = 0; ch < nb_channels; ch++)
707             for (sb = 0; sb < 30; sb++) {
708                 for (j = 1; j < 63; j++) {  // The loop only iterates to 63 so the code doesn't overflow the buffer
709                     add1 = tone_level_idx[ch][sb][j] - 10;
710                     if (add1 < 0)
711                         add1 = 0;
712                     add2 = add3 = add4 = 0;
713                     if (sb > 1) {
714                         add2 = tone_level_idx[ch][sb - 2][j] + tone_level_idx_offset_table[sb][0] - 6;
715                         if (add2 < 0)
716                             add2 = 0;
717                     }
718                     if (sb > 0) {
719                         add3 = tone_level_idx[ch][sb - 1][j] + tone_level_idx_offset_table[sb][1] - 6;
720                         if (add3 < 0)
721                             add3 = 0;
722                     }
723                     if (sb < 29) {
724                         add4 = tone_level_idx[ch][sb + 1][j] + tone_level_idx_offset_table[sb][3] - 6;
725                         if (add4 < 0)
726                             add4 = 0;
727                     }
728                     tmp = tone_level_idx[ch][sb][j + 1] * 2 - add4 - add3 - add2 - add1;
729                     if (tmp < 0)
730                         tmp = 0;
731                     tone_level_idx_temp[ch][sb][j + 1] = tmp & 0xff;
732                 }
733                 tone_level_idx_temp[ch][sb][0] = tone_level_idx_temp[ch][sb][1];
734             }
735             acc = 0;
736             for (ch = 0; ch < nb_channels; ch++)
737                 for (sb = 0; sb < 30; sb++)
738                     for (j = 0; j < 64; j++)
739                         acc += tone_level_idx_temp[ch][sb][j];
740
741             multres = 0x66666667LL * (acc * 10);
742             esp_40 = (multres >> 32) / 8 + ((multres & 0xffffffff) >> 31);
743             for (ch = 0;  ch < nb_channels; ch++)
744                 for (sb = 0; sb < 30; sb++)
745                     for (j = 0; j < 64; j++) {
746                         comp = tone_level_idx_temp[ch][sb][j]* esp_40 * 10;
747                         if (comp < 0)
748                             comp += 0xff;
749                         comp /= 256; // signed shift
750                         switch(sb) {
751                             case 0:
752                                 if (comp < 30)
753                                     comp = 30;
754                                 comp += 15;
755                                 break;
756                             case 1:
757                                 if (comp < 24)
758                                     comp = 24;
759                                 comp += 10;
760                                 break;
761                             case 2:
762                             case 3:
763                             case 4:
764                                 if (comp < 16)
765                                     comp = 16;
766                         }
767                         if (comp <= 5)
768                             tmp = 0;
769                         else if (comp <= 10)
770                             tmp = 10;
771                         else if (comp <= 16)
772                             tmp = 16;
773                         else if (comp <= 24)
774                             tmp = -1;
775                         else
776                             tmp = 0;
777                         coding_method[ch][sb][j] = ((tmp & 0xfffa) + 30 )& 0xff;
778                     }
779             for (sb = 0; sb < 30; sb++)
780                 fix_coding_method_array(sb, nb_channels, coding_method);
781             for (ch = 0; ch < nb_channels; ch++)
782                 for (sb = 0; sb < 30; sb++)
783                     for (j = 0; j < 64; j++)
784                         if (sb >= 10) {
785                             if (coding_method[ch][sb][j] < 10)
786                                 coding_method[ch][sb][j] = 10;
787                         } else {
788                             if (sb >= 2) {
789                                 if (coding_method[ch][sb][j] < 16)
790                                     coding_method[ch][sb][j] = 16;
791                             } else {
792                                 if (coding_method[ch][sb][j] < 30)
793                                     coding_method[ch][sb][j] = 30;
794                             }
795                         }
796     } else { // superblocktype_2_3 != 0
797         for (ch = 0; ch < nb_channels; ch++)
798             for (sb = 0; sb < 30; sb++)
799                 for (j = 0; j < 64; j++)
800                     coding_method[ch][sb][j] = coding_method_table[cm_table_select][sb];
801     }
802 }
803
804 /**
805  *
806  * Called by process_subpacket_11 to process more data from subpacket 11
807  * with sb 0-8.
808  * Called by process_subpacket_12 to process data from subpacket 12 with
809  * sb 8-sb_used.
810  *
811  * @param q         context
812  * @param gb        bitreader context
813  * @param length    packet length in bits
814  * @param sb_min    lower subband processed (sb_min included)
815  * @param sb_max    higher subband processed (sb_max excluded)
816  */
817 static int synthfilt_build_sb_samples(QDM2Context *q, GetBitContext *gb,
818                                        int length, int sb_min, int sb_max)
819 {
820     int sb, j, k, n, ch, run, channels;
821     int joined_stereo, zero_encoding;
822     int type34_first;
823     float type34_div = 0;
824     float type34_predictor;
825     float samples[10], sign_bits[16];
826
827     if (length == 0) {
828         // If no data use noise
829         for (sb=sb_min; sb < sb_max; sb++)
830             build_sb_samples_from_noise (q, sb);
831
832         return 0;
833     }
834
835     for (sb = sb_min; sb < sb_max; sb++) {
836         channels = q->nb_channels;
837
838         if (q->nb_channels <= 1 || sb < 12)
839             joined_stereo = 0;
840         else if (sb >= 24)
841             joined_stereo = 1;
842         else
843             joined_stereo = (get_bits_left(gb) >= 1) ? get_bits1 (gb) : 0;
844
845         if (joined_stereo) {
846             if (get_bits_left(gb) >= 16)
847                 for (j = 0; j < 16; j++)
848                     sign_bits[j] = get_bits1 (gb);
849
850             for (j = 0; j < 64; j++)
851                 if (q->coding_method[1][sb][j] > q->coding_method[0][sb][j])
852                     q->coding_method[0][sb][j] = q->coding_method[1][sb][j];
853
854             if (fix_coding_method_array(sb, q->nb_channels,
855                                             q->coding_method)) {
856                 av_log(NULL, AV_LOG_ERROR, "coding method invalid\n");
857                 build_sb_samples_from_noise(q, sb);
858                 continue;
859             }
860             channels = 1;
861         }
862
863         for (ch = 0; ch < channels; ch++) {
864             FIX_NOISE_IDX(q->noise_idx);
865             zero_encoding = (get_bits_left(gb) >= 1) ? get_bits1(gb) : 0;
866             type34_predictor = 0.0;
867             type34_first = 1;
868
869             for (j = 0; j < 128; ) {
870                 switch (q->coding_method[ch][sb][j / 2]) {
871                     case 8:
872                         if (get_bits_left(gb) >= 10) {
873                             if (zero_encoding) {
874                                 for (k = 0; k < 5; k++) {
875                                     if ((j + 2 * k) >= 128)
876                                         break;
877                                     samples[2 * k] = get_bits1(gb) ? dequant_1bit[joined_stereo][2 * get_bits1(gb)] : 0;
878                                 }
879                             } else {
880                                 n = get_bits(gb, 8);
881                                 if (n >= 243) {
882                                     av_log(NULL, AV_LOG_ERROR, "Invalid 8bit codeword\n");
883                                     return AVERROR_INVALIDDATA;
884                                 }
885
886                                 for (k = 0; k < 5; k++)
887                                     samples[2 * k] = dequant_1bit[joined_stereo][random_dequant_index[n][k]];
888                             }
889                             for (k = 0; k < 5; k++)
890                                 samples[2 * k + 1] = SB_DITHERING_NOISE(sb,q->noise_idx);
891                         } else {
892                             for (k = 0; k < 10; k++)
893                                 samples[k] = SB_DITHERING_NOISE(sb,q->noise_idx);
894                         }
895                         run = 10;
896                         break;
897
898                     case 10:
899                         if (get_bits_left(gb) >= 1) {
900                             float f = 0.81;
901
902                             if (get_bits1(gb))
903                                 f = -f;
904                             f -= noise_samples[((sb + 1) * (j +5 * ch + 1)) & 127] * 9.0 / 40.0;
905                             samples[0] = f;
906                         } else {
907                             samples[0] = SB_DITHERING_NOISE(sb,q->noise_idx);
908                         }
909                         run = 1;
910                         break;
911
912                     case 16:
913                         if (get_bits_left(gb) >= 10) {
914                             if (zero_encoding) {
915                                 for (k = 0; k < 5; k++) {
916                                     if ((j + k) >= 128)
917                                         break;
918                                     samples[k] = (get_bits1(gb) == 0) ? 0 : dequant_1bit[joined_stereo][2 * get_bits1(gb)];
919                                 }
920                             } else {
921                                 n = get_bits (gb, 8);
922                                 if (n >= 243) {
923                                     av_log(NULL, AV_LOG_ERROR, "Invalid 8bit codeword\n");
924                                     return AVERROR_INVALIDDATA;
925                                 }
926
927                                 for (k = 0; k < 5; k++)
928                                     samples[k] = dequant_1bit[joined_stereo][random_dequant_index[n][k]];
929                             }
930                         } else {
931                             for (k = 0; k < 5; k++)
932                                 samples[k] = SB_DITHERING_NOISE(sb,q->noise_idx);
933                         }
934                         run = 5;
935                         break;
936
937                     case 24:
938                         if (get_bits_left(gb) >= 7) {
939                             n = get_bits(gb, 7);
940                             if (n >= 125) {
941                                 av_log(NULL, AV_LOG_ERROR, "Invalid 7bit codeword\n");
942                                 return AVERROR_INVALIDDATA;
943                             }
944
945                             for (k = 0; k < 3; k++)
946                                 samples[k] = (random_dequant_type24[n][k] - 2.0) * 0.5;
947                         } else {
948                             for (k = 0; k < 3; k++)
949                                 samples[k] = SB_DITHERING_NOISE(sb,q->noise_idx);
950                         }
951                         run = 3;
952                         break;
953
954                     case 30:
955                         if (get_bits_left(gb) >= 4) {
956                             unsigned index = qdm2_get_vlc(gb, &vlc_tab_type30, 0, 1);
957                             if (index >= FF_ARRAY_ELEMS(type30_dequant)) {
958                                 av_log(NULL, AV_LOG_ERROR, "index %d out of type30_dequant array\n", index);
959                                 return AVERROR_INVALIDDATA;
960                             }
961                             samples[0] = type30_dequant[index];
962                         } else
963                             samples[0] = SB_DITHERING_NOISE(sb,q->noise_idx);
964
965                         run = 1;
966                         break;
967
968                     case 34:
969                         if (get_bits_left(gb) >= 7) {
970                             if (type34_first) {
971                                 type34_div = (float)(1 << get_bits(gb, 2));
972                                 samples[0] = ((float)get_bits(gb, 5) - 16.0) / 15.0;
973                                 type34_predictor = samples[0];
974                                 type34_first = 0;
975                             } else {
976                                 unsigned index = qdm2_get_vlc(gb, &vlc_tab_type34, 0, 1);
977                                 if (index >= FF_ARRAY_ELEMS(type34_delta)) {
978                                     av_log(NULL, AV_LOG_ERROR, "index %d out of type34_delta array\n", index);
979                                     return AVERROR_INVALIDDATA;
980                                 }
981                                 samples[0] = type34_delta[index] / type34_div + type34_predictor;
982                                 type34_predictor = samples[0];
983                             }
984                         } else {
985                             samples[0] = SB_DITHERING_NOISE(sb,q->noise_idx);
986                         }
987                         run = 1;
988                         break;
989
990                     default:
991                         samples[0] = SB_DITHERING_NOISE(sb,q->noise_idx);
992                         run = 1;
993                         break;
994                 }
995
996                 if (joined_stereo) {
997                     for (k = 0; k < run && j + k < 128; k++) {
998                         q->sb_samples[0][j + k][sb] =
999                             q->tone_level[0][sb][(j + k) / 2] * samples[k];
1000                         if (q->nb_channels == 2) {
1001                             if (sign_bits[(j + k) / 8])
1002                                 q->sb_samples[1][j + k][sb] =
1003                                     q->tone_level[1][sb][(j + k) / 2] * -samples[k];
1004                             else
1005                                 q->sb_samples[1][j + k][sb] =
1006                                     q->tone_level[1][sb][(j + k) / 2] * samples[k];
1007                         }
1008                     }
1009                 } else {
1010                     for (k = 0; k < run; k++)
1011                         if ((j + k) < 128)
1012                             q->sb_samples[ch][j + k][sb] = q->tone_level[ch][sb][(j + k)/2] * samples[k];
1013                 }
1014
1015                 j += run;
1016             } // j loop
1017         } // channel loop
1018     } // subband loop
1019     return 0;
1020 }
1021
1022 /**
1023  * Init the first element of a channel in quantized_coeffs with data
1024  * from packet 10 (quantized_coeffs[ch][0]).
1025  * This is similar to process_subpacket_9, but for a single channel
1026  * and for element [0]
1027  * same VLC tables as process_subpacket_9 are used.
1028  *
1029  * @param quantized_coeffs    pointer to quantized_coeffs[ch][0]
1030  * @param gb        bitreader context
1031  */
1032 static int init_quantized_coeffs_elem0(int8_t *quantized_coeffs,
1033                                         GetBitContext *gb)
1034 {
1035     int i, k, run, level, diff;
1036
1037     if (get_bits_left(gb) < 16)
1038         return -1;
1039     level = qdm2_get_vlc(gb, &vlc_tab_level, 0, 2);
1040
1041     quantized_coeffs[0] = level;
1042
1043     for (i = 0; i < 7; ) {
1044         if (get_bits_left(gb) < 16)
1045             return -1;
1046         run = qdm2_get_vlc(gb, &vlc_tab_run, 0, 1) + 1;
1047
1048         if (i + run >= 8)
1049             return -1;
1050
1051         if (get_bits_left(gb) < 16)
1052             return -1;
1053         diff = qdm2_get_se_vlc(&vlc_tab_diff, gb, 2);
1054
1055         for (k = 1; k <= run; k++)
1056             quantized_coeffs[i + k] = (level + ((k * diff) / run));
1057
1058         level += diff;
1059         i += run;
1060     }
1061     return 0;
1062 }
1063
1064 /**
1065  * Related to synthesis filter, process data from packet 10
1066  * Init part of quantized_coeffs via function init_quantized_coeffs_elem0
1067  * Init tone_level_idx_hi1, tone_level_idx_hi2, tone_level_idx_mid with
1068  * data from packet 10
1069  *
1070  * @param q         context
1071  * @param gb        bitreader context
1072  */
1073 static void init_tone_level_dequantization (QDM2Context *q, GetBitContext *gb)
1074 {
1075     int sb, j, k, n, ch;
1076
1077     for (ch = 0; ch < q->nb_channels; ch++) {
1078         init_quantized_coeffs_elem0(q->quantized_coeffs[ch][0], gb);
1079
1080         if (get_bits_left(gb) < 16) {
1081             memset(q->quantized_coeffs[ch][0], 0, 8);
1082             break;
1083         }
1084     }
1085
1086     n = q->sub_sampling + 1;
1087
1088     for (sb = 0; sb < n; sb++)
1089         for (ch = 0; ch < q->nb_channels; ch++)
1090             for (j = 0; j < 8; j++) {
1091                 if (get_bits_left(gb) < 1)
1092                     break;
1093                 if (get_bits1(gb)) {
1094                     for (k=0; k < 8; k++) {
1095                         if (get_bits_left(gb) < 16)
1096                             break;
1097                         q->tone_level_idx_hi1[ch][sb][j][k] = qdm2_get_vlc(gb, &vlc_tab_tone_level_idx_hi1, 0, 2);
1098                     }
1099                 } else {
1100                     for (k=0; k < 8; k++)
1101                         q->tone_level_idx_hi1[ch][sb][j][k] = 0;
1102                 }
1103             }
1104
1105     n = QDM2_SB_USED(q->sub_sampling) - 4;
1106
1107     for (sb = 0; sb < n; sb++)
1108         for (ch = 0; ch < q->nb_channels; ch++) {
1109             if (get_bits_left(gb) < 16)
1110                 break;
1111             q->tone_level_idx_hi2[ch][sb] = qdm2_get_vlc(gb, &vlc_tab_tone_level_idx_hi2, 0, 2);
1112             if (sb > 19)
1113                 q->tone_level_idx_hi2[ch][sb] -= 16;
1114             else
1115                 for (j = 0; j < 8; j++)
1116                     q->tone_level_idx_mid[ch][sb][j] = -16;
1117         }
1118
1119     n = QDM2_SB_USED(q->sub_sampling) - 5;
1120
1121     for (sb = 0; sb < n; sb++)
1122         for (ch = 0; ch < q->nb_channels; ch++)
1123             for (j = 0; j < 8; j++) {
1124                 if (get_bits_left(gb) < 16)
1125                     break;
1126                 q->tone_level_idx_mid[ch][sb][j] = qdm2_get_vlc(gb, &vlc_tab_tone_level_idx_mid, 0, 2) - 32;
1127             }
1128 }
1129
1130 /**
1131  * Process subpacket 9, init quantized_coeffs with data from it
1132  *
1133  * @param q       context
1134  * @param node    pointer to node with packet
1135  */
1136 static int process_subpacket_9(QDM2Context *q, QDM2SubPNode *node)
1137 {
1138     GetBitContext gb;
1139     int i, j, k, n, ch, run, level, diff;
1140
1141     init_get_bits(&gb, node->packet->data, node->packet->size * 8);
1142
1143     n = coeff_per_sb_for_avg[q->coeff_per_sb_select][QDM2_SB_USED(q->sub_sampling) - 1] + 1;
1144
1145     for (i = 1; i < n; i++)
1146         for (ch = 0; ch < q->nb_channels; ch++) {
1147             level = qdm2_get_vlc(&gb, &vlc_tab_level, 0, 2);
1148             q->quantized_coeffs[ch][i][0] = level;
1149
1150             for (j = 0; j < (8 - 1); ) {
1151                 run  = qdm2_get_vlc(&gb, &vlc_tab_run, 0, 1) + 1;
1152                 diff = qdm2_get_se_vlc(&vlc_tab_diff, &gb, 2);
1153
1154                 if (j + run >= 8)
1155                     return -1;
1156
1157                 for (k = 1; k <= run; k++)
1158                     q->quantized_coeffs[ch][i][j + k] = (level + ((k * diff) / run));
1159
1160                 level += diff;
1161                 j     += run;
1162             }
1163         }
1164
1165     for (ch = 0; ch < q->nb_channels; ch++)
1166         for (i = 0; i < 8; i++)
1167             q->quantized_coeffs[ch][0][i] = 0;
1168
1169     return 0;
1170 }
1171
1172 /**
1173  * Process subpacket 10 if not null, else
1174  *
1175  * @param q         context
1176  * @param node      pointer to node with packet
1177  */
1178 static void process_subpacket_10(QDM2Context *q, QDM2SubPNode *node)
1179 {
1180     GetBitContext gb;
1181
1182     if (node) {
1183         init_get_bits(&gb, node->packet->data, node->packet->size * 8);
1184         init_tone_level_dequantization(q, &gb);
1185         fill_tone_level_array(q, 1);
1186     } else {
1187         fill_tone_level_array(q, 0);
1188     }
1189 }
1190
1191 /**
1192  * Process subpacket 11
1193  *
1194  * @param q         context
1195  * @param node      pointer to node with packet
1196  */
1197 static void process_subpacket_11(QDM2Context *q, QDM2SubPNode *node)
1198 {
1199     GetBitContext gb;
1200     int length = 0;
1201
1202     if (node) {
1203         length = node->packet->size * 8;
1204         init_get_bits(&gb, node->packet->data, length);
1205     }
1206
1207     if (length >= 32) {
1208         int c = get_bits(&gb, 13);
1209
1210         if (c > 3)
1211             fill_coding_method_array(q->tone_level_idx,
1212                                      q->tone_level_idx_temp, q->coding_method,
1213                                      q->nb_channels, 8 * c,
1214                                      q->superblocktype_2_3, q->cm_table_select);
1215     }
1216
1217     synthfilt_build_sb_samples(q, &gb, length, 0, 8);
1218 }
1219
1220 /**
1221  * Process subpacket 12
1222  *
1223  * @param q         context
1224  * @param node      pointer to node with packet
1225  */
1226 static void process_subpacket_12(QDM2Context *q, QDM2SubPNode *node)
1227 {
1228     GetBitContext gb;
1229     int length = 0;
1230
1231     if (node) {
1232         length = node->packet->size * 8;
1233         init_get_bits(&gb, node->packet->data, length);
1234     }
1235
1236     synthfilt_build_sb_samples(q, &gb, length, 8, QDM2_SB_USED(q->sub_sampling));
1237 }
1238
1239 /**
1240  * Process new subpackets for synthesis filter
1241  *
1242  * @param q       context
1243  * @param list    list with synthesis filter packets (list D)
1244  */
1245 static void process_synthesis_subpackets(QDM2Context *q, QDM2SubPNode *list)
1246 {
1247     QDM2SubPNode *nodes[4];
1248
1249     nodes[0] = qdm2_search_subpacket_type_in_list(list, 9);
1250     if (nodes[0] != NULL)
1251         process_subpacket_9(q, nodes[0]);
1252
1253     nodes[1] = qdm2_search_subpacket_type_in_list(list, 10);
1254     if (nodes[1] != NULL)
1255         process_subpacket_10(q, nodes[1]);
1256     else
1257         process_subpacket_10(q, NULL);
1258
1259     nodes[2] = qdm2_search_subpacket_type_in_list(list, 11);
1260     if (nodes[0] != NULL && nodes[1] != NULL && nodes[2] != NULL)
1261         process_subpacket_11(q, nodes[2]);
1262     else
1263         process_subpacket_11(q, NULL);
1264
1265     nodes[3] = qdm2_search_subpacket_type_in_list(list, 12);
1266     if (nodes[0] != NULL && nodes[1] != NULL && nodes[3] != NULL)
1267         process_subpacket_12(q, nodes[3]);
1268     else
1269         process_subpacket_12(q, NULL);
1270 }
1271
1272 /**
1273  * Decode superblock, fill packet lists.
1274  *
1275  * @param q    context
1276  */
1277 static void qdm2_decode_super_block(QDM2Context *q)
1278 {
1279     GetBitContext gb;
1280     QDM2SubPacket header, *packet;
1281     int i, packet_bytes, sub_packet_size, sub_packets_D;
1282     unsigned int next_index = 0;
1283
1284     memset(q->tone_level_idx_hi1, 0, sizeof(q->tone_level_idx_hi1));
1285     memset(q->tone_level_idx_mid, 0, sizeof(q->tone_level_idx_mid));
1286     memset(q->tone_level_idx_hi2, 0, sizeof(q->tone_level_idx_hi2));
1287
1288     q->sub_packets_B = 0;
1289     sub_packets_D    = 0;
1290
1291     average_quantized_coeffs(q); // average elements in quantized_coeffs[max_ch][10][8]
1292
1293     init_get_bits(&gb, q->compressed_data, q->compressed_size * 8);
1294     qdm2_decode_sub_packet_header(&gb, &header);
1295
1296     if (header.type < 2 || header.type >= 8) {
1297         q->has_errors = 1;
1298         av_log(NULL, AV_LOG_ERROR, "bad superblock type\n");
1299         return;
1300     }
1301
1302     q->superblocktype_2_3 = (header.type == 2 || header.type == 3);
1303     packet_bytes          = (q->compressed_size - get_bits_count(&gb) / 8);
1304
1305     init_get_bits(&gb, header.data, header.size * 8);
1306
1307     if (header.type == 2 || header.type == 4 || header.type == 5) {
1308         int csum = 257 * get_bits(&gb, 8);
1309         csum += 2 * get_bits(&gb, 8);
1310
1311         csum = qdm2_packet_checksum(q->compressed_data, q->checksum_size, csum);
1312
1313         if (csum != 0) {
1314             q->has_errors = 1;
1315             av_log(NULL, AV_LOG_ERROR, "bad packet checksum\n");
1316             return;
1317         }
1318     }
1319
1320     q->sub_packet_list_B[0].packet = NULL;
1321     q->sub_packet_list_D[0].packet = NULL;
1322
1323     for (i = 0; i < 6; i++)
1324         if (--q->fft_level_exp[i] < 0)
1325             q->fft_level_exp[i] = 0;
1326
1327     for (i = 0; packet_bytes > 0; i++) {
1328         int j;
1329
1330         if (i >= FF_ARRAY_ELEMS(q->sub_packet_list_A)) {
1331             SAMPLES_NEEDED_2("too many packet bytes");
1332             return;
1333         }
1334
1335         q->sub_packet_list_A[i].next = NULL;
1336
1337         if (i > 0) {
1338             q->sub_packet_list_A[i - 1].next = &q->sub_packet_list_A[i];
1339
1340             /* seek to next block */
1341             init_get_bits(&gb, header.data, header.size * 8);
1342             skip_bits(&gb, next_index * 8);
1343
1344             if (next_index >= header.size)
1345                 break;
1346         }
1347
1348         /* decode subpacket */
1349         packet = &q->sub_packets[i];
1350         qdm2_decode_sub_packet_header(&gb, packet);
1351         next_index      = packet->size + get_bits_count(&gb) / 8;
1352         sub_packet_size = ((packet->size > 0xff) ? 1 : 0) + packet->size + 2;
1353
1354         if (packet->type == 0)
1355             break;
1356
1357         if (sub_packet_size > packet_bytes) {
1358             if (packet->type != 10 && packet->type != 11 && packet->type != 12)
1359                 break;
1360             packet->size += packet_bytes - sub_packet_size;
1361         }
1362
1363         packet_bytes -= sub_packet_size;
1364
1365         /* add subpacket to 'all subpackets' list */
1366         q->sub_packet_list_A[i].packet = packet;
1367
1368         /* add subpacket to related list */
1369         if (packet->type == 8) {
1370             SAMPLES_NEEDED_2("packet type 8");
1371             return;
1372         } else if (packet->type >= 9 && packet->type <= 12) {
1373             /* packets for MPEG Audio like Synthesis Filter */
1374             QDM2_LIST_ADD(q->sub_packet_list_D, sub_packets_D, packet);
1375         } else if (packet->type == 13) {
1376             for (j = 0; j < 6; j++)
1377                 q->fft_level_exp[j] = get_bits(&gb, 6);
1378         } else if (packet->type == 14) {
1379             for (j = 0; j < 6; j++)
1380                 q->fft_level_exp[j] = qdm2_get_vlc(&gb, &fft_level_exp_vlc, 0, 2);
1381         } else if (packet->type == 15) {
1382             SAMPLES_NEEDED_2("packet type 15")
1383             return;
1384         } else if (packet->type >= 16 && packet->type < 48 &&
1385                    !fft_subpackets[packet->type - 16]) {
1386             /* packets for FFT */
1387             QDM2_LIST_ADD(q->sub_packet_list_B, q->sub_packets_B, packet);
1388         }
1389     } // Packet bytes loop
1390
1391     if (q->sub_packet_list_D[0].packet != NULL) {
1392         process_synthesis_subpackets(q, q->sub_packet_list_D);
1393         q->do_synth_filter = 1;
1394     } else if (q->do_synth_filter) {
1395         process_subpacket_10(q, NULL);
1396         process_subpacket_11(q, NULL);
1397         process_subpacket_12(q, NULL);
1398     }
1399 }
1400
1401 static void qdm2_fft_init_coefficient(QDM2Context *q, int sub_packet,
1402                                       int offset, int duration, int channel,
1403                                       int exp, int phase)
1404 {
1405     if (q->fft_coefs_min_index[duration] < 0)
1406         q->fft_coefs_min_index[duration] = q->fft_coefs_index;
1407
1408     q->fft_coefs[q->fft_coefs_index].sub_packet =
1409         ((sub_packet >= 16) ? (sub_packet - 16) : sub_packet);
1410     q->fft_coefs[q->fft_coefs_index].channel = channel;
1411     q->fft_coefs[q->fft_coefs_index].offset  = offset;
1412     q->fft_coefs[q->fft_coefs_index].exp     = exp;
1413     q->fft_coefs[q->fft_coefs_index].phase   = phase;
1414     q->fft_coefs_index++;
1415 }
1416
1417 static void qdm2_fft_decode_tones(QDM2Context *q, int duration,
1418                                   GetBitContext *gb, int b)
1419 {
1420     int channel, stereo, phase, exp;
1421     int local_int_4, local_int_8, stereo_phase, local_int_10;
1422     int local_int_14, stereo_exp, local_int_20, local_int_28;
1423     int n, offset;
1424
1425     local_int_4  = 0;
1426     local_int_28 = 0;
1427     local_int_20 = 2;
1428     local_int_8  = (4 - duration);
1429     local_int_10 = 1 << (q->group_order - duration - 1);
1430     offset       = 1;
1431
1432     while (get_bits_left(gb)>0) {
1433         if (q->superblocktype_2_3) {
1434             while ((n = qdm2_get_vlc(gb, &vlc_tab_fft_tone_offset[local_int_8], 1, 2)) < 2) {
1435                 if (get_bits_left(gb)<0) {
1436                     if(local_int_4 < q->group_size)
1437                         av_log(NULL, AV_LOG_ERROR, "overread in qdm2_fft_decode_tones()\n");
1438                     return;
1439                 }
1440                 offset = 1;
1441                 if (n == 0) {
1442                     local_int_4  += local_int_10;
1443                     local_int_28 += (1 << local_int_8);
1444                 } else {
1445                     local_int_4  += 8 * local_int_10;
1446                     local_int_28 += (8 << local_int_8);
1447                 }
1448             }
1449             offset += (n - 2);
1450         } else {
1451             offset += qdm2_get_vlc(gb, &vlc_tab_fft_tone_offset[local_int_8], 1, 2);
1452             while (offset >= (local_int_10 - 1)) {
1453                 offset       += (1 - (local_int_10 - 1));
1454                 local_int_4  += local_int_10;
1455                 local_int_28 += (1 << local_int_8);
1456             }
1457         }
1458
1459         if (local_int_4 >= q->group_size)
1460             return;
1461
1462         local_int_14 = (offset >> local_int_8);
1463         if (local_int_14 >= FF_ARRAY_ELEMS(fft_level_index_table))
1464             return;
1465
1466         if (q->nb_channels > 1) {
1467             channel = get_bits1(gb);
1468             stereo  = get_bits1(gb);
1469         } else {
1470             channel = 0;
1471             stereo  = 0;
1472         }
1473
1474         exp  = qdm2_get_vlc(gb, (b ? &fft_level_exp_vlc : &fft_level_exp_alt_vlc), 0, 2);
1475         exp += q->fft_level_exp[fft_level_index_table[local_int_14]];
1476         exp  = (exp < 0) ? 0 : exp;
1477
1478         phase        = get_bits(gb, 3);
1479         stereo_exp   = 0;
1480         stereo_phase = 0;
1481
1482         if (stereo) {
1483             stereo_exp   = (exp - qdm2_get_vlc(gb, &fft_stereo_exp_vlc, 0, 1));
1484             stereo_phase = (phase - qdm2_get_vlc(gb, &fft_stereo_phase_vlc, 0, 1));
1485             if (stereo_phase < 0)
1486                 stereo_phase += 8;
1487         }
1488
1489         if (q->frequency_range > (local_int_14 + 1)) {
1490             int sub_packet = (local_int_20 + local_int_28);
1491
1492             qdm2_fft_init_coefficient(q, sub_packet, offset, duration,
1493                                       channel, exp, phase);
1494             if (stereo)
1495                 qdm2_fft_init_coefficient(q, sub_packet, offset, duration,
1496                                           1 - channel,
1497                                           stereo_exp, stereo_phase);
1498         }
1499         offset++;
1500     }
1501 }
1502
1503 static void qdm2_decode_fft_packets(QDM2Context *q)
1504 {
1505     int i, j, min, max, value, type, unknown_flag;
1506     GetBitContext gb;
1507
1508     if (q->sub_packet_list_B[0].packet == NULL)
1509         return;
1510
1511     /* reset minimum indexes for FFT coefficients */
1512     q->fft_coefs_index = 0;
1513     for (i = 0; i < 5; i++)
1514         q->fft_coefs_min_index[i] = -1;
1515
1516     /* process subpackets ordered by type, largest type first */
1517     for (i = 0, max = 256; i < q->sub_packets_B; i++) {
1518         QDM2SubPacket *packet = NULL;
1519
1520         /* find subpacket with largest type less than max */
1521         for (j = 0, min = 0; j < q->sub_packets_B; j++) {
1522             value = q->sub_packet_list_B[j].packet->type;
1523             if (value > min && value < max) {
1524                 min    = value;
1525                 packet = q->sub_packet_list_B[j].packet;
1526             }
1527         }
1528
1529         max = min;
1530
1531         /* check for errors (?) */
1532         if (!packet)
1533             return;
1534
1535         if (i == 0 &&
1536             (packet->type < 16 || packet->type >= 48 ||
1537              fft_subpackets[packet->type - 16]))
1538             return;
1539
1540         /* decode FFT tones */
1541         init_get_bits(&gb, packet->data, packet->size * 8);
1542
1543         if (packet->type >= 32 && packet->type < 48 && !fft_subpackets[packet->type - 16])
1544             unknown_flag = 1;
1545         else
1546             unknown_flag = 0;
1547
1548         type = packet->type;
1549
1550         if ((type >= 17 && type < 24) || (type >= 33 && type < 40)) {
1551             int duration = q->sub_sampling + 5 - (type & 15);
1552
1553             if (duration >= 0 && duration < 4)
1554                 qdm2_fft_decode_tones(q, duration, &gb, unknown_flag);
1555         } else if (type == 31) {
1556             for (j = 0; j < 4; j++)
1557                 qdm2_fft_decode_tones(q, j, &gb, unknown_flag);
1558         } else if (type == 46) {
1559             for (j = 0; j < 6; j++)
1560                 q->fft_level_exp[j] = get_bits(&gb, 6);
1561             for (j = 0; j < 4; j++)
1562                 qdm2_fft_decode_tones(q, j, &gb, unknown_flag);
1563         }
1564     } // Loop on B packets
1565
1566     /* calculate maximum indexes for FFT coefficients */
1567     for (i = 0, j = -1; i < 5; i++)
1568         if (q->fft_coefs_min_index[i] >= 0) {
1569             if (j >= 0)
1570                 q->fft_coefs_max_index[j] = q->fft_coefs_min_index[i];
1571             j = i;
1572         }
1573     if (j >= 0)
1574         q->fft_coefs_max_index[j] = q->fft_coefs_index;
1575 }
1576
1577 static void qdm2_fft_generate_tone(QDM2Context *q, FFTTone *tone)
1578 {
1579     float level, f[6];
1580     int i;
1581     QDM2Complex c;
1582     const double iscale = 2.0 * M_PI / 512.0;
1583
1584     tone->phase += tone->phase_shift;
1585
1586     /* calculate current level (maximum amplitude) of tone */
1587     level = fft_tone_envelope_table[tone->duration][tone->time_index] * tone->level;
1588     c.im  = level * sin(tone->phase * iscale);
1589     c.re  = level * cos(tone->phase * iscale);
1590
1591     /* generate FFT coefficients for tone */
1592     if (tone->duration >= 3 || tone->cutoff >= 3) {
1593         tone->complex[0].im += c.im;
1594         tone->complex[0].re += c.re;
1595         tone->complex[1].im -= c.im;
1596         tone->complex[1].re -= c.re;
1597     } else {
1598         f[1] = -tone->table[4];
1599         f[0] = tone->table[3] - tone->table[0];
1600         f[2] = 1.0 - tone->table[2] - tone->table[3];
1601         f[3] = tone->table[1] + tone->table[4] - 1.0;
1602         f[4] = tone->table[0] - tone->table[1];
1603         f[5] = tone->table[2];
1604         for (i = 0; i < 2; i++) {
1605             tone->complex[fft_cutoff_index_table[tone->cutoff][i]].re +=
1606                 c.re * f[i];
1607             tone->complex[fft_cutoff_index_table[tone->cutoff][i]].im +=
1608                 c.im * ((tone->cutoff <= i) ? -f[i] : f[i]);
1609         }
1610         for (i = 0; i < 4; i++) {
1611             tone->complex[i].re += c.re * f[i + 2];
1612             tone->complex[i].im += c.im * f[i + 2];
1613         }
1614     }
1615
1616     /* copy the tone if it has not yet died out */
1617     if (++tone->time_index < ((1 << (5 - tone->duration)) - 1)) {
1618         memcpy(&q->fft_tones[q->fft_tone_end], tone, sizeof(FFTTone));
1619         q->fft_tone_end = (q->fft_tone_end + 1) % 1000;
1620     }
1621 }
1622
1623 static void qdm2_fft_tone_synthesizer(QDM2Context *q, int sub_packet)
1624 {
1625     int i, j, ch;
1626     const double iscale = 0.25 * M_PI;
1627
1628     for (ch = 0; ch < q->channels; ch++) {
1629         memset(q->fft.complex[ch], 0, q->fft_size * sizeof(QDM2Complex));
1630     }
1631
1632
1633     /* apply FFT tones with duration 4 (1 FFT period) */
1634     if (q->fft_coefs_min_index[4] >= 0)
1635         for (i = q->fft_coefs_min_index[4]; i < q->fft_coefs_max_index[4]; i++) {
1636             float level;
1637             QDM2Complex c;
1638
1639             if (q->fft_coefs[i].sub_packet != sub_packet)
1640                 break;
1641
1642             ch = (q->channels == 1) ? 0 : q->fft_coefs[i].channel;
1643             level = (q->fft_coefs[i].exp < 0) ? 0.0 : fft_tone_level_table[q->superblocktype_2_3 ? 0 : 1][q->fft_coefs[i].exp & 63];
1644
1645             c.re = level * cos(q->fft_coefs[i].phase * iscale);
1646             c.im = level * sin(q->fft_coefs[i].phase * iscale);
1647             q->fft.complex[ch][q->fft_coefs[i].offset + 0].re += c.re;
1648             q->fft.complex[ch][q->fft_coefs[i].offset + 0].im += c.im;
1649             q->fft.complex[ch][q->fft_coefs[i].offset + 1].re -= c.re;
1650             q->fft.complex[ch][q->fft_coefs[i].offset + 1].im -= c.im;
1651         }
1652
1653     /* generate existing FFT tones */
1654     for (i = q->fft_tone_end; i != q->fft_tone_start; ) {
1655         qdm2_fft_generate_tone(q, &q->fft_tones[q->fft_tone_start]);
1656         q->fft_tone_start = (q->fft_tone_start + 1) % 1000;
1657     }
1658
1659     /* create and generate new FFT tones with duration 0 (long) to 3 (short) */
1660     for (i = 0; i < 4; i++)
1661         if (q->fft_coefs_min_index[i] >= 0) {
1662             for (j = q->fft_coefs_min_index[i]; j < q->fft_coefs_max_index[i]; j++) {
1663                 int offset, four_i;
1664                 FFTTone tone;
1665
1666                 if (q->fft_coefs[j].sub_packet != sub_packet)
1667                     break;
1668
1669                 four_i = (4 - i);
1670                 offset = q->fft_coefs[j].offset >> four_i;
1671                 ch = (q->channels == 1) ? 0 : q->fft_coefs[j].channel;
1672
1673                 if (offset < q->frequency_range) {
1674                     if (offset < 2)
1675                         tone.cutoff = offset;
1676                     else
1677                         tone.cutoff = (offset >= 60) ? 3 : 2;
1678
1679                     tone.level = (q->fft_coefs[j].exp < 0) ? 0.0 : fft_tone_level_table[q->superblocktype_2_3 ? 0 : 1][q->fft_coefs[j].exp & 63];
1680                     tone.complex = &q->fft.complex[ch][offset];
1681                     tone.table = fft_tone_sample_table[i][q->fft_coefs[j].offset - (offset << four_i)];
1682                     tone.phase = 64 * q->fft_coefs[j].phase - (offset << 8) - 128;
1683                     tone.phase_shift = (2 * q->fft_coefs[j].offset + 1) << (7 - four_i);
1684                     tone.duration = i;
1685                     tone.time_index = 0;
1686
1687                     qdm2_fft_generate_tone(q, &tone);
1688                 }
1689             }
1690             q->fft_coefs_min_index[i] = j;
1691         }
1692 }
1693
1694 static void qdm2_calculate_fft(QDM2Context *q, int channel, int sub_packet)
1695 {
1696     const float gain = (q->channels == 1 && q->nb_channels == 2) ? 0.5f : 1.0f;
1697     float *out       = q->output_buffer + channel;
1698     int i;
1699     q->fft.complex[channel][0].re *= 2.0f;
1700     q->fft.complex[channel][0].im  = 0.0f;
1701     q->rdft_ctx.rdft_calc(&q->rdft_ctx, (FFTSample *)q->fft.complex[channel]);
1702     /* add samples to output buffer */
1703     for (i = 0; i < FFALIGN(q->fft_size, 8); i++) {
1704         out[0]           += q->fft.complex[channel][i].re * gain;
1705         out[q->channels] += q->fft.complex[channel][i].im * gain;
1706         out              += 2 * q->channels;
1707     }
1708 }
1709
1710 /**
1711  * @param q        context
1712  * @param index    subpacket number
1713  */
1714 static void qdm2_synthesis_filter(QDM2Context *q, int index)
1715 {
1716     int i, k, ch, sb_used, sub_sampling, dither_state = 0;
1717
1718     /* copy sb_samples */
1719     sb_used = QDM2_SB_USED(q->sub_sampling);
1720
1721     for (ch = 0; ch < q->channels; ch++)
1722         for (i = 0; i < 8; i++)
1723             for (k = sb_used; k < SBLIMIT; k++)
1724                 q->sb_samples[ch][(8 * index) + i][k] = 0;
1725
1726     for (ch = 0; ch < q->nb_channels; ch++) {
1727         float *samples_ptr = q->samples + ch;
1728
1729         for (i = 0; i < 8; i++) {
1730             ff_mpa_synth_filter_float(&q->mpadsp,
1731                                       q->synth_buf[ch], &(q->synth_buf_offset[ch]),
1732                                       ff_mpa_synth_window_float, &dither_state,
1733                                       samples_ptr, q->nb_channels,
1734                                       q->sb_samples[ch][(8 * index) + i]);
1735             samples_ptr += 32 * q->nb_channels;
1736         }
1737     }
1738
1739     /* add samples to output buffer */
1740     sub_sampling = (4 >> q->sub_sampling);
1741
1742     for (ch = 0; ch < q->channels; ch++)
1743         for (i = 0; i < q->frame_size; i++)
1744             q->output_buffer[q->channels * i + ch] += (1 << 23) * q->samples[q->nb_channels * sub_sampling * i + ch];
1745 }
1746
1747 /**
1748  * Init static data (does not depend on specific file)
1749  *
1750  * @param q    context
1751  */
1752 static av_cold void qdm2_init_static_data(AVCodec *codec) {
1753     qdm2_init_vlc();
1754     ff_mpa_synth_init_float(ff_mpa_synth_window_float);
1755     softclip_table_init();
1756     rnd_table_init();
1757     init_noise_samples();
1758 }
1759
1760 /**
1761  * Init parameters from codec extradata
1762  */
1763 static av_cold int qdm2_decode_init(AVCodecContext *avctx)
1764 {
1765     QDM2Context *s = avctx->priv_data;
1766     uint8_t *extradata;
1767     int extradata_size;
1768     int tmp_val, tmp, size;
1769
1770     /* extradata parsing
1771
1772     Structure:
1773     wave {
1774         frma (QDM2)
1775         QDCA
1776         QDCP
1777     }
1778
1779     32  size (including this field)
1780     32  tag (=frma)
1781     32  type (=QDM2 or QDMC)
1782
1783     32  size (including this field, in bytes)
1784     32  tag (=QDCA) // maybe mandatory parameters
1785     32  unknown (=1)
1786     32  channels (=2)
1787     32  samplerate (=44100)
1788     32  bitrate (=96000)
1789     32  block size (=4096)
1790     32  frame size (=256) (for one channel)
1791     32  packet size (=1300)
1792
1793     32  size (including this field, in bytes)
1794     32  tag (=QDCP) // maybe some tuneable parameters
1795     32  float1 (=1.0)
1796     32  zero ?
1797     32  float2 (=1.0)
1798     32  float3 (=1.0)
1799     32  unknown (27)
1800     32  unknown (8)
1801     32  zero ?
1802     */
1803
1804     if (!avctx->extradata || (avctx->extradata_size < 48)) {
1805         av_log(avctx, AV_LOG_ERROR, "extradata missing or truncated\n");
1806         return -1;
1807     }
1808
1809     extradata      = avctx->extradata;
1810     extradata_size = avctx->extradata_size;
1811
1812     while (extradata_size > 7) {
1813         if (!memcmp(extradata, "frmaQDM", 7))
1814             break;
1815         extradata++;
1816         extradata_size--;
1817     }
1818
1819     if (extradata_size < 12) {
1820         av_log(avctx, AV_LOG_ERROR, "not enough extradata (%i)\n",
1821                extradata_size);
1822         return -1;
1823     }
1824
1825     if (memcmp(extradata, "frmaQDM", 7)) {
1826         av_log(avctx, AV_LOG_ERROR, "invalid headers, QDM? not found\n");
1827         return -1;
1828     }
1829
1830     if (extradata[7] == 'C') {
1831 //        s->is_qdmc = 1;
1832         av_log(avctx, AV_LOG_ERROR, "stream is QDMC version 1, which is not supported\n");
1833         return -1;
1834     }
1835
1836     extradata += 8;
1837     extradata_size -= 8;
1838
1839     size = AV_RB32(extradata);
1840
1841     if(size > extradata_size){
1842         av_log(avctx, AV_LOG_ERROR, "extradata size too small, %i < %i\n",
1843                extradata_size, size);
1844         return -1;
1845     }
1846
1847     extradata += 4;
1848     av_log(avctx, AV_LOG_DEBUG, "size: %d\n", size);
1849     if (AV_RB32(extradata) != MKBETAG('Q','D','C','A')) {
1850         av_log(avctx, AV_LOG_ERROR, "invalid extradata, expecting QDCA\n");
1851         return -1;
1852     }
1853
1854     extradata += 8;
1855
1856     avctx->channels = s->nb_channels = s->channels = AV_RB32(extradata);
1857     extradata += 4;
1858     if (s->channels <= 0 || s->channels > MPA_MAX_CHANNELS) {
1859         av_log(avctx, AV_LOG_ERROR, "Invalid number of channels\n");
1860         return AVERROR_INVALIDDATA;
1861     }
1862     avctx->channel_layout = avctx->channels == 2 ? AV_CH_LAYOUT_STEREO :
1863                                                    AV_CH_LAYOUT_MONO;
1864
1865     avctx->sample_rate = AV_RB32(extradata);
1866     extradata += 4;
1867
1868     avctx->bit_rate = AV_RB32(extradata);
1869     extradata += 4;
1870
1871     s->group_size = AV_RB32(extradata);
1872     extradata += 4;
1873
1874     s->fft_size = AV_RB32(extradata);
1875     extradata += 4;
1876
1877     s->checksum_size = AV_RB32(extradata);
1878     if (s->checksum_size >= 1U << 28) {
1879         av_log(avctx, AV_LOG_ERROR, "data block size too large (%u)\n", s->checksum_size);
1880         return AVERROR_INVALIDDATA;
1881     }
1882
1883     s->fft_order = av_log2(s->fft_size) + 1;
1884
1885     // something like max decodable tones
1886     s->group_order = av_log2(s->group_size) + 1;
1887     s->frame_size = s->group_size / 16; // 16 iterations per super block
1888
1889     if (s->frame_size > QDM2_MAX_FRAME_SIZE)
1890         return AVERROR_INVALIDDATA;
1891
1892     s->sub_sampling = s->fft_order - 7;
1893     s->frequency_range = 255 / (1 << (2 - s->sub_sampling));
1894
1895     switch ((s->sub_sampling * 2 + s->channels - 1)) {
1896         case 0: tmp = 40; break;
1897         case 1: tmp = 48; break;
1898         case 2: tmp = 56; break;
1899         case 3: tmp = 72; break;
1900         case 4: tmp = 80; break;
1901         case 5: tmp = 100;break;
1902         default: tmp=s->sub_sampling; break;
1903     }
1904     tmp_val = 0;
1905     if ((tmp * 1000) < avctx->bit_rate)  tmp_val = 1;
1906     if ((tmp * 1440) < avctx->bit_rate)  tmp_val = 2;
1907     if ((tmp * 1760) < avctx->bit_rate)  tmp_val = 3;
1908     if ((tmp * 2240) < avctx->bit_rate)  tmp_val = 4;
1909     s->cm_table_select = tmp_val;
1910
1911     if (avctx->bit_rate <= 8000)
1912         s->coeff_per_sb_select = 0;
1913     else if (avctx->bit_rate < 16000)
1914         s->coeff_per_sb_select = 1;
1915     else
1916         s->coeff_per_sb_select = 2;
1917
1918     // Fail on unknown fft order
1919     if ((s->fft_order < 7) || (s->fft_order > 9)) {
1920         av_log(avctx, AV_LOG_ERROR, "Unknown FFT order (%d), contact the developers!\n", s->fft_order);
1921         return -1;
1922     }
1923     if (s->fft_size != (1 << (s->fft_order - 1))) {
1924         av_log(avctx, AV_LOG_ERROR, "FFT size %d not power of 2.\n", s->fft_size);
1925         return AVERROR_INVALIDDATA;
1926     }
1927
1928     ff_rdft_init(&s->rdft_ctx, s->fft_order, IDFT_C2R);
1929     ff_mpadsp_init(&s->mpadsp);
1930
1931     avctx->sample_fmt = AV_SAMPLE_FMT_S16;
1932
1933     return 0;
1934 }
1935
1936 static av_cold int qdm2_decode_close(AVCodecContext *avctx)
1937 {
1938     QDM2Context *s = avctx->priv_data;
1939
1940     ff_rdft_end(&s->rdft_ctx);
1941
1942     return 0;
1943 }
1944
1945 static int qdm2_decode(QDM2Context *q, const uint8_t *in, int16_t *out)
1946 {
1947     int ch, i;
1948     const int frame_size = (q->frame_size * q->channels);
1949
1950     if((unsigned)frame_size > FF_ARRAY_ELEMS(q->output_buffer)/2)
1951         return -1;
1952
1953     /* select input buffer */
1954     q->compressed_data = in;
1955     q->compressed_size = q->checksum_size;
1956
1957     /* copy old block, clear new block of output samples */
1958     memmove(q->output_buffer, &q->output_buffer[frame_size], frame_size * sizeof(float));
1959     memset(&q->output_buffer[frame_size], 0, frame_size * sizeof(float));
1960
1961     /* decode block of QDM2 compressed data */
1962     if (q->sub_packet == 0) {
1963         q->has_errors = 0; // zero it for a new super block
1964         av_log(NULL,AV_LOG_DEBUG,"Superblock follows\n");
1965         qdm2_decode_super_block(q);
1966     }
1967
1968     /* parse subpackets */
1969     if (!q->has_errors) {
1970         if (q->sub_packet == 2)
1971             qdm2_decode_fft_packets(q);
1972
1973         qdm2_fft_tone_synthesizer(q, q->sub_packet);
1974     }
1975
1976     /* sound synthesis stage 1 (FFT) */
1977     for (ch = 0; ch < q->channels; ch++) {
1978         qdm2_calculate_fft(q, ch, q->sub_packet);
1979
1980         if (!q->has_errors && q->sub_packet_list_C[0].packet != NULL) {
1981             SAMPLES_NEEDED_2("has errors, and C list is not empty")
1982             return -1;
1983         }
1984     }
1985
1986     /* sound synthesis stage 2 (MPEG audio like synthesis filter) */
1987     if (!q->has_errors && q->do_synth_filter)
1988         qdm2_synthesis_filter(q, q->sub_packet);
1989
1990     q->sub_packet = (q->sub_packet + 1) % 16;
1991
1992     /* clip and convert output float[] to 16bit signed samples */
1993     for (i = 0; i < frame_size; i++) {
1994         int value = (int)q->output_buffer[i];
1995
1996         if (value > SOFTCLIP_THRESHOLD)
1997             value = (value >  HARDCLIP_THRESHOLD) ?  32767 :  softclip_table[ value - SOFTCLIP_THRESHOLD];
1998         else if (value < -SOFTCLIP_THRESHOLD)
1999             value = (value < -HARDCLIP_THRESHOLD) ? -32767 : -softclip_table[-value - SOFTCLIP_THRESHOLD];
2000
2001         out[i] = value;
2002     }
2003
2004     return 0;
2005 }
2006
2007 static int qdm2_decode_frame(AVCodecContext *avctx, void *data,
2008                              int *got_frame_ptr, AVPacket *avpkt)
2009 {
2010     AVFrame *frame     = data;
2011     const uint8_t *buf = avpkt->data;
2012     int buf_size = avpkt->size;
2013     QDM2Context *s = avctx->priv_data;
2014     int16_t *out;
2015     int i, ret;
2016
2017     if(!buf)
2018         return 0;
2019     if(buf_size < s->checksum_size)
2020         return -1;
2021
2022     /* get output buffer */
2023     frame->nb_samples = 16 * s->frame_size;
2024     if ((ret = ff_get_buffer(avctx, frame, 0)) < 0)
2025         return ret;
2026     out = (int16_t *)frame->data[0];
2027
2028     for (i = 0; i < 16; i++) {
2029         if (qdm2_decode(s, buf, out) < 0)
2030             return -1;
2031         out += s->channels * s->frame_size;
2032     }
2033
2034     *got_frame_ptr = 1;
2035
2036     return s->checksum_size;
2037 }
2038
2039 AVCodec ff_qdm2_decoder = {
2040     .name             = "qdm2",
2041     .type             = AVMEDIA_TYPE_AUDIO,
2042     .id               = AV_CODEC_ID_QDM2,
2043     .priv_data_size   = sizeof(QDM2Context),
2044     .init             = qdm2_decode_init,
2045     .init_static_data = qdm2_init_static_data,
2046     .close            = qdm2_decode_close,
2047     .decode           = qdm2_decode_frame,
2048     .capabilities     = CODEC_CAP_DR1,
2049     .long_name        = NULL_IF_CONFIG_SMALL("QDesign Music Codec 2"),
2050 };