Made pre-computed twiddles the same for forward and inverse FFT
[opus.git] / libcelt / _kiss_fft_guts.h
1 /*
2 Copyright (c) 2003-2004, Mark Borgerding
3
4 All rights reserved.
5
6 Redistribution and use in source and binary forms, with or without modification, are permitted provided that the following conditions are met:
7
8     * Redistributions of source code must retain the above copyright notice, this list of conditions and the following disclaimer.
9     * Redistributions in binary form must reproduce the above copyright notice, this list of conditions and the following disclaimer in the documentation and/or other materials provided with the distribution.
10     * Neither the author nor the names of any contributors may be used to endorse or promote products derived from this software without specific prior written permission.
11
12 THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
13 */
14
15 #define MIN(a,b) ((a)<(b) ? (a):(b))
16 #define MAX(a,b) ((a)>(b) ? (a):(b))
17
18 /* kiss_fft.h
19    defines kiss_fft_scalar as either short or a float type
20    and defines
21    typedef struct { kiss_fft_scalar r; kiss_fft_scalar i; }kiss_fft_cpx; */
22 #include "kiss_fft.h"
23
24 #define MAXFACTORS 32
25 /* e.g. an fft of length 128 has 4 factors 
26  as far as kissfft is concerned
27  4*4*4*2
28  */
29
30 struct kiss_fft_state{
31     int nfft;
32     int inverse;
33     int factors[2*MAXFACTORS];
34     int *bitrev;
35     kiss_fft_cpx twiddles[1];
36 };
37
38 /*
39   Explanation of macros dealing with complex math:
40
41    C_MUL(m,a,b)         : m = a*b
42    C_FIXDIV( c , div )  : if a fixed point impl., c /= div. noop otherwise
43    C_SUB( res, a,b)     : res = a - b
44    C_SUBFROM( res , a)  : res -= a
45    C_ADDTO( res , a)    : res += a
46  * */
47 #ifdef FIXED_POINT
48 #include "arch.h"
49 # define FRACBITS 15
50 # define SAMPPROD celt_int32_t 
51 #define SAMP_MAX 32767
52
53 #define SAMP_MIN -SAMP_MAX
54
55 #if defined(CHECK_OVERFLOW)
56 #  define CHECK_OVERFLOW_OP(a,op,b)  \
57         if ( (SAMPPROD)(a) op (SAMPPROD)(b) > SAMP_MAX || (SAMPPROD)(a) op (SAMPPROD)(b) < SAMP_MIN ) { \
58                 fprintf(stderr,"WARNING:overflow @ " __FILE__ "(%d): (%d " #op" %d) = %ld\n",__LINE__,(a),(b),(SAMPPROD)(a) op (SAMPPROD)(b) );  }
59 #endif
60
61
62 #   define smul(a,b) ( (SAMPPROD)(a)*(b) )
63 #   define sround( x )  (kiss_fft_scalar)( ( (x) + (1<<(FRACBITS-1)) ) >> FRACBITS )
64
65 #   define S_MUL(a,b) sround( smul(a,b) )
66
67 #   define C_MUL(m,a,b) \
68       do{ (m).r = sround( smul((a).r,(b).r) - smul((a).i,(b).i) ); \
69           (m).i = sround( smul((a).r,(b).i) + smul((a).i,(b).r) ); }while(0)
70 #   define C_MULC(m,a,b) \
71                do{ (m).r = sround( smul((a).r,(b).r) + smul((a).i,(b).i) ); \
72                (m).i = smul((a).i,(b).r) - sround( smul((a).r,(b).i) ); }while(0)
73
74 #   define C_MUL4(m,a,b) \
75                do{ (m).r = PSHR32( smul((a).r,(b).r) - smul((a).i,(b).i),17 ); \
76                (m).i = PSHR32( smul((a).r,(b).i) + smul((a).i,(b).r),17 ); }while(0)
77
78 #   define DIVSCALAR(x,k) \
79         (x) = sround( smul(  x, SAMP_MAX/k ) )
80
81 #   define C_FIXDIV(c,div) \
82         do {    DIVSCALAR( (c).r , div);  \
83                 DIVSCALAR( (c).i  , div); }while (0)
84
85 #   define C_MULBYSCALAR( c, s ) \
86     do{ (c).r =  sround( smul( (c).r , s ) ) ;\
87         (c).i =  sround( smul( (c).i , s ) ) ; }while(0)
88
89 #else  /* not FIXED_POINT*/
90
91 #   define S_MUL(a,b) ( (a)*(b) )
92 #define C_MUL(m,a,b) \
93     do{ (m).r = (a).r*(b).r - (a).i*(b).i;\
94         (m).i = (a).r*(b).i + (a).i*(b).r; }while(0)
95 #define C_MULC(m,a,b) \
96     do{ (m).r = (a).r*(b).r + (a).i*(b).i;\
97         (m).i = (a).i*(b).r - (a).r*(b).i; }while(0)
98
99 #define C_MUL4(m,a,b) C_MUL(m,a,b)
100
101 #   define C_FIXDIV(c,div) /* NOOP */
102 #   define C_MULBYSCALAR( c, s ) \
103     do{ (c).r *= (s);\
104         (c).i *= (s); }while(0)
105 #endif
106
107 #ifndef CHECK_OVERFLOW_OP
108 #  define CHECK_OVERFLOW_OP(a,op,b) /* noop */
109 #endif
110
111 #define  C_ADD( res, a,b)\
112     do { \
113             CHECK_OVERFLOW_OP((a).r,+,(b).r)\
114             CHECK_OVERFLOW_OP((a).i,+,(b).i)\
115             (res).r=(a).r+(b).r;  (res).i=(a).i+(b).i; \
116     }while(0)
117 #define  C_SUB( res, a,b)\
118     do { \
119             CHECK_OVERFLOW_OP((a).r,-,(b).r)\
120             CHECK_OVERFLOW_OP((a).i,-,(b).i)\
121             (res).r=(a).r-(b).r;  (res).i=(a).i-(b).i; \
122     }while(0)
123 #define C_ADDTO( res , a)\
124     do { \
125             CHECK_OVERFLOW_OP((res).r,+,(a).r)\
126             CHECK_OVERFLOW_OP((res).i,+,(a).i)\
127             (res).r += (a).r;  (res).i += (a).i;\
128     }while(0)
129
130 #define C_SUBFROM( res , a)\
131     do {\
132             CHECK_OVERFLOW_OP((res).r,-,(a).r)\
133             CHECK_OVERFLOW_OP((res).i,-,(a).i)\
134             (res).r -= (a).r;  (res).i -= (a).i; \
135     }while(0)
136
137
138 #ifdef FIXED_POINT
139 #  define KISS_FFT_COS(phase)  floor(MIN(32767,MAX(-32767,.5+32768 * cos (phase))))
140 #  define KISS_FFT_SIN(phase)  floor(MIN(32767,MAX(-32767,.5+32768 * sin (phase))))
141 #  define HALF_OF(x) ((x)>>1)
142 #elif defined(USE_SIMD)
143 #  define KISS_FFT_COS(phase) _mm_set1_ps( cos(phase) )
144 #  define KISS_FFT_SIN(phase) _mm_set1_ps( sin(phase) )
145 #  define HALF_OF(x) ((x)*_mm_set1_ps(.5))
146 #else
147 #  define KISS_FFT_COS(phase) (kiss_fft_scalar) cos(phase)
148 #  define KISS_FFT_SIN(phase) (kiss_fft_scalar) sin(phase)
149 #  define HALF_OF(x) ((x)*.5)
150 #endif
151
152 #define  kf_cexp(x,phase) \
153         do{ \
154                 (x)->r = KISS_FFT_COS(phase);\
155                 (x)->i = KISS_FFT_SIN(phase);\
156         }while(0)
157 #define  kf_cexp2(x,phase) \
158                do{ \
159                (x)->r = celt_cos_norm((phase));\
160                (x)->i = celt_cos_norm((phase)-32768);\
161 }while(0)
162
163
164 /* a debugging function */
165 #define pcpx(c)\
166     fprintf(stderr,"%g + %gi\n",(double)((c)->r),(double)((c)->i) )