Preventing encoder-decoder mismatch when energy values are too large to be
[opus.git] / libcelt / laplace.c
1 /* (C) 2007 Jean-Marc Valin, CSIRO
2 */
3 /*
4    Redistribution and use in source and binary forms, with or without
5    modification, are permitted provided that the following conditions
6    are met:
7    
8    - Redistributions of source code must retain the above copyright
9    notice, this list of conditions and the following disclaimer.
10    
11    - Redistributions in binary form must reproduce the above copyright
12    notice, this list of conditions and the following disclaimer in the
13    documentation and/or other materials provided with the distribution.
14    
15    - Neither the name of the Xiph.org Foundation nor the names of its
16    contributors may be used to endorse or promote products derived from
17    this software without specific prior written permission.
18    
19    THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
20    ``AS IS'' AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
21    LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
22    A PARTICULAR PURPOSE ARE DISCLAIMED.  IN NO EVENT SHALL THE FOUNDATION OR
23    CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL,
24    EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO,
25    PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR
26    PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF
27    LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING
28    NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE OF THIS
29    SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
30 */
31
32 #ifdef HAVE_CONFIG_H
33 #include "config.h"
34 #endif
35
36 #include "laplace.h"
37
38 int ec_laplace_get_start_freq(int decay)
39 {
40    return (((ec_uint32)32767)*(16384-decay))/(16384+decay);
41 }
42
43 void ec_laplace_encode_start(ec_enc *enc, int *value, int decay, int fs)
44 {
45    int i;
46    int fl, ft;
47    int s = 0;
48    int val = *value;
49    if (val < 0)
50    {
51       s = 1;
52       val = -val;
53    }
54    ft = 32767;
55    fl = -fs;
56    for (i=0;i<val;i++)
57    {
58       int tmp_l, tmp_s;
59       tmp_l = fl;
60       tmp_s = fs;
61       fl += fs*2;
62       fs = (fs*(ec_int32)decay)>>14;
63       if (fs == 0)
64       {
65          fs = tmp_s;
66          fl = tmp_l;
67          if (s)
68             *value = -i;
69          else
70             *value = i;
71          break;
72       }
73    }
74    if (fl < 0)
75       fl = 0;
76    if (s)
77       fl += fs;
78    /*DEBUG*/
79    /*printf ("enc: %d %d %d\n", fl, fs, ft);*/
80    ec_encode(enc, fl, fl+fs, ft);
81 }
82
83 void ec_laplace_encode(ec_enc *enc, int *value, int decay)
84 {
85    int fs = ec_laplace_get_start_freq(decay);
86    ec_laplace_encode_start(enc, value, decay, fs);
87 }
88
89
90 int ec_laplace_decode_start(ec_dec *dec, int decay, int fs)
91 {
92    int val=0;
93    int fl, fh, ft, fm;
94    fl = 0;
95    ft = 32767;
96    fh = fs;
97    fm = ec_decode(dec, ft);
98    /*DEBUG*/
99    /*printf ("fm: %d/%d\n", fm, ft);*/
100    while (fm >= fh && fs != 0)
101    {
102       fl = fh;
103       fs = (fs*(ec_int32)decay)>>14;
104       fh += fs*2;
105       val++;
106    }
107    if (fl>0)
108    {
109       if (fm >= fl+fs)
110       {
111          val = -val;
112          fl += fs;
113       } else {
114          fh -= fs;
115       }
116    }
117    /* Preventing an infinite loop in case something screws up in the decoding */
118    if (fl==fh)
119       fl--;
120    /*DEBUG*/
121    /*printf ("update: %d %d %d\n", fl, fh, ft);*/
122    ec_dec_update(dec, fl, fh, ft);
123    return val;
124 }
125
126 int ec_laplace_decode(ec_dec *dec, int decay)
127 {
128    int fs = ec_laplace_get_start_freq(decay);
129    return ec_laplace_decode_start(dec, decay, fs);
130 }