src/slm/tslmpack/common.h

   1 // -*- mode: c++ -*-
   2 /*
   3  * Copyright (c) 2009 Kov Chai <tchaikov@gmail.com>
   4  *
   5  * The contents of this file are subject to the terms of either the GNU Lesser
   6  * General Public License Version 2.1 only ("LGPL") or the Common Development and
   7  * Distribution License ("CDDL")(collectively, the "License"). You may not use this
   8  * file except in compliance with the License. You can obtain a copy of the CDDL at
   9  * http://www.opensource.org/licenses/cddl1.php and a copy of the LGPLv2.1 at
  10  * http://www.opensource.org/licenses/lgpl-license.php. See the License for the
  11  * specific language governing permissions and limitations under the License. When
  12  * distributing the software, include this License Header Notice in each file and
  13  * include the full text of the License in the License file as well as the
  14  * following notice:
  15  *
  16  * NOTICE PURSUANT TO SECTION 9 OF THE COMMON DEVELOPMENT AND DISTRIBUTION LICENSE
  17  * (CDDL)
  18  * For Covered Software in this distribution, this License shall be governed by the
  19  * laws of the State of California (excluding conflict-of-law provisions).
  20  * Any litigation relating to this License shall be subject to the jurisdiction of
  21  * the Federal Courts of the Northern District of California and the state courts
  22  * of the State of California, with venue lying in Santa Clara County, California.
  23  *
  24  * Contributor(s):
  25  *
  26  * If you wish your version of this file to be governed by only the CDDL or only
  27  * the LGPL Version 2.1, indicate your decision by adding "[Contributor]" elects to
  28  * include this software in this distribution under the [CDDL or LGPL Version 2.1]
  29  * license." If you don't indicate a single choice of license, a recipient has the
  30  * option to distribute your version of this file under either the CDDL or the LGPL
  31  * Version 2.1, or to extend the choice of license to its licensees as provided
  32  * above. However, if you add LGPL Version 2.1 code and therefore, elected the LGPL
  33  * Version 2 license, then the option applies only if the new code is made subject
  34  * to such option by the copyright holder.
  35  */
  36 #ifndef _SLM_PACK_COMMON_H
  37 #define _SLM_PACK_COMMON_H
  38
  39 #include <vector>
  40 #include <map>
  41 #include <string>
  42 #include <cmath>
  43 #include <cassert>
  44
  45 #include "../slm.h"
  46
  47 typedef std::vector<CThreadSlm::TNode> TNodeLevel;
  48 typedef std::vector<CThreadSlm::TLeaf> TLeafLevel;
  49 typedef std::vector<CThreadSlm::TNode*> TNodeLevels;
  50 typedef std::map<float, float> EffRealMap;  // map from efficient values to the real ones
  51 typedef std::map<float, int> FreqMap;       // how often the efficient value appears
  52 typedef std::vector<float> CompressedTable; // array of real values, the index is stored in RealIndexMap
  53 typedef std::map<float, int> RealIndexMap;  // map real values to their indices
  54 typedef std::map<std::string, unsigned int> TLexicon; // map word to wid
  55
  56 #define EffectivePr(a)  (float((usingLogPr) ? ((a) / log(2.0)) : (-log2((a)))))
  57 #define OriginalPr(b)   (float((usingLogPr) ? ((b) * log(2.0)) : (exp2(-(b)))))
  58 #define EffectiveBow(a) (float((usingLogPr) ? (exp(-(a))) : ((a))))
  59 #define OriginalBow(b)  (float((usingLogPr) ? (-log((b))) : ((b))))
  60
  61 #endif //_SLM_PACK_COMMON_H