src/strpool.c

   1 /*
   2  * Copyright (c) 2007, Novell Inc.
   3  *
   4  * This program is licensed under the BSD license, read LICENSE.BSD
   5  * for further information
   6  */
   7
   8 #include <string.h>
   9 #include "util.h"
  10 #include "strpool.h"
  11
  12 #define STRING_BLOCK      2047
  13 #define STRINGSPACE_BLOCK 65535
  14
  15 void
  16 stringpool_init(Stringpool *ss, const char *strs[])
  17 {
  18   unsigned totalsize = 0;
  19   unsigned count;
  20
  21   memset(ss, 0, sizeof(*ss));
  22   /* count number and total size of predefined strings */
  23   for (count = 0; strs[count]; count++)
  24     totalsize += strlen(strs[count]) + 1;
  25
  26   /* alloc appropriate space */
  27   ss->stringspace = solv_extend_resize(0, totalsize, 1, STRINGSPACE_BLOCK);
  28   ss->strings = solv_extend_resize(0, count, sizeof(Offset), STRING_BLOCK);
  29
  30   /* now copy predefined strings into allocated space */
  31   ss->sstrings = 0;
  32   for (count = 0; strs[count]; count++)
  33     {
  34       strcpy(ss->stringspace + ss->sstrings, strs[count]);
  35       ss->strings[count] = ss->sstrings;
  36       ss->sstrings += strlen(strs[count]) + 1;
  37     }
  38   ss->nstrings = count;
  39 }
  40
  41 void
  42 stringpool_free(Stringpool *ss)
  43 {
  44   solv_free(ss->strings);
  45   solv_free(ss->stringspace);
  46   solv_free(ss->stringhashtbl);
  47 }
  48
  49 void
  50 stringpool_freehash(Stringpool *ss)
  51 {
  52   ss->stringhashtbl = solv_free(ss->stringhashtbl);
  53   ss->stringhashmask = 0;
  54 }
  55
  56 void
  57 stringpool_init_empty(Stringpool *ss)
  58 {
  59   const char *emptystrs[] = {
  60     "<NULL>",
  61     "",
  62     0,
  63   };
  64   stringpool_init(ss, emptystrs);
  65 }
  66
  67 void
  68 stringpool_clone(Stringpool *ss, Stringpool *from)
  69 {
  70   memset(ss, 0, sizeof(*ss));
  71   ss->strings = solv_extend_resize(0, from->nstrings, sizeof(Offset), STRING_BLOCK);
  72   memcpy(ss->strings, from->strings, from->nstrings * sizeof(Offset));
  73   ss->stringspace = solv_extend_resize(0, from->sstrings, 1, STRINGSPACE_BLOCK);
  74   memcpy(ss->stringspace, from->stringspace, from->sstrings);
  75   ss->nstrings = from->nstrings;
  76   ss->sstrings = from->sstrings;
  77 }
  78
  79 Id
  80 stringpool_strn2id(Stringpool *ss, const char *str, unsigned int len, int create)
  81 {
  82   Hashval h;
  83   unsigned int hh;
  84   Hashmask hashmask, oldhashmask;
  85   int i;
  86   Id id;
  87   Hashtable hashtbl;
  88
  89   if (!str)
  90     return STRID_NULL;
  91   if (!len)
  92     return STRID_EMPTY;
  93
  94   hashmask = oldhashmask = ss->stringhashmask;
  95   hashtbl = ss->stringhashtbl;
  96
  97   /* expand hashtable if needed */
  98   if (ss->nstrings * 2 > hashmask)
  99     {
 100       solv_free(hashtbl);
 101
 102       /* realloc hash table */
 103       ss->stringhashmask = hashmask = mkmask(ss->nstrings + STRING_BLOCK);
 104       ss->stringhashtbl = hashtbl = (Hashtable)solv_calloc(hashmask + 1, sizeof(Id));
 105
 106       /* rehash all strings into new hashtable */
 107       for (i = 1; i < ss->nstrings; i++)
 108         {
 109           h = strhash(ss->stringspace + ss->strings[i]) & hashmask;
 110           hh = HASHCHAIN_START;
 111           while (hashtbl[h] != 0)
 112             h = HASHCHAIN_NEXT(h, hh, hashmask);
 113           hashtbl[h] = i;
 114         }
 115     }
 116
 117   /* compute hash and check for match */
 118   h = strnhash(str, len) & hashmask;
 119   hh = HASHCHAIN_START;
 120   while ((id = hashtbl[h]) != 0)
 121     {
 122       if(!memcmp(ss->stringspace + ss->strings[id], str, len)
 123          && ss->stringspace[ss->strings[id] + len] == 0)
 124         break;
 125       h = HASHCHAIN_NEXT(h, hh, hashmask);
 126     }
 127   if (id || !create)    /* exit here if string found */
 128     return id;
 129
 130   /* this should be a test for a flag that tells us if the
 131    * correct blocking is used, but adding a flag would break
 132    * the ABI. So we use the existance of the hash area as
 133    * indication instead */
 134   if (!oldhashmask)
 135     {
 136       ss->stringspace = solv_extend_resize(ss->stringspace, ss->sstrings + len + 1, 1, STRINGSPACE_BLOCK);
 137       ss->strings = solv_extend_resize(ss->strings, ss->nstrings + 1, sizeof(Offset), STRING_BLOCK);
 138     }
 139
 140   /* generate next id and save in table */
 141   id = ss->nstrings++;
 142   hashtbl[h] = id;
 143
 144   ss->strings = solv_extend(ss->strings, id, 1, sizeof(Offset), STRING_BLOCK);
 145   ss->strings[id] = ss->sstrings;       /* we will append to the end */
 146
 147   /* append string to stringspace */
 148   ss->stringspace = solv_extend(ss->stringspace, ss->sstrings, len + 1, 1, STRINGSPACE_BLOCK);
 149   memcpy(ss->stringspace + ss->sstrings, str, len);
 150   ss->stringspace[ss->sstrings + len] = 0;
 151   ss->sstrings += len + 1;
 152   return id;
 153 }
 154
 155 Id
 156 stringpool_str2id(Stringpool *ss, const char *str, int create)
 157 {
 158   if (!str)
 159     return STRID_NULL;
 160   if (!*str)
 161     return STRID_EMPTY;
 162   return stringpool_strn2id(ss, str, (unsigned int)strlen(str), create);
 163 }
 164
 165 void
 166 stringpool_shrink(Stringpool *ss)
 167 {
 168   ss->stringspace = solv_extend_resize(ss->stringspace, ss->sstrings, 1, STRINGSPACE_BLOCK);
 169   ss->strings = solv_extend_resize(ss->strings, ss->nstrings, sizeof(Offset), STRING_BLOCK);
 170 }