src/pool.c

   1 /*
   2  * Copyright (c) 2007, Novell Inc.
   3  *
   4  * This program is licensed under the BSD license, read LICENSE.BSD
   5  * for further information
   6  */
   7
   8 /*
   9  * pool.c
  10  *
  11  * The pool contains information about solvables
  12  * stored optimized for memory consumption and fast retrieval.
  13  */
  14
  15 #include <stdio.h>
  16 #include <stdlib.h>
  17 #include <stdarg.h>
  18 #include <unistd.h>
  19 #include <string.h>
  20
  21 #include "pool.h"
  22 #include "repo.h"
  23 #include "poolid.h"
  24 #include "poolid_private.h"
  25 #include "poolarch.h"
  26 #include "util.h"
  27 #include "bitmap.h"
  28 #include "evr.h"
  29
  30 #define SOLVABLE_BLOCK  255
  31
  32 /*
  33  * list of string constants, so we can do pointer/Id instead of string comparison
  34  * index into array matches ID_xxx constants in pool.h
  35  */
  36
  37 static const char *initpool_data[] = {
  38   "<NULL>",                   // ID_NULL
  39   "",                         // ID_EMPTY
  40   "solvable:name",
  41   "solvable:arch",
  42   "solvable:evr",
  43   "solvable:vendor",
  44   "solvable:provides",
  45   "solvable:obsoletes",
  46   "solvable:conflicts",
  47   "solvable:requires",
  48   "solvable:recommends",
  49   "solvable:suggests",
  50   "solvable:supplements",
  51   "solvable:enhances",
  52   "solvable:freshens",
  53   "rpm:dbid",                          /* direct key into rpmdb */
  54   "solvable:prereqmarker",
  55   "solvable:filemarker",
  56   "namespace:installed",
  57   "namespace:modalias",
  58   "namespace:splitprovides",
  59   "namespace:language",
  60   "namespace:filesystem",
  61   "system:system",
  62   "src",
  63   "nosrc",
  64   "noarch",
  65   "repodata:external",
  66   "repodata:keys",
  67   "repodata:location",
  68   "repokey:type:void",
  69   "repokey:type:constant",
  70   "repokey:type:constantid",
  71   "repokey:type:id",
  72   "repokey:type:num",
  73   "repokey:type:num32",
  74   "repokey:type:dir",
  75   "repokey:type:str",
  76   "repokey:type:idarray",
  77   "repokey:type:relidarray",
  78   "repokey:type:dirstrarray",
  79   "repokey:type:dirnumnumarray",
  80
  81   "solvable:summary",
  82   "solvable:description",
  83   "solvable:authors",
  84   "solvable:group",
  85   "solvable:keywords",
  86   "solvable:license",
  87   "solvable:buildtime",
  88
  89   "solvable:eula",
  90   "solvable:messageins",
  91   "solvable:messagedel",
  92
  93   "solvable:installsize",
  94   "solvable:diskusage",
  95   "solvable:filelist",
  96
  97   "solvable:installtime",
  98
  99   "solvable:mediadir",
 100   "solvable:mediafile",
 101   "solvable:medianr",
 102   "solvable:downloadsize",
 103
 104   "solvable:sourcearch",
 105   "solvable:sourcename",
 106   "solvable:sourceevr",
 107
 108   "solvable:isvisible",                 /* from susetags */
 109
 110   "solvable:patchcategory",
 111
 112   0
 113 };
 114
 115 /* create pool */
 116 Pool *
 117 pool_create(void)
 118 {
 119   Pool *pool;
 120   Solvable *s;
 121
 122   pool = (Pool *)sat_calloc(1, sizeof(*pool));
 123
 124   stringpool_init (&pool->ss, initpool_data);
 125
 126   /* alloc space for ReDep 0 */
 127   pool->rels = sat_extend_resize(0, 1, sizeof(Reldep), REL_BLOCK);
 128   pool->nrels = 1;
 129   memset(pool->rels, 0, sizeof(Reldep));
 130
 131   /* alloc space for Solvable 0 and system solvable */
 132   pool->solvables = sat_extend_resize(0, 2, sizeof(Solvable), SOLVABLE_BLOCK);
 133   pool->nsolvables = 2;
 134   memset(pool->solvables, 0, 2 * sizeof(Solvable));
 135   s = pool->solvables + SYSTEMSOLVABLE;
 136   s->name = SYSTEM_SYSTEM;
 137   s->arch = ARCH_NOARCH;
 138   s->evr = ID_EMPTY;
 139
 140   queue_init(&pool->vendormap);
 141
 142   pool->debugmask = SAT_DEBUG_RESULT;   /* FIXME */
 143   return pool;
 144 }
 145
 146
 147 /* free all the resources of our pool */
 148 void
 149 pool_free(Pool *pool)
 150 {
 151   int i;
 152
 153   pool_freewhatprovides(pool);
 154   pool_freeidhashes(pool);
 155   repo_freeallrepos(pool, 1);
 156   sat_free(pool->id2arch);
 157   sat_free(pool->solvables);
 158   sat_free(pool->ss.stringspace);
 159   sat_free(pool->ss.strings);
 160   sat_free(pool->rels);
 161   queue_free(&pool->vendormap);
 162   for (i = 0; i < POOL_TMPSPACEBUF; i++)
 163     sat_free(pool->tmpspacebuf[i]);
 164   for (i = 0; i < pool->nlanguages; i++)
 165     free((char *)pool->languages[i]);
 166   sat_free(pool->languages);
 167   sat_free(pool->languagecache);
 168   sat_free(pool);
 169 }
 170
 171 Id
 172 pool_add_solvable(Pool *pool)
 173 {
 174   pool->solvables = sat_extend(pool->solvables, pool->nsolvables, 1, sizeof(Solvable), SOLVABLE_BLOCK);
 175   memset(pool->solvables + pool->nsolvables, 0, sizeof(Solvable));
 176   return pool->nsolvables++;
 177 }
 178
 179 Id
 180 pool_add_solvable_block(Pool *pool, int count)
 181 {
 182   Id nsolvables = pool->nsolvables;
 183   if (!count)
 184     return nsolvables;
 185   pool->solvables = sat_extend(pool->solvables, pool->nsolvables, count, sizeof(Solvable), SOLVABLE_BLOCK);
 186   memset(pool->solvables + nsolvables, 0, sizeof(Solvable) * count);
 187   pool->nsolvables += count;
 188   return nsolvables;
 189 }
 190
 191 void
 192 pool_free_solvable_block(Pool *pool, Id start, int count, int reuseids)
 193 {
 194   if (!count)
 195     return;
 196   if (reuseids && start + count == pool->nsolvables)
 197     {
 198       /* might want to shrink solvable array */
 199       pool->nsolvables = start;
 200       return;
 201     }
 202   memset(pool->solvables + start, 0, sizeof(Solvable) * count);
 203 }
 204
 205
 206 static Pool *pool_shrink_whatprovides_sortcmp_data;
 207
 208 static int
 209 pool_shrink_whatprovides_sortcmp(const void *ap, const void *bp)
 210 {
 211   int r;
 212   Pool *pool = pool_shrink_whatprovides_sortcmp_data;
 213   Id oa, ob, *da, *db;
 214   oa = pool->whatprovides[*(Id *)ap];
 215   ob = pool->whatprovides[*(Id *)bp];
 216   if (oa == ob)
 217     return *(Id *)ap - *(Id *)bp;
 218   if (!oa)
 219     return -1;
 220   if (!ob)
 221     return 1;
 222   da = pool->whatprovidesdata + oa;
 223   db = pool->whatprovidesdata + ob;
 224   while (*db)
 225     if ((r = (*da++ - *db++)) != 0)
 226       return r;
 227   if (*da)
 228     return *da;
 229   return *(Id *)ap - *(Id *)bp;
 230 }
 231
 232 /*
 233  * pool_shrink_whatprovides  - unify whatprovides data
 234  *
 235  * whatprovides_rel must be empty for this to work!
 236  *
 237  */
 238 static void
 239 pool_shrink_whatprovides(Pool *pool)
 240 {
 241   Id i, id;
 242   Id *sorted;
 243   Id lastid, *last, *dp, *lp;
 244   Offset o;
 245   int r;
 246
 247   if (pool->ss.nstrings < 3)
 248     return;
 249   sorted = sat_malloc2(pool->ss.nstrings, sizeof(Id));
 250   for (id = 0; id < pool->ss.nstrings; id++)
 251     sorted[id] = id;
 252   pool_shrink_whatprovides_sortcmp_data = pool;
 253   qsort(sorted + 1, pool->ss.nstrings - 1, sizeof(Id), pool_shrink_whatprovides_sortcmp);
 254   last = 0;
 255   lastid = 0;
 256   for (i = 1; i < pool->ss.nstrings; i++)
 257     {
 258       id = sorted[i];
 259       o = pool->whatprovides[id];
 260       if (o == 0 || o == 1)
 261         continue;
 262       dp = pool->whatprovidesdata + o;
 263       if (last)
 264         {
 265           lp = last;
 266           while (*dp)
 267             if (*dp++ != *lp++)
 268               {
 269                 last = 0;
 270                 break;
 271               }
 272           if (last && *lp)
 273             last = 0;
 274           if (last)
 275             {
 276               pool->whatprovides[id] = -lastid;
 277               continue;
 278             }
 279         }
 280       last = pool->whatprovidesdata + o;
 281       lastid = id;
 282     }
 283   sat_free(sorted);
 284   dp = pool->whatprovidesdata + 2;
 285   for (id = 1; id < pool->ss.nstrings; id++)
 286     {
 287       o = pool->whatprovides[id];
 288       if (o == 0 || o == 1)
 289         continue;
 290       if ((Id)o < 0)
 291         {
 292           i = -(Id)o;
 293           if (i >= id)
 294             abort();
 295           pool->whatprovides[id] = pool->whatprovides[i];
 296           continue;
 297         }
 298       lp = pool->whatprovidesdata + o;
 299       if (lp < dp)
 300         abort();
 301       pool->whatprovides[id] = dp - pool->whatprovidesdata;
 302       while ((*dp++ = *lp++) != 0)
 303         ;
 304     }
 305   o = dp - pool->whatprovidesdata;
 306   POOL_DEBUG(SAT_DEBUG_STATS, "shrunk whatprovidesdata from %d to %d\n", pool->whatprovidesdataoff, o);
 307   if (pool->whatprovidesdataoff == o)
 308     return;
 309   r = pool->whatprovidesdataoff - o;
 310   pool->whatprovidesdataoff = o;
 311   pool->whatprovidesdata = sat_realloc(pool->whatprovidesdata, (o + pool->whatprovidesdataleft) * sizeof(Id));
 312   if (r > pool->whatprovidesdataleft)
 313     r = pool->whatprovidesdataleft;
 314   memset(pool->whatprovidesdata + o, 0, r * sizeof(Id));
 315 }
 316
 317
 318 /*
 319  * pool_createwhatprovides()
 320  *
 321  * create hashes over pool of solvables to ease provide lookups
 322  *
 323  */
 324 void
 325 pool_createwhatprovides(Pool *pool)
 326 {
 327   int i, num, np, extra;
 328   Offset off;
 329   Solvable *s;
 330   Id id;
 331   Offset *idp, n;
 332   Offset *whatprovides;
 333   Id *whatprovidesdata, *d;
 334
 335   POOL_DEBUG(SAT_DEBUG_STATS, "number of solvables: %d\n", pool->nsolvables);
 336   POOL_DEBUG(SAT_DEBUG_STATS, "number of ids: %d + %d\n", pool->ss.nstrings, pool->nrels);
 337
 338   pool_freeidhashes(pool);      /* XXX: should not be here! */
 339   pool_freewhatprovides(pool);
 340   num = pool->ss.nstrings;
 341   pool->whatprovides = whatprovides = sat_extend_resize(0, num, sizeof(Offset), WHATPROVIDES_BLOCK);
 342   memset(whatprovides, 0, num * sizeof(Offset));
 343   pool->whatprovides_rel = sat_extend_resize(0, pool->nrels, sizeof(Offset), WHATPROVIDES_BLOCK);
 344   memset(pool->whatprovides_rel, 0, pool->nrels * sizeof(Offset));
 345
 346   /* count providers for each name */
 347   for (i = 1; i < pool->nsolvables; i++)
 348     {
 349       Id *pp;
 350       s = pool->solvables + i;
 351       if (!s->provides)
 352         continue;
 353       if (!pool_installable(pool, s))
 354         continue;
 355       pp = s->repo->idarraydata + s->provides;
 356       while ((id = *pp++) != ID_NULL)
 357         {
 358           while (ISRELDEP(id))
 359             {
 360               Reldep *rd = GETRELDEP(pool, id);
 361               id = rd->name;
 362             }
 363           whatprovides[id]++;          /* inc count of providers */
 364         }
 365     }
 366
 367   off = 2;      /* first entry is undef, second is empty list */
 368   idp = whatprovides;
 369   np = 0;                              /* number of names provided */
 370   for (i = 0; i < num; i++, idp++)
 371     {
 372       n = *idp;
 373       if (!n)                          /* no providers */
 374         continue;
 375       *idp = off;                      /* move from counts to offsets into whatprovidesdata */
 376       off += n + 1;                    /* make space for all providers + terminating ID_NULL */
 377       np++;                            /* inc # of provider 'slots' */
 378     }
 379
 380   POOL_DEBUG(SAT_DEBUG_STATS, "provide ids: %d\n", np);
 381
 382   /* reserve some space for relation data */
 383   extra = 2 * pool->nrels;
 384   if (extra < 256)
 385     extra = 256;
 386
 387   POOL_DEBUG(SAT_DEBUG_STATS, "provide space needed: %d + %d\n", off, extra);
 388
 389   /* alloc space for all providers + extra */
 390   whatprovidesdata = sat_calloc(off + extra, sizeof(Id));
 391
 392   /* now fill data for all provides */
 393   for (i = 1; i < pool->nsolvables; i++)
 394     {
 395       Id *pp;
 396       s = pool->solvables + i;
 397       if (!s->provides)
 398         continue;
 399       if (!pool_installable(pool, s))
 400         continue;
 401
 402       /* for all provides of this solvable */
 403       pp = s->repo->idarraydata + s->provides;
 404       while ((id = *pp++) != 0)
 405         {
 406           while (ISRELDEP(id))
 407             {
 408               Reldep *rd = GETRELDEP(pool, id);
 409               id = rd->name;
 410             }
 411           d = whatprovidesdata + whatprovides[id];   /* offset into whatprovidesdata */
 412           if (*d)
 413             {
 414               d++;
 415               while (*d)               /* find free slot */
 416                 d++;
 417               if (d[-1] == i)
 418                 continue;
 419             }
 420           *d = i;                      /* put solvable Id into data */
 421         }
 422     }
 423   pool->whatprovidesdata = whatprovidesdata;
 424   pool->whatprovidesdataoff = off;
 425   pool->whatprovidesdataleft = extra;
 426   pool_shrink_whatprovides(pool);
 427 }
 428
 429 /*
 430  * free all of our whatprovides data
 431  * be careful, everything internalized with pool_queuetowhatprovides is gone, too
 432  */
 433 void
 434 pool_freewhatprovides(Pool *pool)
 435 {
 436   pool->whatprovides = sat_free(pool->whatprovides);
 437   pool->whatprovides_rel = sat_free(pool->whatprovides_rel);
 438   pool->whatprovidesdata = sat_free(pool->whatprovidesdata);
 439   pool->whatprovidesdataoff = 0;
 440   pool->whatprovidesdataleft = 0;
 441 }
 442
 443
 444 /******************************************************************************/
 445
 446 /*
 447  * pool_queuetowhatprovides  - add queue contents to whatprovidesdata
 448  *
 449  * on-demand filling of provider information
 450  * move queue data into whatprovidesdata
 451  * q: queue of Ids
 452  * returns: Offset into whatprovides
 453  *
 454  */
 455 Id
 456 pool_queuetowhatprovides(Pool *pool, Queue *q)
 457 {
 458   Offset off;
 459   int count = q->count;
 460
 461   if (count == 0)                      /* queue empty -> ID_EMPTY */
 462     return ID_EMPTY;
 463
 464   /* extend whatprovidesdata if needed, +1 for ID_NULL-termination */
 465   if (pool->whatprovidesdataleft < count + 1)
 466     {
 467       POOL_DEBUG(SAT_DEBUG_STATS, "growing provides hash data...\n");
 468       pool->whatprovidesdata = sat_realloc(pool->whatprovidesdata, (pool->whatprovidesdataoff + count + 4096) * sizeof(Id));
 469       pool->whatprovidesdataleft = count + 4096;
 470     }
 471
 472   /* copy queue to next free slot */
 473   off = pool->whatprovidesdataoff;
 474   memcpy(pool->whatprovidesdata + pool->whatprovidesdataoff, q->elements, count * sizeof(Id));
 475
 476   /* adapt count and ID_NULL-terminate */
 477   pool->whatprovidesdataoff += count;
 478   pool->whatprovidesdata[pool->whatprovidesdataoff++] = ID_NULL;
 479   pool->whatprovidesdataleft -= count + 1;
 480
 481   return (Id)off;
 482 }
 483
 484
 485 /*************************************************************************/
 486
 487 /*
 488  * addrelproviders
 489  *
 490  * add packages fulfilling the relation to whatprovides array
 491  * no exact providers, do range match
 492  *
 493  */
 494
 495 Id *
 496 pool_addrelproviders(Pool *pool, Id d)
 497 {
 498   Reldep *rd = GETRELDEP(pool, d);
 499   Reldep *prd;
 500   Queue plist;
 501   Id buf[16];
 502   Id name = rd->name;
 503   Id evr = rd->evr;
 504   int flags = rd->flags;
 505   Id pid, *pidp;
 506   Id p, *pp, *pp2, *pp3;
 507
 508   d = GETRELID(d);
 509   queue_init_buffer(&plist, buf, sizeof(buf)/sizeof(*buf));
 510   switch (flags)
 511     {
 512     case REL_AND:
 513     case REL_WITH:
 514       pp = pool_whatprovides(pool, name);
 515       pp2 = pool_whatprovides(pool, evr);
 516       while ((p = *pp++) != 0)
 517         {
 518           for (pp3 = pp2; *pp3;)
 519             if (*pp3++ == p)
 520               {
 521                 queue_push(&plist, p);
 522                 break;
 523               }
 524         }
 525       break;
 526     case REL_OR:
 527       pp = pool_whatprovides(pool, name);
 528       while ((p = *pp++) != 0)
 529         queue_push(&plist, p);
 530       pp = pool_whatprovides(pool, evr);
 531       while ((p = *pp++) != 0)
 532         queue_pushunique(&plist, p);
 533       break;
 534     case REL_NAMESPACE:
 535       if (pool->nscallback)
 536         {
 537           p = pool->nscallback(pool, pool->nscallbackdata, name, evr);
 538           if (p > 1)
 539             {
 540               queue_free(&plist);
 541               pool->whatprovides_rel[d] = p;
 542               return pool->whatprovidesdata + p;
 543             }
 544           if (p == 1)
 545             queue_push(&plist, SYSTEMSOLVABLE);
 546         }
 547       break;
 548     default:
 549       break;
 550     }
 551
 552   /* convert to whatprovides id */
 553 #if 0
 554   POOL_DEBUG(SAT_DEBUG_STATS, "addrelproviders: what provides %s?\n", dep2str(pool, name));
 555 #endif
 556   if (flags && flags < 8)
 557     {
 558       FOR_PROVIDES(p, pp, name)
 559         {
 560 #if 0
 561           POOL_DEBUG(DEBUG_1, "addrelproviders: checking package %s\n", id2str(pool, pool->p[p].name));
 562 #endif
 563           /* solvable p provides name in some rels */
 564           pidp = pool->solvables[p].repo->idarraydata + pool->solvables[p].provides;
 565           while ((pid = *pidp++) != 0)
 566             {
 567               int pflags;
 568               Id pevr;
 569
 570               if (pid == name)
 571                 {
 572 #ifdef DEBIAN_SEMANTICS
 573                   continue;             /* unversioned provides can
 574                                          * never match versioned deps */
 575 #else
 576                   break;                /* yes, provides all versions */
 577 #endif
 578                 }
 579               if (!ISRELDEP(pid))
 580                 continue;               /* wrong provides name */
 581               prd = GETRELDEP(pool, pid);
 582               if (prd->name != name)
 583                 continue;               /* wrong provides name */
 584               /* right package, both deps are rels */
 585               pflags = prd->flags;
 586               if (!pflags)
 587                 continue;
 588               if (flags == 7 || pflags == 7)
 589                 break; /* included */
 590               if ((pflags & flags & 5) != 0)
 591                 break; /* same direction, match */
 592               pevr = prd->evr;
 593               if (pevr == evr)
 594                 {
 595                   if ((pflags & flags & 2) != 0)
 596                     break; /* both have =, match */
 597                 }
 598               else
 599                 {
 600                   int f = flags == 5 ? 5 : flags == 2 ? pflags : (flags ^ 5) & (pflags | 5);
 601                   if ((f & (1 << (1 + evrcmp(pool, pevr, evr, EVRCMP_MATCH_RELEASE)))) != 0)
 602                     break;
 603                 }
 604             }
 605           if (!pid)
 606             continue;   /* no rel match */
 607           queue_push(&plist, p);
 608         }
 609       /* make our system solvable provide all unknown rpmlib() stuff */
 610       if (plist.count == 0 && !strncmp(id2str(pool, name), "rpmlib(", 7))
 611         queue_push(&plist, SYSTEMSOLVABLE);
 612     }
 613   /* add providers to whatprovides */
 614 #if 0
 615   POOL_DEBUG(SAT_DEBUG_STATS, "addrelproviders: adding %d packages to %d\n", plist.count, d);
 616 #endif
 617   pool->whatprovides_rel[d] = pool_queuetowhatprovides(pool, &plist);
 618   queue_free(&plist);
 619
 620   return pool->whatprovidesdata + pool->whatprovides_rel[d];
 621 }
 622
 623 /*************************************************************************/
 624
 625 void
 626 pool_debug(Pool *pool, int type, const char *format, ...)
 627 {
 628   va_list args;
 629   char buf[1024];
 630
 631   if ((type & (SAT_FATAL|SAT_ERROR)) == 0)
 632     {
 633       if ((pool->debugmask & type) == 0)
 634         return;
 635     }
 636   va_start(args, format);
 637   if (!pool->debugcallback)
 638     {
 639       if ((type & (SAT_FATAL|SAT_ERROR)) == 0)
 640         vprintf(format, args);
 641       else
 642         vfprintf(stderr, format, args);
 643       return;
 644     }
 645   vsnprintf(buf, sizeof(buf), format, args);
 646   pool->debugcallback(pool, pool->debugcallbackdata, type, buf);
 647 }
 648
 649 void
 650 pool_setdebuglevel(Pool *pool, int level)
 651 {
 652   int mask = SAT_DEBUG_RESULT;
 653   if (level > 0)
 654     mask |= SAT_DEBUG_STATS|SAT_DEBUG_ANALYZE|SAT_DEBUG_UNSOLVABLE;
 655   if (level > 1)
 656     mask |= SAT_DEBUG_JOB|SAT_DEBUG_SOLUTIONS|SAT_DEBUG_POLICY;
 657   if (level > 2)
 658     mask |= SAT_DEBUG_PROPAGATE;
 659   if (level > 3)
 660     mask |= SAT_DEBUG_RULE_CREATION;
 661   if (level > 4)
 662     mask |= SAT_DEBUG_SCHUBI;
 663   pool->debugmask = mask;
 664 }
 665
 666 /*************************************************************************/
 667
 668 struct searchfiles {
 669   Id *ids;
 670   char **dirs;
 671   char **names;
 672   int nfiles;
 673   Map seen;
 674 };
 675
 676 #define SEARCHFILES_BLOCK 127
 677
 678 static void
 679 pool_addfileprovides_dep(Pool *pool, Id *ida, struct searchfiles *sf, struct searchfiles *isf)
 680 {
 681   Id dep, sid;
 682   const char *s, *sr;
 683
 684   while ((dep = *ida++) != 0)
 685     {
 686       while (ISRELDEP(dep))
 687         {
 688           Reldep *rd;
 689           sid = pool->ss.nstrings + GETRELID(dep);
 690           if (MAPTST(&sf->seen, sid))
 691             {
 692               dep = 0;
 693               break;
 694             }
 695           MAPSET(&sf->seen, sid);
 696           rd = GETRELDEP(pool, dep);
 697           if (rd->flags < 8)
 698             dep = rd->name;
 699           else if (rd->flags == REL_NAMESPACE)
 700             {
 701               if (isf && (rd->name == NAMESPACE_INSTALLED || rd->name == NAMESPACE_SPLITPROVIDES))
 702                 {
 703                   sf = isf;
 704                   isf = 0;
 705                   if (MAPTST(&sf->seen, sid))
 706                     {
 707                       dep = 0;
 708                       break;
 709                     }
 710                   MAPSET(&sf->seen, sid);
 711                 }
 712               dep = rd->evr;
 713             }
 714           else
 715             {
 716               Id ids[2];
 717               ids[0] = rd->name;
 718               ids[1] = 0;
 719               pool_addfileprovides_dep(pool, ids, sf, isf);
 720               dep = rd->evr;
 721             }
 722         }
 723       if (!dep)
 724         continue;
 725       if (MAPTST(&sf->seen, dep))
 726         continue;
 727       MAPSET(&sf->seen, dep);
 728       s = id2str(pool, dep);
 729       if (*s != '/')
 730         continue;
 731       sf->ids = sat_extend(sf->ids, sf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
 732       sf->dirs = sat_extend(sf->dirs, sf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
 733       sf->names = sat_extend(sf->names, sf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
 734       sf->ids[sf->nfiles] = dep;
 735       sr = strrchr(s, '/');
 736       sf->names[sf->nfiles] = strdup(sr + 1);
 737       sf->dirs[sf->nfiles] = sat_malloc(sr - s + 1);
 738       if (sr != s)
 739         strncpy(sf->dirs[sf->nfiles], s, sr - s);
 740       sf->dirs[sf->nfiles][sr - s] = 0;
 741       sf->nfiles++;
 742     }
 743 }
 744
 745 struct addfileprovides_cbdata {
 746   int nfiles;
 747   Id *ids;
 748   char **dirs;
 749   char **names;
 750
 751   Repodata *olddata;
 752   Id *dids;
 753   Map useddirs;
 754 };
 755
 756 static int
 757 addfileprovides_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *value)
 758 {
 759   struct addfileprovides_cbdata *cbd = cbdata;
 760   int i;
 761
 762   if (data != cbd->olddata)
 763     {
 764       map_free(&cbd->useddirs);
 765       map_init(&cbd->useddirs, data->dirpool.ndirs);
 766       for (i = 0; i < cbd->nfiles; i++)
 767         {
 768           Id did = repodata_str2dir(data, cbd->dirs[i], 0);
 769           cbd->dids[i] = did;
 770           if (did)
 771             MAPSET(&cbd->useddirs, did);
 772         }
 773       cbd->olddata = data;
 774     }
 775   if (!MAPTST(&cbd->useddirs, value->id))
 776     return 0;
 777   for (i = 0; i < cbd->nfiles; i++)
 778     {
 779       if (cbd->dids[i] != value->id)
 780         continue;
 781       if (!strcmp(cbd->names[i], value->str))
 782         break;
 783     }
 784   if (i == cbd->nfiles)
 785     return 0;
 786   s->provides = repo_addid_dep(s->repo, s->provides, cbd->ids[i], SOLVABLE_FILEMARKER);
 787   return 0;
 788 }
 789
 790 void
 791 pool_addfileprovides(Pool *pool, Repo *installed)
 792 {
 793   Solvable *s;
 794   Repo *repo;
 795   struct searchfiles sf, isf;
 796   struct addfileprovides_cbdata cbd;
 797   int i;
 798
 799   memset(&sf, 0, sizeof(sf));
 800   map_init(&sf.seen, pool->ss.nstrings + pool->nrels);
 801   memset(&isf, 0, sizeof(isf));
 802   map_init(&isf.seen, pool->ss.nstrings + pool->nrels);
 803
 804   for (i = 1, s = pool->solvables + i; i < pool->nsolvables; i++, s++)
 805     {
 806       repo = s->repo;
 807       if (!repo)
 808         continue;
 809       if (s->obsoletes)
 810         pool_addfileprovides_dep(pool, repo->idarraydata + s->obsoletes, &sf, &isf);
 811       if (s->conflicts)
 812         pool_addfileprovides_dep(pool, repo->idarraydata + s->conflicts, &sf, &isf);
 813       if (s->requires)
 814         pool_addfileprovides_dep(pool, repo->idarraydata + s->requires, &sf, &isf);
 815       if (s->recommends)
 816         pool_addfileprovides_dep(pool, repo->idarraydata + s->recommends, &sf, &isf);
 817       if (s->suggests)
 818         pool_addfileprovides_dep(pool, repo->idarraydata + s->suggests, &sf, &isf);
 819       if (s->supplements)
 820         pool_addfileprovides_dep(pool, repo->idarraydata + s->supplements, &sf, &isf);
 821       if (s->enhances)
 822         pool_addfileprovides_dep(pool, repo->idarraydata + s->enhances, &sf, &isf);
 823       if (s->freshens)
 824         pool_addfileprovides_dep(pool, repo->idarraydata + s->freshens, &sf, &isf);
 825     }
 826   map_free(&sf.seen);
 827   map_free(&isf.seen);
 828   POOL_DEBUG(SAT_DEBUG_STATS, "found %d file dependencies\n", sf.nfiles);
 829   POOL_DEBUG(SAT_DEBUG_STATS, "found %d installed file dependencies\n", isf.nfiles);
 830   cbd.dids = 0;
 831   map_init(&cbd.useddirs, 1);
 832   if (sf.nfiles)
 833     {
 834 #if 0
 835       for (i = 0; i < sf.nfiles; i++)
 836         POOL_DEBUG(SAT_DEBUG_STATS, "looking up %s in filelist\n", id2str(pool, sf.ids[i]));
 837 #endif
 838       cbd.nfiles = sf.nfiles;
 839       cbd.ids = sf.ids;
 840       cbd.dirs = sf.dirs;
 841       cbd.names = sf.names;
 842       cbd.olddata = 0;
 843       cbd.dids = sat_realloc2(cbd.dids, sf.nfiles, sizeof(Id));
 844       pool_search(pool, 0, SOLVABLE_FILELIST, 0, 0, addfileprovides_cb, &cbd);
 845       sat_free(sf.ids);
 846       for (i = 0; i < sf.nfiles; i++)
 847         {
 848           sat_free(sf.dirs[i]);
 849           sat_free(sf.names[i]);
 850         }
 851       sat_free(sf.dirs);
 852       sat_free(sf.names);
 853     }
 854   if (isf.nfiles && installed)
 855     {
 856 #if 0
 857       for (i = 0; i < isf.nfiles; i++)
 858         POOL_DEBUG(SAT_DEBUG_STATS, "looking up %s in installed filelist\n", id2str(pool, isf.ids[i]));
 859 #endif
 860       cbd.nfiles = isf.nfiles;
 861       cbd.ids = isf.ids;
 862       cbd.dirs = isf.dirs;
 863       cbd.names = isf.names;
 864       cbd.olddata = 0;
 865       cbd.dids = sat_realloc2(cbd.dids, isf.nfiles, sizeof(Id));
 866       repo_search(installed, 0, SOLVABLE_FILELIST, 0, 0, addfileprovides_cb, &cbd);
 867       sat_free(isf.ids);
 868       for (i = 0; i < isf.nfiles; i++)
 869         {
 870           sat_free(isf.dirs[i]);
 871           sat_free(isf.names[i]);
 872         }
 873       sat_free(isf.dirs);
 874       sat_free(isf.names);
 875     }
 876   map_free(&cbd.useddirs);
 877   sat_free(cbd.dids);
 878   pool_freewhatprovides(pool);  /* as we have added provides */
 879 }
 880
 881 void
 882 pool_search(Pool *pool, Id p, Id key, const char *match, int flags, int (*callback)(void *cbdata, Solvable *s, struct _Repodata *data, struct _Repokey *key, struct _KeyValue *kv), void *cbdata)
 883 {
 884   if (p)
 885     {
 886       if (pool->solvables[p].repo)
 887         repo_search(pool->solvables[p].repo, p, key, match, flags, callback, cbdata);
 888       return;
 889     }
 890   /* FIXME: obey callback return value! */
 891   for (p = 1; p < pool->nsolvables; p++)
 892     if (pool->solvables[p].repo)
 893       repo_search(pool->solvables[p].repo, p, key, match, flags, callback, cbdata);
 894 }
 895
 896
 897 void
 898 pool_set_languages(Pool *pool, const char **languages, int nlanguages)
 899 {
 900   int i;
 901
 902   pool->languagecache = sat_free(pool->languagecache);
 903   pool->languagecacheother = 0;
 904   if (pool->nlanguages)
 905     {
 906       for (i = 0; i < pool->nlanguages; i++)
 907         free((char *)pool->languages[i]);
 908       free(pool->languages);
 909     }
 910   pool->nlanguages = nlanguages;
 911   if (!nlanguages)
 912     return;
 913   pool->languages = sat_calloc(nlanguages, sizeof(const char **));
 914   for (i = 0; i < pool->nlanguages; i++)
 915     pool->languages[i] = strdup(languages[i]);
 916 }
 917
 918 char *
 919 pool_alloctmpspace(Pool *pool, int len)
 920 {
 921   int n = pool->tmpspacen;
 922   if (!len)
 923     return 0;
 924   if (len > pool->tmpspacelen[n])
 925     {
 926       pool->tmpspacebuf[n] = sat_realloc(pool->tmpspacebuf[n], len + 32);
 927       pool->tmpspacelen[n] = len + 32;
 928     }
 929   pool->tmpspacen = (n + 1) % POOL_TMPSPACEBUF;
 930   return pool->tmpspacebuf[n];
 931 }
 932
 933
 934 // EOF