- add new flags for the load functions:
[platform/upstream/libsolv.git] / src / pool.c
1 /*
2  * Copyright (c) 2007-2009, Novell Inc.
3  *
4  * This program is licensed under the BSD license, read LICENSE.BSD
5  * for further information
6  */
7
8 /*
9  * pool.c
10  * 
11  * The pool contains information about solvables
12  * stored optimized for memory consumption and fast retrieval.
13  */
14
15 #include <stdio.h>
16 #include <stdlib.h>
17 #include <stdarg.h>
18 #include <unistd.h>
19 #include <string.h>
20
21 #include "pool.h"
22 #include "repo.h"
23 #include "poolid.h"
24 #include "poolid_private.h"
25 #include "poolarch.h"
26 #include "util.h"
27 #include "bitmap.h"
28 #include "evr.h"
29
30 #define SOLVABLE_BLOCK  255
31
32 #define KNOWNID_INITIALIZE
33 #include "knownid.h"
34 #undef KNOWNID_INITIALIZE
35
36 /* create pool */
37 Pool *
38 pool_create(void)
39 {
40   Pool *pool;
41   Solvable *s;
42
43   pool = (Pool *)sat_calloc(1, sizeof(*pool));
44
45   stringpool_init (&pool->ss, initpool_data);
46
47   /* alloc space for RelDep 0 */
48   pool->rels = sat_extend_resize(0, 1, sizeof(Reldep), REL_BLOCK);
49   pool->nrels = 1;
50   memset(pool->rels, 0, sizeof(Reldep));
51
52   /* alloc space for Solvable 0 and system solvable */
53   pool->solvables = sat_extend_resize(0, 2, sizeof(Solvable), SOLVABLE_BLOCK);
54   pool->nsolvables = 2;
55   memset(pool->solvables, 0, 2 * sizeof(Solvable));
56   s = pool->solvables + SYSTEMSOLVABLE;
57   s->name = SYSTEM_SYSTEM;
58   s->arch = ARCH_NOARCH;
59   s->evr = ID_EMPTY;
60
61   queue_init(&pool->vendormap);
62
63   pool->debugmask = SAT_DEBUG_RESULT;   /* FIXME */
64   return pool;
65 }
66
67
68 /* free all the resources of our pool */
69 void
70 pool_free(Pool *pool)
71 {
72   int i;
73
74   pool_freewhatprovides(pool);
75   pool_freeidhashes(pool);
76   repo_freeallrepos(pool, 1);
77   sat_free(pool->id2arch);
78   sat_free(pool->solvables);
79   stringpool_free(&pool->ss);
80   sat_free(pool->rels);
81   queue_free(&pool->vendormap);
82   for (i = 0; i < POOL_TMPSPACEBUF; i++)
83     sat_free(pool->tmpspacebuf[i]);
84   for (i = 0; i < pool->nlanguages; i++)
85     free((char *)pool->languages[i]);
86   sat_free(pool->languages);
87   sat_free(pool->languagecache);
88   sat_free(pool);
89 }
90
91 Id
92 pool_add_solvable(Pool *pool)
93 {
94   pool->solvables = sat_extend(pool->solvables, pool->nsolvables, 1, sizeof(Solvable), SOLVABLE_BLOCK);
95   memset(pool->solvables + pool->nsolvables, 0, sizeof(Solvable));
96   return pool->nsolvables++;
97 }
98
99 Id
100 pool_add_solvable_block(Pool *pool, int count)
101 {
102   Id nsolvables = pool->nsolvables;
103   if (!count)
104     return nsolvables;
105   pool->solvables = sat_extend(pool->solvables, pool->nsolvables, count, sizeof(Solvable), SOLVABLE_BLOCK);
106   memset(pool->solvables + nsolvables, 0, sizeof(Solvable) * count);
107   pool->nsolvables += count;
108   return nsolvables;
109 }
110
111 void
112 pool_free_solvable_block(Pool *pool, Id start, int count, int reuseids)
113 {
114   if (!count)
115     return;
116   if (reuseids && start + count == pool->nsolvables)
117     {
118       /* might want to shrink solvable array */
119       pool->nsolvables = start;
120       return;
121     }
122   memset(pool->solvables + start, 0, sizeof(Solvable) * count);
123 }
124
125
126 void
127 pool_set_installed(Pool *pool, Repo *installed)
128 {
129   if (pool->installed == installed)
130     return;
131   pool->installed = installed;
132   pool_freewhatprovides(pool);
133 }
134
135 static int
136 pool_shrink_whatprovides_sortcmp(const void *ap, const void *bp, void *dp)
137 {
138   int r;
139   Pool *pool = dp;
140   Id oa, ob, *da, *db;
141   oa = pool->whatprovides[*(Id *)ap];
142   ob = pool->whatprovides[*(Id *)bp];
143   if (oa == ob)
144     return *(Id *)ap - *(Id *)bp;
145   if (!oa)
146     return -1;
147   if (!ob)
148     return 1;
149   da = pool->whatprovidesdata + oa;
150   db = pool->whatprovidesdata + ob;
151   while (*db)
152     if ((r = (*da++ - *db++)) != 0)
153       return r;
154   if (*da)
155     return *da;
156   return *(Id *)ap - *(Id *)bp;
157 }
158
159 /*
160  * pool_shrink_whatprovides  - unify whatprovides data
161  *
162  * whatprovides_rel must be empty for this to work!
163  *
164  */
165 static void
166 pool_shrink_whatprovides(Pool *pool)
167 {
168   Id i, id;
169   Id *sorted;
170   Id lastid, *last, *dp, *lp;
171   Offset o;
172   int r;
173
174   if (pool->ss.nstrings < 3)
175     return;
176   sorted = sat_malloc2(pool->ss.nstrings, sizeof(Id));
177   for (id = 0; id < pool->ss.nstrings; id++)
178     sorted[id] = id;
179   sat_sort(sorted + 1, pool->ss.nstrings - 1, sizeof(Id), pool_shrink_whatprovides_sortcmp, pool);
180   last = 0;
181   lastid = 0;
182   for (i = 1; i < pool->ss.nstrings; i++)
183     {
184       id = sorted[i];
185       o = pool->whatprovides[id];
186       if (o == 0 || o == 1)
187         continue;
188       dp = pool->whatprovidesdata + o;
189       if (last)
190         {
191           lp = last;
192           while (*dp)   
193             if (*dp++ != *lp++)
194               {
195                 last = 0;
196                 break;
197               }
198           if (last && *lp)
199             last = 0;
200           if (last)
201             {
202               pool->whatprovides[id] = -lastid;
203               continue;
204             }
205         }
206       last = pool->whatprovidesdata + o;
207       lastid = id;
208     }
209   sat_free(sorted);
210   dp = pool->whatprovidesdata + 2;
211   for (id = 1; id < pool->ss.nstrings; id++)
212     {
213       o = pool->whatprovides[id];
214       if (o == 0 || o == 1)
215         continue;
216       if ((Id)o < 0)
217         {
218           i = -(Id)o;
219           if (i >= id)
220             abort();
221           pool->whatprovides[id] = pool->whatprovides[i];
222           continue;
223         }
224       lp = pool->whatprovidesdata + o;
225       if (lp < dp)
226         abort();
227       pool->whatprovides[id] = dp - pool->whatprovidesdata;
228       while ((*dp++ = *lp++) != 0)
229         ;
230     }
231   o = dp - pool->whatprovidesdata;
232   POOL_DEBUG(SAT_DEBUG_STATS, "shrunk whatprovidesdata from %d to %d\n", pool->whatprovidesdataoff, o);
233   if (pool->whatprovidesdataoff == o)
234     return;
235   r = pool->whatprovidesdataoff - o;
236   pool->whatprovidesdataoff = o;
237   pool->whatprovidesdata = sat_realloc(pool->whatprovidesdata, (o + pool->whatprovidesdataleft) * sizeof(Id));
238   if (r > pool->whatprovidesdataleft)
239     r = pool->whatprovidesdataleft;
240   memset(pool->whatprovidesdata + o, 0, r * sizeof(Id));
241 }
242
243
244 /*
245  * pool_createwhatprovides()
246  * 
247  * create hashes over pool of solvables to ease provide lookups
248  * 
249  */
250 void
251 pool_createwhatprovides(Pool *pool)
252 {
253   int i, num, np, extra;
254   Offset off;
255   Solvable *s;
256   Id id;
257   Offset *idp, n;
258   Offset *whatprovides;
259   Id *whatprovidesdata, *d;
260   Repo *installed = pool->installed;
261   unsigned int now;
262
263   now = sat_timems(0);
264   POOL_DEBUG(SAT_DEBUG_STATS, "number of solvables: %d\n", pool->nsolvables);
265   POOL_DEBUG(SAT_DEBUG_STATS, "number of ids: %d + %d\n", pool->ss.nstrings, pool->nrels);
266
267   pool_freeidhashes(pool);      /* XXX: should not be here! */
268   pool_freewhatprovides(pool);
269   num = pool->ss.nstrings;
270   pool->whatprovides = whatprovides = sat_calloc_block(num, sizeof(Offset), WHATPROVIDES_BLOCK);
271   pool->whatprovides_rel = sat_calloc_block(pool->nrels, sizeof(Offset), WHATPROVIDES_BLOCK);
272
273   /* count providers for each name */
274   for (i = 1; i < pool->nsolvables; i++)
275     {
276       Id *pp;
277       s = pool->solvables + i;
278       if (!s->provides || !s->repo || s->repo->disabled)
279         continue;
280       /* we always need the installed solvable in the whatprovides data,
281          otherwise obsoletes/conflicts on them won't work */
282       if (s->repo != installed && !pool_installable(pool, s))
283         continue;
284       pp = s->repo->idarraydata + s->provides;
285       while ((id = *pp++) != ID_NULL)
286         {
287           while (ISRELDEP(id))
288             {
289               Reldep *rd = GETRELDEP(pool, id);
290               id = rd->name;
291             }
292           whatprovides[id]++;          /* inc count of providers */
293         }
294     }
295
296   off = 2;      /* first entry is undef, second is empty list */
297   idp = whatprovides;
298   np = 0;                              /* number of names provided */
299   for (i = 0; i < num; i++, idp++)
300     {
301       n = *idp;
302       if (!n)                          /* no providers */
303         continue;
304       *idp = off;                      /* move from counts to offsets into whatprovidesdata */
305       off += n + 1;                    /* make space for all providers + terminating ID_NULL */
306       np++;                            /* inc # of provider 'slots' */
307     }
308
309   POOL_DEBUG(SAT_DEBUG_STATS, "provide ids: %d\n", np);
310
311   /* reserve some space for relation data */
312   extra = 2 * pool->nrels;
313   if (extra < 256)
314     extra = 256;
315
316   POOL_DEBUG(SAT_DEBUG_STATS, "provide space needed: %d + %d\n", off, extra);
317
318   /* alloc space for all providers + extra */
319   whatprovidesdata = sat_calloc(off + extra, sizeof(Id));
320
321   /* now fill data for all provides */
322   for (i = 1; i < pool->nsolvables; i++)
323     {
324       Id *pp;
325       s = pool->solvables + i;
326       if (!s->provides || !s->repo || s->repo->disabled)
327         continue;
328       if (s->repo != installed && !pool_installable(pool, s))
329         continue;
330
331       /* for all provides of this solvable */
332       pp = s->repo->idarraydata + s->provides;
333       while ((id = *pp++) != 0)
334         {
335           while (ISRELDEP(id))
336             {
337               Reldep *rd = GETRELDEP(pool, id);
338               id = rd->name;
339             }
340           d = whatprovidesdata + whatprovides[id];   /* offset into whatprovidesdata */
341           if (*d)
342             {
343               d++;
344               while (*d)               /* find free slot */
345                 d++;
346               if (d[-1] == i)          /* solvable already tacked at end ? */
347                 continue;              /* Y: skip, on to next provides */
348             }
349           *d = i;                      /* put solvable Id into data */
350         }
351     }
352   pool->whatprovidesdata = whatprovidesdata;
353   pool->whatprovidesdataoff = off;
354   pool->whatprovidesdataleft = extra;
355   pool_shrink_whatprovides(pool);
356   POOL_DEBUG(SAT_DEBUG_STATS, "whatprovides memory used: %d K id array, %d K data\n", (pool->ss.nstrings + pool->nrels + WHATPROVIDES_BLOCK) / (int)(1024/sizeof(Id)), (pool->whatprovidesdataoff + pool->whatprovidesdataleft) / (int)(1024/sizeof(Id)));
357   POOL_DEBUG(SAT_DEBUG_STATS, "createwhatprovides took %d ms\n", sat_timems(now));
358 }
359
360 /*
361  * free all of our whatprovides data
362  * be careful, everything internalized with pool_queuetowhatprovides is
363  * gone, too
364  */
365 void
366 pool_freewhatprovides(Pool *pool)
367 {
368   pool->whatprovides = sat_free(pool->whatprovides);
369   pool->whatprovides_rel = sat_free(pool->whatprovides_rel);
370   pool->whatprovidesdata = sat_free(pool->whatprovidesdata);
371   pool->whatprovidesdataoff = 0;
372   pool->whatprovidesdataleft = 0;
373 }
374
375
376 /******************************************************************************/
377
378 /*
379  * pool_queuetowhatprovides  - add queue contents to whatprovidesdata
380  * 
381  * on-demand filling of provider information
382  * move queue data into whatprovidesdata
383  * q: queue of Ids
384  * returns: Offset into whatprovides
385  *
386  */
387 Id
388 pool_queuetowhatprovides(Pool *pool, Queue *q)
389 {
390   Offset off;
391   int count = q->count;
392
393   if (count == 0)                      /* queue empty -> 1 */
394     return 1;
395
396   /* extend whatprovidesdata if needed, +1 for ID_NULL-termination */
397   if (pool->whatprovidesdataleft < count + 1)
398     {
399       POOL_DEBUG(SAT_DEBUG_STATS, "growing provides hash data...\n");
400       pool->whatprovidesdata = sat_realloc(pool->whatprovidesdata, (pool->whatprovidesdataoff + count + 4096) * sizeof(Id));
401       pool->whatprovidesdataleft = count + 4096;
402     }
403
404   /* copy queue to next free slot */
405   off = pool->whatprovidesdataoff;
406   memcpy(pool->whatprovidesdata + pool->whatprovidesdataoff, q->elements, count * sizeof(Id));
407
408   /* adapt count and ID_NULL-terminate */
409   pool->whatprovidesdataoff += count;
410   pool->whatprovidesdata[pool->whatprovidesdataoff++] = ID_NULL;
411   pool->whatprovidesdataleft -= count + 1;
412
413   return (Id)off;
414 }
415
416
417 /*************************************************************************/
418
419 /* check if a package's nevr matches a dependency */
420
421 int
422 pool_match_nevr_rel(Pool *pool, Solvable *s, Id d)
423 {
424   Reldep *rd = GETRELDEP(pool, d);
425   Id name = rd->name;
426   Id evr = rd->evr;
427   int flags = rd->flags;
428
429   if (flags > 7)
430     {
431       switch (flags)
432         {
433         case REL_ARCH:
434           if (s->arch != evr)
435             return 0;
436           return pool_match_nevr(pool, s, name);
437         case REL_OR:
438           if (pool_match_nevr(pool, s, name))
439             return 1;
440           return pool_match_nevr(pool, s, evr);
441         case REL_AND:
442         case REL_WITH:
443           if (!pool_match_nevr(pool, s, name))
444             return 0;
445           return pool_match_nevr(pool, s, evr);
446         default:
447           return 0;
448         }
449     }
450   if (!pool_match_nevr(pool, s, name))
451     return 0;
452   if (evr == s->evr)
453     return flags & 2 ? 1 : 0;
454   if (!flags)
455     return 0;
456   if (flags == 7)
457     return 1;
458   if (flags != 2 && flags != 5)
459     flags ^= 5;
460 #ifdef DEBIAN_SEMANTICS
461   if ((flags & (1 << (1 + evrcmp(pool, s->evr, evr, EVRCMP_COMPARE)))) != 0)
462     return 1;
463 #else
464   if ((flags & (1 << (1 + evrcmp(pool, s->evr, evr, EVRCMP_MATCH_RELEASE)))) != 0)
465     return 1;
466 #endif
467   return 0;
468 }
469
470 /* match two dependencies */
471
472 int
473 pool_match_dep(Pool *pool, Id d1, Id d2)
474 {
475   Reldep *rd1, *rd2;
476   int pflags, flags;
477
478   if (d1 == d2)
479     return 1;
480   if (!ISRELDEP(d1))
481     {
482       if (!ISRELDEP(d2))
483         return 0;
484       rd2 = GETRELDEP(pool, d2);
485       return pool_match_dep(pool, d1, rd2->name);
486     }
487   rd1 = GETRELDEP(pool, d1);
488   if (!ISRELDEP(d2))
489     {
490       return pool_match_dep(pool, rd1->name, d2);
491     }
492   rd2 = GETRELDEP(pool, d2);
493   if (!pool_match_dep(pool, rd1->name, rd2->name))
494     return 0;
495   pflags = rd1->flags;
496   flags = rd2->flags;
497   if (!pflags || !flags || pflags >= 8 || flags >= 8)
498     return 0;
499   if (flags == 7 || pflags == 7)
500     return 1;
501   if ((pflags & flags & 5) != 0)
502     return 1;
503   if (rd1->evr == rd2->evr)
504     {
505       if ((pflags & flags & 2) != 0)
506         return 1;
507     }
508   else
509     {
510       int f = flags == 5 ? 5 : flags == 2 ? pflags : (flags ^ 5) & (pflags | 5);
511 #ifdef DEBIAN_SEMANTICS
512       if ((f & (1 << (1 + evrcmp(pool, rd1->evr, rd2->evr, EVRCMP_COMPARE)))) != 0)
513         return 1;
514 #else
515       if ((f & (1 << (1 + evrcmp(pool, rd1->evr, rd2->evr, EVRCMP_MATCH_RELEASE)))) != 0)
516         return 1;
517 #endif
518     }
519   return 0;
520 }
521
522 /*
523  * addrelproviders
524  * 
525  * add packages fulfilling the relation to whatprovides array
526  * no exact providers, do range match
527  * 
528  */
529
530 Id
531 pool_addrelproviders(Pool *pool, Id d)
532 {
533   Reldep *rd = GETRELDEP(pool, d);
534   Reldep *prd;
535   Queue plist;
536   Id buf[16];
537   Id name = rd->name;
538   Id evr = rd->evr;
539   int flags = rd->flags;
540   Id pid, *pidp;
541   Id p, wp, *pp, *pp2, *pp3;
542
543   d = GETRELID(d);
544   queue_init_buffer(&plist, buf, sizeof(buf)/sizeof(*buf));
545   switch (flags)
546     {
547     case REL_AND:
548     case REL_WITH:
549       pp = pool_whatprovides_ptr(pool, name);
550       pp2 = pool_whatprovides_ptr(pool, evr);
551       while ((p = *pp++) != 0)
552         {
553           for (pp3 = pp2; *pp3;)
554             if (*pp3++ == p)
555               {
556                 queue_push(&plist, p);
557                 break;
558               }
559         }
560       break;
561     case REL_OR:
562       pp = pool_whatprovides_ptr(pool, name);
563       while ((p = *pp++) != 0)
564         queue_push(&plist, p);
565       pp = pool_whatprovides_ptr(pool, evr);
566       while ((p = *pp++) != 0)
567         queue_pushunique(&plist, p);
568       break;
569     case REL_NAMESPACE:
570       if (name == NAMESPACE_OTHERPROVIDERS)
571         {
572           wp = pool_whatprovides(pool, evr);
573           pool->whatprovides_rel[d] = wp;
574           return wp;
575         }
576       if (pool->nscallback)
577         {
578           /* ask callback which packages provide the dependency
579            * 0:  none
580            * 1:  the system (aka SYSTEMSOLVABLE)
581            * >1: a set of packages, stored as offset on whatprovidesdata
582            */
583           p = pool->nscallback(pool, pool->nscallbackdata, name, evr);
584           if (p > 1)
585             {
586               queue_free(&plist);
587               pool->whatprovides_rel[d] = p;
588               return p;
589             }
590           if (p == 1)
591             queue_push(&plist, SYSTEMSOLVABLE);
592         }
593       break;
594     case REL_ARCH:
595       /* small hack: make it possible to match <pkg>.src
596        * we have to iterate over the solvables as src packages do not
597        * provide anything, thus they are not indexed in our
598        * whatprovides hash */
599       if (evr == ARCH_SRC)
600         {
601           Solvable *s;
602           for (p = 1, s = pool->solvables + p; p < pool->nsolvables; p++, s++)
603             {
604               if (s->arch != ARCH_SRC && s->arch != ARCH_NOSRC)
605                 continue;
606               if (pool_match_nevr(pool, s, name))
607                 queue_push(&plist, p);
608             }
609           break;
610         }
611       wp = pool_whatprovides(pool, name);
612       pp = pool->whatprovidesdata + wp;
613       while ((p = *pp++) != 0)
614         {
615           Solvable *s = pool->solvables + p;
616           if (s->arch == evr)
617             queue_push(&plist, p);
618           else
619             wp = 0;
620         }
621       if (wp)
622         {
623           /* all solvables match, no need to create a new list */
624           pool->whatprovides_rel[d] = wp;
625           return wp;
626         }
627       break;
628     case REL_FILECONFLICT:
629       pp = pool_whatprovides_ptr(pool, name);
630       while ((p = *pp++) != 0)
631         {
632           Id origd = MAKERELDEP(d);
633           Solvable *s = pool->solvables + p;
634           if (!s->provides)
635             continue;
636           pidp = s->repo->idarraydata + s->provides;
637           while ((pid = *pidp++) != 0)
638             if (pid == origd)
639               break;
640           if (pid)
641             queue_push(&plist, p);
642         }
643       break;
644     default:
645       break;
646     }
647
648   /* convert to whatprovides id */
649 #if 0
650   POOL_DEBUG(SAT_DEBUG_STATS, "addrelproviders: what provides %s?\n", dep2str(pool, name));
651 #endif
652   if (flags && flags < 8)
653     {
654       pp = pool_whatprovides_ptr(pool, name);
655       while (ISRELDEP(name))
656         {
657           rd = GETRELDEP(pool, name);
658           name = rd->name;
659         }
660       while ((p = *pp++) != 0)
661         {
662           Solvable *s = pool->solvables + p;
663 #if 0
664           POOL_DEBUG(DEBUG_1, "addrelproviders: checking package %s\n", id2str(pool, s->name));
665 #endif
666           if (!s->provides)
667             {
668               /* no provides - check nevr */
669               if (pool_match_nevr_rel(pool, s, MAKERELDEP(d)))
670                 queue_push(&plist, p);
671               continue;
672             }
673           /* solvable p provides name in some rels */
674           pidp = s->repo->idarraydata + s->provides;
675           while ((pid = *pidp++) != 0)
676             {
677               int pflags;
678               Id pevr;
679
680               if (pid == name)
681                 {
682 #ifdef DEBIAN_SEMANTICS
683                   continue;             /* unversioned provides can
684                                          * never match versioned deps */
685 #else
686                   break;                /* yes, provides all versions */
687 #endif
688                 }
689               if (!ISRELDEP(pid))
690                 continue;               /* wrong provides name */
691               prd = GETRELDEP(pool, pid);
692               if (prd->name != name)
693                 continue;               /* wrong provides name */
694               /* right package, both deps are rels */
695               pflags = prd->flags;
696               if (!pflags)
697                 continue;
698               if (flags == 7 || pflags == 7)
699                 break; /* included */
700               if ((pflags & flags & 5) != 0)
701                 break; /* same direction, match */
702               pevr = prd->evr;
703               if (pevr == evr)
704                 {
705                   if ((pflags & flags & 2) != 0)
706                     break; /* both have =, match */
707                 }
708               else
709                 {
710                   int f = flags == 5 ? 5 : flags == 2 ? pflags : (flags ^ 5) & (pflags | 5);
711 #ifdef DEBIAN_SEMANTICS
712                   if ((f & (1 << (1 + evrcmp(pool, pevr, evr, EVRCMP_COMPARE)))) != 0)
713                     break;
714 #else
715                   if ((f & (1 << (1 + evrcmp(pool, pevr, evr, EVRCMP_MATCH_RELEASE)))) != 0)
716                     break;
717 #endif
718                 }
719             }
720           if (!pid)
721             continue;   /* no rel match */
722           queue_push(&plist, p);
723         }
724       /* make our system solvable provide all unknown rpmlib() stuff */
725       if (plist.count == 0 && !strncmp(id2str(pool, name), "rpmlib(", 7))
726         queue_push(&plist, SYSTEMSOLVABLE);
727     }
728   /* add providers to whatprovides */
729 #if 0
730   POOL_DEBUG(SAT_DEBUG_STATS, "addrelproviders: adding %d packages to %d\n", plist.count, d);
731 #endif
732   pool->whatprovides_rel[d] = pool_queuetowhatprovides(pool, &plist);
733   queue_free(&plist);
734
735   return pool->whatprovides_rel[d];
736 }
737
738 /*************************************************************************/
739
740 void
741 pool_debug(Pool *pool, int type, const char *format, ...)
742 {
743   va_list args;
744   char buf[1024];
745
746   if ((type & (SAT_FATAL|SAT_ERROR)) == 0)
747     {
748       if ((pool->debugmask & type) == 0)
749         return;
750     }
751   va_start(args, format);
752   if (!pool->debugcallback)
753     {
754       if ((type & (SAT_FATAL|SAT_ERROR)) == 0 || !(pool->debugmask & SAT_DEBUG_TO_STDERR))
755         vprintf(format, args);
756       else
757         vfprintf(stderr, format, args);
758       return;
759     }
760   vsnprintf(buf, sizeof(buf), format, args);
761   pool->debugcallback(pool, pool->debugcallbackdata, type, buf);
762 }
763
764 void
765 pool_setdebuglevel(Pool *pool, int level)
766 {
767   int mask = SAT_DEBUG_RESULT;
768   if (level > 0)
769     mask |= SAT_DEBUG_STATS|SAT_DEBUG_ANALYZE|SAT_DEBUG_UNSOLVABLE|SAT_DEBUG_SOLVER|SAT_DEBUG_TRANSACTION;
770   if (level > 1)
771     mask |= SAT_DEBUG_JOB|SAT_DEBUG_SOLUTIONS|SAT_DEBUG_POLICY;
772   if (level > 2)
773     mask |= SAT_DEBUG_PROPAGATE;
774   if (level > 3)
775     mask |= SAT_DEBUG_RULE_CREATION;
776   if (level > 4)
777     mask |= SAT_DEBUG_SCHUBI;
778   mask |= pool->debugmask & SAT_DEBUG_TO_STDERR;        /* keep bit */
779   pool->debugmask = mask;
780 }
781
782 /*************************************************************************/
783
784 struct searchfiles {
785   Id *ids;
786   char **dirs;
787   char **names;
788   int nfiles;
789   Map seen;
790 };
791
792 #define SEARCHFILES_BLOCK 127
793
794 static void
795 pool_addfileprovides_dep(Pool *pool, Id *ida, struct searchfiles *sf, struct searchfiles *isf)
796 {
797   Id dep, sid;
798   const char *s, *sr;
799   struct searchfiles *csf;
800
801   while ((dep = *ida++) != 0)
802     {
803       csf = sf;
804       while (ISRELDEP(dep))
805         {
806           Reldep *rd;
807           sid = pool->ss.nstrings + GETRELID(dep);
808           if (MAPTST(&csf->seen, sid))
809             {
810               dep = 0;
811               break;
812             }
813           MAPSET(&csf->seen, sid);
814           rd = GETRELDEP(pool, dep);
815           if (rd->flags < 8)
816             dep = rd->name;
817           else if (rd->flags == REL_NAMESPACE)
818             {
819               if (rd->name == NAMESPACE_INSTALLED || rd->name == NAMESPACE_SPLITPROVIDES)
820                 {
821                   csf = isf;
822                   if (!csf || MAPTST(&csf->seen, sid))
823                     {
824                       dep = 0;
825                       break;
826                     }
827                   MAPSET(&csf->seen, sid);
828                 }
829               dep = rd->evr;
830             }
831           else if (rd->flags == REL_FILECONFLICT)
832             {
833               dep = 0;
834               break;
835             }
836           else
837             {
838               Id ids[2];
839               ids[0] = rd->name;
840               ids[1] = 0;
841               pool_addfileprovides_dep(pool, ids, csf, isf);
842               dep = rd->evr;
843             }
844         }
845       if (!dep)
846         continue;
847       if (MAPTST(&csf->seen, dep))
848         continue;
849       MAPSET(&csf->seen, dep);
850       s = id2str(pool, dep);
851       if (*s != '/')
852         continue;
853       csf->ids = sat_extend(csf->ids, csf->nfiles, 1, sizeof(Id), SEARCHFILES_BLOCK);
854       csf->dirs = sat_extend(csf->dirs, csf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
855       csf->names = sat_extend(csf->names, csf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
856       csf->ids[csf->nfiles] = dep;
857       sr = strrchr(s, '/');
858       csf->names[csf->nfiles] = strdup(sr + 1);
859       csf->dirs[csf->nfiles] = sat_malloc(sr - s + 1);
860       if (sr != s)
861         strncpy(csf->dirs[csf->nfiles], s, sr - s);
862       csf->dirs[csf->nfiles][sr - s] = 0;
863       csf->nfiles++;
864     }
865 }
866
867 struct addfileprovides_cbdata {
868   int nfiles;
869   Id *ids;
870   char **dirs;
871   char **names;
872
873   Repodata *olddata;
874   Id *dids;
875   Map useddirs;
876 };
877
878 static int
879 addfileprovides_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *value)
880 {
881   struct addfileprovides_cbdata *cbd = cbdata;
882   int i;
883
884   if (data != cbd->olddata)
885     {
886       map_free(&cbd->useddirs);
887       map_init(&cbd->useddirs, data->dirpool.ndirs);
888       for (i = 0; i < cbd->nfiles; i++)
889         {
890           Id did = repodata_str2dir(data, cbd->dirs[i], 0);
891           cbd->dids[i] = did;
892           if (did)
893             MAPSET(&cbd->useddirs, did);
894         }
895       cbd->olddata = data;
896     }
897   if (!MAPTST(&cbd->useddirs, value->id))
898     return 0;
899   for (i = 0; i < cbd->nfiles; i++)
900     {
901       if (cbd->dids[i] != value->id)
902         continue;
903       if (!strcmp(cbd->names[i], value->str))
904         break;
905     }
906   if (i == cbd->nfiles)
907     return 0;
908   s->provides = repo_addid_dep(s->repo, s->provides, cbd->ids[i], SOLVABLE_FILEMARKER);
909   return 0;
910 }
911
912 static int
913 addfileprovides_setid_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *kv)
914 {
915   Map *provideids = cbdata;
916   if (key->type != REPOKEY_TYPE_IDARRAY)
917     return 0;
918   MAPSET(provideids, kv->id);
919   return kv->eof ? SEARCH_NEXT_SOLVABLE : 0;
920 }
921
922
923 static void
924 pool_addfileprovides_search(Pool *pool, struct addfileprovides_cbdata *cbd, struct searchfiles *sf, Repo *repoonly)
925 {
926   Id p, start, end;
927   Solvable *s;
928   Repodata *data = 0, *nextdata;
929   Repo *repo, *oldrepo = 0;
930   int dataincludes = 0;
931   int i, j, flags;
932   Map providedids;
933   Repodata *ffldata = 0;
934
935   cbd->nfiles = sf->nfiles;
936   cbd->ids = sf->ids;
937   cbd->dirs = sf->dirs;
938   cbd->names = sf->names;
939   cbd->olddata = 0;
940   cbd->dids = sat_realloc2(cbd->dids, sf->nfiles, sizeof(Id));
941   if (repoonly)
942     {
943       start = repoonly->start;
944       end = repoonly->end;
945     }
946   else
947     {
948       start = 2;        /* skip system solvable */
949       end = pool->nsolvables;
950     }
951   flags = 0;
952   for (p = start, s = pool->solvables + p; p < end; p++, s++)
953     {
954       repo = s->repo;
955       if (!repo || (repoonly && repo != repoonly))
956         continue;
957       /* check if p is in (oldrepo,data) */
958       if (repo != oldrepo || (data && p >= data->end))
959         {
960           data = 0;
961           oldrepo = 0;
962         }
963       if (oldrepo == 0)
964         {
965           /* nope, find new repo/repodata */
966           /* if we don't find a match, set data to the next repodata */
967           nextdata = 0;
968           for (i = 0, data = repo->repodata; i < repo->nrepodata; i++, data++)
969             {
970               if (p >= data->end)
971                 continue;
972               if (data->state != REPODATA_AVAILABLE)
973                 continue;
974               for (j = 1; j < data->nkeys; j++)
975                 if (data->keys[j].name == REPOSITORY_ADDEDFILEPROVIDES && data->keys[j].type == REPOKEY_TYPE_IDARRAY)
976                   break;
977               if (j == data->nkeys)
978                 continue;
979               /* great, this repodata contains addedfileprovides */
980               if (!nextdata || nextdata->start > data->start)
981                 nextdata = data;
982               if (p >= data->start)
983                 break;
984             }
985           if (i == repo->nrepodata)
986             data = nextdata;    /* no direct hit, use next repodata */
987           if (data)
988             {
989               map_init(&providedids, pool->ss.nstrings);
990               repodata_search(data, SOLVID_META, REPOSITORY_ADDEDFILEPROVIDES, 0, addfileprovides_setid_cb, &providedids);
991               for (i = 0; i < cbd->nfiles; i++)
992                 if (!MAPTST(&providedids, cbd->ids[i]))
993                   break;
994               map_free(&providedids);
995               dataincludes = i == cbd->nfiles;
996             }
997           oldrepo = repo;
998         }
999       if (data && p >= data->start && dataincludes)
1000         continue;
1001       if (ffldata == 0 || p < ffldata->start || p >= ffldata->end)
1002         {
1003           for (i = 0, ffldata = repo->repodata; i < repo->nrepodata; i++, ffldata++)
1004             if (p >= ffldata->start && p < ffldata->end)
1005               break;
1006           if (i == repo->nrepodata)
1007             ffldata = 0;
1008           flags = 0;
1009           if (ffldata)
1010             {
1011               for (i = 0; i < cbd->nfiles; i++)
1012                 if (!repodata_filelistfilter_matches(ffldata, id2str(pool, cbd->ids[i])))
1013                   {
1014 #if 0
1015                     printf("Need the complete filelist in repo %s because of %s\n", repo->name, id2str(pool, cbd->ids[i]));
1016 #endif
1017                     flags = SEARCH_COMPLETE_FILELIST;
1018                     break;
1019                   }
1020             }
1021         }
1022       repo_search(repo, p, SOLVABLE_FILELIST, 0, flags, addfileprovides_cb, cbd);
1023     }
1024 }
1025
1026 void
1027 pool_addfileprovides_ids(Pool *pool, Repo *installed, Id **idp)
1028 {
1029   Solvable *s;
1030   Repo *repo;
1031   struct searchfiles sf, isf, *isfp;
1032   struct addfileprovides_cbdata cbd;
1033   int i;
1034
1035   memset(&sf, 0, sizeof(sf));
1036   map_init(&sf.seen, pool->ss.nstrings + pool->nrels);
1037   memset(&isf, 0, sizeof(isf));
1038   map_init(&isf.seen, pool->ss.nstrings + pool->nrels);
1039
1040   isfp = installed ? &isf : 0;
1041   for (i = 1, s = pool->solvables + i; i < pool->nsolvables; i++, s++)
1042     {
1043       repo = s->repo;
1044       if (!repo)
1045         continue;
1046       if (s->obsoletes)
1047         pool_addfileprovides_dep(pool, repo->idarraydata + s->obsoletes, &sf, isfp);
1048       if (s->conflicts)
1049         pool_addfileprovides_dep(pool, repo->idarraydata + s->conflicts, &sf, isfp);
1050       if (s->requires)
1051         pool_addfileprovides_dep(pool, repo->idarraydata + s->requires, &sf, isfp);
1052       if (s->recommends)
1053         pool_addfileprovides_dep(pool, repo->idarraydata + s->recommends, &sf, isfp);
1054       if (s->suggests)
1055         pool_addfileprovides_dep(pool, repo->idarraydata + s->suggests, &sf, isfp);
1056       if (s->supplements)
1057         pool_addfileprovides_dep(pool, repo->idarraydata + s->supplements, &sf, isfp);
1058       if (s->enhances)
1059         pool_addfileprovides_dep(pool, repo->idarraydata + s->enhances, &sf, isfp);
1060     }
1061   map_free(&sf.seen);
1062   map_free(&isf.seen);
1063   POOL_DEBUG(SAT_DEBUG_STATS, "found %d file dependencies\n", sf.nfiles);
1064   POOL_DEBUG(SAT_DEBUG_STATS, "found %d installed file dependencies\n", isf.nfiles);
1065   cbd.dids = 0;
1066   map_init(&cbd.useddirs, 1);
1067   if (idp)
1068     *idp = 0;
1069   if (sf.nfiles)
1070     {
1071 #if 0
1072       for (i = 0; i < sf.nfiles; i++)
1073         POOL_DEBUG(SAT_DEBUG_STATS, "looking up %s in filelist\n", id2str(pool, sf.ids[i]));
1074 #endif
1075       pool_addfileprovides_search(pool, &cbd, &sf, 0);
1076       if (idp)
1077         {
1078           sf.ids = sat_extend(sf.ids, sf.nfiles, 1, sizeof(Id), SEARCHFILES_BLOCK);
1079           sf.ids[sf.nfiles] = 0;
1080           *idp = sf.ids;
1081           sf.ids = 0;
1082         }
1083       sat_free(sf.ids);
1084       for (i = 0; i < sf.nfiles; i++)
1085         {
1086           sat_free(sf.dirs[i]);
1087           sat_free(sf.names[i]);
1088         }
1089       sat_free(sf.dirs);
1090       sat_free(sf.names);
1091     }
1092   if (isf.nfiles)
1093     {
1094 #if 0
1095       for (i = 0; i < isf.nfiles; i++)
1096         POOL_DEBUG(SAT_DEBUG_STATS, "looking up %s in installed filelist\n", id2str(pool, isf.ids[i]));
1097 #endif
1098       if (installed)
1099         pool_addfileprovides_search(pool, &cbd, &isf, installed);
1100       sat_free(isf.ids);
1101       for (i = 0; i < isf.nfiles; i++)
1102         {
1103           sat_free(isf.dirs[i]);
1104           sat_free(isf.names[i]);
1105         }
1106       sat_free(isf.dirs);
1107       sat_free(isf.names);
1108     }
1109   map_free(&cbd.useddirs);
1110   sat_free(cbd.dids);
1111   pool_freewhatprovides(pool);  /* as we have added provides */
1112 }
1113
1114 void
1115 pool_addfileprovides(Pool *pool)
1116 {
1117   pool_addfileprovides_ids(pool, pool->installed, 0);
1118 }
1119
1120 void
1121 pool_search(Pool *pool, Id p, Id key, const char *match, int flags, int (*callback)(void *cbdata, Solvable *s, struct _Repodata *data, struct _Repokey *key, struct _KeyValue *kv), void *cbdata)
1122 {
1123   if (p)
1124     {
1125       if (pool->solvables[p].repo)
1126         repo_search(pool->solvables[p].repo, p, key, match, flags, callback, cbdata);
1127       return;
1128     }
1129   /* FIXME: obey callback return value! */
1130   for (p = 1; p < pool->nsolvables; p++)
1131     if (pool->solvables[p].repo)
1132       repo_search(pool->solvables[p].repo, p, key, match, flags, callback, cbdata);
1133 }
1134
1135 void
1136 pool_clear_pos(Pool *pool)
1137 {
1138   memset(&pool->pos, 0, sizeof(pool->pos));
1139 }
1140
1141
1142 void
1143 pool_set_languages(Pool *pool, const char **languages, int nlanguages)
1144 {
1145   int i;
1146
1147   pool->languagecache = sat_free(pool->languagecache);
1148   pool->languagecacheother = 0;
1149   if (pool->nlanguages)
1150     {
1151       for (i = 0; i < pool->nlanguages; i++)
1152         free((char *)pool->languages[i]);
1153       free(pool->languages);
1154     }
1155   pool->nlanguages = nlanguages;
1156   if (!nlanguages)
1157     return;
1158   pool->languages = sat_calloc(nlanguages, sizeof(const char **));
1159   for (i = 0; i < pool->nlanguages; i++)
1160     pool->languages[i] = strdup(languages[i]);
1161 }
1162
1163 Id
1164 pool_id2langid(Pool *pool, Id id, const char *lang, int create)
1165 {
1166   const char *n;
1167   char buf[256], *p;
1168   int l;
1169
1170   if (!lang)
1171     return id;
1172   n = id2str(pool, id);
1173   l = strlen(n) + strlen(lang) + 2;
1174   if (l > sizeof(buf))
1175     p = sat_malloc(strlen(n) + strlen(lang) + 2);
1176   else
1177     p = buf;
1178   sprintf(p, "%s:%s", n, lang);
1179   id = str2id(pool, p, create);
1180   if (p != buf)
1181     free(p);
1182   return id;
1183 }
1184
1185 char *
1186 pool_alloctmpspace(Pool *pool, int len)
1187 {
1188   int n = pool->tmpspacen;
1189   if (!len)
1190     return 0;
1191   if (len > pool->tmpspacelen[n])
1192     {
1193       pool->tmpspacebuf[n] = sat_realloc(pool->tmpspacebuf[n], len + 32);
1194       pool->tmpspacelen[n] = len + 32;
1195     }
1196   pool->tmpspacen = (n + 1) % POOL_TMPSPACEBUF;
1197   return pool->tmpspacebuf[n];
1198 }
1199
1200 char *
1201 pool_tmpjoin(Pool *pool, const char *str1, const char *str2, const char *str3)
1202 {
1203   int l1, l2, l3;
1204   char *s, *str;
1205   l1 = str1 ? strlen(str1) : 0;
1206   l2 = str2 ? strlen(str2) : 0;
1207   l3 = str3 ? strlen(str3) : 0;
1208   s = str = pool_alloctmpspace(pool, l1 + l2 + l3 + 1);
1209   if (l1)
1210     {
1211       strcpy(s, str1);
1212       s += l1;
1213     }
1214   if (l2)
1215     {
1216       strcpy(s, str2);
1217       s += l2;
1218     }
1219   if (l3)
1220     {
1221       strcpy(s, str3);
1222       s += l3;
1223     }
1224   *s = 0;
1225   return str;
1226 }
1227
1228
1229 /*******************************************************************/
1230
1231 struct mptree {
1232   Id sibling;
1233   Id child;
1234   const char *comp;
1235   int compl;
1236   Id mountpoint;
1237 };
1238
1239 struct ducbdata {
1240   DUChanges *mps;
1241   struct mptree *mptree;
1242   int addsub;
1243   int hasdu;
1244
1245   Id *dirmap;
1246   int nmap;
1247   Repodata *olddata;
1248 };
1249
1250
1251 static int
1252 solver_fill_DU_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *value)
1253 {
1254   struct ducbdata *cbd = cbdata;
1255   Id mp;
1256
1257   if (data != cbd->olddata)
1258     {
1259       Id dn, mp, comp, *dirmap, *dirs;
1260       int i, compl;
1261       const char *compstr;
1262       struct mptree *mptree;
1263
1264       /* create map from dir to mptree */
1265       cbd->dirmap = sat_free(cbd->dirmap);
1266       cbd->nmap = 0;
1267       dirmap = sat_calloc(data->dirpool.ndirs, sizeof(Id));
1268       mptree = cbd->mptree;
1269       mp = 0;
1270       for (dn = 2, dirs = data->dirpool.dirs + dn; dn < data->dirpool.ndirs; dn++)
1271         {
1272           comp = *dirs++;
1273           if (comp <= 0)
1274             {
1275               mp = dirmap[-comp];
1276               continue;
1277             }
1278           if (mp < 0)
1279             {
1280               /* unconnected */
1281               dirmap[dn] = mp;
1282               continue;
1283             }
1284           if (!mptree[mp].child)
1285             {
1286               dirmap[dn] = -mp;
1287               continue;
1288             }
1289           if (data->localpool)
1290             compstr = stringpool_id2str(&data->spool, comp);
1291           else
1292             compstr = id2str(data->repo->pool, comp);
1293           compl = strlen(compstr);
1294           for (i = mptree[mp].child; i; i = mptree[i].sibling)
1295             if (mptree[i].compl == compl && !strncmp(mptree[i].comp, compstr, compl))
1296               break;
1297           dirmap[dn] = i ? i : -mp;
1298         }
1299       /* change dirmap to point to mountpoint instead of mptree */
1300       for (dn = 0; dn < data->dirpool.ndirs; dn++)
1301         {
1302           mp = dirmap[dn];
1303           dirmap[dn] = mptree[mp > 0 ? mp : -mp].mountpoint;
1304         }
1305       cbd->dirmap = dirmap;
1306       cbd->nmap = data->dirpool.ndirs;
1307       cbd->olddata = data;
1308     }
1309   cbd->hasdu = 1;
1310   if (value->id < 0 || value->id >= cbd->nmap)
1311     return 0;
1312   mp = cbd->dirmap[value->id];
1313   if (mp < 0)
1314     return 0;
1315   if (cbd->addsub > 0)
1316     {
1317       cbd->mps[mp].kbytes += value->num;
1318       cbd->mps[mp].files += value->num2;
1319     }
1320   else
1321     {
1322       cbd->mps[mp].kbytes -= value->num;
1323       cbd->mps[mp].files -= value->num2;
1324     }
1325   return 0;
1326 }
1327
1328 static void
1329 propagate_mountpoints(struct mptree *mptree, int pos, Id mountpoint)
1330 {
1331   int i;
1332   if (mptree[pos].mountpoint == -1)
1333     mptree[pos].mountpoint = mountpoint;
1334   else
1335     mountpoint = mptree[pos].mountpoint;
1336   for (i = mptree[pos].child; i; i = mptree[i].sibling)
1337     propagate_mountpoints(mptree, i, mountpoint);
1338 }
1339
1340 #define MPTREE_BLOCK 15
1341
1342 void
1343 pool_calc_duchanges(Pool *pool, Map *installedmap, DUChanges *mps, int nmps)
1344 {
1345   char *p;
1346   const char *path, *compstr;
1347   struct mptree *mptree;
1348   int i, nmptree;
1349   int pos, compl;
1350   int mp;
1351   struct ducbdata cbd;
1352   Solvable *s;
1353   Id sp;
1354   Map ignoredu;
1355   Repo *oldinstalled = pool->installed;
1356
1357   memset(&ignoredu, 0, sizeof(ignoredu));
1358   cbd.mps = mps;
1359   cbd.addsub = 0;
1360   cbd.dirmap = 0;
1361   cbd.nmap = 0;
1362   cbd.olddata = 0;
1363
1364   mptree = sat_extend_resize(0, 1, sizeof(struct mptree), MPTREE_BLOCK);
1365
1366   /* our root node */
1367   mptree[0].sibling = 0;
1368   mptree[0].child = 0;
1369   mptree[0].comp = 0;
1370   mptree[0].compl = 0;
1371   mptree[0].mountpoint = -1;
1372   nmptree = 1;
1373   
1374   /* create component tree */
1375   for (mp = 0; mp < nmps; mp++)
1376     {
1377       mps[mp].kbytes = 0;
1378       mps[mp].files = 0;
1379       pos = 0;
1380       path = mps[mp].path;
1381       while(*path == '/')
1382         path++;
1383       while (*path)
1384         {
1385           if ((p = strchr(path, '/')) == 0)
1386             {
1387               compstr = path;
1388               compl = strlen(compstr);
1389               path += compl;
1390             }
1391           else
1392             {
1393               compstr = path;
1394               compl = p - path;
1395               path = p + 1;
1396               while(*path == '/')
1397                 path++;
1398             }
1399           for (i = mptree[pos].child; i; i = mptree[i].sibling)
1400             if (mptree[i].compl == compl && !strncmp(mptree[i].comp, compstr, compl))
1401               break;
1402           if (!i)
1403             {
1404               /* create new node */
1405               mptree = sat_extend(mptree, nmptree, 1, sizeof(struct mptree), MPTREE_BLOCK);
1406               i = nmptree++;
1407               mptree[i].sibling = mptree[pos].child;
1408               mptree[i].child = 0;
1409               mptree[i].comp = compstr;
1410               mptree[i].compl = compl;
1411               mptree[i].mountpoint = -1;
1412               mptree[pos].child = i;
1413             }
1414           pos = i;
1415         }
1416       mptree[pos].mountpoint = mp;
1417     }
1418
1419   propagate_mountpoints(mptree, 0, mptree[0].mountpoint);
1420
1421 #if 0
1422   for (i = 0; i < nmptree; i++)
1423     {
1424       printf("#%d sibling: %d\n", i, mptree[i].sibling);
1425       printf("#%d child: %d\n", i, mptree[i].child);
1426       printf("#%d comp: %s\n", i, mptree[i].comp);
1427       printf("#%d compl: %d\n", i, mptree[i].compl);
1428       printf("#%d mountpont: %d\n", i, mptree[i].mountpoint);
1429     }
1430 #endif
1431
1432   cbd.mptree = mptree;
1433   cbd.addsub = 1;
1434   for (sp = 1, s = pool->solvables + sp; sp < pool->nsolvables; sp++, s++)
1435     {
1436       if (!s->repo || (oldinstalled && s->repo == oldinstalled))
1437         continue;
1438       if (!MAPTST(installedmap, sp))
1439         continue;
1440       cbd.hasdu = 0;
1441       repo_search(s->repo, sp, SOLVABLE_DISKUSAGE, 0, 0, solver_fill_DU_cb, &cbd);
1442       if (!cbd.hasdu && oldinstalled)
1443         {
1444           Id op, opp;
1445           /* no du data available, ignore data of all installed solvables we obsolete */
1446           if (!ignoredu.map)
1447             map_init(&ignoredu, oldinstalled->end - oldinstalled->start);
1448           if (s->obsoletes)
1449             {
1450               Id obs, *obsp = s->repo->idarraydata + s->obsoletes;
1451               while ((obs = *obsp++) != 0)
1452                 FOR_PROVIDES(op, opp, obs)
1453                   if (op >= oldinstalled->start && op < oldinstalled->end)
1454                     MAPSET(&ignoredu, op - oldinstalled->start);
1455             }
1456           FOR_PROVIDES(op, opp, s->name)
1457             if (pool->solvables[op].name == s->name)
1458               if (op >= oldinstalled->start && op < oldinstalled->end)
1459                 MAPSET(&ignoredu, op - oldinstalled->start);
1460         }
1461     }
1462   cbd.addsub = -1;
1463   if (oldinstalled)
1464     {
1465       /* assumes we allways have du data for installed solvables */
1466       FOR_REPO_SOLVABLES(oldinstalled, sp, s)
1467         {
1468           if (MAPTST(installedmap, sp))
1469             continue;
1470           if (ignoredu.map && MAPTST(&ignoredu, sp - oldinstalled->start))
1471             continue;
1472           repo_search(oldinstalled, sp, SOLVABLE_DISKUSAGE, 0, 0, solver_fill_DU_cb, &cbd);
1473         }
1474     }
1475   if (ignoredu.map)
1476     map_free(&ignoredu);
1477   sat_free(cbd.dirmap);
1478   sat_free(mptree);
1479 }
1480
1481 int
1482 pool_calc_installsizechange(Pool *pool, Map *installedmap)
1483 {
1484   Id sp;
1485   Solvable *s;
1486   int change = 0;
1487   Repo *oldinstalled = pool->installed;
1488
1489   for (sp = 1, s = pool->solvables + sp; sp < pool->nsolvables; sp++, s++)
1490     {
1491       if (!s->repo || (oldinstalled && s->repo == oldinstalled))
1492         continue;
1493       if (!MAPTST(installedmap, sp))
1494         continue;
1495       change += solvable_lookup_num(s, SOLVABLE_INSTALLSIZE, 0);
1496     }
1497   if (oldinstalled)
1498     {
1499       FOR_REPO_SOLVABLES(oldinstalled, sp, s)
1500         {
1501           if (MAPTST(installedmap, sp))
1502             continue;
1503           change -= solvable_lookup_num(s, SOLVABLE_INSTALLSIZE, 0);
1504         }
1505     }
1506   return change;
1507 }
1508
1509 /* map:
1510  *  1: installed
1511  *  2: conflicts with installed
1512  *  8: interesting (only true if installed)
1513  * 16: undecided
1514  */
1515  
1516 static inline Id dep2name(Pool *pool, Id dep)
1517 {
1518   while (ISRELDEP(dep))
1519     {
1520       Reldep *rd = rd = GETRELDEP(pool, dep);
1521       dep = rd->name;
1522     }
1523   return dep;
1524 }
1525
1526 static int providedbyinstalled_multiversion(Pool *pool, unsigned char *map, Id n, Id dep) 
1527 {
1528   Id p, pp;
1529   Solvable *sn = pool->solvables + n; 
1530
1531   FOR_PROVIDES(p, pp, sn->name)
1532     {    
1533       Solvable *s = pool->solvables + p; 
1534       if (s->name != sn->name || s->arch != sn->arch)
1535         continue;
1536       if ((map[p] & 9) == 9)
1537         return 1;
1538     }    
1539   return 0;
1540 }
1541
1542 static inline int providedbyinstalled(Pool *pool, unsigned char *map, Id dep, int ispatch, Map *noobsoletesmap)
1543 {
1544   Id p, pp;
1545   int r = 0;
1546   FOR_PROVIDES(p, pp, dep)
1547     {
1548       if (p == SYSTEMSOLVABLE)
1549         return 1;       /* always boring, as never constraining */
1550       if (ispatch && !pool_match_nevr(pool, pool->solvables + p, dep))
1551         continue;
1552       if (ispatch && noobsoletesmap && noobsoletesmap->size && MAPTST(noobsoletesmap, p) && ISRELDEP(dep))
1553         if (providedbyinstalled_multiversion(pool, map, p, dep))
1554           continue;
1555       if ((map[p] & 9) == 9)
1556         return 9;
1557       r |= map[p] & 17;
1558     }
1559   return r;
1560 }
1561
1562 /*
1563  * pool_trivial_installable - calculate if a set of solvables is
1564  * trivial installable without any other installs/deinstalls of
1565  * packages not belonging to the set.
1566  *
1567  * the state is returned in the result queue:
1568  * 1:  solvable is installable without any other package changes
1569  * 0:  solvable is not installable
1570  * -1: solvable is installable, but doesn't constrain any installed packages
1571  */
1572
1573 void
1574 pool_trivial_installable_noobsoletesmap(Pool *pool, Map *installedmap, Queue *pkgs, Queue *res, Map *noobsoletesmap)
1575 {
1576   int i, r, m, did;
1577   Id p, *dp, con, *conp, req, *reqp;
1578   unsigned char *map;
1579   Solvable *s;
1580
1581   map = sat_calloc(pool->nsolvables, 1);
1582   for (p = 1; p < pool->nsolvables; p++)
1583     {
1584       if (!MAPTST(installedmap, p))
1585         continue;
1586       map[p] |= 9;
1587       s = pool->solvables + p;
1588       if (!s->conflicts)
1589         continue;
1590       conp = s->repo->idarraydata + s->conflicts;
1591       while ((con = *conp++) != 0)
1592         {
1593           dp = pool_whatprovides_ptr(pool, con);
1594           for (; *dp; dp++)
1595             map[p] |= 2;        /* XXX: self conflict ? */
1596         }
1597     }
1598   for (i = 0; i < pkgs->count; i++)
1599     map[pkgs->elements[i]] = 16;
1600
1601   for (i = 0, did = 0; did < pkgs->count; i++, did++)
1602     {
1603       if (i == pkgs->count)
1604         i = 0;
1605       p = pkgs->elements[i];
1606       if ((map[p] & 16) == 0)
1607         continue;
1608       if ((map[p] & 2) != 0)
1609         {
1610           map[p] = 2;
1611           continue;
1612         }
1613       s = pool->solvables + p;
1614       m = 1;
1615       if (s->requires)
1616         {
1617           reqp = s->repo->idarraydata + s->requires;
1618           while ((req = *reqp++) != 0)
1619             {
1620               if (req == SOLVABLE_PREREQMARKER)
1621                 continue;
1622               r = providedbyinstalled(pool, map, req, 0, 0);
1623               if (!r)
1624                 {
1625                   /* decided and miss */
1626                   map[p] = 2;
1627                   break;
1628                 }
1629               m |= r;   /* 1 | 9 | 16 | 17 */
1630             }
1631           if (req)
1632             continue;
1633           if ((m & 9) == 9)
1634             m = 9;
1635         }
1636       if (s->conflicts)
1637         {
1638           int ispatch = 0;      /* see solver.c patch handling */
1639
1640           if (!strncmp("patch:", id2str(pool, s->name), 6))
1641             ispatch = 1;
1642           conp = s->repo->idarraydata + s->conflicts;
1643           while ((con = *conp++) != 0)
1644             {
1645               if ((providedbyinstalled(pool, map, con, ispatch, noobsoletesmap) & 1) != 0)
1646                 {
1647                   map[p] = 2;
1648                   break;
1649                 }
1650               if ((m == 1 || m == 17) && ISRELDEP(con))
1651                 {
1652                   con = dep2name(pool, con);
1653                   if ((providedbyinstalled(pool, map, con, ispatch, noobsoletesmap) & 1) != 0)
1654                     m = 9;
1655                 }
1656             }
1657           if (con)
1658             continue;   /* found a conflict */
1659         }
1660 #if 0
1661       if (s->repo && s->repo != oldinstalled)
1662         {
1663           Id p2, obs, *obsp, *pp;
1664           Solvable *s2;
1665           if (s->obsoletes)
1666             {
1667               obsp = s->repo->idarraydata + s->obsoletes;
1668               while ((obs = *obsp++) != 0)
1669                 {
1670                   if ((providedbyinstalled(pool, map, obs, 0, 0) & 1) != 0)
1671                     {
1672                       map[p] = 2;
1673                       break;
1674                     }
1675                 }
1676               if (obs)
1677                 continue;
1678             }
1679           FOR_PROVIDES(p2, pp, s->name)
1680             {
1681               s2 = pool->solvables + p2;
1682               if (s2->name == s->name && (map[p2] & 1) != 0)
1683                 {
1684                   map[p] = 2;
1685                   break;
1686                 }
1687             }
1688           if (p2)
1689             continue;
1690         }
1691 #endif
1692       if (m != map[p])
1693         {
1694           map[p] = m;
1695           did = 0;
1696         }
1697     }
1698   queue_free(res);
1699   queue_init_clone(res, pkgs);
1700   for (i = 0; i < pkgs->count; i++)
1701     {
1702       m = map[pkgs->elements[i]];
1703       if ((m & 9) == 9)
1704         r = 1;
1705       else if (m & 1)
1706         r = -1;
1707       else
1708         r = 0;
1709       res->elements[i] = r;
1710     }
1711   free(map);
1712 }
1713
1714 void
1715 pool_trivial_installable(Pool *pool, Map *installedmap, Queue *pkgs, Queue *res)
1716 {
1717   pool_trivial_installable_noobsoletesmap(pool, installedmap, pkgs, res, 0);
1718 }
1719
1720 const char *
1721 pool_lookup_str(Pool *pool, Id entry, Id keyname)
1722 {
1723   if (entry == SOLVID_POS && pool->pos.repo)
1724     return repodata_lookup_str(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname);
1725   if (entry <= 0)
1726     return 0;
1727   return solvable_lookup_str(pool->solvables + entry, keyname);
1728 }
1729
1730 Id
1731 pool_lookup_id(Pool *pool, Id entry, Id keyname)
1732 {
1733   if (entry == SOLVID_POS && pool->pos.repo)
1734     {
1735       Repodata *data = pool->pos.repo->repodata + pool->pos.repodataid;
1736       Id id = repodata_lookup_id(data, SOLVID_POS, keyname);
1737       return data->localpool ? repodata_globalize_id(data, id, 1) : id;
1738     }
1739   if (entry <= 0)
1740     return 0;
1741   return solvable_lookup_id(pool->solvables + entry, keyname);
1742 }
1743
1744 unsigned int
1745 pool_lookup_num(Pool *pool, Id entry, Id keyname, unsigned int notfound)
1746 {
1747   if (entry == SOLVID_POS && pool->pos.repo)
1748     {
1749       unsigned int value;
1750       if (repodata_lookup_num(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname, &value))
1751         return value;
1752       return notfound;
1753     }
1754   if (entry <= 0)
1755     return notfound;
1756   return solvable_lookup_num(pool->solvables + entry, keyname, notfound);
1757 }
1758
1759 int
1760 pool_lookup_void(Pool *pool, Id entry, Id keyname)
1761 {
1762   if (entry == SOLVID_POS && pool->pos.repo)
1763     return repodata_lookup_void(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname);
1764   if (entry <= 0)
1765     return 0;
1766   return solvable_lookup_void(pool->solvables + entry, keyname);
1767 }
1768
1769 const unsigned char *
1770 pool_lookup_bin_checksum(Pool *pool, Id entry, Id keyname, Id *typep)
1771 {
1772   if (entry == SOLVID_POS && pool->pos.repo)
1773     return repodata_lookup_bin_checksum(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname, typep);
1774   if (entry <= 0)
1775     return 0;
1776   return solvable_lookup_bin_checksum(pool->solvables + entry, keyname, typep);
1777 }
1778
1779 const char *
1780 pool_lookup_checksum(Pool *pool, Id entry, Id keyname, Id *typep)
1781 {
1782   if (entry == SOLVID_POS && pool->pos.repo)
1783     {
1784       const unsigned char *chk = repodata_lookup_bin_checksum(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname, typep);
1785       return chk ? repodata_chk2str(pool->pos.repo->repodata + pool->pos.repodataid, *typep, chk) : 0;
1786     }
1787   if (entry <= 0)
1788     return 0;
1789   return solvable_lookup_checksum(pool->solvables + entry, keyname, typep);
1790 }
1791
1792 void
1793 pool_add_fileconflicts_deps(Pool *pool, Queue *conflicts)
1794 {
1795   int hadhashes = pool->relhashtbl ? 1 : 0;
1796   Solvable *s;
1797   Id fn, p, q, md5;
1798   Id id;
1799   int i;
1800
1801   if (!conflicts->count)
1802     return;
1803   pool_freewhatprovides(pool);
1804   for (i = 0; i < conflicts->count; i += 5)
1805     {
1806       fn = conflicts->elements[i];
1807       p = conflicts->elements[i + 1];
1808       md5 = conflicts->elements[i + 2];
1809       q = conflicts->elements[i + 3];
1810       id = rel2id(pool, fn, md5, REL_FILECONFLICT, 1);
1811       s = pool->solvables + p;
1812       if (!s->repo)
1813         continue;
1814       s->provides = repo_addid_dep(s->repo, s->provides, id, SOLVABLE_FILEMARKER);
1815       s = pool->solvables + q;
1816       if (!s->repo)
1817         continue;
1818       s->conflicts = repo_addid_dep(s->repo, s->conflicts, id, 0);
1819     }
1820   if (!hadhashes)
1821     pool_freeidhashes(pool);
1822 }
1823
1824 /* EOF */