- solv: fix segfault, add findfastest
[platform/upstream/libsolv.git] / src / pool.c
1 /*
2  * Copyright (c) 2007-2009, Novell Inc.
3  *
4  * This program is licensed under the BSD license, read LICENSE.BSD
5  * for further information
6  */
7
8 /*
9  * pool.c
10  * 
11  * The pool contains information about solvables
12  * stored optimized for memory consumption and fast retrieval.
13  */
14
15 #include <stdio.h>
16 #include <stdlib.h>
17 #include <stdarg.h>
18 #include <unistd.h>
19 #include <string.h>
20
21 #include "pool.h"
22 #include "repo.h"
23 #include "poolid.h"
24 #include "poolid_private.h"
25 #include "poolarch.h"
26 #include "util.h"
27 #include "bitmap.h"
28 #include "evr.h"
29
30 #define SOLVABLE_BLOCK  255
31
32 #define KNOWNID_INITIALIZE
33 #include "knownid.h"
34 #undef KNOWNID_INITIALIZE
35
36 /* create pool */
37 Pool *
38 pool_create(void)
39 {
40   Pool *pool;
41   Solvable *s;
42
43   pool = (Pool *)sat_calloc(1, sizeof(*pool));
44
45   stringpool_init (&pool->ss, initpool_data);
46
47   /* alloc space for RelDep 0 */
48   pool->rels = sat_extend_resize(0, 1, sizeof(Reldep), REL_BLOCK);
49   pool->nrels = 1;
50   memset(pool->rels, 0, sizeof(Reldep));
51
52   /* alloc space for Solvable 0 and system solvable */
53   pool->solvables = sat_extend_resize(0, 2, sizeof(Solvable), SOLVABLE_BLOCK);
54   pool->nsolvables = 2;
55   memset(pool->solvables, 0, 2 * sizeof(Solvable));
56   s = pool->solvables + SYSTEMSOLVABLE;
57   s->name = SYSTEM_SYSTEM;
58   s->arch = ARCH_NOARCH;
59   s->evr = ID_EMPTY;
60
61   queue_init(&pool->vendormap);
62
63   pool->debugmask = SAT_DEBUG_RESULT;   /* FIXME */
64   return pool;
65 }
66
67
68 /* free all the resources of our pool */
69 void
70 pool_free(Pool *pool)
71 {
72   int i;
73
74   pool_freewhatprovides(pool);
75   pool_freeidhashes(pool);
76   repo_freeallrepos(pool, 1);
77   sat_free(pool->id2arch);
78   sat_free(pool->solvables);
79   stringpool_free(&pool->ss);
80   sat_free(pool->rels);
81   queue_free(&pool->vendormap);
82   for (i = 0; i < POOL_TMPSPACEBUF; i++)
83     sat_free(pool->tmpspacebuf[i]);
84   for (i = 0; i < pool->nlanguages; i++)
85     free((char *)pool->languages[i]);
86   sat_free(pool->languages);
87   sat_free(pool->languagecache);
88   sat_free(pool);
89 }
90
91 Id
92 pool_add_solvable(Pool *pool)
93 {
94   pool->solvables = sat_extend(pool->solvables, pool->nsolvables, 1, sizeof(Solvable), SOLVABLE_BLOCK);
95   memset(pool->solvables + pool->nsolvables, 0, sizeof(Solvable));
96   return pool->nsolvables++;
97 }
98
99 Id
100 pool_add_solvable_block(Pool *pool, int count)
101 {
102   Id nsolvables = pool->nsolvables;
103   if (!count)
104     return nsolvables;
105   pool->solvables = sat_extend(pool->solvables, pool->nsolvables, count, sizeof(Solvable), SOLVABLE_BLOCK);
106   memset(pool->solvables + nsolvables, 0, sizeof(Solvable) * count);
107   pool->nsolvables += count;
108   return nsolvables;
109 }
110
111 void
112 pool_free_solvable_block(Pool *pool, Id start, int count, int reuseids)
113 {
114   if (!count)
115     return;
116   if (reuseids && start + count == pool->nsolvables)
117     {
118       /* might want to shrink solvable array */
119       pool->nsolvables = start;
120       return;
121     }
122   memset(pool->solvables + start, 0, sizeof(Solvable) * count);
123 }
124
125
126 void
127 pool_set_installed(Pool *pool, Repo *installed)
128 {
129   if (pool->installed == installed)
130     return;
131   pool->installed = installed;
132   pool_freewhatprovides(pool);
133 }
134
135 static int
136 pool_shrink_whatprovides_sortcmp(const void *ap, const void *bp, void *dp)
137 {
138   int r;
139   Pool *pool = dp;
140   Id oa, ob, *da, *db;
141   oa = pool->whatprovides[*(Id *)ap];
142   ob = pool->whatprovides[*(Id *)bp];
143   if (oa == ob)
144     return *(Id *)ap - *(Id *)bp;
145   if (!oa)
146     return -1;
147   if (!ob)
148     return 1;
149   da = pool->whatprovidesdata + oa;
150   db = pool->whatprovidesdata + ob;
151   while (*db)
152     if ((r = (*da++ - *db++)) != 0)
153       return r;
154   if (*da)
155     return *da;
156   return *(Id *)ap - *(Id *)bp;
157 }
158
159 /*
160  * pool_shrink_whatprovides  - unify whatprovides data
161  *
162  * whatprovides_rel must be empty for this to work!
163  *
164  */
165 static void
166 pool_shrink_whatprovides(Pool *pool)
167 {
168   Id i, id;
169   Id *sorted;
170   Id lastid, *last, *dp, *lp;
171   Offset o;
172   int r;
173
174   if (pool->ss.nstrings < 3)
175     return;
176   sorted = sat_malloc2(pool->ss.nstrings, sizeof(Id));
177   for (id = 0; id < pool->ss.nstrings; id++)
178     sorted[id] = id;
179   sat_sort(sorted + 1, pool->ss.nstrings - 1, sizeof(Id), pool_shrink_whatprovides_sortcmp, pool);
180   last = 0;
181   lastid = 0;
182   for (i = 1; i < pool->ss.nstrings; i++)
183     {
184       id = sorted[i];
185       o = pool->whatprovides[id];
186       if (o == 0 || o == 1)
187         continue;
188       dp = pool->whatprovidesdata + o;
189       if (last)
190         {
191           lp = last;
192           while (*dp)   
193             if (*dp++ != *lp++)
194               {
195                 last = 0;
196                 break;
197               }
198           if (last && *lp)
199             last = 0;
200           if (last)
201             {
202               pool->whatprovides[id] = -lastid;
203               continue;
204             }
205         }
206       last = pool->whatprovidesdata + o;
207       lastid = id;
208     }
209   sat_free(sorted);
210   dp = pool->whatprovidesdata + 2;
211   for (id = 1; id < pool->ss.nstrings; id++)
212     {
213       o = pool->whatprovides[id];
214       if (o == 0 || o == 1)
215         continue;
216       if ((Id)o < 0)
217         {
218           i = -(Id)o;
219           if (i >= id)
220             abort();
221           pool->whatprovides[id] = pool->whatprovides[i];
222           continue;
223         }
224       lp = pool->whatprovidesdata + o;
225       if (lp < dp)
226         abort();
227       pool->whatprovides[id] = dp - pool->whatprovidesdata;
228       while ((*dp++ = *lp++) != 0)
229         ;
230     }
231   o = dp - pool->whatprovidesdata;
232   POOL_DEBUG(SAT_DEBUG_STATS, "shrunk whatprovidesdata from %d to %d\n", pool->whatprovidesdataoff, o);
233   if (pool->whatprovidesdataoff == o)
234     return;
235   r = pool->whatprovidesdataoff - o;
236   pool->whatprovidesdataoff = o;
237   pool->whatprovidesdata = sat_realloc(pool->whatprovidesdata, (o + pool->whatprovidesdataleft) * sizeof(Id));
238   if (r > pool->whatprovidesdataleft)
239     r = pool->whatprovidesdataleft;
240   memset(pool->whatprovidesdata + o, 0, r * sizeof(Id));
241 }
242
243
244 /*
245  * pool_createwhatprovides()
246  * 
247  * create hashes over pool of solvables to ease provide lookups
248  * 
249  */
250 void
251 pool_createwhatprovides(Pool *pool)
252 {
253   int i, num, np, extra;
254   Offset off;
255   Solvable *s;
256   Id id;
257   Offset *idp, n;
258   Offset *whatprovides;
259   Id *whatprovidesdata, *d;
260   Repo *installed = pool->installed;
261   unsigned int now;
262
263   now = sat_timems(0);
264   POOL_DEBUG(SAT_DEBUG_STATS, "number of solvables: %d\n", pool->nsolvables);
265   POOL_DEBUG(SAT_DEBUG_STATS, "number of ids: %d + %d\n", pool->ss.nstrings, pool->nrels);
266
267   pool_freeidhashes(pool);      /* XXX: should not be here! */
268   pool_freewhatprovides(pool);
269   num = pool->ss.nstrings;
270   pool->whatprovides = whatprovides = sat_calloc_block(num, sizeof(Offset), WHATPROVIDES_BLOCK);
271   pool->whatprovides_rel = sat_calloc_block(pool->nrels, sizeof(Offset), WHATPROVIDES_BLOCK);
272
273   /* count providers for each name */
274   for (i = 1; i < pool->nsolvables; i++)
275     {
276       Id *pp;
277       s = pool->solvables + i;
278       if (!s->provides || !s->repo || s->repo->disabled)
279         continue;
280       /* we always need the installed solvable in the whatprovides data,
281          otherwise obsoletes/conflicts on them won't work */
282       if (s->repo != installed && !pool_installable(pool, s))
283         continue;
284       pp = s->repo->idarraydata + s->provides;
285       while ((id = *pp++) != ID_NULL)
286         {
287           while (ISRELDEP(id))
288             {
289               Reldep *rd = GETRELDEP(pool, id);
290               id = rd->name;
291             }
292           whatprovides[id]++;          /* inc count of providers */
293         }
294     }
295
296   off = 2;      /* first entry is undef, second is empty list */
297   idp = whatprovides;
298   np = 0;                              /* number of names provided */
299   for (i = 0; i < num; i++, idp++)
300     {
301       n = *idp;
302       if (!n)                          /* no providers */
303         continue;
304       *idp = off;                      /* move from counts to offsets into whatprovidesdata */
305       off += n + 1;                    /* make space for all providers + terminating ID_NULL */
306       np++;                            /* inc # of provider 'slots' */
307     }
308
309   POOL_DEBUG(SAT_DEBUG_STATS, "provide ids: %d\n", np);
310
311   /* reserve some space for relation data */
312   extra = 2 * pool->nrels;
313   if (extra < 256)
314     extra = 256;
315
316   POOL_DEBUG(SAT_DEBUG_STATS, "provide space needed: %d + %d\n", off, extra);
317
318   /* alloc space for all providers + extra */
319   whatprovidesdata = sat_calloc(off + extra, sizeof(Id));
320
321   /* now fill data for all provides */
322   for (i = 1; i < pool->nsolvables; i++)
323     {
324       Id *pp;
325       s = pool->solvables + i;
326       if (!s->provides || !s->repo || s->repo->disabled)
327         continue;
328       if (s->repo != installed && !pool_installable(pool, s))
329         continue;
330
331       /* for all provides of this solvable */
332       pp = s->repo->idarraydata + s->provides;
333       while ((id = *pp++) != 0)
334         {
335           while (ISRELDEP(id))
336             {
337               Reldep *rd = GETRELDEP(pool, id);
338               id = rd->name;
339             }
340           d = whatprovidesdata + whatprovides[id];   /* offset into whatprovidesdata */
341           if (*d)
342             {
343               d++;
344               while (*d)               /* find free slot */
345                 d++;
346               if (d[-1] == i)          /* solvable already tacked at end ? */
347                 continue;              /* Y: skip, on to next provides */
348             }
349           *d = i;                      /* put solvable Id into data */
350         }
351     }
352   pool->whatprovidesdata = whatprovidesdata;
353   pool->whatprovidesdataoff = off;
354   pool->whatprovidesdataleft = extra;
355   pool_shrink_whatprovides(pool);
356   POOL_DEBUG(SAT_DEBUG_STATS, "whatprovides memory used: %d K id array, %d K data\n", (pool->ss.nstrings + pool->nrels + WHATPROVIDES_BLOCK) / (int)(1024/sizeof(Id)), (pool->whatprovidesdataoff + pool->whatprovidesdataleft) / (int)(1024/sizeof(Id)));
357   POOL_DEBUG(SAT_DEBUG_STATS, "createwhatprovides took %d ms\n", sat_timems(now));
358 }
359
360 /*
361  * free all of our whatprovides data
362  * be careful, everything internalized with pool_queuetowhatprovides is
363  * gone, too
364  */
365 void
366 pool_freewhatprovides(Pool *pool)
367 {
368   pool->whatprovides = sat_free(pool->whatprovides);
369   pool->whatprovides_rel = sat_free(pool->whatprovides_rel);
370   pool->whatprovidesdata = sat_free(pool->whatprovidesdata);
371   pool->whatprovidesdataoff = 0;
372   pool->whatprovidesdataleft = 0;
373 }
374
375
376 /******************************************************************************/
377
378 /*
379  * pool_queuetowhatprovides  - add queue contents to whatprovidesdata
380  * 
381  * on-demand filling of provider information
382  * move queue data into whatprovidesdata
383  * q: queue of Ids
384  * returns: Offset into whatprovides
385  *
386  */
387 Id
388 pool_queuetowhatprovides(Pool *pool, Queue *q)
389 {
390   Offset off;
391   int count = q->count;
392
393   if (count == 0)                      /* queue empty -> 1 */
394     return 1;
395
396   /* extend whatprovidesdata if needed, +1 for ID_NULL-termination */
397   if (pool->whatprovidesdataleft < count + 1)
398     {
399       POOL_DEBUG(SAT_DEBUG_STATS, "growing provides hash data...\n");
400       pool->whatprovidesdata = sat_realloc(pool->whatprovidesdata, (pool->whatprovidesdataoff + count + 4096) * sizeof(Id));
401       pool->whatprovidesdataleft = count + 4096;
402     }
403
404   /* copy queue to next free slot */
405   off = pool->whatprovidesdataoff;
406   memcpy(pool->whatprovidesdata + pool->whatprovidesdataoff, q->elements, count * sizeof(Id));
407
408   /* adapt count and ID_NULL-terminate */
409   pool->whatprovidesdataoff += count;
410   pool->whatprovidesdata[pool->whatprovidesdataoff++] = ID_NULL;
411   pool->whatprovidesdataleft -= count + 1;
412
413   return (Id)off;
414 }
415
416
417 /*************************************************************************/
418
419 /* check if a package's nevr matches a dependency */
420
421 int
422 pool_match_nevr_rel(Pool *pool, Solvable *s, Id d)
423 {
424   Reldep *rd = GETRELDEP(pool, d);
425   Id name = rd->name;
426   Id evr = rd->evr;
427   int flags = rd->flags;
428
429   if (flags > 7)
430     {
431       switch (flags)
432         {
433         case REL_ARCH:
434           if (s->arch != evr)
435             return 0;
436           return pool_match_nevr(pool, s, name);
437         case REL_OR:
438           if (pool_match_nevr(pool, s, name))
439             return 1;
440           return pool_match_nevr(pool, s, evr);
441         case REL_AND:
442         case REL_WITH:
443           if (!pool_match_nevr(pool, s, name))
444             return 0;
445           return pool_match_nevr(pool, s, evr);
446         default:
447           return 0;
448         }
449     }
450   if (!pool_match_nevr(pool, s, name))
451     return 0;
452   if (evr == s->evr)
453     return flags & 2 ? 1 : 0;
454   if (!flags)
455     return 0;
456   if (flags == 7)
457     return 1;
458   if (flags != 2 && flags != 5)
459     flags ^= 5;
460 #ifdef DEBIAN_SEMANTICS
461   if ((flags & (1 << (1 + evrcmp(pool, s->evr, evr, EVRCMP_COMPARE)))) != 0)
462     return 1;
463 #else
464   if ((flags & (1 << (1 + evrcmp(pool, s->evr, evr, EVRCMP_MATCH_RELEASE)))) != 0)
465     return 1;
466 #endif
467   return 0;
468 }
469
470 /* match two dependencies */
471
472 int
473 pool_match_dep(Pool *pool, Id d1, Id d2)
474 {
475   Reldep *rd1, *rd2;
476   int pflags, flags;
477
478   if (d1 == d2)
479     return 1;
480   if (!ISRELDEP(d1))
481     {
482       if (!ISRELDEP(d2))
483         return 0;
484       rd2 = GETRELDEP(pool, d2);
485       return pool_match_dep(pool, d1, rd2->name);
486     }
487   rd1 = GETRELDEP(pool, d1);
488   if (!ISRELDEP(d2))
489     {
490       return pool_match_dep(pool, rd1->name, d2);
491     }
492   rd2 = GETRELDEP(pool, d2);
493   if (!pool_match_dep(pool, rd1->name, rd2->name))
494     return 0;
495   pflags = rd1->flags;
496   flags = rd2->flags;
497   if (!pflags || !flags || pflags >= 8 || flags >= 8)
498     return 0;
499   if (flags == 7 || pflags == 7)
500     return 1;
501   if ((pflags & flags & 5) != 0)
502     return 1;
503   if (rd1->evr == rd2->evr)
504     {
505       if ((pflags & flags & 2) != 0)
506         return 1;
507     }
508   else
509     {
510       int f = flags == 5 ? 5 : flags == 2 ? pflags : (flags ^ 5) & (pflags | 5);
511 #ifdef DEBIAN_SEMANTICS
512       if ((f & (1 << (1 + evrcmp(pool, rd1->evr, rd2->evr, EVRCMP_COMPARE)))) != 0)
513         return 1;
514 #else
515       if ((f & (1 << (1 + evrcmp(pool, rd1->evr, rd2->evr, EVRCMP_MATCH_RELEASE)))) != 0)
516         return 1;
517 #endif
518     }
519   return 0;
520 }
521
522 /*
523  * addrelproviders
524  * 
525  * add packages fulfilling the relation to whatprovides array
526  * no exact providers, do range match
527  * 
528  */
529
530 Id
531 pool_addrelproviders(Pool *pool, Id d)
532 {
533   Reldep *rd = GETRELDEP(pool, d);
534   Reldep *prd;
535   Queue plist;
536   Id buf[16];
537   Id name = rd->name;
538   Id evr = rd->evr;
539   int flags = rd->flags;
540   Id pid, *pidp;
541   Id p, wp, *pp, *pp2, *pp3;
542
543   d = GETRELID(d);
544   queue_init_buffer(&plist, buf, sizeof(buf)/sizeof(*buf));
545   switch (flags)
546     {
547     case REL_AND:
548     case REL_WITH:
549       pp = pool_whatprovides_ptr(pool, name);
550       pp2 = pool_whatprovides_ptr(pool, evr);
551       while ((p = *pp++) != 0)
552         {
553           for (pp3 = pp2; *pp3;)
554             if (*pp3++ == p)
555               {
556                 queue_push(&plist, p);
557                 break;
558               }
559         }
560       break;
561     case REL_OR:
562       pp = pool_whatprovides_ptr(pool, name);
563       while ((p = *pp++) != 0)
564         queue_push(&plist, p);
565       pp = pool_whatprovides_ptr(pool, evr);
566       while ((p = *pp++) != 0)
567         queue_pushunique(&plist, p);
568       break;
569     case REL_NAMESPACE:
570       if (name == NAMESPACE_OTHERPROVIDERS)
571         {
572           wp = pool_whatprovides(pool, evr);
573           pool->whatprovides_rel[d] = wp;
574           return wp;
575         }
576       if (pool->nscallback)
577         {
578           /* ask callback which packages provide the dependency
579            * 0:  none
580            * 1:  the system (aka SYSTEMSOLVABLE)
581            * >1: a set of packages, stored as offset on whatprovidesdata
582            */
583           p = pool->nscallback(pool, pool->nscallbackdata, name, evr);
584           if (p > 1)
585             {
586               queue_free(&plist);
587               pool->whatprovides_rel[d] = p;
588               return p;
589             }
590           if (p == 1)
591             queue_push(&plist, SYSTEMSOLVABLE);
592         }
593       break;
594     case REL_ARCH:
595       /* small hack: make it possible to match <pkg>.src
596        * we have to iterate over the solvables as src packages do not
597        * provide anything, thus they are not indexed in our
598        * whatprovides hash */
599       if (evr == ARCH_SRC)
600         {
601           Solvable *s;
602           for (p = 1, s = pool->solvables + p; p < pool->nsolvables; p++, s++)
603             {
604               if (s->arch != ARCH_SRC && s->arch != ARCH_NOSRC)
605                 continue;
606               if (pool_match_nevr(pool, s, name))
607                 queue_push(&plist, p);
608             }
609           break;
610         }
611       wp = pool_whatprovides(pool, name);
612       pp = pool->whatprovidesdata + wp;
613       while ((p = *pp++) != 0)
614         {
615           Solvable *s = pool->solvables + p;
616           if (s->arch == evr)
617             queue_push(&plist, p);
618           else
619             wp = 0;
620         }
621       if (wp)
622         {
623           /* all solvables match, no need to create a new list */
624           pool->whatprovides_rel[d] = wp;
625           return wp;
626         }
627       break;
628     case REL_FILECONFLICT:
629       pp = pool_whatprovides_ptr(pool, name);
630       while ((p = *pp++) != 0)
631         {
632           Id origd = MAKERELDEP(d);
633           Solvable *s = pool->solvables + p;
634           if (!s->provides)
635             continue;
636           pidp = s->repo->idarraydata + s->provides;
637           while ((pid = *pidp++) != 0)
638             if (pid == origd)
639               break;
640           if (pid)
641             queue_push(&plist, p);
642         }
643       break;
644     default:
645       break;
646     }
647
648   /* convert to whatprovides id */
649 #if 0
650   POOL_DEBUG(SAT_DEBUG_STATS, "addrelproviders: what provides %s?\n", dep2str(pool, name));
651 #endif
652   if (flags && flags < 8)
653     {
654       pp = pool_whatprovides_ptr(pool, name);
655       while (ISRELDEP(name))
656         {
657           rd = GETRELDEP(pool, name);
658           name = rd->name;
659         }
660       while ((p = *pp++) != 0)
661         {
662           Solvable *s = pool->solvables + p;
663 #if 0
664           POOL_DEBUG(DEBUG_1, "addrelproviders: checking package %s\n", id2str(pool, s->name));
665 #endif
666           if (!s->provides)
667             {
668               /* no provides - check nevr */
669               if (pool_match_nevr_rel(pool, s, MAKERELDEP(d)))
670                 queue_push(&plist, p);
671               continue;
672             }
673           /* solvable p provides name in some rels */
674           pidp = s->repo->idarraydata + s->provides;
675           while ((pid = *pidp++) != 0)
676             {
677               int pflags;
678               Id pevr;
679
680               if (pid == name)
681                 {
682 #ifdef DEBIAN_SEMANTICS
683                   continue;             /* unversioned provides can
684                                          * never match versioned deps */
685 #else
686                   break;                /* yes, provides all versions */
687 #endif
688                 }
689               if (!ISRELDEP(pid))
690                 continue;               /* wrong provides name */
691               prd = GETRELDEP(pool, pid);
692               if (prd->name != name)
693                 continue;               /* wrong provides name */
694               /* right package, both deps are rels */
695               pflags = prd->flags;
696               if (!pflags)
697                 continue;
698               if (flags == 7 || pflags == 7)
699                 break; /* included */
700               if ((pflags & flags & 5) != 0)
701                 break; /* same direction, match */
702               pevr = prd->evr;
703               if (pevr == evr)
704                 {
705                   if ((pflags & flags & 2) != 0)
706                     break; /* both have =, match */
707                 }
708               else
709                 {
710                   int f = flags == 5 ? 5 : flags == 2 ? pflags : (flags ^ 5) & (pflags | 5);
711 #ifdef DEBIAN_SEMANTICS
712                   if ((f & (1 << (1 + evrcmp(pool, pevr, evr, EVRCMP_COMPARE)))) != 0)
713                     break;
714 #else
715                   if ((f & (1 << (1 + evrcmp(pool, pevr, evr, EVRCMP_MATCH_RELEASE)))) != 0)
716                     break;
717 #endif
718                 }
719             }
720           if (!pid)
721             continue;   /* no rel match */
722           queue_push(&plist, p);
723         }
724       /* make our system solvable provide all unknown rpmlib() stuff */
725       if (plist.count == 0 && !strncmp(id2str(pool, name), "rpmlib(", 7))
726         queue_push(&plist, SYSTEMSOLVABLE);
727     }
728   /* add providers to whatprovides */
729 #if 0
730   POOL_DEBUG(SAT_DEBUG_STATS, "addrelproviders: adding %d packages to %d\n", plist.count, d);
731 #endif
732   pool->whatprovides_rel[d] = pool_queuetowhatprovides(pool, &plist);
733   queue_free(&plist);
734
735   return pool->whatprovides_rel[d];
736 }
737
738 /*************************************************************************/
739
740 void
741 pool_debug(Pool *pool, int type, const char *format, ...)
742 {
743   va_list args;
744   char buf[1024];
745
746   if ((type & (SAT_FATAL|SAT_ERROR)) == 0)
747     {
748       if ((pool->debugmask & type) == 0)
749         return;
750     }
751   va_start(args, format);
752   if (!pool->debugcallback)
753     {
754       if ((type & (SAT_FATAL|SAT_ERROR)) == 0 && !(pool->debugmask & SAT_DEBUG_TO_STDERR))
755         vprintf(format, args);
756       else
757         vfprintf(stderr, format, args);
758       return;
759     }
760   vsnprintf(buf, sizeof(buf), format, args);
761   pool->debugcallback(pool, pool->debugcallbackdata, type, buf);
762 }
763
764 void
765 pool_setdebuglevel(Pool *pool, int level)
766 {
767   int mask = SAT_DEBUG_RESULT;
768   if (level > 0)
769     mask |= SAT_DEBUG_STATS|SAT_DEBUG_ANALYZE|SAT_DEBUG_UNSOLVABLE|SAT_DEBUG_SOLVER|SAT_DEBUG_TRANSACTION;
770   if (level > 1)
771     mask |= SAT_DEBUG_JOB|SAT_DEBUG_SOLUTIONS|SAT_DEBUG_POLICY;
772   if (level > 2)
773     mask |= SAT_DEBUG_PROPAGATE;
774   if (level > 3)
775     mask |= SAT_DEBUG_RULE_CREATION;
776   if (level > 4)
777     mask |= SAT_DEBUG_SCHUBI;
778   mask |= pool->debugmask & SAT_DEBUG_TO_STDERR;        /* keep bit */
779   pool->debugmask = mask;
780 }
781
782 /*************************************************************************/
783
784 struct searchfiles {
785   Id *ids;
786   char **dirs;
787   char **names;
788   int nfiles;
789   Map seen;
790 };
791
792 #define SEARCHFILES_BLOCK 127
793
794 static void
795 pool_addfileprovides_dep(Pool *pool, Id *ida, struct searchfiles *sf, struct searchfiles *isf)
796 {
797   Id dep, sid;
798   const char *s, *sr;
799   struct searchfiles *csf;
800
801   while ((dep = *ida++) != 0)
802     {
803       csf = sf;
804       while (ISRELDEP(dep))
805         {
806           Reldep *rd;
807           sid = pool->ss.nstrings + GETRELID(dep);
808           if (MAPTST(&csf->seen, sid))
809             {
810               dep = 0;
811               break;
812             }
813           MAPSET(&csf->seen, sid);
814           rd = GETRELDEP(pool, dep);
815           if (rd->flags < 8)
816             dep = rd->name;
817           else if (rd->flags == REL_NAMESPACE)
818             {
819               if (rd->name == NAMESPACE_INSTALLED || rd->name == NAMESPACE_SPLITPROVIDES)
820                 {
821                   csf = isf;
822                   if (!csf || MAPTST(&csf->seen, sid))
823                     {
824                       dep = 0;
825                       break;
826                     }
827                   MAPSET(&csf->seen, sid);
828                 }
829               dep = rd->evr;
830             }
831           else if (rd->flags == REL_FILECONFLICT)
832             {
833               dep = 0;
834               break;
835             }
836           else
837             {
838               Id ids[2];
839               ids[0] = rd->name;
840               ids[1] = 0;
841               pool_addfileprovides_dep(pool, ids, csf, isf);
842               dep = rd->evr;
843             }
844         }
845       if (!dep)
846         continue;
847       if (MAPTST(&csf->seen, dep))
848         continue;
849       MAPSET(&csf->seen, dep);
850       s = id2str(pool, dep);
851       if (*s != '/')
852         continue;
853       csf->ids = sat_extend(csf->ids, csf->nfiles, 1, sizeof(Id), SEARCHFILES_BLOCK);
854       csf->dirs = sat_extend(csf->dirs, csf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
855       csf->names = sat_extend(csf->names, csf->nfiles, 1, sizeof(const char *), SEARCHFILES_BLOCK);
856       csf->ids[csf->nfiles] = dep;
857       sr = strrchr(s, '/');
858       csf->names[csf->nfiles] = strdup(sr + 1);
859       csf->dirs[csf->nfiles] = sat_malloc(sr - s + 1);
860       if (sr != s)
861         strncpy(csf->dirs[csf->nfiles], s, sr - s);
862       csf->dirs[csf->nfiles][sr - s] = 0;
863       csf->nfiles++;
864     }
865 }
866
867 struct addfileprovides_cbdata {
868   int nfiles;
869   Id *ids;
870   char **dirs;
871   char **names;
872
873   Repodata *olddata;
874   Id *dids;
875   Map useddirs;
876 };
877
878 static int
879 addfileprovides_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *value)
880 {
881   struct addfileprovides_cbdata *cbd = cbdata;
882   int i;
883
884   if (data != cbd->olddata)
885     {
886       map_free(&cbd->useddirs);
887       map_init(&cbd->useddirs, data->dirpool.ndirs);
888       for (i = 0; i < cbd->nfiles; i++)
889         {
890           Id did = repodata_str2dir(data, cbd->dirs[i], 0);
891           cbd->dids[i] = did;
892           if (did)
893             MAPSET(&cbd->useddirs, did);
894         }
895       cbd->olddata = data;
896     }
897   if (!MAPTST(&cbd->useddirs, value->id))
898     return 0;
899   for (i = 0; i < cbd->nfiles; i++)
900     {
901       if (cbd->dids[i] != value->id)
902         continue;
903       if (!strcmp(cbd->names[i], value->str))
904         break;
905     }
906   if (i == cbd->nfiles)
907     return 0;
908   s->provides = repo_addid_dep(s->repo, s->provides, cbd->ids[i], SOLVABLE_FILEMARKER);
909   return 0;
910 }
911
912 static int
913 addfileprovides_setid_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *kv)
914 {
915   Map *provideids = cbdata;
916   if (key->type != REPOKEY_TYPE_IDARRAY)
917     return 0;
918   MAPSET(provideids, kv->id);
919   return kv->eof ? SEARCH_NEXT_SOLVABLE : 0;
920 }
921
922
923 static void
924 pool_addfileprovides_search(Pool *pool, struct addfileprovides_cbdata *cbd, struct searchfiles *sf, Repo *repoonly)
925 {
926   Id p, start, end;
927   Solvable *s;
928   Repodata *data = 0, *nextdata;
929   Repo *repo, *oldrepo = 0;
930   int dataincludes = 0;
931   int i, j, flags;
932   Map providedids;
933   Repodata *ffldata = 0;
934
935   cbd->nfiles = sf->nfiles;
936   cbd->ids = sf->ids;
937   cbd->dirs = sf->dirs;
938   cbd->names = sf->names;
939   cbd->olddata = 0;
940   cbd->dids = sat_realloc2(cbd->dids, sf->nfiles, sizeof(Id));
941   if (repoonly)
942     {
943       start = repoonly->start;
944       end = repoonly->end;
945     }
946   else
947     {
948       start = 2;        /* skip system solvable */
949       end = pool->nsolvables;
950     }
951   flags = 0;
952   map_init(&providedids, pool->ss.nstrings);
953   for (p = start, s = pool->solvables + p; p < end; p++, s++)
954     {
955       repo = s->repo;
956       if (!repo || (repoonly && repo != repoonly))
957         continue;
958       /* check if p is in (oldrepo,data) */
959       if (repo != oldrepo || (data && p >= data->end))
960         {
961           data = 0;
962           oldrepo = 0;
963         }
964       if (oldrepo == 0)
965         {
966           /* nope, find new repo/repodata */
967           /* if we don't find a match, set data to the next repodata */
968           nextdata = 0;
969           for (i = 0, data = repo->repodata; i < repo->nrepodata; i++, data++)
970             {
971               if (p >= data->end)
972                 continue;
973               if (data->state != REPODATA_AVAILABLE)
974                 continue;
975               for (j = 1; j < data->nkeys; j++)
976                 if (data->keys[j].name == REPOSITORY_ADDEDFILEPROVIDES && data->keys[j].type == REPOKEY_TYPE_IDARRAY)
977                   break;
978               if (j == data->nkeys)
979                 continue;
980               /* great, this repodata contains addedfileprovides */
981               if (!nextdata || nextdata->start > data->start)
982                 nextdata = data;
983               if (p >= data->start)
984                 break;
985             }
986           if (i == repo->nrepodata)
987             data = nextdata;    /* no direct hit, use next repodata */
988           if (data)
989             {
990               map_empty(&providedids);
991               repodata_search(data, SOLVID_META, REPOSITORY_ADDEDFILEPROVIDES, 0, addfileprovides_setid_cb, &providedids);
992               for (i = 0; i < cbd->nfiles; i++)
993                 if (!MAPTST(&providedids, cbd->ids[i]))
994                   break;
995               dataincludes = i == cbd->nfiles;
996             }
997           oldrepo = repo;
998         }
999       if (data && p >= data->start && dataincludes)
1000         continue;
1001       if (ffldata == 0 || p < ffldata->start || p >= ffldata->end)
1002         {
1003           for (i = 0, ffldata = repo->repodata; i < repo->nrepodata; i++, ffldata++)
1004             if (p >= ffldata->start && p < ffldata->end)
1005               break;
1006           if (i == repo->nrepodata)
1007             ffldata = 0;
1008           flags = 0;
1009           if (ffldata)
1010             {
1011               for (i = 0; i < cbd->nfiles; i++)
1012                 {
1013                   if (data && p >= data->start && MAPTST(&providedids, cbd->ids[i]))
1014                     continue;
1015                   if (!repodata_filelistfilter_matches(ffldata, id2str(pool, cbd->ids[i])))
1016                     {
1017   #if 0
1018                       printf("Need the complete filelist in repo %s because of %s\n", repo->name, id2str(pool, cbd->ids[i]));
1019   #endif
1020                       flags = SEARCH_COMPLETE_FILELIST;
1021                       break;
1022                     }
1023                 }
1024             }
1025         }
1026       repo_search(repo, p, SOLVABLE_FILELIST, 0, flags, addfileprovides_cb, cbd);
1027     }
1028   map_free(&providedids);
1029 }
1030
1031 void
1032 pool_addfileprovides_ids(Pool *pool, Repo *installed, Id **idp)
1033 {
1034   Solvable *s;
1035   Repo *repo;
1036   struct searchfiles sf, isf, *isfp;
1037   struct addfileprovides_cbdata cbd;
1038   int i;
1039   unsigned int now;
1040
1041   now = sat_timems(0);
1042   memset(&sf, 0, sizeof(sf));
1043   map_init(&sf.seen, pool->ss.nstrings + pool->nrels);
1044   memset(&isf, 0, sizeof(isf));
1045   map_init(&isf.seen, pool->ss.nstrings + pool->nrels);
1046
1047   isfp = installed ? &isf : 0;
1048   for (i = 1, s = pool->solvables + i; i < pool->nsolvables; i++, s++)
1049     {
1050       repo = s->repo;
1051       if (!repo)
1052         continue;
1053       if (s->obsoletes)
1054         pool_addfileprovides_dep(pool, repo->idarraydata + s->obsoletes, &sf, isfp);
1055       if (s->conflicts)
1056         pool_addfileprovides_dep(pool, repo->idarraydata + s->conflicts, &sf, isfp);
1057       if (s->requires)
1058         pool_addfileprovides_dep(pool, repo->idarraydata + s->requires, &sf, isfp);
1059       if (s->recommends)
1060         pool_addfileprovides_dep(pool, repo->idarraydata + s->recommends, &sf, isfp);
1061       if (s->suggests)
1062         pool_addfileprovides_dep(pool, repo->idarraydata + s->suggests, &sf, isfp);
1063       if (s->supplements)
1064         pool_addfileprovides_dep(pool, repo->idarraydata + s->supplements, &sf, isfp);
1065       if (s->enhances)
1066         pool_addfileprovides_dep(pool, repo->idarraydata + s->enhances, &sf, isfp);
1067     }
1068   map_free(&sf.seen);
1069   map_free(&isf.seen);
1070   POOL_DEBUG(SAT_DEBUG_STATS, "found %d file dependencies, %d installed file dependencies\n", sf.nfiles, isf.nfiles);
1071   cbd.dids = 0;
1072   map_init(&cbd.useddirs, 1);
1073   if (idp)
1074     *idp = 0;
1075   if (sf.nfiles)
1076     {
1077 #if 0
1078       for (i = 0; i < sf.nfiles; i++)
1079         POOL_DEBUG(SAT_DEBUG_STATS, "looking up %s in filelist\n", id2str(pool, sf.ids[i]));
1080 #endif
1081       pool_addfileprovides_search(pool, &cbd, &sf, 0);
1082       if (idp)
1083         {
1084           sf.ids = sat_extend(sf.ids, sf.nfiles, 1, sizeof(Id), SEARCHFILES_BLOCK);
1085           sf.ids[sf.nfiles] = 0;
1086           *idp = sf.ids;
1087           sf.ids = 0;
1088         }
1089       sat_free(sf.ids);
1090       for (i = 0; i < sf.nfiles; i++)
1091         {
1092           sat_free(sf.dirs[i]);
1093           sat_free(sf.names[i]);
1094         }
1095       sat_free(sf.dirs);
1096       sat_free(sf.names);
1097     }
1098   if (isf.nfiles)
1099     {
1100 #if 0
1101       for (i = 0; i < isf.nfiles; i++)
1102         POOL_DEBUG(SAT_DEBUG_STATS, "looking up %s in installed filelist\n", id2str(pool, isf.ids[i]));
1103 #endif
1104       if (installed)
1105         pool_addfileprovides_search(pool, &cbd, &isf, installed);
1106       sat_free(isf.ids);
1107       for (i = 0; i < isf.nfiles; i++)
1108         {
1109           sat_free(isf.dirs[i]);
1110           sat_free(isf.names[i]);
1111         }
1112       sat_free(isf.dirs);
1113       sat_free(isf.names);
1114     }
1115   map_free(&cbd.useddirs);
1116   sat_free(cbd.dids);
1117   pool_freewhatprovides(pool);  /* as we have added provides */
1118   POOL_DEBUG(SAT_DEBUG_STATS, "addfileprovides took %d ms\n", sat_timems(now));
1119 }
1120
1121 void
1122 pool_addfileprovides(Pool *pool)
1123 {
1124   pool_addfileprovides_ids(pool, pool->installed, 0);
1125 }
1126
1127 void
1128 pool_search(Pool *pool, Id p, Id key, const char *match, int flags, int (*callback)(void *cbdata, Solvable *s, struct _Repodata *data, struct _Repokey *key, struct _KeyValue *kv), void *cbdata)
1129 {
1130   if (p)
1131     {
1132       if (pool->solvables[p].repo)
1133         repo_search(pool->solvables[p].repo, p, key, match, flags, callback, cbdata);
1134       return;
1135     }
1136   /* FIXME: obey callback return value! */
1137   for (p = 1; p < pool->nsolvables; p++)
1138     if (pool->solvables[p].repo)
1139       repo_search(pool->solvables[p].repo, p, key, match, flags, callback, cbdata);
1140 }
1141
1142 void
1143 pool_clear_pos(Pool *pool)
1144 {
1145   memset(&pool->pos, 0, sizeof(pool->pos));
1146 }
1147
1148
1149 void
1150 pool_set_languages(Pool *pool, const char **languages, int nlanguages)
1151 {
1152   int i;
1153
1154   pool->languagecache = sat_free(pool->languagecache);
1155   pool->languagecacheother = 0;
1156   if (pool->nlanguages)
1157     {
1158       for (i = 0; i < pool->nlanguages; i++)
1159         free((char *)pool->languages[i]);
1160       free(pool->languages);
1161     }
1162   pool->nlanguages = nlanguages;
1163   if (!nlanguages)
1164     return;
1165   pool->languages = sat_calloc(nlanguages, sizeof(const char **));
1166   for (i = 0; i < pool->nlanguages; i++)
1167     pool->languages[i] = strdup(languages[i]);
1168 }
1169
1170 Id
1171 pool_id2langid(Pool *pool, Id id, const char *lang, int create)
1172 {
1173   const char *n;
1174   char buf[256], *p;
1175   int l;
1176
1177   if (!lang)
1178     return id;
1179   n = id2str(pool, id);
1180   l = strlen(n) + strlen(lang) + 2;
1181   if (l > sizeof(buf))
1182     p = sat_malloc(strlen(n) + strlen(lang) + 2);
1183   else
1184     p = buf;
1185   sprintf(p, "%s:%s", n, lang);
1186   id = str2id(pool, p, create);
1187   if (p != buf)
1188     free(p);
1189   return id;
1190 }
1191
1192 char *
1193 pool_alloctmpspace(Pool *pool, int len)
1194 {
1195   int n = pool->tmpspacen;
1196   if (!len)
1197     return 0;
1198   if (len > pool->tmpspacelen[n])
1199     {
1200       pool->tmpspacebuf[n] = sat_realloc(pool->tmpspacebuf[n], len + 32);
1201       pool->tmpspacelen[n] = len + 32;
1202     }
1203   pool->tmpspacen = (n + 1) % POOL_TMPSPACEBUF;
1204   return pool->tmpspacebuf[n];
1205 }
1206
1207 char *
1208 pool_tmpjoin(Pool *pool, const char *str1, const char *str2, const char *str3)
1209 {
1210   int l1, l2, l3;
1211   char *s, *str;
1212   l1 = str1 ? strlen(str1) : 0;
1213   l2 = str2 ? strlen(str2) : 0;
1214   l3 = str3 ? strlen(str3) : 0;
1215   s = str = pool_alloctmpspace(pool, l1 + l2 + l3 + 1);
1216   if (l1)
1217     {
1218       strcpy(s, str1);
1219       s += l1;
1220     }
1221   if (l2)
1222     {
1223       strcpy(s, str2);
1224       s += l2;
1225     }
1226   if (l3)
1227     {
1228       strcpy(s, str3);
1229       s += l3;
1230     }
1231   *s = 0;
1232   return str;
1233 }
1234
1235
1236 /*******************************************************************/
1237
1238 struct mptree {
1239   Id sibling;
1240   Id child;
1241   const char *comp;
1242   int compl;
1243   Id mountpoint;
1244 };
1245
1246 struct ducbdata {
1247   DUChanges *mps;
1248   struct mptree *mptree;
1249   int addsub;
1250   int hasdu;
1251
1252   Id *dirmap;
1253   int nmap;
1254   Repodata *olddata;
1255 };
1256
1257
1258 static int
1259 solver_fill_DU_cb(void *cbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *value)
1260 {
1261   struct ducbdata *cbd = cbdata;
1262   Id mp;
1263
1264   if (data != cbd->olddata)
1265     {
1266       Id dn, mp, comp, *dirmap, *dirs;
1267       int i, compl;
1268       const char *compstr;
1269       struct mptree *mptree;
1270
1271       /* create map from dir to mptree */
1272       cbd->dirmap = sat_free(cbd->dirmap);
1273       cbd->nmap = 0;
1274       dirmap = sat_calloc(data->dirpool.ndirs, sizeof(Id));
1275       mptree = cbd->mptree;
1276       mp = 0;
1277       for (dn = 2, dirs = data->dirpool.dirs + dn; dn < data->dirpool.ndirs; dn++)
1278         {
1279           comp = *dirs++;
1280           if (comp <= 0)
1281             {
1282               mp = dirmap[-comp];
1283               continue;
1284             }
1285           if (mp < 0)
1286             {
1287               /* unconnected */
1288               dirmap[dn] = mp;
1289               continue;
1290             }
1291           if (!mptree[mp].child)
1292             {
1293               dirmap[dn] = -mp;
1294               continue;
1295             }
1296           if (data->localpool)
1297             compstr = stringpool_id2str(&data->spool, comp);
1298           else
1299             compstr = id2str(data->repo->pool, comp);
1300           compl = strlen(compstr);
1301           for (i = mptree[mp].child; i; i = mptree[i].sibling)
1302             if (mptree[i].compl == compl && !strncmp(mptree[i].comp, compstr, compl))
1303               break;
1304           dirmap[dn] = i ? i : -mp;
1305         }
1306       /* change dirmap to point to mountpoint instead of mptree */
1307       for (dn = 0; dn < data->dirpool.ndirs; dn++)
1308         {
1309           mp = dirmap[dn];
1310           dirmap[dn] = mptree[mp > 0 ? mp : -mp].mountpoint;
1311         }
1312       cbd->dirmap = dirmap;
1313       cbd->nmap = data->dirpool.ndirs;
1314       cbd->olddata = data;
1315     }
1316   cbd->hasdu = 1;
1317   if (value->id < 0 || value->id >= cbd->nmap)
1318     return 0;
1319   mp = cbd->dirmap[value->id];
1320   if (mp < 0)
1321     return 0;
1322   if (cbd->addsub > 0)
1323     {
1324       cbd->mps[mp].kbytes += value->num;
1325       cbd->mps[mp].files += value->num2;
1326     }
1327   else
1328     {
1329       cbd->mps[mp].kbytes -= value->num;
1330       cbd->mps[mp].files -= value->num2;
1331     }
1332   return 0;
1333 }
1334
1335 static void
1336 propagate_mountpoints(struct mptree *mptree, int pos, Id mountpoint)
1337 {
1338   int i;
1339   if (mptree[pos].mountpoint == -1)
1340     mptree[pos].mountpoint = mountpoint;
1341   else
1342     mountpoint = mptree[pos].mountpoint;
1343   for (i = mptree[pos].child; i; i = mptree[i].sibling)
1344     propagate_mountpoints(mptree, i, mountpoint);
1345 }
1346
1347 #define MPTREE_BLOCK 15
1348
1349 void
1350 pool_calc_duchanges(Pool *pool, Map *installedmap, DUChanges *mps, int nmps)
1351 {
1352   char *p;
1353   const char *path, *compstr;
1354   struct mptree *mptree;
1355   int i, nmptree;
1356   int pos, compl;
1357   int mp;
1358   struct ducbdata cbd;
1359   Solvable *s;
1360   Id sp;
1361   Map ignoredu;
1362   Repo *oldinstalled = pool->installed;
1363
1364   memset(&ignoredu, 0, sizeof(ignoredu));
1365   cbd.mps = mps;
1366   cbd.addsub = 0;
1367   cbd.dirmap = 0;
1368   cbd.nmap = 0;
1369   cbd.olddata = 0;
1370
1371   mptree = sat_extend_resize(0, 1, sizeof(struct mptree), MPTREE_BLOCK);
1372
1373   /* our root node */
1374   mptree[0].sibling = 0;
1375   mptree[0].child = 0;
1376   mptree[0].comp = 0;
1377   mptree[0].compl = 0;
1378   mptree[0].mountpoint = -1;
1379   nmptree = 1;
1380   
1381   /* create component tree */
1382   for (mp = 0; mp < nmps; mp++)
1383     {
1384       mps[mp].kbytes = 0;
1385       mps[mp].files = 0;
1386       pos = 0;
1387       path = mps[mp].path;
1388       while(*path == '/')
1389         path++;
1390       while (*path)
1391         {
1392           if ((p = strchr(path, '/')) == 0)
1393             {
1394               compstr = path;
1395               compl = strlen(compstr);
1396               path += compl;
1397             }
1398           else
1399             {
1400               compstr = path;
1401               compl = p - path;
1402               path = p + 1;
1403               while(*path == '/')
1404                 path++;
1405             }
1406           for (i = mptree[pos].child; i; i = mptree[i].sibling)
1407             if (mptree[i].compl == compl && !strncmp(mptree[i].comp, compstr, compl))
1408               break;
1409           if (!i)
1410             {
1411               /* create new node */
1412               mptree = sat_extend(mptree, nmptree, 1, sizeof(struct mptree), MPTREE_BLOCK);
1413               i = nmptree++;
1414               mptree[i].sibling = mptree[pos].child;
1415               mptree[i].child = 0;
1416               mptree[i].comp = compstr;
1417               mptree[i].compl = compl;
1418               mptree[i].mountpoint = -1;
1419               mptree[pos].child = i;
1420             }
1421           pos = i;
1422         }
1423       mptree[pos].mountpoint = mp;
1424     }
1425
1426   propagate_mountpoints(mptree, 0, mptree[0].mountpoint);
1427
1428 #if 0
1429   for (i = 0; i < nmptree; i++)
1430     {
1431       printf("#%d sibling: %d\n", i, mptree[i].sibling);
1432       printf("#%d child: %d\n", i, mptree[i].child);
1433       printf("#%d comp: %s\n", i, mptree[i].comp);
1434       printf("#%d compl: %d\n", i, mptree[i].compl);
1435       printf("#%d mountpont: %d\n", i, mptree[i].mountpoint);
1436     }
1437 #endif
1438
1439   cbd.mptree = mptree;
1440   cbd.addsub = 1;
1441   for (sp = 1, s = pool->solvables + sp; sp < pool->nsolvables; sp++, s++)
1442     {
1443       if (!s->repo || (oldinstalled && s->repo == oldinstalled))
1444         continue;
1445       if (!MAPTST(installedmap, sp))
1446         continue;
1447       cbd.hasdu = 0;
1448       repo_search(s->repo, sp, SOLVABLE_DISKUSAGE, 0, 0, solver_fill_DU_cb, &cbd);
1449       if (!cbd.hasdu && oldinstalled)
1450         {
1451           Id op, opp;
1452           /* no du data available, ignore data of all installed solvables we obsolete */
1453           if (!ignoredu.map)
1454             map_init(&ignoredu, oldinstalled->end - oldinstalled->start);
1455           if (s->obsoletes)
1456             {
1457               Id obs, *obsp = s->repo->idarraydata + s->obsoletes;
1458               while ((obs = *obsp++) != 0)
1459                 FOR_PROVIDES(op, opp, obs)
1460                   if (op >= oldinstalled->start && op < oldinstalled->end)
1461                     MAPSET(&ignoredu, op - oldinstalled->start);
1462             }
1463           FOR_PROVIDES(op, opp, s->name)
1464             if (pool->solvables[op].name == s->name)
1465               if (op >= oldinstalled->start && op < oldinstalled->end)
1466                 MAPSET(&ignoredu, op - oldinstalled->start);
1467         }
1468     }
1469   cbd.addsub = -1;
1470   if (oldinstalled)
1471     {
1472       /* assumes we allways have du data for installed solvables */
1473       FOR_REPO_SOLVABLES(oldinstalled, sp, s)
1474         {
1475           if (MAPTST(installedmap, sp))
1476             continue;
1477           if (ignoredu.map && MAPTST(&ignoredu, sp - oldinstalled->start))
1478             continue;
1479           repo_search(oldinstalled, sp, SOLVABLE_DISKUSAGE, 0, 0, solver_fill_DU_cb, &cbd);
1480         }
1481     }
1482   if (ignoredu.map)
1483     map_free(&ignoredu);
1484   sat_free(cbd.dirmap);
1485   sat_free(mptree);
1486 }
1487
1488 int
1489 pool_calc_installsizechange(Pool *pool, Map *installedmap)
1490 {
1491   Id sp;
1492   Solvable *s;
1493   int change = 0;
1494   Repo *oldinstalled = pool->installed;
1495
1496   for (sp = 1, s = pool->solvables + sp; sp < pool->nsolvables; sp++, s++)
1497     {
1498       if (!s->repo || (oldinstalled && s->repo == oldinstalled))
1499         continue;
1500       if (!MAPTST(installedmap, sp))
1501         continue;
1502       change += solvable_lookup_num(s, SOLVABLE_INSTALLSIZE, 0);
1503     }
1504   if (oldinstalled)
1505     {
1506       FOR_REPO_SOLVABLES(oldinstalled, sp, s)
1507         {
1508           if (MAPTST(installedmap, sp))
1509             continue;
1510           change -= solvable_lookup_num(s, SOLVABLE_INSTALLSIZE, 0);
1511         }
1512     }
1513   return change;
1514 }
1515
1516 /* map:
1517  *  1: installed
1518  *  2: conflicts with installed
1519  *  8: interesting (only true if installed)
1520  * 16: undecided
1521  */
1522  
1523 static inline Id dep2name(Pool *pool, Id dep)
1524 {
1525   while (ISRELDEP(dep))
1526     {
1527       Reldep *rd = rd = GETRELDEP(pool, dep);
1528       dep = rd->name;
1529     }
1530   return dep;
1531 }
1532
1533 static int providedbyinstalled_multiversion(Pool *pool, unsigned char *map, Id n, Id dep) 
1534 {
1535   Id p, pp;
1536   Solvable *sn = pool->solvables + n; 
1537
1538   FOR_PROVIDES(p, pp, sn->name)
1539     {    
1540       Solvable *s = pool->solvables + p; 
1541       if (s->name != sn->name || s->arch != sn->arch)
1542         continue;
1543       if ((map[p] & 9) == 9)
1544         return 1;
1545     }    
1546   return 0;
1547 }
1548
1549 static inline int providedbyinstalled(Pool *pool, unsigned char *map, Id dep, int ispatch, Map *noobsoletesmap)
1550 {
1551   Id p, pp;
1552   int r = 0;
1553   FOR_PROVIDES(p, pp, dep)
1554     {
1555       if (p == SYSTEMSOLVABLE)
1556         return 1;       /* always boring, as never constraining */
1557       if (ispatch && !pool_match_nevr(pool, pool->solvables + p, dep))
1558         continue;
1559       if (ispatch && noobsoletesmap && noobsoletesmap->size && MAPTST(noobsoletesmap, p) && ISRELDEP(dep))
1560         if (providedbyinstalled_multiversion(pool, map, p, dep))
1561           continue;
1562       if ((map[p] & 9) == 9)
1563         return 9;
1564       r |= map[p] & 17;
1565     }
1566   return r;
1567 }
1568
1569 /*
1570  * pool_trivial_installable - calculate if a set of solvables is
1571  * trivial installable without any other installs/deinstalls of
1572  * packages not belonging to the set.
1573  *
1574  * the state is returned in the result queue:
1575  * 1:  solvable is installable without any other package changes
1576  * 0:  solvable is not installable
1577  * -1: solvable is installable, but doesn't constrain any installed packages
1578  */
1579
1580 void
1581 pool_trivial_installable_noobsoletesmap(Pool *pool, Map *installedmap, Queue *pkgs, Queue *res, Map *noobsoletesmap)
1582 {
1583   int i, r, m, did;
1584   Id p, *dp, con, *conp, req, *reqp;
1585   unsigned char *map;
1586   Solvable *s;
1587
1588   map = sat_calloc(pool->nsolvables, 1);
1589   for (p = 1; p < pool->nsolvables; p++)
1590     {
1591       if (!MAPTST(installedmap, p))
1592         continue;
1593       map[p] |= 9;
1594       s = pool->solvables + p;
1595       if (!s->conflicts)
1596         continue;
1597       conp = s->repo->idarraydata + s->conflicts;
1598       while ((con = *conp++) != 0)
1599         {
1600           dp = pool_whatprovides_ptr(pool, con);
1601           for (; *dp; dp++)
1602             map[p] |= 2;        /* XXX: self conflict ? */
1603         }
1604     }
1605   for (i = 0; i < pkgs->count; i++)
1606     map[pkgs->elements[i]] = 16;
1607
1608   for (i = 0, did = 0; did < pkgs->count; i++, did++)
1609     {
1610       if (i == pkgs->count)
1611         i = 0;
1612       p = pkgs->elements[i];
1613       if ((map[p] & 16) == 0)
1614         continue;
1615       if ((map[p] & 2) != 0)
1616         {
1617           map[p] = 2;
1618           continue;
1619         }
1620       s = pool->solvables + p;
1621       m = 1;
1622       if (s->requires)
1623         {
1624           reqp = s->repo->idarraydata + s->requires;
1625           while ((req = *reqp++) != 0)
1626             {
1627               if (req == SOLVABLE_PREREQMARKER)
1628                 continue;
1629               r = providedbyinstalled(pool, map, req, 0, 0);
1630               if (!r)
1631                 {
1632                   /* decided and miss */
1633                   map[p] = 2;
1634                   break;
1635                 }
1636               m |= r;   /* 1 | 9 | 16 | 17 */
1637             }
1638           if (req)
1639             continue;
1640           if ((m & 9) == 9)
1641             m = 9;
1642         }
1643       if (s->conflicts)
1644         {
1645           int ispatch = 0;      /* see solver.c patch handling */
1646
1647           if (!strncmp("patch:", id2str(pool, s->name), 6))
1648             ispatch = 1;
1649           conp = s->repo->idarraydata + s->conflicts;
1650           while ((con = *conp++) != 0)
1651             {
1652               if ((providedbyinstalled(pool, map, con, ispatch, noobsoletesmap) & 1) != 0)
1653                 {
1654                   map[p] = 2;
1655                   break;
1656                 }
1657               if ((m == 1 || m == 17) && ISRELDEP(con))
1658                 {
1659                   con = dep2name(pool, con);
1660                   if ((providedbyinstalled(pool, map, con, ispatch, noobsoletesmap) & 1) != 0)
1661                     m = 9;
1662                 }
1663             }
1664           if (con)
1665             continue;   /* found a conflict */
1666         }
1667 #if 0
1668       if (s->repo && s->repo != oldinstalled)
1669         {
1670           Id p2, obs, *obsp, *pp;
1671           Solvable *s2;
1672           if (s->obsoletes)
1673             {
1674               obsp = s->repo->idarraydata + s->obsoletes;
1675               while ((obs = *obsp++) != 0)
1676                 {
1677                   if ((providedbyinstalled(pool, map, obs, 0, 0) & 1) != 0)
1678                     {
1679                       map[p] = 2;
1680                       break;
1681                     }
1682                 }
1683               if (obs)
1684                 continue;
1685             }
1686           FOR_PROVIDES(p2, pp, s->name)
1687             {
1688               s2 = pool->solvables + p2;
1689               if (s2->name == s->name && (map[p2] & 1) != 0)
1690                 {
1691                   map[p] = 2;
1692                   break;
1693                 }
1694             }
1695           if (p2)
1696             continue;
1697         }
1698 #endif
1699       if (m != map[p])
1700         {
1701           map[p] = m;
1702           did = 0;
1703         }
1704     }
1705   queue_free(res);
1706   queue_init_clone(res, pkgs);
1707   for (i = 0; i < pkgs->count; i++)
1708     {
1709       m = map[pkgs->elements[i]];
1710       if ((m & 9) == 9)
1711         r = 1;
1712       else if (m & 1)
1713         r = -1;
1714       else
1715         r = 0;
1716       res->elements[i] = r;
1717     }
1718   free(map);
1719 }
1720
1721 void
1722 pool_trivial_installable(Pool *pool, Map *installedmap, Queue *pkgs, Queue *res)
1723 {
1724   pool_trivial_installable_noobsoletesmap(pool, installedmap, pkgs, res, 0);
1725 }
1726
1727 const char *
1728 pool_lookup_str(Pool *pool, Id entry, Id keyname)
1729 {
1730   if (entry == SOLVID_POS && pool->pos.repo)
1731     return repodata_lookup_str(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname);
1732   if (entry <= 0)
1733     return 0;
1734   return solvable_lookup_str(pool->solvables + entry, keyname);
1735 }
1736
1737 Id
1738 pool_lookup_id(Pool *pool, Id entry, Id keyname)
1739 {
1740   if (entry == SOLVID_POS && pool->pos.repo)
1741     {
1742       Repodata *data = pool->pos.repo->repodata + pool->pos.repodataid;
1743       Id id = repodata_lookup_id(data, SOLVID_POS, keyname);
1744       return data->localpool ? repodata_globalize_id(data, id, 1) : id;
1745     }
1746   if (entry <= 0)
1747     return 0;
1748   return solvable_lookup_id(pool->solvables + entry, keyname);
1749 }
1750
1751 unsigned int
1752 pool_lookup_num(Pool *pool, Id entry, Id keyname, unsigned int notfound)
1753 {
1754   if (entry == SOLVID_POS && pool->pos.repo)
1755     {
1756       unsigned int value;
1757       if (repodata_lookup_num(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname, &value))
1758         return value;
1759       return notfound;
1760     }
1761   if (entry <= 0)
1762     return notfound;
1763   return solvable_lookup_num(pool->solvables + entry, keyname, notfound);
1764 }
1765
1766 int
1767 pool_lookup_void(Pool *pool, Id entry, Id keyname)
1768 {
1769   if (entry == SOLVID_POS && pool->pos.repo)
1770     return repodata_lookup_void(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname);
1771   if (entry <= 0)
1772     return 0;
1773   return solvable_lookup_void(pool->solvables + entry, keyname);
1774 }
1775
1776 const unsigned char *
1777 pool_lookup_bin_checksum(Pool *pool, Id entry, Id keyname, Id *typep)
1778 {
1779   if (entry == SOLVID_POS && pool->pos.repo)
1780     return repodata_lookup_bin_checksum(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname, typep);
1781   if (entry <= 0)
1782     return 0;
1783   return solvable_lookup_bin_checksum(pool->solvables + entry, keyname, typep);
1784 }
1785
1786 const char *
1787 pool_lookup_checksum(Pool *pool, Id entry, Id keyname, Id *typep)
1788 {
1789   if (entry == SOLVID_POS && pool->pos.repo)
1790     {
1791       const unsigned char *chk = repodata_lookup_bin_checksum(pool->pos.repo->repodata + pool->pos.repodataid, SOLVID_POS, keyname, typep);
1792       return chk ? repodata_chk2str(pool->pos.repo->repodata + pool->pos.repodataid, *typep, chk) : 0;
1793     }
1794   if (entry <= 0)
1795     return 0;
1796   return solvable_lookup_checksum(pool->solvables + entry, keyname, typep);
1797 }
1798
1799 void
1800 pool_add_fileconflicts_deps(Pool *pool, Queue *conflicts)
1801 {
1802   int hadhashes = pool->relhashtbl ? 1 : 0;
1803   Solvable *s;
1804   Id fn, p, q, md5;
1805   Id id;
1806   int i;
1807
1808   if (!conflicts->count)
1809     return;
1810   pool_freewhatprovides(pool);
1811   for (i = 0; i < conflicts->count; i += 5)
1812     {
1813       fn = conflicts->elements[i];
1814       p = conflicts->elements[i + 1];
1815       md5 = conflicts->elements[i + 2];
1816       q = conflicts->elements[i + 3];
1817       id = rel2id(pool, fn, md5, REL_FILECONFLICT, 1);
1818       s = pool->solvables + p;
1819       if (!s->repo)
1820         continue;
1821       s->provides = repo_addid_dep(s->repo, s->provides, id, SOLVABLE_FILEMARKER);
1822       s = pool->solvables + q;
1823       if (!s->repo)
1824         continue;
1825       s->conflicts = repo_addid_dep(s->repo, s->conflicts, id, 0);
1826     }
1827   if (!hadhashes)
1828     pool_freeidhashes(pool);
1829 }
1830
1831 /* EOF */