- fix speed regression in repo_susetags
[platform/upstream/libsolv.git] / ext / repo_susetags.c
1 /*
2  * Copyright (c) 2007, Novell Inc.
3  *
4  * This program is licensed under the BSD license, read LICENSE.BSD
5  * for further information
6  */
7
8 #include <sys/types.h>
9 #include <limits.h>
10 #include <fcntl.h>
11 #include <stdio.h>
12 #include <stdlib.h>
13 #include <string.h>
14
15 #include "pool.h"
16 #include "repo.h"
17 #include "hash.h"
18 #include "tools_util.h"
19 #include "repo_susetags.h"
20
21 struct parsedata {
22   char *kind;
23   Repo *repo;
24   Repodata *data;
25   struct parsedata_common common;
26   int last_found_source;
27   char **share_with;
28   int nshare;
29   Id (*dirs)[3]; // dirid, size, nfiles
30   int ndirs;
31   Id langcache[ID_NUM_INTERNAL];
32   int lineno;
33 };
34
35 static char *flagtab[] = {
36   ">",
37   "=",
38   ">=",
39   "<",
40   "!=",
41   "<="
42 };
43
44
45 static Id
46 langtag(struct parsedata *pd, Id tag, const char *language)
47 {
48   if (language && !language[0])
49     language = 0;
50   if (!language || tag >= ID_NUM_INTERNAL)
51     return pool_id2langid(pd->repo->pool, tag, language, 1);
52   return pool_id2langid(pd->repo->pool, tag, language, 1);
53   if (!pd->langcache[tag])
54     pd->langcache[tag] = pool_id2langid(pd->repo->pool, tag, language, 1);
55   return pd->langcache[tag];
56 }
57
58 /*
59  * adddep
60  * create and add dependency
61  */
62
63 static unsigned int
64 adddep(Pool *pool, struct parsedata *pd, unsigned int olddeps, char *line, Id marker, char *kind)
65 {
66   int i, flags;
67   Id id, evrid;
68   char *sp[4];
69
70   if (line[6] == '/')
71     {
72       /* A file dependency. Do not try to parse it */
73       id = str2id(pool, line + 6, 1);
74     }
75   else
76     {
77       i = split(line + 6, sp, 4); /* name, <op>, evr, ? */
78       if (i != 1 && i != 3) /* expect either 'name' or 'name' <op> 'evr' */
79         {
80           pool_debug(pool, SAT_FATAL, "susetags: bad dependency line: %d: %s\n", pd->lineno, line);
81           exit(1);
82         }
83       if (kind)
84         id = str2id(pool, join2(kind, ":", sp[0]), 1);
85       else
86         id = str2id(pool, sp[0], 1);
87       if (i == 3)
88         {
89           evrid = makeevr(pool, sp[2]);
90           for (flags = 0; flags < 6; flags++)
91             if (!strcmp(sp[1], flagtab[flags]))
92               break;
93           if (flags == 6)
94             {
95               pool_debug(pool, SAT_FATAL, "susetags: unknown relation in %d: '%s'\n", pd->lineno, sp[1]);
96               exit(1);
97             }
98           id = rel2id(pool, id, evrid, flags + 1, 1);
99         }
100     }
101   return repo_addid_dep(pd->repo, olddeps, id, marker);
102 }
103
104
105 /*
106  * add_source
107  *
108  */
109
110 static void
111 add_source(struct parsedata *pd, char *line, Solvable *s, Id handle)
112 {
113   Repo *repo = s->repo;
114   Pool *pool = repo->pool;
115   char *sp[5];
116
117   if (split(line, sp, 5) != 4)
118     {
119       pool_debug(pool, SAT_FATAL, "susetags: bad source line: %d: %s\n", pd->lineno, line);
120       exit(1);
121     }
122
123   Id name = str2id(pool, sp[0], 1);
124   Id evr = makeevr(pool, join2(sp[1], "-", sp[2]));
125   Id arch = str2id(pool, sp[3], 1);
126   /* XXX: could record a dep here, depends on where we want to store the data */
127   if (name == s->name)
128     repodata_set_void(pd->data, handle, SOLVABLE_SOURCENAME);
129   else
130     repodata_set_id(pd->data, handle, SOLVABLE_SOURCENAME, name);
131   if (evr == s->evr)
132     repodata_set_void(pd->data, handle, SOLVABLE_SOURCEEVR);
133   else
134     repodata_set_id(pd->data, handle, SOLVABLE_SOURCEEVR, evr);
135   repodata_set_constantid(pd->data, handle, SOLVABLE_SOURCEARCH, arch);
136 }
137
138 /*
139  * add_dirline
140  * add a line with directory information
141  *
142  */
143
144 static void
145 add_dirline(struct parsedata *pd, char *line)
146 {
147   char *sp[6];
148   if (split(line, sp, 6) != 5)
149     return;
150   pd->dirs = sat_extend(pd->dirs, pd->ndirs, 1, sizeof(pd->dirs[0]), 31);
151   long filesz = strtol(sp[1], 0, 0);
152   filesz += strtol(sp[2], 0, 0);
153   long filenum = strtol(sp[3], 0, 0);
154   filenum += strtol(sp[4], 0, 0);
155   /* hack: we know that there's room for a / */
156   if (*sp[0] != '/')
157     *--sp[0] = '/';
158   unsigned dirid = repodata_str2dir(pd->data, sp[0], 1);
159 #if 0
160 fprintf(stderr, "%s -> %d\n", sp[0], dirid);
161 #endif
162   pd->dirs[pd->ndirs][0] = dirid;
163   pd->dirs[pd->ndirs][1] = filesz;
164   pd->dirs[pd->ndirs][2] = filenum;
165   pd->ndirs++;
166 }
167
168 static void
169 set_checksum(struct parsedata *pd, Repodata *data, Id handle, Id keyname, char *line)
170 {
171   char *sp[3];
172   int l;
173   Id type;
174   if (split(line, sp, 3) != 2)
175     {
176       pool_debug(pd->repo->pool, SAT_FATAL, "susetags: bad checksum line: %d: %s\n", pd->lineno, line);
177       exit(1);
178     }
179   if (!strcasecmp(sp[0], "sha1"))
180     l = SIZEOF_SHA1 * 2, type = REPOKEY_TYPE_SHA1;
181   else if (!strcasecmp(sp[0], "sha256"))
182     l = SIZEOF_SHA256 * 2, type = REPOKEY_TYPE_SHA256;
183   else if (!strcasecmp(sp[0], "md5"))
184     l = SIZEOF_MD5 * 2, type = REPOKEY_TYPE_MD5;
185   else
186     {
187       pool_debug(pd->repo->pool, SAT_FATAL, "susetags: unknown checksum type: %d: %s\n", pd->lineno, sp[0]);
188       exit(1);
189     }
190   if (strlen(sp[1]) != l)
191     {
192       pool_debug(pd->repo->pool, SAT_FATAL, "susetags: bad checksum length: %d: for %s: %s\n", pd->lineno, sp[0], sp[1]);
193       exit(1);
194     }
195   repodata_set_checksum(data, handle, keyname, type, sp[1]);
196 }
197
198 /*
199  * id3_cmp
200  * compare
201  *
202  */
203
204 static int
205 id3_cmp(const void *v1, const void *v2, void *dp)
206 {
207   Id *i1 = (Id*)v1;
208   Id *i2 = (Id*)v2;
209   return i1[0] - i2[0];
210 }
211
212
213 /*
214  * commit_diskusage
215  *
216  */
217
218 static void
219 commit_diskusage(struct parsedata *pd, Id handle)
220 {
221   unsigned i;
222   Dirpool *dp = &pd->data->dirpool;
223   /* Now sort in dirid order.  This ensures that parents come before
224      their children.  */
225   if (pd->ndirs > 1)
226     sat_sort(pd->dirs, pd->ndirs, sizeof(pd->dirs[0]), id3_cmp, 0);
227   /* Substract leaf numbers from all parents to make the numbers
228      non-cumulative.  This must be done post-order (i.e. all leafs
229      adjusted before parents).  We ensure this by starting at the end of
230      the array moving to the start, hence seeing leafs before parents.  */
231   for (i = pd->ndirs; i--;)
232     {
233       unsigned p = dirpool_parent(dp, pd->dirs[i][0]);
234       unsigned j = i;
235       for (; p; p = dirpool_parent(dp, p))
236         {
237           for (; j--;)
238             if (pd->dirs[j][0] == p)
239               break;
240           if (j < pd->ndirs)
241             {
242               if (pd->dirs[j][1] < pd->dirs[i][1])
243                 pd->dirs[j][1] = 0;
244               else
245                 pd->dirs[j][1] -= pd->dirs[i][1];
246               if (pd->dirs[j][2] < pd->dirs[i][2])
247                 pd->dirs[j][2] = 0;
248               else
249                 pd->dirs[j][2] -= pd->dirs[i][2];
250             }
251           else
252             /* Haven't found this parent in the list, look further if
253                we maybe find the parents parent.  */
254             j = i;
255         }
256     }
257 #if 0
258   char sbuf[1024];
259   char *buf = sbuf;
260   unsigned slen = sizeof(sbuf);
261   for (i = 0; i < pd->ndirs; i++)
262     {
263       dir2str(attr, pd->dirs[i][0], &buf, &slen);
264       fprintf(stderr, "have dir %d %d %d %s\n", pd->dirs[i][0], pd->dirs[i][1], pd->dirs[i][2], buf);
265     }
266   if (buf != sbuf)
267     free (buf);
268 #endif
269   for (i = 0; i < pd->ndirs; i++)
270     if (pd->dirs[i][1] || pd->dirs[i][2])
271       {
272         repodata_add_dirnumnum(pd->data, handle, SOLVABLE_DISKUSAGE, pd->dirs[i][0], pd->dirs[i][1], pd->dirs[i][2]);
273       }
274   pd->ndirs = 0;
275 }
276
277
278 /* Unfortunately "a"[0] is no constant expression in the C languages,
279    so we need to pass the four characters individually :-/  */
280 #define CTAG(a,b,c,d) ((unsigned)(((unsigned char)a) << 24) \
281  | ((unsigned char)b << 16) \
282  | ((unsigned char)c << 8) \
283  | ((unsigned char)d))
284
285 /*
286  * tag_from_string
287  *
288  */
289
290 static inline unsigned
291 tag_from_string(char *cs)
292 {
293   unsigned char *s = (unsigned char *)cs;
294   return ((s[0] << 24) | (s[1] << 16) | (s[2] << 8) | s[3]);
295 }
296
297
298 /*
299  * repo_add_susetags
300  * Parse susetags file passed in fp, fill solvables into repo
301  *
302  * susetags is key,value based
303  *  for short values
304  *    =key: value
305  *  is used
306  *  for long (multi-line) values,
307  *    +key:
308  *    value
309  *    value
310  *    -key:
311  *  is used
312  *
313  * See http://en.opensuse.org/Standards/YaST2_Repository_Metadata
314  * and http://en.opensuse.org/Standards/YaST2_Repository_Metadata/packages
315  * and http://en.opensuse.org/Standards/YaST2_Repository_Metadata/pattern
316  *
317  * Assumptions:
318  *   All keys have 3 characters and end in ':'
319  */
320
321 static void
322 finish_solvable(struct parsedata *pd, Solvable *s, Id handle, Offset freshens)
323 {
324   Pool *pool = pd->repo->pool;
325
326 #if 1
327   /* move file provides to filelist */
328   /* relies on the fact that rpm inserts self-provides at the end */
329   if (s->provides)
330     {
331       Id *p, *lastreal, did;
332       const char *str, *sp;
333       lastreal = pd->repo->idarraydata + s->provides;
334       for (p = lastreal; *p; p++)
335         if (ISRELDEP(*p))
336           lastreal = p + 1;
337       for (p = lastreal; *p; p++)
338         {
339           str = id2str(pool, *p);
340           if (*str != '/')
341             lastreal = p + 1;
342         }
343       if (*lastreal)
344         {
345           for (p = lastreal; *p; p++)
346             {
347               char fname_buf[128];
348               const char *fname;
349               str = id2str(pool, *p);
350               sp = strrchr(str, '/');
351               /* Need to copy filename now, before we add string that could
352                  realloc the stringspace (and hence invalidate str).  */
353               fname = sp + 1;
354               if (strlen(fname) >= 128)
355                 fname = strdup(fname);
356               else
357                 {
358                   memcpy(fname_buf, fname, strlen(fname) + 1);
359                   fname = fname_buf;
360                 }
361               if (sp - str >= 128)
362                 {
363                   char *sdup = strdup(str);
364                   sdup[sp - str] = 0;
365                   did = repodata_str2dir(pd->data, sdup, 1);
366                   free(sdup);
367                 }
368               else
369                 {
370                   char sdup[128];
371                   strncpy(sdup, str, sp - str);
372                   sdup[sp - str] = 0;
373                   did = repodata_str2dir(pd->data, sdup, 1);
374                 }
375               if (!did)
376                 did = repodata_str2dir(pd->data, "/", 1);
377               repodata_add_dirstr(pd->data, handle, SOLVABLE_FILELIST, did, fname);
378               if (fname != fname_buf)
379                 free((char*)fname);
380               *p = 0;
381             }
382         }
383     }
384 #endif
385   /* A self provide, except for source packages.  This is harmless
386      to do twice (in case we see the same package twice).  */
387   if (s->name && s->arch != ARCH_SRC && s->arch != ARCH_NOSRC)
388     s->provides = repo_addid_dep(pd->repo, s->provides,
389                 rel2id(pool, s->name, s->evr, REL_EQ, 1), 0);
390   /* XXX This uses repo_addid_dep internally, so should also be
391      harmless to do twice.  */
392   s->supplements = repo_fix_supplements(pd->repo, s->provides, s->supplements, freshens);
393   s->conflicts = repo_fix_conflicts(pd->repo, s->conflicts);
394   if (pd->ndirs)
395     commit_diskusage(pd, handle);
396 }
397
398 static Hashtable
399 joinhash_init(Repo *repo, Hashmask *hmp)
400 {
401   Hashmask hm = mkmask(repo->nsolvables);
402   Hashtable ht = sat_calloc(hm + 1, sizeof(*ht));
403   Hashval h, hh;
404   Solvable *s;
405   int i;
406
407   FOR_REPO_SOLVABLES(repo, i, s)
408     {
409       hh = HASHCHAIN_START;
410       h = s->name & hm;
411       while (ht[h])
412         h = HASHCHAIN_NEXT(h, hh, hm);
413       ht[h] = i;
414     }
415   *hmp = hm;
416   return ht;
417 }
418
419 static Solvable *
420 joinhash_lookup(Repo *repo, Hashtable ht, Hashmask hm, Id name, Id evr, Id arch)
421 {
422   Hashval h, hh;
423
424   if (!name || !arch || !evr)
425     return 0;
426   hh = HASHCHAIN_START;
427   h = name & hm;
428   while (ht[h])
429     {
430       Solvable *s = repo->pool->solvables + ht[h];
431       if (s->name == name && s->evr == evr && s->arch == arch)
432         return s;
433       h = HASHCHAIN_NEXT(h, hh, hm);
434     }
435   return 0;
436 }
437
438
439 /*
440  * parse susetags
441  *
442  * fp: file to read from
443  * defvendor: default vendor (0 if none)
444  * language: current language (0 if none)
445  * flags: flags
446  */
447
448 void
449 repo_add_susetags(Repo *repo, FILE *fp, Id defvendor, const char *language, int flags)
450 {
451   Pool *pool = repo->pool;
452   char *line, *linep;
453   int aline;
454   Solvable *s;
455   Offset freshens;
456   int intag = 0;
457   int cummulate = 0;
458   int indesc = 0;
459   int last_found_pack = 0;
460   char *sp[5];
461   struct parsedata pd;
462   Repodata *data = 0;
463   Id handle = 0;
464   Hashtable joinhash = 0;
465   Hashmask joinhashm = 0;
466   int createdpkgs = 0;
467
468   if ((flags & (SUSETAGS_EXTEND|REPO_EXTEND_SOLVABLES)) != 0 && repo->nrepodata)
469     {
470       joinhash = joinhash_init(repo, &joinhashm);
471       indesc = 1;
472     }
473
474   data = repo_add_repodata(repo, flags);
475
476   memset(&pd, 0, sizeof(pd));
477   line = malloc(1024);
478   aline = 1024;
479
480   pd.repo = pd.common.repo = repo;
481   pd.data = data;
482   pd.common.pool = pool;
483
484   linep = line;
485   s = 0;
486   freshens = 0;
487
488   /*
489    * read complete file
490    *
491    * collect values in 'struct parsedata pd'
492    * then build .solv (and .attr) file
493    */
494
495   for (;;)
496     {
497       unsigned tag;
498       char *olinep; /* old line pointer */
499       char line_lang[6];
500       int keylen = 3;
501       if (linep - line + 16 > aline)              /* (re-)alloc buffer */
502         {
503           aline = linep - line;
504           line = realloc(line, aline + 512);
505           linep = line + aline;
506           aline += 512;
507         }
508       if (!fgets(linep, aline - (linep - line), fp)) /* read line */
509         break;
510       olinep = linep;
511       linep += strlen(linep);
512       if (linep == line || linep[-1] != '\n')
513         continue;
514       pd.lineno++;
515       *--linep = 0;
516       if (linep == olinep)
517         continue;
518
519       if (intag)
520         {
521           /* check for multi-line value tags (+Key:/-Key:) */
522
523           int is_end = (linep[-intag - keylen + 1] == '-')
524                       && (linep[-1] == ':')
525                       && (linep == line + 1 + intag + 1 + 1 + 1 + intag + 1 || linep[-intag - keylen] == '\n');
526           if (is_end
527               && strncmp(linep - 1 - intag, line + 1, intag))
528             {
529               pool_debug(pool, SAT_ERROR, "susetags: Nonmatching multi-line tags: %d: '%s' '%s' %d\n", pd.lineno, linep - 1 - intag, line + 1, intag);
530             }
531           if (cummulate && !is_end)
532             {
533               *linep++ = '\n';
534               continue;
535             }
536           if (cummulate && is_end)
537             {
538               linep[-intag - keylen + 1] = 0;
539               if (linep[-intag - keylen] == '\n')
540                 linep[-intag - keylen] = 0;
541               linep = line;
542               intag = 0;
543             }
544           if (!cummulate && is_end)
545             {
546               intag = 0;
547               linep = line;
548               continue;
549             }
550           if (!cummulate && !is_end)
551             linep = line + intag + keylen;
552         }
553       else
554         linep = line;
555
556       if (!intag && line[0] == '+' && line[1] && line[1] != ':') /* start of +Key:/-Key: tag */
557         {
558           char *tagend = strchr(line, ':');
559           if (!tagend)
560             {
561               pool_debug(pool, SAT_FATAL, "susetags: bad line: %d: %s\n", pd.lineno, line);
562               exit(1);
563             }
564           intag = tagend - (line + 1);
565           cummulate = 0;
566           switch (tag_from_string(line))       /* check if accumulation is needed */
567             {
568               case CTAG('+', 'P', 'r', 'q'):
569               case CTAG('+', 'P', 'r', 'c'):
570               case CTAG('+', 'P', 's', 'g'):
571                 if (!pd.kind || !(flags & SUSETAGS_KINDS_SEPARATELY))
572                   break;
573               case CTAG('+', 'D', 'e', 's'):
574               case CTAG('+', 'E', 'u', 'l'):
575               case CTAG('+', 'I', 'n', 's'):
576               case CTAG('+', 'D', 'e', 'l'):
577               case CTAG('+', 'A', 'u', 't'):
578                 if (line[4] == ':')
579                   cummulate = 1;
580             }
581           line[0] = '=';                       /* handle lines between +Key:/-Key: as =Key: */
582           line[intag + keylen - 1] = ' ';
583           linep = line + intag + keylen;
584           continue;
585         }
586       if (*line == '#' || !*line)
587         continue;
588       if (! (line[0] && line[1] && line[2] && line[3] && (line[4] == ':' || line[4] == '.')))
589         continue;
590       if (line[4] == '.')
591         {
592           char *endlang;
593           endlang = strchr(line + 5, ':');
594           if (endlang)
595             {
596               keylen = endlang - line - 1;
597               strncpy(line_lang, line + 5, 5);
598               line_lang[endlang - line - 5] = 0;
599             }
600         }
601       else
602         line_lang[0] = 0;
603       tag = tag_from_string(line);
604
605
606       /*
607        * start of (next) package or pattern
608        *
609        * =Pkg: <name> <version> <release> <architecture>
610        * (=Pat: ...)
611        */
612
613       if ((tag == CTAG('=', 'P', 'k', 'g')
614            || tag == CTAG('=', 'P', 'a', 't')))
615         {
616           /* If we have an old solvable, complete it by filling in some
617              default stuff.  */
618           if (s)
619             finish_solvable(&pd, s, handle, freshens);
620
621           /*
622            * define kind
623            */
624
625           pd.kind = 0;
626           if (line[3] == 't')
627             pd.kind = "pattern";
628
629           /*
630            * parse nevra
631            */
632
633           if (split(line + 5, sp, 5) != 4)
634             {
635               pool_debug(pool, SAT_FATAL, "susetags: bad line: %d: %s\n", pd.lineno, line);
636               exit(1);
637             }
638           s = 0;
639           freshens = 0;
640
641           if (joinhash)
642             {
643               /* data join operation. find solvable matching name/arch/evr and
644                * add data to it */
645               Id name, evr, arch;
646               /* we don't use the create flag here as a simple pre-check for existance */
647               if (pd.kind)
648                 name = str2id(pool, join2(pd.kind, ":", sp[0]), 0);
649               else
650                 name = str2id(pool, sp[0], 0);
651               evr = makeevr(pool, join2(sp[1], "-", sp[2]));
652               arch = str2id(pool, sp[3], 0);
653               if (name && arch)
654                 {
655                   if (repo->start + last_found_pack + 1 < repo->end)
656                     {
657                       s = pool->solvables + repo->start + last_found_pack + 1;
658                       if (s->repo != repo || s->name != name || s->evr != evr || s->arch != arch)
659                         s = 0;
660                     }
661                   if (!s)
662                     s = joinhash_lookup(repo, joinhash, joinhashm, name, evr, arch);
663                 }
664               if (!s && (flags & REPO_EXTEND_SOLVABLES) != 0)
665                 continue;
666               /* fallthrough to package creation */
667             }
668           if (!s)
669             {
670               /* normal operation. create a new solvable. */
671               s = pool_id2solvable(pool, repo_add_solvable(repo));
672               if (pd.kind)
673                 s->name = str2id(pool, join2(pd.kind, ":", sp[0]), 1);
674               else
675                 s->name = str2id(pool, sp[0], 1);
676               s->evr = makeevr(pool, join2(sp[1], "-", sp[2]));
677               s->arch = str2id(pool, sp[3], 1);
678               s->vendor = defvendor;
679               createdpkgs = 1;
680             }
681           last_found_pack = (s - pool->solvables) - repo->start;
682           if (data)
683             handle = s - pool->solvables;
684         }
685
686       /* If we have no current solvable to add to, ignore all further lines
687          for it.  Probably invalid input data in the second set of
688          solvables.  */
689       if (indesc >= 2 && !s)
690         {
691 #if 0
692           pool_debug(pool, SAT_ERROR, "susetags: huh %d: %s?\n", pd.lineno, line);
693 #endif
694           continue;
695         }
696       switch (tag)
697         {
698           case CTAG('=', 'P', 'r', 'v'):                                        /* provides */
699             s->provides = adddep(pool, &pd, s->provides, line, 0, pd.kind);
700             continue;
701           case CTAG('=', 'R', 'e', 'q'):                                        /* requires */
702             s->requires = adddep(pool, &pd, s->requires, line, -SOLVABLE_PREREQMARKER, pd.kind);
703             continue;
704           case CTAG('=', 'P', 'r', 'q'):                                        /* pre-requires / packages required */
705             if (pd.kind)
706               {
707                 if (flags & SUSETAGS_KINDS_SEPARATELY)
708                   repodata_set_poolstr(data, handle, str2id(pool, "solvable:must", 1), line + 6);
709                 else
710                   s->requires = adddep(pool, &pd, s->requires, line, 0, 0);           /* patterns: a required package */
711               }
712             else
713               s->requires = adddep(pool, &pd, s->requires, line, SOLVABLE_PREREQMARKER, 0); /* package: pre-requires */
714             continue;
715           case CTAG('=', 'O', 'b', 's'):                                        /* obsoletes */
716             s->obsoletes = adddep(pool, &pd, s->obsoletes, line, 0, pd.kind);
717             continue;
718           case CTAG('=', 'C', 'o', 'n'):                                        /* conflicts */
719             s->conflicts = adddep(pool, &pd, s->conflicts, line, 0, pd.kind);
720             continue;
721           case CTAG('=', 'R', 'e', 'c'):                                        /* recommends */
722             s->recommends = adddep(pool, &pd, s->recommends, line, 0, pd.kind);
723             continue;
724           case CTAG('=', 'S', 'u', 'p'):                                        /* supplements */
725             s->supplements = adddep(pool, &pd, s->supplements, line, 0, pd.kind);
726             continue;
727           case CTAG('=', 'E', 'n', 'h'):                                        /* enhances */
728             s->enhances = adddep(pool, &pd, s->enhances, line, 0, pd.kind);
729             continue;
730           case CTAG('=', 'S', 'u', 'g'):                                        /* suggests */
731             s->suggests = adddep(pool, &pd, s->suggests, line, 0, pd.kind);
732             continue;
733           case CTAG('=', 'F', 'r', 'e'):                                        /* freshens */
734             freshens = adddep(pool, &pd, freshens, line, 0, pd.kind);
735             continue;
736           case CTAG('=', 'P', 'r', 'c'):                                        /* packages recommended */
737             if (flags & SUSETAGS_KINDS_SEPARATELY)
738               repodata_set_poolstr(data, handle, str2id(pool, "solvable:should", 1), line + 6);
739             else
740               s->recommends = adddep(pool, &pd, s->recommends, line, 0, 0);
741             continue;
742           case CTAG('=', 'P', 's', 'g'):                                        /* packages suggested */
743             if (flags & SUSETAGS_KINDS_SEPARATELY)
744               repodata_set_poolstr(data, handle, str2id(pool, "solvable:may", 1), line + 6);
745             else
746               s->suggests = adddep(pool, &pd, s->suggests, line, 0, 0);
747             continue;
748           case CTAG('=', 'P', 'c', 'n'):                                        /* pattern: package conflicts */
749             if (flags & SUSETAGS_KINDS_SEPARATELY)
750               fprintf(stderr, "Unsupported: pattern -> package conflicts\n");
751             else
752               s->conflicts = adddep(pool, &pd, s->conflicts, line, 0, 0);
753             continue;
754           case CTAG('=', 'P', 'o', 'b'):                                        /* pattern: package obsoletes */
755             if (flags & SUSETAGS_KINDS_SEPARATELY)
756               fprintf(stderr, "Unsupported: pattern -> package obsoletes\n");
757             else
758               s->obsoletes = adddep(pool, &pd, s->obsoletes, line, 0, 0);
759             continue;
760           case CTAG('=', 'P', 'f', 'r'):                                        /* pattern: package freshens */
761             if (flags & SUSETAGS_KINDS_SEPARATELY)
762               fprintf(stderr, "Unsupported: pattern -> package freshens\n");
763             else
764               freshens = adddep(pool, &pd, freshens, line, 0, 0);
765             continue;
766           case CTAG('=', 'P', 's', 'p'):                                        /* pattern: package supplements */
767             if (flags & SUSETAGS_KINDS_SEPARATELY)
768               fprintf(stderr, "Unsupported: pattern -> package supplements\n");
769             else
770               s->supplements = adddep(pool, &pd, s->supplements, line, 0, 0);
771             continue;
772           case CTAG('=', 'P', 'e', 'n'):                                        /* pattern: package enhances */
773             if (flags & SUSETAGS_KINDS_SEPARATELY)
774               fprintf(stderr, "Unsupported: pattern -> package enhances\n");
775             else
776               s->enhances = adddep(pool, &pd, s->enhances, line, 0, 0);
777             continue;
778           case CTAG('=', 'V', 'e', 'r'):                                        /* - version - */
779             last_found_pack = 0;
780             handle = 0;
781             indesc++;
782             if (createdpkgs)
783               {
784                 sat_free(joinhash);
785                 joinhash = joinhash_init(repo, &joinhashm);
786                 createdpkgs = 0;
787               }
788             continue;
789           case CTAG('=', 'V', 'n', 'd'):                                        /* vendor */
790             s->vendor = str2id(pool, line + 6, 1);
791             continue;
792
793         /* From here it's the attribute tags.  */
794           case CTAG('=', 'G', 'r', 'p'):
795             repodata_set_poolstr(data, handle, SOLVABLE_GROUP, line + 6);
796             continue;
797           case CTAG('=', 'L', 'i', 'c'):
798             repodata_set_poolstr(data, handle, SOLVABLE_LICENSE, line + 6);
799             continue;
800           case CTAG('=', 'L', 'o', 'c'):
801             {
802               int i = split(line + 6, sp, 3);
803               if (i != 2 && i != 3)
804                 {
805                   pool_debug(pool, SAT_FATAL, "susetags: bad location line: %d: %s\n", pd.lineno, line);
806                   exit(1);
807                 }
808               repodata_set_location(data, handle, atoi(sp[0]), i == 3 ? sp[2] : id2str(pool, s->arch), sp[1]);
809             }
810             continue;
811           case CTAG('=', 'S', 'r', 'c'):
812             add_source(&pd, line + 6, s, handle);
813             continue;
814           case CTAG('=', 'S', 'i', 'z'):
815             if (split(line + 6, sp, 3) == 2)
816               {
817                 repodata_set_num(data, handle, SOLVABLE_DOWNLOADSIZE, (unsigned int)(atoi(sp[0]) + 1023) / 1024);
818                 repodata_set_num(data, handle, SOLVABLE_INSTALLSIZE, (unsigned int)(atoi(sp[1]) + 1023) / 1024);
819               }
820             continue;
821           case CTAG('=', 'T', 'i', 'm'):
822             {
823               unsigned int t = atoi(line + 6);
824               if (t)
825                 repodata_set_num(data, handle, SOLVABLE_BUILDTIME, t);
826             }
827             continue;
828           case CTAG('=', 'K', 'w', 'd'):
829             repodata_add_poolstr_array(data, handle, SOLVABLE_KEYWORDS, line + 6);
830             continue;
831           case CTAG('=', 'A', 'u', 't'):
832             repodata_set_str(data, handle, SOLVABLE_AUTHORS, line + 6);
833             continue;
834           case CTAG('=', 'S', 'u', 'm'):
835             repodata_set_str(data, handle, langtag(&pd, SOLVABLE_SUMMARY, language ? language : line_lang), line + 3 + keylen );
836             continue;
837           case CTAG('=', 'D', 'e', 's'):
838             repodata_set_str(data, handle, langtag(&pd, SOLVABLE_DESCRIPTION, language ? language : line_lang), line + 3 + keylen );
839             continue;
840           case CTAG('=', 'E', 'u', 'l'):
841             repodata_set_str(data, handle, langtag(&pd, SOLVABLE_EULA, language), line + 6);
842             continue;
843           case CTAG('=', 'I', 'n', 's'):
844             repodata_set_str(data, handle, langtag(&pd, SOLVABLE_MESSAGEINS, language), line + 6);
845             continue;
846           case CTAG('=', 'D', 'e', 'l'):
847             repodata_set_str(data, handle, langtag(&pd, SOLVABLE_MESSAGEDEL, language), line + 6);
848             continue;
849           case CTAG('=', 'V', 'i', 's'):
850             {
851               /* Accept numbers and textual bools.  */
852               unsigned k;
853               k = atoi(line + 6);
854               if (k || !strcasecmp(line + 6, "true"))
855                 repodata_set_void(data, handle, SOLVABLE_ISVISIBLE );
856             }
857             continue;
858           case CTAG('=', 'S', 'h', 'r'):
859             if (last_found_pack >= pd.nshare)
860               {
861                 pd.share_with = sat_realloc2(pd.share_with, last_found_pack + 256, sizeof(*pd.share_with));
862                 memset(pd.share_with + pd.nshare, 0, (last_found_pack + 256 - pd.nshare) * sizeof(*pd.share_with));
863                 pd.nshare = last_found_pack + 256;
864               }
865             pd.share_with[last_found_pack] = strdup(line + 6);
866             continue;
867           case CTAG('=', 'D', 'i', 'r'):
868             add_dirline(&pd, line + 6);
869             continue;
870           case CTAG('=', 'C', 'a', 't'):
871             repodata_set_poolstr(data, handle, langtag(&pd, SOLVABLE_CATEGORY, line_lang), line + 3 + keylen);
872             break;
873           case CTAG('=', 'O', 'r', 'd'):
874             /* Order is a string not a number, so we can retroactively insert
875                new patterns in the middle, i.e. 1 < 15 < 2.  */
876             repodata_set_str(data, handle, SOLVABLE_ORDER, line + 6);
877             break;
878           case CTAG('=', 'I', 'c', 'o'):
879             repodata_set_str(data, handle, SOLVABLE_ICON, line + 6);
880             break;
881           case CTAG('=', 'E', 'x', 't'):
882             repodata_add_poolstr_array(data, handle, SOLVABLE_EXTENDS, join2("pattern", ":", line + 6));
883             break;
884           case CTAG('=', 'I', 'n', 'c'):
885             repodata_add_poolstr_array(data, handle, SOLVABLE_INCLUDES, join2("pattern", ":", line + 6));
886             break;
887           case CTAG('=', 'C', 'k', 's'):
888             set_checksum(&pd, data, handle, SOLVABLE_CHECKSUM, line + 6);
889             break;
890           case CTAG('=', 'L', 'a', 'n'):
891             language = strdup(line + 6);
892             break;
893
894           case CTAG('=', 'F', 'l', 's'):
895             {
896               char *p = strrchr(line + 6, '/');
897               Id did;
898               if (p && p != line + 6 && !p[1])
899                 {
900                   *p = 0;
901                   p = strrchr(line + 6, '/');
902                 }
903               if (p)
904                 {
905                   *p++ = 0;
906                   did = repodata_str2dir(data, line + 6, 1);
907                 }
908               else
909                 {
910                   p = line + 6;
911                   did = 0;
912                 }
913               if (!did)
914                 did = repodata_str2dir(data, "/", 1);
915               repodata_add_dirstr(data, handle, SOLVABLE_FILELIST, did, p);
916               break;
917             }
918           case CTAG('=', 'H', 'd', 'r'):
919             /* rpm header range */
920             if (split(line + 6, sp, 3) == 2)
921               {
922                 /* we ignore the start value */
923                 unsigned int end = (unsigned int)atoi(sp[1]);
924                 if (end)
925                   repodata_set_num(data, handle, SOLVABLE_HEADEREND, end);
926               }
927             break;
928
929           case CTAG('=', 'P', 'a', 't'):
930           case CTAG('=', 'P', 'k', 'g'):
931             break;
932
933           default:
934             pool_debug(pool, SAT_ERROR, "susetags: unknown line: %d: %s\n", pd.lineno, line);
935             break;
936         }
937
938     } /* for(;;) */
939
940   if (s)
941     finish_solvable(&pd, s, handle, freshens);
942
943   /* Shared attributes
944    *  (e.g. multiple binaries built from same source)
945    */
946   if (pd.nshare)
947     {
948       int i, last_found;
949       last_found = 0;
950       Map keyidmap;
951
952       map_init(&keyidmap, data->nkeys);
953       for (i = 1; i < data->nkeys; i++)
954         {
955           Id keyname = data->keys[i].name;
956           if (keyname == SOLVABLE_INSTALLSIZE || keyname == SOLVABLE_DISKUSAGE || keyname == SOLVABLE_FILELIST)
957             continue;
958           if (keyname == SOLVABLE_MEDIADIR || keyname == SOLVABLE_MEDIAFILE || keyname == SOLVABLE_MEDIANR)
959             continue;
960           if (keyname == SOLVABLE_DOWNLOADSIZE || keyname == SOLVABLE_CHECKSUM)
961             continue;
962           if (keyname == SOLVABLE_SOURCENAME || keyname == SOLVABLE_SOURCEARCH || keyname == SOLVABLE_SOURCEEVR)
963             continue;
964           if (keyname == SOLVABLE_PKGID || keyname == SOLVABLE_HDRID || keyname == SOLVABLE_LEADSIGID)
965             continue;
966           MAPSET(&keyidmap, i);
967         }
968       for (i = 0; i < pd.nshare; i++)
969         if (pd.share_with[i])
970           {
971             if (split(pd.share_with[i], sp, 5) != 4)
972               {
973                 pool_debug(pool, SAT_FATAL, "susetags: bad =Shr line: %s\n", pd.share_with[i]);
974                 exit(1);
975               }
976
977             Id name = str2id(pool, sp[0], 1);
978             Id evr = makeevr(pool, join2(sp[1], "-", sp[2]));
979             Id arch = str2id(pool, sp[3], 1);
980             unsigned n, nn;
981             Solvable *found = 0;
982             for (n = repo->start, nn = repo->start + last_found;
983                  n < repo->end; n++, nn++)
984               {
985                 if (nn >= repo->end)
986                   nn = repo->start;
987                 found = pool->solvables + nn;
988                 if (found->repo == repo
989                     && found->name == name
990                     && found->evr == evr
991                     && found->arch == arch)
992                   {
993                     last_found = nn - repo->start;
994                     break;
995                   }
996               }
997             if (n != repo->end)
998               repodata_merge_some_attrs(data, repo->start + i, repo->start + last_found, &keyidmap, 0);
999             free(pd.share_with[i]);
1000           }
1001       free(pd.share_with);
1002       map_free(&keyidmap);
1003     }
1004
1005   sat_free(joinhash);
1006   if (!(flags & REPO_NO_INTERNALIZE))
1007     repodata_internalize(data);
1008
1009   if (pd.common.tmp)
1010     free(pd.common.tmp);
1011   free(line);
1012   join_freemem();
1013 }