tools/dumpsolv.c

   1 /*
   2  * Copyright (c) 2007, Novell Inc.
   3  *
   4  * This program is licensed under the BSD license, read LICENSE.BSD
   5  * for further information
   6  */
   7
   8 #include <stdio.h>
   9 #include <stdlib.h>
  10 #include <unistd.h>
  11 #include <string.h>
  12
  13 static int with_attr;
  14 static int dump_json;
  15
  16 #include "pool.h"
  17 #include "repo_solv.h"
  18
  19
  20 static int
  21 dump_attr(Repo *repo, Repodata *data, Repokey *key, KeyValue *kv)
  22 {
  23   const char *keyname;
  24   KeyValue *kvp;
  25   int indent = 0;
  26
  27   keyname = pool_id2str(repo->pool, key->name);
  28   for (kvp = kv; (kvp = kvp->parent) != 0; indent += 2)
  29     printf("  ");
  30   switch(key->type)
  31     {
  32     case REPOKEY_TYPE_ID:
  33       if (data && data->localpool)
  34         kv->str = stringpool_id2str(&data->spool, kv->id);
  35       else
  36         kv->str = pool_dep2str(repo->pool, kv->id);
  37       printf("%s: %s\n", keyname, kv->str);
  38       break;
  39     case REPOKEY_TYPE_CONSTANTID:
  40       printf("%s: %s\n", keyname, pool_dep2str(repo->pool, kv->id));
  41       break;
  42     case REPOKEY_TYPE_IDARRAY:
  43       if (!kv->entry)
  44         printf("%s:\n%*s", keyname, indent, "");
  45       if (data && data->localpool)
  46         printf("  %s\n", stringpool_id2str(&data->spool, kv->id));
  47       else
  48         printf("  %s\n", pool_dep2str(repo->pool, kv->id));
  49       break;
  50     case REPOKEY_TYPE_STR:
  51       printf("%s: %s\n", keyname, kv->str);
  52       break;
  53     case REPOKEY_TYPE_MD5:
  54     case REPOKEY_TYPE_SHA1:
  55     case REPOKEY_TYPE_SHA256:
  56       printf("%s: %s (%s)\n", keyname, repodata_chk2str(data, key->type, (unsigned char *)kv->str), pool_id2str(repo->pool, key->type));
  57       break;
  58     case REPOKEY_TYPE_VOID:
  59       printf("%s: (void)\n", keyname);
  60       break;
  61     case REPOKEY_TYPE_U32:
  62     case REPOKEY_TYPE_CONSTANT:
  63       printf("%s: %u\n", keyname, kv->num);
  64       break;
  65     case REPOKEY_TYPE_NUM:
  66       printf("%s: %llu\n", keyname, SOLV_KV_NUM64(kv));
  67       break;
  68     case REPOKEY_TYPE_BINARY:
  69       if (kv->num)
  70         printf("%s: %02x..%02x len %u\n", keyname, (unsigned char)kv->str[0], (unsigned char)kv->str[kv->num - 1], kv->num);
  71       else
  72         printf("%s: len 0\n", keyname);
  73       break;
  74     case REPOKEY_TYPE_DIRNUMNUMARRAY:
  75       if (!kv->entry)
  76         printf("%s:\n%*s", keyname, indent, "");
  77       printf("  %s %u %u\n", repodata_dir2str(data, kv->id, 0), kv->num, kv->num2);
  78       break;
  79     case REPOKEY_TYPE_DIRSTRARRAY:
  80       if (!kv->entry)
  81         printf("%s:\n%*s", keyname, indent, "");
  82       printf("  %s\n", repodata_dir2str(data, kv->id, kv->str));
  83       break;
  84     case REPOKEY_TYPE_FIXARRAY:
  85     case REPOKEY_TYPE_FLEXARRAY:
  86       if (!kv->entry)
  87         printf("%s:\n", keyname);
  88       else
  89         printf("\n");
  90       break;
  91     default:
  92       printf("%s: ?\n", keyname);
  93       break;
  94     }
  95   return 0;
  96 }
  97
  98 static const char *
  99 jsonstring(Pool *pool, const char *s)
 100 {
 101   int needed = 0;
 102   const unsigned char *s1;
 103   char *r, *rp;
 104
 105   for (s1 = (const unsigned char *)s; *s1; s1++)
 106     {
 107       if (*s1 < 32)
 108         needed += *s1 == '\n' ? 2 : 6;
 109       else if (*s1 == '\\' || *s1 == '\"')
 110         needed += 2;
 111       else
 112         needed++;
 113     }
 114   r = rp = pool_alloctmpspace(pool, needed + 3);
 115   *rp++ = '\"';
 116   for (s1 = (const unsigned char *)s; *s1; s1++)
 117     {
 118       if (*s1 < 32)
 119         {
 120           int x;
 121           if (*s1 == '\n')
 122             {
 123               *rp++ = '\\';
 124               *rp++ = 'n';
 125               continue;
 126             }
 127           *rp++ = '\\';
 128           *rp++ = 'u';
 129           *rp++ = '0';
 130           *rp++ = '0';
 131           x = *s1 / 16;
 132           *rp++ = (x < 10 ? '0' : 'a' - 10) + x;
 133           x = *s1 & 15;
 134           *rp++ = (x < 10 ? '0' : 'a' - 10) + x;
 135         }
 136       else if (*s1 == '\\' || *s1 == '\"')
 137         {
 138           *rp++ = '\\';
 139           *rp++ = *s1;
 140         }
 141       else
 142         *rp++ = *s1;
 143     }
 144   *rp++ = '\"';
 145   *rp = 0;
 146   return r;
 147 }
 148
 149 struct cbdata {
 150   unsigned char *first;
 151   int nfirst;
 152   int baseindent;
 153 };
 154
 155 static int
 156 dump_attr_json(Repo *repo, Repodata *data, Repokey *key, KeyValue *kv, struct cbdata *cbdata)
 157 {
 158   Pool *pool = repo->pool;
 159   const char *keyname;
 160   KeyValue *kvp;
 161   int indent = cbdata->baseindent;
 162   int isarray = 0;
 163   const char *str;
 164   int depth = 0;
 165
 166   keyname = pool_id2str(repo->pool, key->name);
 167   for (kvp = kv; (kvp = kvp->parent) != 0; indent += 4)
 168     depth++;
 169   if (cbdata->nfirst < depth + 1)
 170     {
 171       cbdata->first = solv_realloc(cbdata->first, depth + 16);
 172       memset(cbdata->first + cbdata->nfirst, 0, depth + 16 - cbdata->nfirst);
 173       cbdata->nfirst = depth + 16;
 174     }
 175   switch(key->type)
 176     {
 177     case REPOKEY_TYPE_IDARRAY:
 178     case REPOKEY_TYPE_DIRNUMNUMARRAY:
 179     case REPOKEY_TYPE_DIRSTRARRAY:
 180       isarray = 1;
 181       break;
 182     case REPOKEY_TYPE_FIXARRAY:
 183     case REPOKEY_TYPE_FLEXARRAY:
 184       isarray = 2;
 185       break;
 186     default:
 187       break;
 188     }
 189   if (!isarray || !kv->entry)
 190     {
 191       if (cbdata->first[depth])
 192         printf(",\n");
 193       printf("%*s%s: ", indent, "", jsonstring(pool, keyname));
 194       cbdata->first[depth] = 1;
 195     }
 196   if (isarray == 1 && !kv->entry)
 197     printf("[\n%*s", indent + 2, "");
 198   else if (isarray == 1 && kv->entry)
 199     printf("%*s", indent + 2, "");
 200   switch(key->type)
 201     {
 202     case REPOKEY_TYPE_ID:
 203       if (data && data->localpool)
 204         str = stringpool_id2str(&data->spool, kv->id);
 205       else
 206         str = pool_dep2str(repo->pool, kv->id);
 207       printf("%s", jsonstring(pool, str));
 208       break;
 209     case REPOKEY_TYPE_CONSTANTID:
 210       str = pool_dep2str(repo->pool, kv->id);
 211       printf("%s", jsonstring(pool, str));
 212       break;
 213     case REPOKEY_TYPE_IDARRAY:
 214       if (data && data->localpool)
 215         str = stringpool_id2str(&data->spool, kv->id);
 216       else
 217         str = pool_dep2str(repo->pool, kv->id);
 218       printf("%s", jsonstring(pool, str));
 219       break;
 220     case REPOKEY_TYPE_STR:
 221       str = kv->str;
 222       printf("%s", jsonstring(pool, str));
 223       break;
 224     case REPOKEY_TYPE_MD5:
 225     case REPOKEY_TYPE_SHA1:
 226     case REPOKEY_TYPE_SHA256:
 227       printf("{\n");
 228       printf("%*s  \"value\": %s,\n", indent, "", jsonstring(pool, repodata_chk2str(data, key->type, (unsigned char *)kv->str)));
 229       printf("%*s  \"type\": %s\n", indent, "", jsonstring(pool, pool_id2str(repo->pool, key->type)));
 230       printf("%*s}", indent, "");
 231       break;
 232     case REPOKEY_TYPE_VOID:
 233       printf("null");
 234       break;
 235     case REPOKEY_TYPE_U32:
 236     case REPOKEY_TYPE_CONSTANT:
 237       printf("%u", kv->num);
 238       break;
 239     case REPOKEY_TYPE_NUM:
 240       printf("%llu", SOLV_KV_NUM64(kv));
 241       break;
 242     case REPOKEY_TYPE_BINARY:
 243       printf("\"<binary>\"");
 244       break;
 245     case REPOKEY_TYPE_DIRNUMNUMARRAY:
 246       printf("{\n");
 247       printf("%*s    \"dir\": %s,\n", indent, "", jsonstring(pool, repodata_dir2str(data, kv->id, 0)));
 248       printf("%*s    \"num1\": %u,\n", indent, "", kv->num);
 249       printf("%*s    \"num2\": %u\n", indent, "", kv->num2);
 250       printf("%*s  }", indent, "");
 251       break;
 252     case REPOKEY_TYPE_DIRSTRARRAY:
 253       printf("%s", jsonstring(pool, repodata_dir2str(data, kv->id, kv->str)));
 254       break;
 255     case REPOKEY_TYPE_FIXARRAY:
 256     case REPOKEY_TYPE_FLEXARRAY:
 257       cbdata->first[depth + 1] = 0;
 258       if (!kv->entry)
 259         printf("[\n");
 260       else
 261         {
 262           if (kv->eof != 2)
 263             printf("\n%*s  },\n", indent, "");
 264           else
 265             printf("\n%*s  }\n", indent, "");
 266         }
 267       if (kv->eof != 2)
 268         printf("%*s  {\n", indent, "");
 269       else
 270         printf("%*s]", indent, "");
 271       break;
 272     default:
 273       printf("\"?\"");
 274       break;
 275     }
 276   if (isarray == 1)
 277     {
 278       if (!kv->eof)
 279         printf(",\n");
 280       else
 281         printf("\n%*s]", indent, "");
 282     }
 283   return 0;
 284 }
 285
 286 static int
 287 dump_repodata_cb(void *vcbdata, Solvable *s, Repodata *data, Repokey *key, KeyValue *kv)
 288 {
 289   if (key->name == REPOSITORY_SOLVABLES)
 290     return SEARCH_NEXT_SOLVABLE;
 291   if (!dump_json)
 292     return dump_attr(data->repo, data, key, kv);
 293   else
 294     return dump_attr_json(data->repo, data, key, kv, vcbdata);
 295 }
 296
 297 static void
 298 dump_repodata(Repo *repo)
 299 {
 300   unsigned int i;
 301   Repodata *data;
 302   if (repo->nrepodata == 0)
 303     return;
 304   printf("repo contains %d repodata sections:\n", repo->nrepodata - 1);
 305   FOR_REPODATAS(repo, i, data)
 306     {
 307       unsigned int j;
 308       printf("\nrepodata %d has %d keys, %d schemata\n", i, data->nkeys - 1, data->nschemata - 1);
 309       for (j = 1; j < data->nkeys; j++)
 310         printf("  %s (type %s size %d storage %d)\n", pool_id2str(repo->pool, data->keys[j].name), pool_id2str(repo->pool, data->keys[j].type), data->keys[j].size, data->keys[j].storage);
 311       if (data->localpool)
 312         printf("  localpool has %d strings, size is %d\n", data->spool.nstrings, data->spool.sstrings);
 313       if (data->dirpool.ndirs)
 314         printf("  localpool has %d directories\n", data->dirpool.ndirs);
 315       printf("\n");
 316       repodata_search(data, SOLVID_META, 0, SEARCH_ARRAYSENTINEL|SEARCH_SUB, dump_repodata_cb, 0);
 317     }
 318   printf("\n");
 319 }
 320
 321 static void
 322 dump_repodata_json(Repo *repo, struct cbdata *cbdata)
 323 {
 324   unsigned int i;
 325   Repodata *data;
 326   if (repo->nrepodata == 0)
 327     return;
 328   cbdata->baseindent = 6;
 329   FOR_REPODATAS(repo, i, data)
 330     repodata_search(data, SOLVID_META, 0, SEARCH_ARRAYSENTINEL|SEARCH_SUB, dump_repodata_cb, cbdata);
 331 }
 332
 333 /*
 334  * dump all attributes for Id <p>
 335  */
 336
 337 void
 338 dump_solvable(Repo *repo, Id p, struct cbdata *cbdata)
 339 {
 340   Dataiterator di;
 341   dataiterator_init(&di, repo->pool, repo, p, 0, 0, SEARCH_ARRAYSENTINEL|SEARCH_SUB);
 342   if (cbdata && cbdata->first)
 343     cbdata->first[0] = 0;
 344   if (cbdata)
 345     cbdata->baseindent = 10;
 346   while (dataiterator_step(&di))
 347     {
 348       if (!dump_json)
 349         dump_attr(repo, di.data, di.key, &di.kv);
 350       else
 351         dump_attr_json(repo, di.data, di.key, &di.kv, cbdata);
 352     }
 353   dataiterator_free(&di);
 354 }
 355
 356 static int
 357 loadcallback(Pool *pool, Repodata *data, void *vdata)
 358 {
 359   FILE *fp = 0;
 360   int r;
 361   const char *location;
 362
 363   location = repodata_lookup_str(data, SOLVID_META, REPOSITORY_LOCATION);
 364   if (!location || !with_attr)
 365     return 0;
 366   fprintf(stderr, "[Loading SOLV file %s]\n", location);
 367   fp = fopen (location, "r");
 368   if (!fp)
 369     {
 370       perror(location);
 371       return 0;
 372     }
 373   r = repo_add_solv(data->repo, fp, REPO_USE_LOADING|REPO_LOCALPOOL);
 374   fclose(fp);
 375   return !r ? 1 : 0;
 376 }
 377
 378
 379 static void
 380 usage(int status)
 381 {
 382   fprintf( stderr, "\nUsage:\n"
 383            "dumpsolv [-a] [-j] [<solvfile>]\n"
 384            "  -a  read attributes.\n"
 385            "  -j  dump json format.\n"
 386            );
 387   exit(status);
 388 }
 389
 390 int main(int argc, char **argv)
 391 {
 392   Repo *repo;
 393   Pool *pool;
 394   int c, i, j, n;
 395   Solvable *s;
 396
 397   pool = pool_create();
 398   pool_setloadcallback(pool, loadcallback, 0);
 399
 400   while ((c = getopt(argc, argv, "haj")) >= 0)
 401     {
 402       switch(c)
 403         {
 404         case 'h':
 405           usage(0);
 406           break;
 407         case 'a':
 408           with_attr = 1;
 409           break;
 410         case 'j':
 411           dump_json = 1;
 412           break;
 413         default:
 414           usage(1);
 415           break;
 416         }
 417     }
 418   if (!dump_json)
 419     pool_setdebuglevel(pool, 1);
 420   if (dump_json)
 421     pool->debugmask |= SOLV_DEBUG_TO_STDERR;
 422   for (; optind < argc; optind++)
 423     {
 424       if (freopen(argv[optind], "r", stdin) == 0)
 425         {
 426           perror(argv[optind]);
 427           exit(1);
 428         }
 429       repo = repo_create(pool, argv[optind]);
 430       if (repo_add_solv(repo, stdin, 0))
 431         {
 432           fprintf(stderr, "could not read repository: %s\n", pool_errstr(pool));
 433           exit(1);
 434         }
 435     }
 436   if (!pool->urepos)
 437     {
 438       repo = repo_create(pool, argc != 1 ? argv[1] : "<stdin>");
 439       if (repo_add_solv(repo, stdin, 0))
 440         {
 441           fprintf(stderr, "could not read repository: %s\n", pool_errstr(pool));
 442           exit(1);
 443         }
 444     }
 445
 446   if (dump_json)
 447     {
 448       int openrepo = 0;
 449       struct cbdata cbdata;
 450
 451       memset(&cbdata, 0, sizeof(cbdata));
 452       printf("{\n");
 453       printf("  \"repositories\": [\n");
 454       FOR_REPOS(j, repo)
 455         {
 456           int open = 0;
 457
 458           if (openrepo)
 459             printf("\n    },");
 460           printf("    {\n");
 461           openrepo = 1;
 462           if (cbdata.first)
 463             cbdata.first[0] = 0;
 464           dump_repodata_json(repo, &cbdata);
 465           if (cbdata.first[0])
 466             printf(",\n");
 467           printf("      \"solvables\": [\n");
 468           FOR_REPO_SOLVABLES(repo, i, s)
 469             {
 470               if (open)
 471                 printf("\n        },\n");
 472               printf("        {\n");
 473               open = 1;
 474               dump_solvable(repo, i, &cbdata);
 475             }
 476           if (open)
 477             printf("\n        }\n");
 478           printf("      ]\n");
 479         }
 480       if (openrepo)
 481         printf("    }\n");
 482       printf("  ]\n");
 483       printf("}\n");
 484       solv_free(cbdata.first);
 485     }
 486   else
 487     {
 488       printf("pool contains %d strings, %d rels, string size is %d\n", pool->ss.nstrings, pool->nrels, pool->ss.sstrings);
 489       n = 0;
 490       FOR_REPOS(j, repo)
 491         {
 492           dump_repodata(repo);
 493           printf("repo %d contains %d solvables\n", j, repo->nsolvables);
 494           printf("repo start: %d end: %d\n", repo->start, repo->end);
 495           FOR_REPO_SOLVABLES(repo, i, s)
 496             {
 497               n++;
 498               printf("\n");
 499               printf("solvable %d (%d):\n", n, i);
 500               dump_solvable(repo, i, 0);
 501             }
 502         }
 503     }
 504   pool_free(pool);
 505   exit(0);
 506 }