lib/header.c

   1 /** \ingroup header
   2  * \file lib/header.c
   3  */
   4
   5 /* RPM - Copyright (C) 1995-2002 Red Hat Software */
   6
   7 /* Data written to file descriptors is in network byte order.    */
   8 /* Data read from file descriptors is expected to be in          */
   9 /* network byte order and is converted on the fly to host order. */
  10
  11 #include "system.h"
  12
  13 #include <rpm/rpmtypes.h>
  14 #include <rpm/rpmstring.h>
  15 #include "lib/header_internal.h"
  16
  17 #include "debug.h"
  18
  19 int _hdr_debug = 0;
  20
  21 /** \ingroup header
  22  */
  23 const unsigned char rpm_header_magic[8] = {
  24         0x8e, 0xad, 0xe8, 0x01, 0x00, 0x00, 0x00, 0x00
  25 };
  26
  27 /** \ingroup header
  28  * Alignment needed for header data types.
  29  */
  30 static const int typeAlign[16] =  {
  31     1,  /*!< RPM_NULL_TYPE */
  32     1,  /*!< RPM_CHAR_TYPE */
  33     1,  /*!< RPM_INT8_TYPE */
  34     2,  /*!< RPM_INT16_TYPE */
  35     4,  /*!< RPM_INT32_TYPE */
  36     8,  /*!< RPM_INT64_TYPE */
  37     1,  /*!< RPM_STRING_TYPE */
  38     1,  /*!< RPM_BIN_TYPE */
  39     1,  /*!< RPM_STRING_ARRAY_TYPE */
  40     1,  /*!< RPM_I18NSTRING_TYPE */
  41     0,
  42     0,
  43     0,
  44     0,
  45     0,
  46     0
  47 };
  48
  49 /** \ingroup header
  50  * Size of header data types.
  51  */
  52 static const int typeSizes[16] =  {
  53     0,  /*!< RPM_NULL_TYPE */
  54     1,  /*!< RPM_CHAR_TYPE */
  55     1,  /*!< RPM_INT8_TYPE */
  56     2,  /*!< RPM_INT16_TYPE */
  57     4,  /*!< RPM_INT32_TYPE */
  58     8,  /*!< RPM_INT64_TYPE */
  59     -1, /*!< RPM_STRING_TYPE */
  60     1,  /*!< RPM_BIN_TYPE */
  61     -1, /*!< RPM_STRING_ARRAY_TYPE */
  62     -1, /*!< RPM_I18NSTRING_TYPE */
  63     0,
  64     0,
  65     0,
  66     0,
  67     0,
  68     0
  69 };
  70
  71 /** \ingroup header
  72  * Maximum no. of bytes permitted in a header.
  73  */
  74 static const size_t headerMaxbytes = (32*1024*1024);
  75
  76 /** \ingroup header
  77  * HEADER_EXT_TAG format function prototype.
  78  * This is allowed to fail, which indicates the tag doesn't exist.
  79  *
  80  * @param h             header
  81  * @retval td           tag data container
  82  * @return              0 on success
  83  */
  84 typedef int (*headerTagTagFunction) (Header h, rpmtd td);
  85
  86 extern void *rpmHeaderTagFunc(rpmTag tag);
  87
  88 Header headerLink(Header h)
  89 {
  90     if (h == NULL) return NULL;
  91
  92     h->nrefs++;
  93 if (_hdr_debug)
  94 fprintf(stderr, "--> h  %p ++ %d at %s:%u\n", h, h->nrefs, __FILE__, __LINE__);
  95
  96     return h;
  97 }
  98
  99 Header headerUnlink(Header h)
 100 {
 101     if (h == NULL) return NULL;
 102 if (_hdr_debug)
 103 fprintf(stderr, "--> h  %p -- %d at %s:%u\n", h, h->nrefs, __FILE__, __LINE__);
 104     h->nrefs--;
 105     return NULL;
 106 }
 107
 108 Header headerFree(Header h)
 109 {
 110     (void) headerUnlink(h);
 111
 112     if (h == NULL || h->nrefs > 0)
 113         return NULL;    /* XXX return previous header? */
 114
 115     if (h->index) {
 116         indexEntry entry = h->index;
 117         int i;
 118         for (i = 0; i < h->indexUsed; i++, entry++) {
 119             if ((h->flags & HEADERFLAG_ALLOCATED) && ENTRY_IS_REGION(entry)) {
 120                 if (entry->length > 0) {
 121                     int32_t * ei = entry->data;
 122                     if ((ei - 2) == h->blob) h->blob = _free(h->blob);
 123                     entry->data = NULL;
 124                 }
 125             } else if (!ENTRY_IN_REGION(entry)) {
 126                 entry->data = _free(entry->data);
 127             }
 128             entry->data = NULL;
 129         }
 130         h->index = _free(h->index);
 131     }
 132
 133     h = _free(h);
 134     return h;
 135 }
 136
 137 Header headerNew(void)
 138 {
 139     Header h = xcalloc(1, sizeof(*h));
 140
 141     h->blob = NULL;
 142     h->indexAlloced = INDEX_MALLOC_SIZE;
 143     h->indexUsed = 0;
 144     h->instance = 0;
 145     h->flags |= HEADERFLAG_SORTED;
 146
 147     h->index = (h->indexAlloced
 148         ? xcalloc(h->indexAlloced, sizeof(*h->index))
 149         : NULL);
 150
 151     h->nrefs = 0;
 152     return headerLink(h);
 153 }
 154
 155 int headerVerifyInfo(int il, int dl, const void * pev, void * iv, int negate)
 156 {
 157     entryInfo pe = (entryInfo) pev;
 158     entryInfo info = iv;
 159     int i;
 160
 161     for (i = 0; i < il; i++) {
 162         info->tag = ntohl(pe[i].tag);
 163         info->type = ntohl(pe[i].type);
 164         info->offset = ntohl(pe[i].offset);
 165         if (negate)
 166             info->offset = -info->offset;
 167         info->count = ntohl(pe[i].count);
 168
 169         if (hdrchkType(info->type))
 170             return i;
 171         if (hdrchkAlign(info->type, info->offset))
 172             return i;
 173         if (!negate && hdrchkRange(dl, info->offset))
 174             return i;
 175         if (hdrchkData(info->count))
 176             return i;
 177
 178     }
 179     return -1;
 180 }
 181
 182 /**
 183  */
 184 static int indexCmp(const void * avp, const void * bvp)
 185 {
 186     indexEntry ap = (indexEntry) avp, bp = (indexEntry) bvp;
 187     return (ap->info.tag - bp->info.tag);
 188 }
 189
 190 void headerSort(Header h)
 191 {
 192     if (!(h->flags & HEADERFLAG_SORTED)) {
 193         qsort(h->index, h->indexUsed, sizeof(*h->index), indexCmp);
 194         h->flags |= HEADERFLAG_SORTED;
 195     }
 196 }
 197
 198 /**
 199  */
 200 static int offsetCmp(const void * avp, const void * bvp)
 201 {
 202     indexEntry ap = (indexEntry) avp, bp = (indexEntry) bvp;
 203     int rc = (ap->info.offset - bp->info.offset);
 204
 205     if (rc == 0) {
 206         /* Within a region, entries sort by address. Added drips sort by tag. */
 207         if (ap->info.offset < 0)
 208             rc = (((char *)ap->data) - ((char *)bp->data));
 209         else
 210             rc = (ap->info.tag - bp->info.tag);
 211     }
 212     return rc;
 213 }
 214
 215 /** \ingroup header
 216  * Restore tags in header to original ordering.
 217  * @param h             header
 218  */
 219 void headerUnsort(Header h)
 220 {
 221     qsort(h->index, h->indexUsed, sizeof(*h->index), offsetCmp);
 222 }
 223
 224 unsigned headerSizeof(Header h, enum hMagic magicp)
 225 {
 226     indexEntry entry;
 227     unsigned int size = 0;
 228     unsigned int pad = 0;
 229     int i;
 230
 231     if (h == NULL)
 232         return size;
 233
 234     headerSort(h);
 235
 236     switch (magicp) {
 237     case HEADER_MAGIC_YES:
 238         size += sizeof(rpm_header_magic);
 239         break;
 240     case HEADER_MAGIC_NO:
 241         break;
 242     }
 243
 244     size += 2 * sizeof(int32_t);        /* count of index entries */
 245
 246     for (i = 0, entry = h->index; i < h->indexUsed; i++, entry++) {
 247         unsigned diff;
 248         rpmTagType type;
 249
 250         /* Regions go in as is ... */
 251         if (ENTRY_IS_REGION(entry)) {
 252             size += entry->length;
 253             /* XXX Legacy regions do not include the region tag and data. */
 254             if (i == 0 && (h->flags & HEADERFLAG_LEGACY))
 255                 size += sizeof(struct entryInfo_s) + entry->info.count;
 256             continue;
 257         }
 258
 259         /* ... and region elements are skipped. */
 260         if (entry->info.offset < 0)
 261             continue;
 262
 263         /* Alignment */
 264         type = entry->info.type;
 265         if (typeSizes[type] > 1) {
 266             diff = typeSizes[type] - (size % typeSizes[type]);
 267             if (diff != typeSizes[type]) {
 268                 size += diff;
 269                 pad += diff;
 270             }
 271         }
 272
 273         size += sizeof(struct entryInfo_s) + entry->length;
 274     }
 275
 276     return size;
 277 }
 278
 279 /**
 280  * Return length of entry data.
 281  * @param type          entry data type
 282  * @param p             entry data
 283  * @param count         entry item count
 284  * @param onDisk        data is concatenated strings (with NUL's))?
 285  * @param pend          pointer to end of data (or NULL)
 286  * @return              no. bytes in data, -1 on failure
 287  */
 288 static int dataLength(rpmTagType type, rpm_constdata_t p, rpm_count_t count,
 289                          int onDisk, rpm_constdata_t pend)
 290 {
 291     const unsigned char * s = p;
 292     const unsigned char * se = pend;
 293     int length = 0;
 294
 295     switch (type) {
 296     case RPM_STRING_TYPE:
 297         if (count != 1)
 298             return -1;
 299         while (*s++) {
 300             if (se && s > se)
 301                 return -1;
 302             length++;
 303         }
 304         length++;       /* count nul terminator too. */
 305         break;
 306
 307     case RPM_STRING_ARRAY_TYPE:
 308     case RPM_I18NSTRING_TYPE:
 309         /* These are like RPM_STRING_TYPE, except they're *always* an array */
 310         /* Compute sum of length of all strings, including nul terminators */
 311
 312         if (onDisk) {
 313             while (count--) {
 314                 length++;       /* count nul terminator too */
 315                while (*s++) {
 316                     if (se && s > se)
 317                         return -1;
 318                     length++;
 319                 }
 320             }
 321         } else {
 322             const char ** av = (const char **)p;
 323             while (count--) {
 324                 /* add one for null termination */
 325                 length += strlen(*av++) + 1;
 326             }
 327         }
 328         break;
 329
 330     default:
 331         if (typeSizes[type] == -1)
 332             return -1;
 333         length = typeSizes[(type & 0xf)] * count;
 334         if (length < 0 || (se && (s + length) > se))
 335             return -1;
 336         break;
 337     }
 338
 339     return length;
 340 }
 341
 342 /** \ingroup header
 343  * Swap int32_t and int16_t arrays within header region.
 344  *
 345  * This code is way more twisty than I would like.
 346  *
 347  * A bug with RPM_I18NSTRING_TYPE in rpm-2.5.x (fixed in August 1998)
 348  * causes the offset and length of elements in a header region to disagree
 349  * regarding the total length of the region data.
 350  *
 351  * The "fix" is to compute the size using both offset and length and
 352  * return the larger of the two numbers as the size of the region.
 353  * Kinda like computing left and right Riemann sums of the data elements
 354  * to determine the size of a data structure, go figger :-).
 355  *
 356  * There's one other twist if a header region tag is in the set to be swabbed,
 357  * as the data for a header region is located after all other tag data.
 358  *
 359  * @param entry         header entry
 360  * @param il            no. of entries
 361  * @param dl            start no. bytes of data
 362  * @param pe            header physical entry pointer (swapped)
 363  * @param dataStart     header data start
 364  * @param dataEnd       header data end
 365  * @param regionid      region offset
 366  * @return              no. bytes of data in region, -1 on error
 367  */
 368 static int regionSwab(indexEntry entry, int il, int dl,
 369                 entryInfo pe,
 370                 unsigned char * dataStart,
 371                 const unsigned char * dataEnd,
 372                 int regionid)
 373 {
 374     unsigned char * tprev = NULL;
 375     unsigned char * t = NULL;
 376     int tdel = 0;
 377     int tl = dl;
 378     struct indexEntry_s ieprev;
 379
 380     memset(&ieprev, 0, sizeof(ieprev));
 381     for (; il > 0; il--, pe++) {
 382         struct indexEntry_s ie;
 383         rpmTagType type;
 384
 385         ie.info.tag = ntohl(pe->tag);
 386         ie.info.type = ntohl(pe->type);
 387         ie.info.count = ntohl(pe->count);
 388         ie.info.offset = ntohl(pe->offset);
 389
 390         if (hdrchkType(ie.info.type))
 391             return -1;
 392         if (hdrchkData(ie.info.count))
 393             return -1;
 394         if (hdrchkData(ie.info.offset))
 395             return -1;
 396         if (hdrchkAlign(ie.info.type, ie.info.offset))
 397             return -1;
 398
 399         ie.data = t = dataStart + ie.info.offset;
 400         if (dataEnd && t >= dataEnd)
 401             return -1;
 402
 403         ie.length = dataLength(ie.info.type, ie.data, ie.info.count, 1, dataEnd);
 404         if (ie.length < 0 || hdrchkData(ie.length))
 405             return -1;
 406
 407         ie.rdlen = 0;
 408
 409         if (entry) {
 410             ie.info.offset = regionid;
 411             *entry = ie;        /* structure assignment */
 412             entry++;
 413         }
 414
 415         /* Alignment */
 416         type = ie.info.type;
 417         if (typeSizes[type] > 1) {
 418             unsigned diff;
 419             diff = typeSizes[type] - (dl % typeSizes[type]);
 420             if (diff != typeSizes[type]) {
 421                 dl += diff;
 422                 if (ieprev.info.type == RPM_I18NSTRING_TYPE)
 423                     ieprev.length += diff;
 424             }
 425         }
 426         tdel = (tprev ? (t - tprev) : 0);
 427         if (ieprev.info.type == RPM_I18NSTRING_TYPE)
 428             tdel = ieprev.length;
 429
 430         if (ie.info.tag >= HEADER_I18NTABLE) {
 431             tprev = t;
 432         } else {
 433             tprev = dataStart;
 434             /* XXX HEADER_IMAGE tags don't include region sub-tag. */
 435             if (ie.info.tag == HEADER_IMAGE)
 436                 tprev -= REGION_TAG_COUNT;
 437         }
 438
 439         /* Perform endian conversions */
 440         switch (ntohl(pe->type)) {
 441         case RPM_INT64_TYPE:
 442         {   uint64_t * it = (uint64_t *)t;
 443             for (; ie.info.count > 0; ie.info.count--, it += 1) {
 444                 if (dataEnd && ((unsigned char *)it) >= dataEnd)
 445                     return -1;
 446                 *it = htonll(*it);
 447             }
 448             t = (unsigned char *) it;
 449         }   break;
 450         case RPM_INT32_TYPE:
 451         {   int32_t * it = (int32_t *)t;
 452             for (; ie.info.count > 0; ie.info.count--, it += 1) {
 453                 if (dataEnd && ((unsigned char *)it) >= dataEnd)
 454                     return -1;
 455                 *it = htonl(*it);
 456             }
 457             t = (unsigned char *) it;
 458         }   break;
 459         case RPM_INT16_TYPE:
 460         {   int16_t * it = (int16_t *) t;
 461             for (; ie.info.count > 0; ie.info.count--, it += 1) {
 462                 if (dataEnd && ((unsigned char *)it) >= dataEnd)
 463                     return -1;
 464                 *it = htons(*it);
 465             }
 466             t = (unsigned char *) it;
 467         }   break;
 468         default:
 469             t += ie.length;
 470             break;
 471         }
 472
 473         dl += ie.length;
 474         tl += tdel;
 475         ieprev = ie;    /* structure assignment */
 476
 477     }
 478     tdel = (tprev ? (t - tprev) : 0);
 479     tl += tdel;
 480
 481     /* XXX
 482      * There are two hacks here:
 483      *  1) tl is 16b (i.e. REGION_TAG_COUNT) short while doing headerReload().
 484      *  2) the 8/98 rpm bug with inserting i18n tags needs to use tl, not dl.
 485      */
 486     if (tl+REGION_TAG_COUNT == dl)
 487         tl += REGION_TAG_COUNT;
 488
 489     return dl;
 490 }
 491
 492 /** \ingroup header
 493  * doHeaderUnload.
 494  * @param h             header
 495  * @retval *lengthPtr   no. bytes in unloaded header blob
 496  * @return              unloaded header blob (NULL on error)
 497  */
 498 static void * doHeaderUnload(Header h,
 499                 size_t * lengthPtr)
 500 {
 501     int32_t * ei = NULL;
 502     entryInfo pe;
 503     char * dataStart;
 504     char * te;
 505     unsigned pad;
 506     unsigned len;
 507     int32_t il = 0;
 508     int32_t dl = 0;
 509     indexEntry entry;
 510     rpmTagType type;
 511     int i;
 512     int drlen, ndribbles;
 513     int driplen, ndrips;
 514     int legacy = 0;
 515
 516     /* Sort entries by (offset,tag). */
 517     headerUnsort(h);
 518
 519     /* Compute (il,dl) for all tags, including those deleted in region. */
 520     pad = 0;
 521     drlen = ndribbles = driplen = ndrips = 0;
 522     for (i = 0, entry = h->index; i < h->indexUsed; i++, entry++) {
 523         if (ENTRY_IS_REGION(entry)) {
 524             int32_t rdl = -entry->info.offset;  /* negative offset */
 525             int32_t ril = rdl/sizeof(*pe);
 526             int rid = entry->info.offset;
 527
 528             il += ril;
 529             dl += entry->rdlen + entry->info.count;
 530             /* XXX Legacy regions do not include the region tag and data. */
 531             if (i == 0 && (h->flags & HEADERFLAG_LEGACY))
 532                 il += 1;
 533
 534             /* Skip rest of entries in region, but account for dribbles. */
 535             for (; i < h->indexUsed && entry->info.offset <= rid+1; i++, entry++) {
 536                 if (entry->info.offset <= rid)
 537                     continue;
 538
 539                 /* Alignment */
 540                 type = entry->info.type;
 541                 if (typeSizes[type] > 1) {
 542                     unsigned diff;
 543                     diff = typeSizes[type] - (dl % typeSizes[type]);
 544                     if (diff != typeSizes[type]) {
 545                         drlen += diff;
 546                         pad += diff;
 547                         dl += diff;
 548                     }
 549                 }
 550
 551                 ndribbles++;
 552                 il++;
 553                 drlen += entry->length;
 554                 dl += entry->length;
 555             }
 556             i--;
 557             entry--;
 558             continue;
 559         }
 560
 561         /* Ignore deleted drips. */
 562         if (entry->data == NULL || entry->length <= 0)
 563             continue;
 564
 565         /* Alignment */
 566         type = entry->info.type;
 567         if (typeSizes[type] > 1) {
 568             unsigned diff;
 569             diff = typeSizes[type] - (dl % typeSizes[type]);
 570             if (diff != typeSizes[type]) {
 571                 driplen += diff;
 572                 pad += diff;
 573                 dl += diff;
 574             } else
 575                 diff = 0;
 576         }
 577
 578         ndrips++;
 579         il++;
 580         driplen += entry->length;
 581         dl += entry->length;
 582     }
 583
 584     /* Sanity checks on header intro. */
 585     if (hdrchkTags(il) || hdrchkData(dl))
 586         goto errxit;
 587
 588     len = sizeof(il) + sizeof(dl) + (il * sizeof(*pe)) + dl;
 589
 590     ei = xmalloc(len);
 591     ei[0] = htonl(il);
 592     ei[1] = htonl(dl);
 593
 594     pe = (entryInfo) &ei[2];
 595     dataStart = te = (char *) (pe + il);
 596
 597     pad = 0;
 598     for (i = 0, entry = h->index; i < h->indexUsed; i++, entry++) {
 599         const char * src;
 600         unsigned char *t;
 601         int count;
 602         int rdlen;
 603
 604         if (entry->data == NULL || entry->length <= 0)
 605             continue;
 606
 607         t = (unsigned char*)te;
 608         pe->tag = htonl(entry->info.tag);
 609         pe->type = htonl(entry->info.type);
 610         pe->count = htonl(entry->info.count);
 611
 612         if (ENTRY_IS_REGION(entry)) {
 613             int32_t rdl = -entry->info.offset;  /* negative offset */
 614             int32_t ril = rdl/sizeof(*pe) + ndribbles;
 615             int rid = entry->info.offset;
 616
 617             src = (char *)entry->data;
 618             rdlen = entry->rdlen;
 619
 620             /* XXX Legacy regions do not include the region tag and data. */
 621             if (i == 0 && (h->flags & HEADERFLAG_LEGACY)) {
 622                 int32_t stei[4];
 623
 624                 legacy = 1;
 625                 memcpy(pe+1, src, rdl);
 626                 memcpy(te, src + rdl, rdlen);
 627                 te += rdlen;
 628
 629                 pe->offset = htonl(te - dataStart);
 630                 stei[0] = pe->tag;
 631                 stei[1] = pe->type;
 632                 stei[2] = htonl(-rdl-entry->info.count);
 633                 stei[3] = pe->count;
 634                 memcpy(te, stei, entry->info.count);
 635                 te += entry->info.count;
 636                 ril++;
 637                 rdlen += entry->info.count;
 638
 639                 count = regionSwab(NULL, ril, 0, pe, t, NULL, 0);
 640                 if (count != rdlen)
 641                     goto errxit;
 642
 643             } else {
 644
 645                 memcpy(pe+1, src + sizeof(*pe), ((ril-1) * sizeof(*pe)));
 646                 memcpy(te, src + (ril * sizeof(*pe)), rdlen+entry->info.count+drlen);
 647                 te += rdlen;
 648                 {
 649                     entryInfo se = (entryInfo)src;
 650                     int off = ntohl(se->offset);
 651                     pe->offset = (off) ? htonl(te - dataStart) : htonl(off);
 652                 }
 653                 te += entry->info.count + drlen;
 654
 655                 count = regionSwab(NULL, ril, 0, pe, t, NULL, 0);
 656                 if (count != (rdlen + entry->info.count + drlen))
 657                     goto errxit;
 658             }
 659
 660             /* Skip rest of entries in region. */
 661             while (i < h->indexUsed && entry->info.offset <= rid+1) {
 662                 i++;
 663                 entry++;
 664             }
 665             i--;
 666             entry--;
 667             pe += ril;
 668             continue;
 669         }
 670
 671         /* Ignore deleted drips. */
 672         if (entry->data == NULL || entry->length <= 0)
 673             continue;
 674
 675         /* Alignment */
 676         type = entry->info.type;
 677         if (typeSizes[type] > 1) {
 678             unsigned diff;
 679             diff = typeSizes[type] - ((te - dataStart) % typeSizes[type]);
 680             if (diff != typeSizes[type]) {
 681                 memset(te, 0, diff);
 682                 te += diff;
 683                 pad += diff;
 684             }
 685         }
 686
 687         pe->offset = htonl(te - dataStart);
 688
 689         /* copy data w/ endian conversions */
 690         switch (entry->info.type) {
 691         case RPM_INT64_TYPE:
 692             count = entry->info.count;
 693             src = entry->data;
 694             while (count--) {
 695                 *((uint64_t *)te) = htonll(*((uint64_t *)src));
 696                 te += sizeof(uint64_t);
 697                 src += sizeof(uint64_t);
 698             }
 699             break;
 700
 701         case RPM_INT32_TYPE:
 702             count = entry->info.count;
 703             src = entry->data;
 704             while (count--) {
 705                 *((int32_t *)te) = htonl(*((int32_t *)src));
 706                 te += sizeof(int32_t);
 707                 src += sizeof(int32_t);
 708             }
 709             break;
 710
 711         case RPM_INT16_TYPE:
 712             count = entry->info.count;
 713             src = entry->data;
 714             while (count--) {
 715                 *((int16_t *)te) = htons(*((int16_t *)src));
 716                 te += sizeof(int16_t);
 717                 src += sizeof(int16_t);
 718             }
 719             break;
 720
 721         default:
 722             memcpy(te, entry->data, entry->length);
 723             te += entry->length;
 724             break;
 725         }
 726         pe++;
 727     }
 728
 729     /* Insure that there are no memcpy underruns/overruns. */
 730     if (((char *)pe) != dataStart)
 731         goto errxit;
 732     if ((((char *)ei)+len) != te)
 733         goto errxit;
 734
 735     if (lengthPtr)
 736         *lengthPtr = len;
 737
 738     h->flags &= ~HEADERFLAG_SORTED;
 739     headerSort(h);
 740
 741     return (void *) ei;
 742
 743 errxit:
 744     ei = _free(ei);
 745     return (void *) ei;
 746 }
 747
 748 void * headerUnload(Header h)
 749 {
 750     size_t length;
 751     void * uh = doHeaderUnload(h, &length);
 752     return uh;
 753 }
 754
 755 /**
 756  * Find matching (tag,type) entry in header.
 757  * @param h             header
 758  * @param tag           entry tag
 759  * @param type          entry type
 760  * @return              header entry
 761  */
 762 static
 763 indexEntry findEntry(Header h, rpmTag tag, rpmTagType type)
 764 {
 765     indexEntry entry, entry2, last;
 766     struct indexEntry_s key;
 767
 768     if (h == NULL) return NULL;
 769     if (!(h->flags & HEADERFLAG_SORTED)) headerSort(h);
 770
 771     key.info.tag = tag;
 772
 773     entry2 = entry =
 774         bsearch(&key, h->index, h->indexUsed, sizeof(*h->index), indexCmp);
 775     if (entry == NULL)
 776         return NULL;
 777
 778     if (type == RPM_NULL_TYPE)
 779         return entry;
 780
 781     /* look backwards */
 782     while (entry->info.tag == tag && entry->info.type != type &&
 783            entry > h->index) entry--;
 784
 785     if (entry->info.tag == tag && entry->info.type == type)
 786         return entry;
 787
 788     last = h->index + h->indexUsed;
 789     /* FIX: entry2 = entry. Code looks bogus as well. */
 790     while (entry2->info.tag == tag && entry2->info.type != type &&
 791            entry2 < last) entry2++;
 792
 793     if (entry->info.tag == tag && entry->info.type == type)
 794         return entry;
 795
 796     return NULL;
 797 }
 798
 799 int headerDel(Header h, rpmTag tag)
 800 {
 801     indexEntry last = h->index + h->indexUsed;
 802     indexEntry entry, first;
 803     int ne;
 804
 805     entry = findEntry(h, tag, RPM_NULL_TYPE);
 806     if (!entry) return 1;
 807
 808     /* Make sure entry points to the first occurence of this tag. */
 809     while (entry > h->index && (entry - 1)->info.tag == tag)
 810         entry--;
 811
 812     /* Free data for tags being removed. */
 813     for (first = entry; first < last; first++) {
 814         rpm_data_t data;
 815         if (first->info.tag != tag)
 816             break;
 817         data = first->data;
 818         first->data = NULL;
 819         first->length = 0;
 820         if (ENTRY_IN_REGION(first))
 821             continue;
 822         data = _free(data);
 823     }
 824
 825     ne = (first - entry);
 826     if (ne > 0) {
 827         h->indexUsed -= ne;
 828         ne = last - first;
 829         if (ne > 0)
 830             memmove(entry, first, (ne * sizeof(*entry)));
 831     }
 832
 833     return 0;
 834 }
 835
 836 Header headerLoad(void * uh)
 837 {
 838     int32_t * ei = (int32_t *) uh;
 839     int32_t il = ntohl(ei[0]);          /* index length */
 840     int32_t dl = ntohl(ei[1]);          /* data length */
 841     size_t pvlen = sizeof(il) + sizeof(dl) +
 842                (il * sizeof(struct entryInfo_s)) + dl;
 843     void * pv = uh;
 844     Header h = NULL;
 845     entryInfo pe;
 846     unsigned char * dataStart;
 847     unsigned char * dataEnd;
 848     indexEntry entry;
 849     int rdlen;
 850     int i;
 851
 852     /* Sanity checks on header intro. */
 853     if (hdrchkTags(il) || hdrchkData(dl))
 854         goto errxit;
 855
 856     ei = (int32_t *) pv;
 857     pe = (entryInfo) &ei[2];
 858     dataStart = (unsigned char *) (pe + il);
 859     dataEnd = dataStart + dl;
 860
 861     h = xcalloc(1, sizeof(*h));
 862     h->blob = uh;
 863     h->indexAlloced = il + 1;
 864     h->indexUsed = il;
 865     h->instance = 0;
 866     h->index = xcalloc(h->indexAlloced, sizeof(*h->index));
 867     h->flags |= HEADERFLAG_SORTED;
 868     h->nrefs = 0;
 869     h = headerLink(h);
 870
 871     entry = h->index;
 872     i = 0;
 873     if (!(htonl(pe->tag) < HEADER_I18NTABLE)) {
 874         h->flags |= HEADERFLAG_LEGACY;
 875         entry->info.type = REGION_TAG_TYPE;
 876         entry->info.tag = HEADER_IMAGE;
 877         entry->info.count = REGION_TAG_COUNT;
 878         entry->info.offset = ((unsigned char *)pe - dataStart); /* negative offset */
 879
 880         entry->data = pe;
 881         entry->length = pvlen - sizeof(il) - sizeof(dl);
 882         rdlen = regionSwab(entry+1, il, 0, pe, dataStart, dataEnd, entry->info.offset);
 883         if (rdlen != dl)
 884             goto errxit;
 885         entry->rdlen = rdlen;
 886         entry++;
 887         h->indexUsed++;
 888     } else {
 889         int32_t rdl;
 890         int32_t ril;
 891
 892         h->flags &= ~HEADERFLAG_LEGACY;
 893
 894         entry->info.type = htonl(pe->type);
 895         entry->info.count = htonl(pe->count);
 896
 897         if (hdrchkType(entry->info.type))
 898             goto errxit;
 899         if (hdrchkTags(entry->info.count))
 900             goto errxit;
 901
 902         {   int off = ntohl(pe->offset);
 903
 904             if (hdrchkData(off))
 905                 goto errxit;
 906             if (off) {
 907                 size_t nb = REGION_TAG_COUNT;
 908                 int32_t stei[nb];
 909                 /* XXX Hmm, why the copy? */
 910                 memcpy(&stei, dataStart + off, nb);
 911                 rdl = -ntohl(stei[2]);  /* negative offset */
 912                 ril = rdl/sizeof(*pe);
 913                 if (hdrchkTags(ril) || hdrchkData(rdl))
 914                     goto errxit;
 915                 entry->info.tag = htonl(pe->tag);
 916             } else {
 917                 ril = il;
 918                 rdl = (ril * sizeof(struct entryInfo_s));
 919                 entry->info.tag = HEADER_IMAGE;
 920             }
 921         }
 922         entry->info.offset = -rdl;      /* negative offset */
 923
 924         entry->data = pe;
 925         entry->length = pvlen - sizeof(il) - sizeof(dl);
 926         rdlen = regionSwab(entry+1, ril-1, 0, pe+1, dataStart, dataEnd, entry->info.offset);
 927         if (rdlen < 0)
 928             goto errxit;
 929         entry->rdlen = rdlen;
 930
 931         if (ril < h->indexUsed) {
 932             indexEntry newEntry = entry + ril;
 933             int ne = (h->indexUsed - ril);
 934             int rid = entry->info.offset+1;
 935             int rc;
 936
 937             /* Load dribble entries from region. */
 938             rc = regionSwab(newEntry, ne, 0, pe+ril, dataStart, dataEnd, rid);
 939             if (rc < 0)
 940                 goto errxit;
 941             rdlen += rc;
 942
 943           { indexEntry firstEntry = newEntry;
 944             int save = h->indexUsed;
 945             int j;
 946
 947             /* Dribble entries replace duplicate region entries. */
 948             h->indexUsed -= ne;
 949             for (j = 0; j < ne; j++, newEntry++) {
 950                 (void) headerDel(h, newEntry->info.tag);
 951                 if (newEntry->info.tag == RPMTAG_BASENAMES)
 952                     (void) headerDel(h, RPMTAG_OLDFILENAMES);
 953             }
 954
 955             /* If any duplicate entries were replaced, move new entries down. */
 956             if (h->indexUsed < (save - ne)) {
 957                 memmove(h->index + h->indexUsed, firstEntry,
 958                         (ne * sizeof(*entry)));
 959             }
 960             h->indexUsed += ne;
 961           }
 962         }
 963     }
 964
 965     h->flags &= ~HEADERFLAG_SORTED;
 966     headerSort(h);
 967     h->flags |= HEADERFLAG_ALLOCATED;
 968
 969     return h;
 970
 971 errxit:
 972     if (h) {
 973         h->index = _free(h->index);
 974         h = _free(h);
 975     }
 976     return h;
 977 }
 978
 979 Header headerReload(Header h, rpmTag tag)
 980 {
 981     Header nh;
 982     size_t length;
 983     void * uh = doHeaderUnload(h, &length);
 984
 985     h = headerFree(h);
 986     if (uh == NULL)
 987         return NULL;
 988     nh = headerLoad(uh);
 989     if (nh == NULL) {
 990         uh = _free(uh);
 991         return NULL;
 992     }
 993     if (ENTRY_IS_REGION(nh->index)) {
 994         if (tag == HEADER_SIGNATURES || tag == HEADER_IMMUTABLE)
 995             nh->index[0].info.tag = tag;
 996     }
 997     return nh;
 998 }
 999
1000 Header headerCopyLoad(const void * uh)
1001 {
1002     int32_t * ei = (int32_t *) uh;
1003     int32_t il = ntohl(ei[0]);          /* index length */
1004     int32_t dl = ntohl(ei[1]);          /* data length */
1005     size_t pvlen = sizeof(il) + sizeof(dl) +
1006                         (il * sizeof(struct entryInfo_s)) + dl;
1007     void * nuh = NULL;
1008     Header h = NULL;
1009
1010     /* Sanity checks on header intro. */
1011     if (!(hdrchkTags(il) || hdrchkData(dl)) && pvlen < headerMaxbytes) {
1012         nuh = memcpy(xmalloc(pvlen), uh, pvlen);
1013         if ((h = headerLoad(nuh)) == NULL)
1014             nuh = _free(nuh);
1015     }
1016     return h;
1017 }
1018
1019 /** \ingroup header
1020  * Read (and load) header from file handle.
1021  * @param fd            file handle
1022  * @param magicp        read (and verify) 8 bytes of (magic, 0)?
1023  * @return              header (or NULL on error)
1024  */
1025 Header headerRead(FD_t fd, enum hMagic magicp)
1026 {
1027     int32_t block[4];
1028     int32_t reserved;
1029     int32_t * ei = NULL;
1030     int32_t il;
1031     int32_t dl;
1032     int32_t magic;
1033     Header h = NULL;
1034     size_t len;
1035     int i;
1036
1037     memset(block, 0, sizeof(block));
1038     i = 2;
1039     if (magicp == HEADER_MAGIC_YES)
1040         i += 2;
1041
1042     /* FIX: cast? */
1043     if (timedRead(fd, (char *)block, i*sizeof(*block)) != (i * sizeof(*block)))
1044         goto exit;
1045
1046     i = 0;
1047
1048     if (magicp == HEADER_MAGIC_YES) {
1049         magic = block[i++];
1050         if (memcmp(&magic, rpm_header_magic, sizeof(magic)))
1051             goto exit;
1052         reserved = block[i++];
1053     }
1054
1055     il = ntohl(block[i]);       i++;
1056     dl = ntohl(block[i]);       i++;
1057
1058     len = sizeof(il) + sizeof(dl) + (il * sizeof(struct entryInfo_s)) + dl;
1059
1060     /* Sanity checks on header intro. */
1061     if (hdrchkTags(il) || hdrchkData(dl) || len > headerMaxbytes)
1062         goto exit;
1063
1064     ei = xmalloc(len);
1065     ei[0] = htonl(il);
1066     ei[1] = htonl(dl);
1067     len -= sizeof(il) + sizeof(dl);
1068
1069     /* FIX: cast? */
1070     if (timedRead(fd, (char *)&ei[2], len) != len)
1071         goto exit;
1072
1073     h = headerLoad(ei);
1074
1075 exit:
1076     if (h == NULL && ei != NULL) {
1077         free(ei);
1078     }
1079     return h;
1080 }
1081
1082 int headerWrite(FD_t fd, Header h, enum hMagic magicp)
1083 {
1084     ssize_t nb;
1085     size_t length;
1086     void * uh;
1087
1088     if (h == NULL)
1089         return 1;
1090     uh = doHeaderUnload(h, &length);
1091     if (uh == NULL)
1092         return 1;
1093     switch (magicp) {
1094     case HEADER_MAGIC_YES:
1095         nb = Fwrite(rpm_header_magic, sizeof(uint8_t), sizeof(rpm_header_magic), fd);
1096         if (nb != sizeof(rpm_header_magic))
1097             goto exit;
1098         break;
1099     case HEADER_MAGIC_NO:
1100         break;
1101     }
1102
1103     nb = Fwrite(uh, sizeof(char), length, fd);
1104
1105 exit:
1106     uh = _free(uh);
1107     return (nb == length ? 0 : 1);
1108 }
1109
1110 int headerIsEntry(Header h, rpmTag tag)
1111 {
1112                 /* FIX: h modified by sort. */
1113     return (findEntry(h, tag, RPM_NULL_TYPE) ? 1 : 0);
1114
1115 }
1116
1117 /** \ingroup header
1118  * Retrieve data from header entry.
1119  * Relevant flags (others are ignored), if neither is set allocation
1120  * behavior depends on data type(!)
1121  *     HEADERGET_MINMEM: return pointers to header memory
1122  *     HEADERGET_ALLOC: always return malloced memory, overrides MINMEM
1123  *
1124  * @todo Permit retrieval of regions other than HEADER_IMUTABLE.
1125  * @param entry         header entry
1126  * @param td            tag data container
1127  * @param minMem        string pointers refer to header memory?
1128  * @param flags         flags to control memory allocation
1129  * @return              1 on success, otherwise error.
1130  */
1131 static int copyTdEntry(const indexEntry entry, rpmtd td, headerGetFlags flags)
1132 {
1133     rpm_count_t count = entry->info.count;
1134     int rc = 1;         /* XXX 1 on success. */
1135     /* ALLOC overrides MINMEM */
1136     int allocMem = flags & HEADERGET_ALLOC;
1137     int minMem = allocMem ? 0 : flags & HEADERGET_MINMEM;
1138     int argvArray = (flags & HEADERGET_ARGV) ? 1 : 0;
1139
1140     assert(td != NULL);
1141     td->flags = RPMTD_IMMUTABLE;
1142     switch (entry->info.type) {
1143     case RPM_BIN_TYPE:
1144         /*
1145          * XXX This only works for
1146          * XXX  "sealed" HEADER_IMMUTABLE/HEADER_SIGNATURES/HEADER_IMAGE.
1147          * XXX This will *not* work for unsealed legacy HEADER_IMAGE (i.e.
1148          * XXX a legacy header freshly read, but not yet unloaded to the rpmdb).
1149          */
1150         if (ENTRY_IS_REGION(entry)) {
1151             int32_t * ei = ((int32_t *)entry->data) - 2;
1152             entryInfo pe = (entryInfo) (ei + 2);
1153             unsigned char * dataStart = (unsigned char *) (pe + ntohl(ei[0]));
1154             int32_t rdl = -entry->info.offset;  /* negative offset */
1155             int32_t ril = rdl/sizeof(*pe);
1156
1157             rdl = entry->rdlen;
1158             count = 2 * sizeof(*ei) + (ril * sizeof(*pe)) + rdl;
1159             if (entry->info.tag == HEADER_IMAGE) {
1160                 ril -= 1;
1161                 pe += 1;
1162             } else {
1163                 count += REGION_TAG_COUNT;
1164                 rdl += REGION_TAG_COUNT;
1165             }
1166
1167             td->data = xmalloc(count);
1168             ei = (int32_t *) td->data;
1169             ei[0] = htonl(ril);
1170             ei[1] = htonl(rdl);
1171
1172             pe = (entryInfo) memcpy(ei + 2, pe, (ril * sizeof(*pe)));
1173
1174             dataStart = (unsigned char *) memcpy(pe + ril, dataStart, rdl);
1175
1176             rc = regionSwab(NULL, ril, 0, pe, dataStart, dataStart + rdl, 0);
1177             /* don't return data on failure */
1178             if (rc < 0) {
1179                 td->data = _free(td->data);
1180             }
1181             /* XXX 1 on success. */
1182             rc = (rc < 0) ? 0 : 1;
1183         } else {
1184             count = entry->length;
1185             td->data = (!minMem
1186                 ? memcpy(xmalloc(count), entry->data, count)
1187                 : entry->data);
1188         }
1189         break;
1190     case RPM_STRING_TYPE:
1191         if (count == 1) {
1192             td->data = allocMem ? xstrdup(entry->data) : entry->data;
1193             break;
1194         }
1195     case RPM_STRING_ARRAY_TYPE:
1196     case RPM_I18NSTRING_TYPE:
1197     {   const char ** ptrEntry;
1198         int tableSize = (count + argvArray) * sizeof(char *);
1199         char * t;
1200         int i;
1201
1202         if (minMem) {
1203             td->data = xmalloc(tableSize);
1204             ptrEntry = (const char **) td->data;
1205             t = entry->data;
1206         } else {
1207             t = xmalloc(tableSize + entry->length);
1208             td->data = (void *)t;
1209             ptrEntry = (const char **) td->data;
1210             t += tableSize;
1211             memcpy(t, entry->data, entry->length);
1212         }
1213         for (i = 0; i < count; i++) {
1214             *ptrEntry++ = t;
1215             t = strchr(t, 0);
1216             t++;
1217         }
1218         if (argvArray) {
1219             *ptrEntry = NULL;
1220             td->flags |= RPMTD_ARGV;
1221         }
1222     }   break;
1223     case RPM_CHAR_TYPE:
1224     case RPM_INT8_TYPE:
1225     case RPM_INT16_TYPE:
1226     case RPM_INT32_TYPE:
1227     case RPM_INT64_TYPE:
1228         if (allocMem) {
1229             td->data = xmalloc(entry->length);
1230             memcpy(td->data, entry->data, entry->length);
1231         } else {
1232             td->data = entry->data;
1233         }
1234         break;
1235     default:
1236         /* WTH? Don't mess with unknown data types... */
1237         rc = 0;
1238         td->data = NULL;
1239         break;
1240     }
1241     td->type = entry->info.type;
1242     td->count = count;
1243
1244     if (td->data && entry->data != td->data) {
1245         td->flags |= RPMTD_ALLOCED;
1246     }
1247
1248     return rc;
1249 }
1250
1251 /**
1252  * Does locale match entry in header i18n table?
1253  *
1254  * \verbatim
1255  * The range [l,le) contains the next locale to match:
1256  *    ll[_CC][.EEEEE][@dddd]
1257  * where
1258  *    ll        ISO language code (in lowercase).
1259  *    CC        (optional) ISO coutnry code (in uppercase).
1260  *    EEEEE     (optional) encoding (not really standardized).
1261  *    dddd      (optional) dialect.
1262  * \endverbatim
1263  *
1264  * @param td            header i18n table data, NUL terminated
1265  * @param l             start of locale to match
1266  * @param le            end of locale to match
1267  * @return              1 on good match, 2 on weak match, 0 on no match
1268  */
1269 static int headerMatchLocale(const char *td, const char *l, const char *le)
1270 {
1271     const char *fe;
1272
1273     /* First try a complete match. */
1274     if (strlen(td) == (le-l) && !strncmp(td, l, (le - l)))
1275         return 1;
1276
1277     /* Next, try stripping optional dialect and matching.  */
1278     for (fe = l; fe < le && *fe != '@'; fe++)
1279         {};
1280     if (fe < le && !strncmp(td, l, (fe - l)))
1281         return 1;
1282
1283     /* Next, try stripping optional codeset and matching.  */
1284     for (fe = l; fe < le && *fe != '.'; fe++)
1285         {};
1286     if (fe < le && !strncmp(td, l, (fe - l)))
1287         return 1;
1288
1289     /* Finally, try stripping optional country code and matching. */
1290     for (fe = l; fe < le && *fe != '_'; fe++)
1291         {};
1292     if (fe < le && !strncmp(td, l, (fe - l)))
1293         return 2;
1294
1295     return 0;
1296 }
1297
1298 /**
1299  * Return i18n string from header that matches locale.
1300  * @param h             header
1301  * @param entry         i18n string data
1302  * @retval td           tag data container
1303  * @param flags         flags to control allocation
1304  * @return              1 always
1305  */
1306 static int copyI18NEntry(Header h, indexEntry entry, rpmtd td,
1307                                                 headerGetFlags flags)
1308 {
1309     const char *lang, *l, *le;
1310     indexEntry table;
1311
1312     td->type = RPM_STRING_TYPE;
1313     td->count = 1;
1314     /* if no match, just return the first string */
1315     td->data = entry->data;
1316
1317     /* XXX Drepper sez' this is the order. */
1318     if ((lang = getenv("LANGUAGE")) == NULL &&
1319         (lang = getenv("LC_ALL")) == NULL &&
1320         (lang = getenv("LC_MESSAGES")) == NULL &&
1321         (lang = getenv("LANG")) == NULL)
1322             goto exit;
1323
1324     if ((table = findEntry(h, HEADER_I18NTABLE, RPM_STRING_ARRAY_TYPE)) == NULL)
1325         goto exit;
1326
1327     for (l = lang; *l != '\0'; l = le) {
1328         const char *t;
1329         char *ed, *ed_weak = NULL;
1330         int langNum;
1331
1332         while (*l && *l == ':')                 /* skip leading colons */
1333             l++;
1334         if (*l == '\0')
1335             break;
1336         for (le = l; *le && *le != ':'; le++)   /* find end of this locale */
1337             {};
1338
1339         /* For each entry in the header ... */
1340         for (langNum = 0, t = table->data, ed = entry->data;
1341              langNum < entry->info.count;
1342              langNum++, t += strlen(t) + 1, ed += strlen(ed) + 1) {
1343
1344             int match = headerMatchLocale(t, l, le);
1345             if (match == 1) {
1346                 td->data = ed;
1347                 goto exit;
1348             } else if (match == 2) {
1349                 ed_weak = ed;
1350             }
1351         }
1352         if (ed_weak) {
1353             td->data = ed_weak;
1354             goto exit;
1355         }
1356     }
1357
1358 exit:
1359     if (flags & HEADERGET_ALLOC) {
1360         td->data = xstrdup(td->data);
1361         td->flags |= RPMTD_ALLOCED;
1362     }
1363
1364     return 1;
1365 }
1366
1367 /**
1368  * Retrieve tag data from header.
1369  * @param h             header
1370  * @param tag           tag to retrieve
1371  * @retval td           tag data container
1372  * @param flags         flags to control retrieval
1373  * @return              1 on success, 0 on not found
1374  */
1375 static int intGetTdEntry(Header h, rpmTag tag, rpmtd td, headerGetFlags flags)
1376 {
1377     indexEntry entry;
1378     int rc;
1379
1380     assert(td != NULL);
1381     /* ensure clean state */
1382     rpmtdReset(td);
1383     td->tag = tag;
1384     /* First find the tag */
1385     /* FIX: h modified by sort. */
1386     entry = findEntry(h, tag, RPM_NULL_TYPE);
1387     if (entry == NULL) {
1388         /* Td is zeroed above, just return... */
1389         return 0;
1390     }
1391
1392     if (flags & HEADERGET_RAW) {
1393         rc = copyTdEntry(entry, td, flags);
1394     } else {
1395         switch (entry->info.type) {
1396         case RPM_I18NSTRING_TYPE:
1397             rc = copyI18NEntry(h, entry, td, flags);
1398             break;
1399         default:
1400             rc = copyTdEntry(entry, td, flags);
1401             break;
1402         }
1403     }
1404
1405     /* XXX 1 on success */
1406     return ((rc == 1) ? 1 : 0);
1407 }
1408
1409 /*
1410  * XXX temporary kludgery until tag extensions have been converted to
1411  * take rpmtd as argument
1412  */
1413 static int intGetTagExt(Header h, rpmTag tag, rpmtd td, headerTagTagFunction tagfunc)
1414 {
1415     int rc;
1416     rpmtdReset(td);
1417     rc = tagfunc(h, td);
1418     td->tag = tag;
1419     return rc;
1420 }
1421
1422 int headerGet(Header h, rpmTag tag, rpmtd td, headerGetFlags flags)
1423 {
1424     int rc;
1425     headerTagTagFunction tagfunc = NULL;
1426
1427     assert(td != NULL);
1428
1429     if (flags & HEADERGET_EXT) {
1430         tagfunc = rpmHeaderTagFunc(tag);
1431     }
1432
1433     if (tagfunc) {
1434         rc = intGetTagExt(h, tag, td, tagfunc);
1435     } else {
1436         rc = intGetTdEntry(h, tag, td, flags);
1437     }
1438
1439     assert(tag == td->tag);
1440     return rc;
1441 }
1442
1443 /**
1444  */
1445 static void copyData(rpmTagType type, rpm_data_t dstPtr,
1446                 rpm_constdata_t srcPtr, rpm_count_t cnt, int dataLength)
1447 {
1448     switch (type) {
1449     case RPM_STRING_ARRAY_TYPE:
1450     case RPM_I18NSTRING_TYPE:
1451     {   const char ** av = (const char **) srcPtr;
1452         char * t = dstPtr;
1453
1454         while (cnt-- > 0 && dataLength > 0) {
1455             const char * s;
1456             if ((s = *av++) == NULL)
1457                 continue;
1458             do {
1459                 *t++ = *s++;
1460             } while (s[-1] && --dataLength > 0);
1461         }
1462     }   break;
1463
1464     default:
1465         memmove(dstPtr, srcPtr, dataLength);
1466         break;
1467     }
1468 }
1469
1470 /**
1471  * Return (malloc'ed) copy of entry data.
1472  * @param type          entry data type
1473  * @param p             entry data
1474  * @param c             entry item count
1475  * @retval lengthPtr    no. bytes in returned data
1476  * @return              (malloc'ed) copy of entry data, NULL on error
1477  */
1478 static void *
1479 grabData(rpmTagType type, rpm_constdata_t p, rpm_count_t c, int * lengthPtr)
1480 {
1481     rpm_data_t data = NULL;
1482     int length;
1483
1484     length = dataLength(type, p, c, 0, NULL);
1485     if (length > 0) {
1486         data = xmalloc(length);
1487         copyData(type, data, p, c, length);
1488     }
1489
1490     if (lengthPtr)
1491         *lengthPtr = length;
1492     return data;
1493 }
1494
1495 static int intAddEntry(Header h, rpmtd td)
1496 {
1497     indexEntry entry;
1498     rpm_data_t data;
1499     int length;
1500
1501     /* Count must always be >= 1 for headerAddEntry. */
1502     if (td->count <= 0)
1503         return 0;
1504
1505     if (hdrchkType(td->type))
1506         return 0;
1507     if (hdrchkData(td->count))
1508         return 0;
1509
1510     length = 0;
1511     data = grabData(td->type, td->data, td->count, &length);
1512     if (data == NULL || length <= 0)
1513         return 0;
1514
1515     /* Allocate more index space if necessary */
1516     if (h->indexUsed == h->indexAlloced) {
1517         h->indexAlloced += INDEX_MALLOC_SIZE;
1518         h->index = xrealloc(h->index, h->indexAlloced * sizeof(*h->index));
1519     }
1520
1521     /* Fill in the index */
1522     entry = h->index + h->indexUsed;
1523     entry->info.tag = td->tag;
1524     entry->info.type = td->type;
1525     entry->info.count = td->count;
1526     entry->info.offset = 0;
1527     entry->data = data;
1528     entry->length = length;
1529
1530     if (h->indexUsed > 0 && td->tag < h->index[h->indexUsed-1].info.tag)
1531         h->flags &= ~HEADERFLAG_SORTED;
1532     h->indexUsed++;
1533
1534     return 1;
1535 }
1536
1537 static int intAppendEntry(Header h, rpmtd td)
1538 {
1539     indexEntry entry;
1540     int length;
1541
1542     if (td->type == RPM_STRING_TYPE || td->type == RPM_I18NSTRING_TYPE) {
1543         /* we can't do this */
1544         return 0;
1545     }
1546
1547     /* Find the tag entry in the header. */
1548     entry = findEntry(h, td->tag, td->type);
1549     if (!entry)
1550         return 0;
1551
1552     length = dataLength(td->type, td->data, td->count, 0, NULL);
1553     if (length < 0)
1554         return 0;
1555
1556     if (ENTRY_IN_REGION(entry)) {
1557         char * t = xmalloc(entry->length + length);
1558         memcpy(t, entry->data, entry->length);
1559         entry->data = t;
1560         entry->info.offset = 0;
1561     } else
1562         entry->data = xrealloc(entry->data, entry->length + length);
1563
1564     copyData(td->type, ((char *) entry->data) + entry->length,
1565              td->data, td->count, length);
1566
1567     entry->length += length;
1568
1569     entry->info.count += td->count;
1570
1571     return 1;
1572 }
1573
1574 int headerPut(Header h, rpmtd td, headerPutFlags flags)
1575 {
1576     int rc;
1577
1578     assert(td != NULL);
1579     if (flags & HEADERPUT_APPEND) {
1580         rc = findEntry(h, td->tag, td->type) ?
1581                 intAppendEntry(h, td) :
1582                 intAddEntry(h, td);
1583     } else {
1584         rc = intAddEntry(h, td);
1585     }
1586     return rc;
1587 }
1588
1589 /*
1590  * Sanity check data types against tag table before putting. Assume
1591  * append on all array-types.
1592  */
1593 static int headerPutType(Header h, rpmTag tag, rpmTagType reqtype,
1594                         rpm_constdata_t data, rpm_count_t size)
1595 {
1596     struct rpmtd_s td;
1597     rpmTagType type = rpmTagGetType(tag);
1598     headerPutFlags flags = HEADERPUT_APPEND;
1599     int valid = 1;
1600
1601     /* Basic sanity checks: type must match and there must be data to put */
1602     if ((type & RPM_MASK_TYPE) != reqtype
1603         || size < 1 || data == NULL || h == NULL) {
1604         valid = 0;
1605     }
1606
1607     /*
1608      * Non-array types can't be appended to. Binary types use size
1609      * for data length, for other non-array types size must be 1.
1610      */
1611     if ((type & RPM_MASK_RETURN_TYPE) != RPM_ARRAY_RETURN_TYPE) {
1612         flags = HEADERPUT_DEFAULT;
1613         if ((type & RPM_MASK_TYPE) != RPM_BIN_TYPE && size != 1) {
1614             valid = 0;
1615         }
1616     }
1617
1618     if (valid) {
1619         rpmtdReset(&td);
1620         td.tag = tag;
1621         td.type = type & RPM_MASK_TYPE;
1622         td.data = (void *) data;
1623         td.count = size;
1624
1625         valid = headerPut(h, &td, flags);
1626     }
1627
1628     return valid;
1629 }
1630
1631 int headerPutString(Header h, rpmTag tag, const char *val)
1632 {
1633     rpmTagType type = rpmTagGetType(tag) & RPM_MASK_TYPE;
1634     const void *sptr = NULL;
1635
1636     /* string arrays expect char **, arrange that */
1637     if (type == RPM_STRING_ARRAY_TYPE || type == RPM_I18NSTRING_TYPE) {
1638         sptr = &val;
1639     } else if (type == RPM_STRING_TYPE) {
1640         sptr = val;
1641     } else {
1642         return 0;
1643     }
1644
1645     return headerPutType(h, tag, type, sptr, 1);
1646 }
1647
1648 int headerPutStringArray(Header h, rpmTag tag, const char **array, rpm_count_t size)
1649 {
1650     return headerPutType(h, tag, RPM_STRING_ARRAY_TYPE, array, size);
1651 }
1652
1653 int headerPutChar(Header h, rpmTag tag, char *val, rpm_count_t size)
1654 {
1655     return headerPutType(h, tag, RPM_CHAR_TYPE, val, size);
1656 }
1657
1658 int headerPutUint8(Header h, rpmTag tag, uint8_t *val, rpm_count_t size)
1659 {
1660     return headerPutType(h, tag, RPM_INT8_TYPE, val, size);
1661 }
1662
1663 int headerPutUint16(Header h, rpmTag tag, uint16_t *val, rpm_count_t size)
1664 {
1665     return headerPutType(h, tag, RPM_INT16_TYPE, val, size);
1666 }
1667
1668 int headerPutUint32(Header h, rpmTag tag, uint32_t *val, rpm_count_t size)
1669 {
1670     return headerPutType(h, tag, RPM_INT32_TYPE, val, size);
1671 }
1672
1673 int headerPutUint64(Header h, rpmTag tag, uint64_t *val, rpm_count_t size)
1674 {
1675     return headerPutType(h, tag, RPM_INT64_TYPE, val, size);
1676 }
1677
1678 int headerPutBin(Header h, rpmTag tag, uint8_t *val, rpm_count_t size)
1679 {
1680     return headerPutType(h, tag, RPM_BIN_TYPE, val, size);
1681 }
1682
1683 int headerAddI18NString(Header h, rpmTag tag, const char * string,
1684                 const char * lang)
1685 {
1686     indexEntry table, entry;
1687     const char ** strArray;
1688     int length;
1689     int ghosts;
1690     rpm_count_t i, langNum;
1691     char * buf;
1692
1693     table = findEntry(h, HEADER_I18NTABLE, RPM_STRING_ARRAY_TYPE);
1694     entry = findEntry(h, tag, RPM_I18NSTRING_TYPE);
1695
1696     if (!table && entry)
1697         return 0;               /* this shouldn't ever happen!! */
1698
1699     if (!table && !entry) {
1700         const char * charArray[2];
1701         rpm_count_t count = 0;
1702         struct rpmtd_s td;
1703         if (!lang || (lang[0] == 'C' && lang[1] == '\0')) {
1704             charArray[count++] = "C";
1705         } else {
1706             charArray[count++] = "C";
1707             charArray[count++] = lang;
1708         }
1709
1710         rpmtdReset(&td);
1711         td.tag = HEADER_I18NTABLE;
1712         td.type = RPM_STRING_ARRAY_TYPE;
1713         td.data = (void *) charArray;
1714         td.count = count;
1715         if (!headerPut(h, &td, HEADERPUT_DEFAULT))
1716             return 0;
1717         table = findEntry(h, HEADER_I18NTABLE, RPM_STRING_ARRAY_TYPE);
1718     }
1719
1720     if (!table)
1721         return 0;
1722     if (!lang) lang = "C";
1723
1724     {   const char * l = table->data;
1725         for (langNum = 0; langNum < table->info.count; langNum++) {
1726             if (!strcmp(l, lang)) break;
1727             l += strlen(l) + 1;
1728         }
1729     }
1730
1731     if (langNum >= table->info.count) {
1732         length = strlen(lang) + 1;
1733         if (ENTRY_IN_REGION(table)) {
1734             char * t = xmalloc(table->length + length);
1735             memcpy(t, table->data, table->length);
1736             table->data = t;
1737             table->info.offset = 0;
1738         } else
1739             table->data = xrealloc(table->data, table->length + length);
1740         memmove(((char *)table->data) + table->length, lang, length);
1741         table->length += length;
1742         table->info.count++;
1743     }
1744
1745     if (!entry) {
1746         int rc;
1747         struct rpmtd_s td;
1748         strArray = xmalloc(sizeof(*strArray) * (langNum + 1));
1749         for (i = 0; i < langNum; i++)
1750             strArray[i] = "";
1751         strArray[langNum] = string;
1752
1753         rpmtdReset(&td);
1754         td.tag = tag;
1755         td.type = RPM_I18NSTRING_TYPE;
1756         td.data = strArray;
1757         td.count = langNum + 1;
1758         rc = headerPut(h, &td, HEADERPUT_DEFAULT);
1759         free(strArray);
1760         return rc;
1761     } else if (langNum >= entry->info.count) {
1762         ghosts = langNum - entry->info.count;
1763
1764         length = strlen(string) + 1 + ghosts;
1765         if (ENTRY_IN_REGION(entry)) {
1766             char * t = xmalloc(entry->length + length);
1767             memcpy(t, entry->data, entry->length);
1768             entry->data = t;
1769             entry->info.offset = 0;
1770         } else
1771             entry->data = xrealloc(entry->data, entry->length + length);
1772
1773         memset(((char *)entry->data) + entry->length, '\0', ghosts);
1774         memmove(((char *)entry->data) + entry->length + ghosts, string, strlen(string)+1);
1775
1776         entry->length += length;
1777         entry->info.count = langNum + 1;
1778     } else {
1779         char *b, *be, *e, *ee, *t;
1780         size_t bn, sn, en;
1781
1782         /* Set beginning/end pointers to previous data */
1783         b = be = e = ee = entry->data;
1784         for (i = 0; i < table->info.count; i++) {
1785             if (i == langNum)
1786                 be = ee;
1787             ee += strlen(ee) + 1;
1788             if (i == langNum)
1789                 e  = ee;
1790         }
1791
1792         /* Get storage for new buffer */
1793         bn = (be-b);
1794         sn = strlen(string) + 1;
1795         en = (ee-e);
1796         length = bn + sn + en;
1797         t = buf = xmalloc(length);
1798
1799         /* Copy values into new storage */
1800         memcpy(t, b, bn);
1801         t += bn;
1802         memcpy(t, string, sn);
1803         t += sn;
1804         memcpy(t, e, en);
1805         t += en;
1806
1807         /* Replace i18N string array */
1808         entry->length -= strlen(be) + 1;
1809         entry->length += sn;
1810
1811         if (ENTRY_IN_REGION(entry)) {
1812             entry->info.offset = 0;
1813         } else
1814             entry->data = _free(entry->data);
1815         entry->data = buf;
1816     }
1817
1818     return 0;
1819 }
1820
1821 int headerMod(Header h, rpmtd td)
1822 {
1823     indexEntry entry;
1824     rpm_data_t oldData;
1825     rpm_data_t data;
1826     int length;
1827
1828     /* First find the tag */
1829     entry = findEntry(h, td->tag, td->type);
1830     if (!entry)
1831         return 0;
1832
1833     length = 0;
1834     data = grabData(td->type, td->data, td->count, &length);
1835     if (data == NULL || length <= 0)
1836         return 0;
1837
1838     /* make sure entry points to the first occurence of this tag */
1839     while (entry > h->index && (entry - 1)->info.tag == td->tag)
1840         entry--;
1841
1842     /* free after we've grabbed the new data in case the two are intertwined;
1843        that's a bad idea but at least we won't break */
1844     oldData = entry->data;
1845
1846     entry->info.count = td->count;
1847     entry->info.type = td->type;
1848     entry->data = data;
1849     entry->length = length;
1850
1851     if (ENTRY_IN_REGION(entry)) {
1852         entry->info.offset = 0;
1853     } else
1854         oldData = _free(oldData);
1855
1856     return 1;
1857 }
1858
1859 /**
1860  * Header tag iterator data structure.
1861  */
1862 struct headerIterator_s {
1863     Header h;           /*!< Header being iterated. */
1864     int next_index;     /*!< Next tag index. */
1865 };
1866
1867 HeaderIterator headerFreeIterator(HeaderIterator hi)
1868 {
1869     if (hi != NULL) {
1870         hi->h = headerFree(hi->h);
1871         hi = _free(hi);
1872     }
1873     return hi;
1874 }
1875
1876 HeaderIterator headerInitIterator(Header h)
1877 {
1878     HeaderIterator hi = xmalloc(sizeof(*hi));
1879
1880     headerSort(h);
1881
1882     hi->h = headerLink(h);
1883     hi->next_index = 0;
1884     return hi;
1885 }
1886
1887 int headerNext(HeaderIterator hi, rpmtd td)
1888 {
1889     Header h = hi->h;
1890     int slot = hi->next_index;
1891     indexEntry entry = NULL;
1892     int rc;
1893
1894     assert(td != NULL);
1895     rpmtdReset(td);
1896
1897     for (slot = hi->next_index; slot < h->indexUsed; slot++) {
1898         entry = h->index + slot;
1899         if (!ENTRY_IS_REGION(entry))
1900             break;
1901     }
1902     hi->next_index = slot;
1903     if (entry == NULL || slot >= h->indexUsed)
1904         return 0;
1905
1906         /* LCL: no clue */
1907     hi->next_index++;
1908
1909     td->tag = entry->info.tag;
1910
1911     rc = copyTdEntry(entry, td, HEADERGET_DEFAULT);
1912
1913     /* XXX 1 on success */
1914     return ((rc == 1) ? 1 : 0);
1915 }
1916
1917 /** \ingroup header
1918  * Duplicate a header.
1919  * @param h             header
1920  * @return              new header instance
1921  */
1922 Header headerCopy(Header h)
1923 {
1924     Header nh = headerNew();
1925     HeaderIterator hi;
1926     struct rpmtd_s td;
1927
1928     hi = headerInitIterator(h);
1929     while (headerNext(hi, &td)) {
1930         if (rpmtdCount(&td) > 0) {
1931             (void) headerPut(nh, &td, HEADERPUT_DEFAULT);
1932         }
1933         rpmtdFreeData(&td);
1934     }
1935     hi = headerFreeIterator(hi);
1936
1937     return headerReload(nh, HEADER_IMAGE);
1938 }
1939
1940 void headerCopyTags(Header headerFrom, Header headerTo,
1941                     const rpmTag * tagstocopy)
1942 {
1943     const rpmTag * p;
1944     struct rpmtd_s td;
1945
1946     if (headerFrom == headerTo)
1947         return;
1948
1949     for (p = tagstocopy; *p != 0; p++) {
1950         if (headerIsEntry(headerTo, *p))
1951             continue;
1952         if (!headerGet(headerFrom, *p, &td, HEADERGET_MINMEM))
1953             continue;
1954         (void) headerPut(headerTo, &td, HEADERPUT_DEFAULT);
1955         rpmtdFreeData(&td);
1956     }
1957 }
1958
1959 unsigned int headerGetInstance(Header h)
1960 {
1961     return h ? h->instance : 0;
1962 }
1963
1964 void headerSetInstance(Header h, unsigned int instance)
1965 {
1966     h->instance = instance;
1967 }