isl_convex_hull.c

   1 #include "isl_lp.h"
   2 #include "isl_map.h"
   3 #include "isl_map_private.h"
   4 #include "isl_mat.h"
   5 #include "isl_set.h"
   6 #include "isl_seq.h"
   7 #include "isl_equalities.h"
   8 #include "isl_tab.h"
   9
  10 static struct isl_basic_set *uset_convex_hull_wrap_bounded(struct isl_set *set);
  11
  12 static void swap_ineq(struct isl_basic_map *bmap, unsigned i, unsigned j)
  13 {
  14         isl_int *t;
  15
  16         if (i != j) {
  17                 t = bmap->ineq[i];
  18                 bmap->ineq[i] = bmap->ineq[j];
  19                 bmap->ineq[j] = t;
  20         }
  21 }
  22
  23 /* Return 1 if constraint c is redundant with respect to the constraints
  24  * in bmap.  If c is a lower [upper] bound in some variable and bmap
  25  * does not have a lower [upper] bound in that variable, then c cannot
  26  * be redundant and we do not need solve any lp.
  27  */
  28 int isl_basic_map_constraint_is_redundant(struct isl_basic_map **bmap,
  29         isl_int *c, isl_int *opt_n, isl_int *opt_d)
  30 {
  31         enum isl_lp_result res;
  32         unsigned total;
  33         int i, j;
  34
  35         if (!bmap)
  36                 return -1;
  37
  38         total = isl_basic_map_total_dim(*bmap);
  39         for (i = 0; i < total; ++i) {
  40                 int sign;
  41                 if (isl_int_is_zero(c[1+i]))
  42                         continue;
  43                 sign = isl_int_sgn(c[1+i]);
  44                 for (j = 0; j < (*bmap)->n_ineq; ++j)
  45                         if (sign == isl_int_sgn((*bmap)->ineq[j][1+i]))
  46                                 break;
  47                 if (j == (*bmap)->n_ineq)
  48                         break;
  49         }
  50         if (i < total)
  51                 return 0;
  52
  53         res = isl_solve_lp(*bmap, 0, c, (*bmap)->ctx->one, opt_n, opt_d);
  54         if (res == isl_lp_unbounded)
  55                 return 0;
  56         if (res == isl_lp_error)
  57                 return -1;
  58         if (res == isl_lp_empty) {
  59                 *bmap = isl_basic_map_set_to_empty(*bmap);
  60                 return 0;
  61         }
  62         return !isl_int_is_neg(*opt_n);
  63 }
  64
  65 int isl_basic_set_constraint_is_redundant(struct isl_basic_set **bset,
  66         isl_int *c, isl_int *opt_n, isl_int *opt_d)
  67 {
  68         return isl_basic_map_constraint_is_redundant(
  69                         (struct isl_basic_map **)bset, c, opt_n, opt_d);
  70 }
  71
  72 /* Compute the convex hull of a basic map, by removing the redundant
  73  * constraints.  If the minimal value along the normal of a constraint
  74  * is the same if the constraint is removed, then the constraint is redundant.
  75  *
  76  * Alternatively, we could have intersected the basic map with the
  77  * corresponding equality and the checked if the dimension was that
  78  * of a facet.
  79  */
  80 struct isl_basic_map *isl_basic_map_convex_hull(struct isl_basic_map *bmap)
  81 {
  82         struct isl_tab *tab;
  83
  84         if (!bmap)
  85                 return NULL;
  86
  87         bmap = isl_basic_map_gauss(bmap, NULL);
  88         if (ISL_F_ISSET(bmap, ISL_BASIC_MAP_EMPTY))
  89                 return bmap;
  90         if (ISL_F_ISSET(bmap, ISL_BASIC_MAP_NO_REDUNDANT))
  91                 return bmap;
  92         if (bmap->n_ineq <= 1)
  93                 return bmap;
  94
  95         tab = isl_tab_from_basic_map(bmap);
  96         tab = isl_tab_detect_equalities(bmap->ctx, tab);
  97         tab = isl_tab_detect_redundant(bmap->ctx, tab);
  98         bmap = isl_basic_map_update_from_tab(bmap, tab);
  99         isl_tab_free(bmap->ctx, tab);
 100         ISL_F_SET(bmap, ISL_BASIC_MAP_NO_IMPLICIT);
 101         ISL_F_SET(bmap, ISL_BASIC_MAP_NO_REDUNDANT);
 102         return bmap;
 103 }
 104
 105 struct isl_basic_set *isl_basic_set_convex_hull(struct isl_basic_set *bset)
 106 {
 107         return (struct isl_basic_set *)
 108                 isl_basic_map_convex_hull((struct isl_basic_map *)bset);
 109 }
 110
 111 /* Check if the set set is bound in the direction of the affine
 112  * constraint c and if so, set the constant term such that the
 113  * resulting constraint is a bounding constraint for the set.
 114  */
 115 static int uset_is_bound(struct isl_ctx *ctx, struct isl_set *set,
 116         isl_int *c, unsigned len)
 117 {
 118         int first;
 119         int j;
 120         isl_int opt;
 121         isl_int opt_denom;
 122
 123         isl_int_init(opt);
 124         isl_int_init(opt_denom);
 125         first = 1;
 126         for (j = 0; j < set->n; ++j) {
 127                 enum isl_lp_result res;
 128
 129                 if (ISL_F_ISSET(set->p[j], ISL_BASIC_SET_EMPTY))
 130                         continue;
 131
 132                 res = isl_solve_lp((struct isl_basic_map*)set->p[j],
 133                                 0, c, ctx->one, &opt, &opt_denom);
 134                 if (res == isl_lp_unbounded)
 135                         break;
 136                 if (res == isl_lp_error)
 137                         goto error;
 138                 if (res == isl_lp_empty) {
 139                         set->p[j] = isl_basic_set_set_to_empty(set->p[j]);
 140                         if (!set->p[j])
 141                                 goto error;
 142                         continue;
 143                 }
 144                 if (!isl_int_is_one(opt_denom))
 145                         isl_seq_scale(c, c, opt_denom, len);
 146                 if (first || isl_int_is_neg(opt))
 147                         isl_int_sub(c[0], c[0], opt);
 148                 first = 0;
 149         }
 150         isl_int_clear(opt);
 151         isl_int_clear(opt_denom);
 152         return j >= set->n;
 153 error:
 154         isl_int_clear(opt);
 155         isl_int_clear(opt_denom);
 156         return -1;
 157 }
 158
 159 /* Check if "c" is a direction that is independent of the previously found "n"
 160  * bounds in "dirs".
 161  * If so, add it to the list, with the negative of the lower bound
 162  * in the constant position, i.e., such that c corresponds to a bounding
 163  * hyperplane (but not necessarily a facet).
 164  * Assumes set "set" is bounded.
 165  */
 166 static int is_independent_bound(struct isl_ctx *ctx,
 167         struct isl_set *set, isl_int *c,
 168         struct isl_mat *dirs, int n)
 169 {
 170         int is_bound;
 171         int i = 0;
 172
 173         isl_seq_cpy(dirs->row[n]+1, c+1, dirs->n_col-1);
 174         if (n != 0) {
 175                 int pos = isl_seq_first_non_zero(dirs->row[n]+1, dirs->n_col-1);
 176                 if (pos < 0)
 177                         return 0;
 178                 for (i = 0; i < n; ++i) {
 179                         int pos_i;
 180                         pos_i = isl_seq_first_non_zero(dirs->row[i]+1, dirs->n_col-1);
 181                         if (pos_i < pos)
 182                                 continue;
 183                         if (pos_i > pos)
 184                                 break;
 185                         isl_seq_elim(dirs->row[n]+1, dirs->row[i]+1, pos,
 186                                         dirs->n_col-1, NULL);
 187                         pos = isl_seq_first_non_zero(dirs->row[n]+1, dirs->n_col-1);
 188                         if (pos < 0)
 189                                 return 0;
 190                 }
 191         }
 192
 193         is_bound = uset_is_bound(ctx, set, dirs->row[n], dirs->n_col);
 194         if (is_bound != 1)
 195                 return is_bound;
 196         if (i < n) {
 197                 int k;
 198                 isl_int *t = dirs->row[n];
 199                 for (k = n; k > i; --k)
 200                         dirs->row[k] = dirs->row[k-1];
 201                 dirs->row[i] = t;
 202         }
 203         return 1;
 204 }
 205
 206 /* Compute and return a maximal set of linearly independent bounds
 207  * on the set "set", based on the constraints of the basic sets
 208  * in "set".
 209  */
 210 static struct isl_mat *independent_bounds(struct isl_ctx *ctx,
 211         struct isl_set *set)
 212 {
 213         int i, j, n;
 214         struct isl_mat *dirs = NULL;
 215         unsigned dim = isl_set_n_dim(set);
 216
 217         dirs = isl_mat_alloc(ctx, dim, 1+dim);
 218         if (!dirs)
 219                 goto error;
 220
 221         n = 0;
 222         for (i = 0; n < dim && i < set->n; ++i) {
 223                 int f;
 224                 struct isl_basic_set *bset = set->p[i];
 225
 226                 for (j = 0; n < dim && j < bset->n_eq; ++j) {
 227                         f = is_independent_bound(ctx, set, bset->eq[j],
 228                                                 dirs, n);
 229                         if (f < 0)
 230                                 goto error;
 231                         if (f)
 232                                 ++n;
 233                 }
 234                 for (j = 0; n < dim && j < bset->n_ineq; ++j) {
 235                         f = is_independent_bound(ctx, set, bset->ineq[j],
 236                                                 dirs, n);
 237                         if (f < 0)
 238                                 goto error;
 239                         if (f)
 240                                 ++n;
 241                 }
 242         }
 243         dirs->n_row = n;
 244         return dirs;
 245 error:
 246         isl_mat_free(ctx, dirs);
 247         return NULL;
 248 }
 249
 250 static struct isl_basic_set *isl_basic_set_set_rational(
 251         struct isl_basic_set *bset)
 252 {
 253         if (!bset)
 254                 return NULL;
 255
 256         if (ISL_F_ISSET(bset, ISL_BASIC_MAP_RATIONAL))
 257                 return bset;
 258
 259         bset = isl_basic_set_cow(bset);
 260         if (!bset)
 261                 return NULL;
 262
 263         ISL_F_SET(bset, ISL_BASIC_MAP_RATIONAL);
 264
 265         return isl_basic_set_finalize(bset);
 266 }
 267
 268 static struct isl_set *isl_set_set_rational(struct isl_set *set)
 269 {
 270         int i;
 271
 272         set = isl_set_cow(set);
 273         if (!set)
 274                 return NULL;
 275         for (i = 0; i < set->n; ++i) {
 276                 set->p[i] = isl_basic_set_set_rational(set->p[i]);
 277                 if (!set->p[i])
 278                         goto error;
 279         }
 280         return set;
 281 error:
 282         isl_set_free(set);
 283         return NULL;
 284 }
 285
 286 static struct isl_basic_set *isl_basic_set_add_equality(struct isl_ctx *ctx,
 287         struct isl_basic_set *bset, isl_int *c)
 288 {
 289         int i;
 290         unsigned total;
 291         unsigned dim;
 292
 293         if (ISL_F_ISSET(bset, ISL_BASIC_SET_EMPTY))
 294                 return bset;
 295
 296         isl_assert(ctx, isl_basic_set_n_param(bset) == 0, goto error);
 297         isl_assert(ctx, bset->n_div == 0, goto error);
 298         dim = isl_basic_set_n_dim(bset);
 299         bset = isl_basic_set_cow(bset);
 300         bset = isl_basic_set_extend(bset, 0, dim, 0, 1, 0);
 301         i = isl_basic_set_alloc_equality(bset);
 302         if (i < 0)
 303                 goto error;
 304         isl_seq_cpy(bset->eq[i], c, 1 + dim);
 305         return bset;
 306 error:
 307         isl_basic_set_free(bset);
 308         return NULL;
 309 }
 310
 311 static struct isl_set *isl_set_add_equality(struct isl_ctx *ctx,
 312         struct isl_set *set, isl_int *c)
 313 {
 314         int i;
 315
 316         set = isl_set_cow(set);
 317         if (!set)
 318                 return NULL;
 319         for (i = 0; i < set->n; ++i) {
 320                 set->p[i] = isl_basic_set_add_equality(ctx, set->p[i], c);
 321                 if (!set->p[i])
 322                         goto error;
 323         }
 324         return set;
 325 error:
 326         isl_set_free(set);
 327         return NULL;
 328 }
 329
 330 /* Given a union of basic sets, construct the constraints for wrapping
 331  * a facet around one of its ridges.
 332  * In particular, if each of n the d-dimensional basic sets i in "set"
 333  * contains the origin, satisfies the constraints x_1 >= 0 and x_2 >= 0
 334  * and is defined by the constraints
 335  *                                  [ 1 ]
 336  *                              A_i [ x ]  >= 0
 337  *
 338  * then the resulting set is of dimension n*(1+d) and has as constraints
 339  *
 340  *                                  [ a_i ]
 341  *                              A_i [ x_i ] >= 0
 342  *
 343  *                                    a_i   >= 0
 344  *
 345  *                      \sum_i x_{i,1} = 1
 346  */
 347 static struct isl_basic_set *wrap_constraints(struct isl_set *set)
 348 {
 349         struct isl_basic_set *lp;
 350         unsigned n_eq;
 351         unsigned n_ineq;
 352         int i, j, k;
 353         unsigned dim, lp_dim;
 354
 355         if (!set)
 356                 return NULL;
 357
 358         dim = 1 + isl_set_n_dim(set);
 359         n_eq = 1;
 360         n_ineq = set->n;
 361         for (i = 0; i < set->n; ++i) {
 362                 n_eq += set->p[i]->n_eq;
 363                 n_ineq += set->p[i]->n_ineq;
 364         }
 365         lp = isl_basic_set_alloc(set->ctx, 0, dim * set->n, 0, n_eq, n_ineq);
 366         if (!lp)
 367                 return NULL;
 368         lp_dim = isl_basic_set_n_dim(lp);
 369         k = isl_basic_set_alloc_equality(lp);
 370         isl_int_set_si(lp->eq[k][0], -1);
 371         for (i = 0; i < set->n; ++i) {
 372                 isl_int_set_si(lp->eq[k][1+dim*i], 0);
 373                 isl_int_set_si(lp->eq[k][1+dim*i+1], 1);
 374                 isl_seq_clr(lp->eq[k]+1+dim*i+2, dim-2);
 375         }
 376         for (i = 0; i < set->n; ++i) {
 377                 k = isl_basic_set_alloc_inequality(lp);
 378                 isl_seq_clr(lp->ineq[k], 1+lp_dim);
 379                 isl_int_set_si(lp->ineq[k][1+dim*i], 1);
 380
 381                 for (j = 0; j < set->p[i]->n_eq; ++j) {
 382                         k = isl_basic_set_alloc_equality(lp);
 383                         isl_seq_clr(lp->eq[k], 1+dim*i);
 384                         isl_seq_cpy(lp->eq[k]+1+dim*i, set->p[i]->eq[j], dim);
 385                         isl_seq_clr(lp->eq[k]+1+dim*(i+1), dim*(set->n-i-1));
 386                 }
 387
 388                 for (j = 0; j < set->p[i]->n_ineq; ++j) {
 389                         k = isl_basic_set_alloc_inequality(lp);
 390                         isl_seq_clr(lp->ineq[k], 1+dim*i);
 391                         isl_seq_cpy(lp->ineq[k]+1+dim*i, set->p[i]->ineq[j], dim);
 392                         isl_seq_clr(lp->ineq[k]+1+dim*(i+1), dim*(set->n-i-1));
 393                 }
 394         }
 395         return lp;
 396 }
 397
 398 /* Given a facet "facet" of the convex hull of "set" and a facet "ridge"
 399  * of that facet, compute the other facet of the convex hull that contains
 400  * the ridge.
 401  *
 402  * We first transform the set such that the facet constraint becomes
 403  *
 404  *                      x_1 >= 0
 405  *
 406  * I.e., the facet lies in
 407  *
 408  *                      x_1 = 0
 409  *
 410  * and on that facet, the constraint that defines the ridge is
 411  *
 412  *                      x_2 >= 0
 413  *
 414  * (This transformation is not strictly needed, all that is needed is
 415  * that the ridge contains the origin.)
 416  *
 417  * Since the ridge contains the origin, the cone of the convex hull
 418  * will be of the form
 419  *
 420  *                      x_1 >= 0
 421  *                      x_2 >= a x_1
 422  *
 423  * with this second constraint defining the new facet.
 424  * The constant a is obtained by settting x_1 in the cone of the
 425  * convex hull to 1 and minimizing x_2.
 426  * Now, each element in the cone of the convex hull is the sum
 427  * of elements in the cones of the basic sets.
 428  * If a_i is the dilation factor of basic set i, then the problem
 429  * we need to solve is
 430  *
 431  *                      min \sum_i x_{i,2}
 432  *                      st
 433  *                              \sum_i x_{i,1} = 1
 434  *                                  a_i   >= 0
 435  *                                [ a_i ]
 436  *                              A [ x_i ] >= 0
 437  *
 438  * with
 439  *                                  [  1  ]
 440  *                              A_i [ x_i ] >= 0
 441  *
 442  * the constraints of each (transformed) basic set.
 443  * If a = n/d, then the constraint defining the new facet (in the transformed
 444  * space) is
 445  *
 446  *                      -n x_1 + d x_2 >= 0
 447  *
 448  * In the original space, we need to take the same combination of the
 449  * corresponding constraints "facet" and "ridge".
 450  *
 451  * Note that a is always finite, since we only apply the wrapping
 452  * technique to a union of polytopes.
 453  */
 454 static isl_int *wrap_facet(struct isl_set *set, isl_int *facet, isl_int *ridge)
 455 {
 456         int i;
 457         struct isl_mat *T = NULL;
 458         struct isl_basic_set *lp = NULL;
 459         struct isl_vec *obj;
 460         enum isl_lp_result res;
 461         isl_int num, den;
 462         unsigned dim;
 463
 464         set = isl_set_copy(set);
 465
 466         dim = 1 + isl_set_n_dim(set);
 467         T = isl_mat_alloc(set->ctx, 3, dim);
 468         if (!T)
 469                 goto error;
 470         isl_int_set_si(T->row[0][0], 1);
 471         isl_seq_clr(T->row[0]+1, dim - 1);
 472         isl_seq_cpy(T->row[1], facet, dim);
 473         isl_seq_cpy(T->row[2], ridge, dim);
 474         T = isl_mat_right_inverse(set->ctx, T);
 475         set = isl_set_preimage(set, T);
 476         T = NULL;
 477         if (!set)
 478                 goto error;
 479         lp = wrap_constraints(set);
 480         obj = isl_vec_alloc(set->ctx, 1 + dim*set->n);
 481         if (!obj)
 482                 goto error;
 483         isl_int_set_si(obj->block.data[0], 0);
 484         for (i = 0; i < set->n; ++i) {
 485                 isl_seq_clr(obj->block.data + 1 + dim*i, 2);
 486                 isl_int_set_si(obj->block.data[1 + dim*i+2], 1);
 487                 isl_seq_clr(obj->block.data + 1 + dim*i+3, dim-3);
 488         }
 489         isl_int_init(num);
 490         isl_int_init(den);
 491         res = isl_solve_lp((struct isl_basic_map *)lp, 0,
 492                                     obj->block.data, set->ctx->one, &num, &den);
 493         if (res == isl_lp_ok) {
 494                 isl_int_neg(num, num);
 495                 isl_seq_combine(facet, num, facet, den, ridge, dim);
 496         }
 497         isl_int_clear(num);
 498         isl_int_clear(den);
 499         isl_vec_free(set->ctx, obj);
 500         isl_basic_set_free(lp);
 501         isl_set_free(set);
 502         isl_assert(set->ctx, res == isl_lp_ok, return NULL);
 503         return facet;
 504 error:
 505         isl_basic_set_free(lp);
 506         isl_mat_free(set->ctx, T);
 507         isl_set_free(set);
 508         return NULL;
 509 }
 510
 511 /* Given a set of d linearly independent bounding constraints of the
 512  * convex hull of "set", compute the constraint of a facet of "set".
 513  *
 514  * We first compute the intersection with the first bounding hyperplane
 515  * and remove the component corresponding to this hyperplane from
 516  * other bounds (in homogeneous space).
 517  * We then wrap around one of the remaining bounding constraints
 518  * and continue the process until all bounding constraints have been
 519  * taken into account.
 520  * The resulting linear combination of the bounding constraints will
 521  * correspond to a facet of the convex hull.
 522  */
 523 static struct isl_mat *initial_facet_constraint(struct isl_ctx *ctx,
 524         struct isl_set *set, struct isl_mat *bounds)
 525 {
 526         struct isl_set *slice = NULL;
 527         struct isl_basic_set *face = NULL;
 528         struct isl_mat *m, *U, *Q;
 529         int i;
 530         unsigned dim = isl_set_n_dim(set);
 531
 532         isl_assert(ctx, set->n > 0, goto error);
 533         isl_assert(ctx, bounds->n_row == dim, goto error);
 534
 535         while (bounds->n_row > 1) {
 536                 slice = isl_set_copy(set);
 537                 slice = isl_set_add_equality(ctx, slice, bounds->row[0]);
 538                 face = isl_set_affine_hull(slice);
 539                 if (!face)
 540                         goto error;
 541                 if (face->n_eq == 1) {
 542                         isl_basic_set_free(face);
 543                         break;
 544                 }
 545                 m = isl_mat_alloc(ctx, 1 + face->n_eq, 1 + dim);
 546                 if (!m)
 547                         goto error;
 548                 isl_int_set_si(m->row[0][0], 1);
 549                 isl_seq_clr(m->row[0]+1, dim);
 550                 for (i = 0; i < face->n_eq; ++i)
 551                         isl_seq_cpy(m->row[1 + i], face->eq[i], 1 + dim);
 552                 U = isl_mat_right_inverse(ctx, m);
 553                 Q = isl_mat_right_inverse(ctx, isl_mat_copy(ctx, U));
 554                 U = isl_mat_drop_cols(ctx, U, 1 + face->n_eq,
 555                                                 dim - face->n_eq);
 556                 Q = isl_mat_drop_rows(ctx, Q, 1 + face->n_eq,
 557                                                 dim - face->n_eq);
 558                 U = isl_mat_drop_cols(ctx, U, 0, 1);
 559                 Q = isl_mat_drop_rows(ctx, Q, 0, 1);
 560                 bounds = isl_mat_product(ctx, bounds, U);
 561                 bounds = isl_mat_product(ctx, bounds, Q);
 562                 while (isl_seq_first_non_zero(bounds->row[bounds->n_row-1],
 563                                               bounds->n_col) == -1) {
 564                         bounds->n_row--;
 565                         isl_assert(ctx, bounds->n_row > 1, goto error);
 566                 }
 567                 if (!wrap_facet(set, bounds->row[0],
 568                                           bounds->row[bounds->n_row-1]))
 569                         goto error;
 570                 isl_basic_set_free(face);
 571                 bounds->n_row--;
 572         }
 573         return bounds;
 574 error:
 575         isl_basic_set_free(face);
 576         isl_mat_free(ctx, bounds);
 577         return NULL;
 578 }
 579
 580 /* Given the bounding constraint "c" of a facet of the convex hull of "set",
 581  * compute a hyperplane description of the facet, i.e., compute the facets
 582  * of the facet.
 583  *
 584  * We compute an affine transformation that transforms the constraint
 585  *
 586  *                        [ 1 ]
 587  *                      c [ x ] = 0
 588  *
 589  * to the constraint
 590  *
 591  *                         z_1  = 0
 592  *
 593  * by computing the right inverse U of a matrix that starts with the rows
 594  *
 595  *                      [ 1 0 ]
 596  *                      [  c  ]
 597  *
 598  * Then
 599  *                      [ 1 ]     [ 1 ]
 600  *                      [ x ] = U [ z ]
 601  * and
 602  *                      [ 1 ]     [ 1 ]
 603  *                      [ z ] = Q [ x ]
 604  *
 605  * with Q = U^{-1}
 606  * Since z_1 is zero, we can drop this variable as well as the corresponding
 607  * column of U to obtain
 608  *
 609  *                      [ 1 ]      [ 1  ]
 610  *                      [ x ] = U' [ z' ]
 611  * and
 612  *                      [ 1  ]      [ 1 ]
 613  *                      [ z' ] = Q' [ x ]
 614  *
 615  * with Q' equal to Q, but without the corresponding row.
 616  * After computing the facets of the facet in the z' space,
 617  * we convert them back to the x space through Q.
 618  */
 619 static struct isl_basic_set *compute_facet(struct isl_set *set, isl_int *c)
 620 {
 621         struct isl_mat *m, *U, *Q;
 622         struct isl_basic_set *facet = NULL;
 623         struct isl_ctx *ctx;
 624         unsigned dim;
 625
 626         ctx = set->ctx;
 627         set = isl_set_copy(set);
 628         dim = isl_set_n_dim(set);
 629         m = isl_mat_alloc(set->ctx, 2, 1 + dim);
 630         if (!m)
 631                 goto error;
 632         isl_int_set_si(m->row[0][0], 1);
 633         isl_seq_clr(m->row[0]+1, dim);
 634         isl_seq_cpy(m->row[1], c, 1+dim);
 635         U = isl_mat_right_inverse(set->ctx, m);
 636         Q = isl_mat_right_inverse(set->ctx, isl_mat_copy(set->ctx, U));
 637         U = isl_mat_drop_cols(set->ctx, U, 1, 1);
 638         Q = isl_mat_drop_rows(set->ctx, Q, 1, 1);
 639         set = isl_set_preimage(set, U);
 640         facet = uset_convex_hull_wrap_bounded(set);
 641         facet = isl_basic_set_preimage(facet, Q);
 642         isl_assert(ctx, facet->n_eq == 0, goto error);
 643         return facet;
 644 error:
 645         isl_basic_set_free(facet);
 646         isl_set_free(set);
 647         return NULL;
 648 }
 649
 650 /* Given an initial facet constraint, compute the remaining facets.
 651  * We do this by running through all facets found so far and computing
 652  * the adjacent facets through wrapping, adding those facets that we
 653  * hadn't already found before.
 654  *
 655  * For each facet we have found so far, we first compute its facets
 656  * in the resulting convex hull.  That is, we compute the ridges
 657  * of the resulting convex hull contained in the facet.
 658  * We also compute the corresponding facet in the current approximation
 659  * of the convex hull.  There is no need to wrap around the ridges
 660  * in this facet since that would result in a facet that is already
 661  * present in the current approximation.
 662  *
 663  * This function can still be significantly optimized by checking which of
 664  * the facets of the basic sets are also facets of the convex hull and
 665  * using all the facets so far to help in constructing the facets of the
 666  * facets
 667  * and/or
 668  * using the technique in section "3.1 Ridge Generation" of
 669  * "Extended Convex Hull" by Fukuda et al.
 670  */
 671 static struct isl_basic_set *extend(struct isl_basic_set *hull,
 672         struct isl_set *set)
 673 {
 674         int i, j, f;
 675         int k;
 676         struct isl_basic_set *facet = NULL;
 677         struct isl_basic_set *hull_facet = NULL;
 678         unsigned total;
 679         unsigned dim;
 680
 681         isl_assert(set->ctx, set->n > 0, goto error);
 682
 683         dim = isl_set_n_dim(set);
 684
 685         for (i = 0; i < hull->n_ineq; ++i) {
 686                 facet = compute_facet(set, hull->ineq[i]);
 687                 facet = isl_basic_set_add_equality(facet->ctx, facet, hull->ineq[i]);
 688                 facet = isl_basic_set_gauss(facet, NULL);
 689                 facet = isl_basic_set_normalize_constraints(facet);
 690                 hull_facet = isl_basic_set_copy(hull);
 691                 hull_facet = isl_basic_set_add_equality(hull_facet->ctx, hull_facet, hull->ineq[i]);
 692                 hull_facet = isl_basic_set_gauss(hull_facet, NULL);
 693                 hull_facet = isl_basic_set_normalize_constraints(hull_facet);
 694                 if (!facet)
 695                         goto error;
 696                 hull = isl_basic_set_cow(hull);
 697                 hull = isl_basic_set_extend_dim(hull,
 698                         isl_dim_copy(hull->dim), 0, 0, facet->n_ineq);
 699                 for (j = 0; j < facet->n_ineq; ++j) {
 700                         for (f = 0; f < hull_facet->n_ineq; ++f)
 701                                 if (isl_seq_eq(facet->ineq[j],
 702                                                 hull_facet->ineq[f], 1 + dim))
 703                                         break;
 704                         if (f < hull_facet->n_ineq)
 705                                 continue;
 706                         k = isl_basic_set_alloc_inequality(hull);
 707                         if (k < 0)
 708                                 goto error;
 709                         isl_seq_cpy(hull->ineq[k], hull->ineq[i], 1+dim);
 710                         if (!wrap_facet(set, hull->ineq[k], facet->ineq[j]))
 711                                 goto error;
 712                 }
 713                 isl_basic_set_free(hull_facet);
 714                 isl_basic_set_free(facet);
 715         }
 716         hull = isl_basic_set_simplify(hull);
 717         hull = isl_basic_set_finalize(hull);
 718         return hull;
 719 error:
 720         isl_basic_set_free(hull_facet);
 721         isl_basic_set_free(facet);
 722         isl_basic_set_free(hull);
 723         return NULL;
 724 }
 725
 726 /* Special case for computing the convex hull of a one dimensional set.
 727  * We simply collect the lower and upper bounds of each basic set
 728  * and the biggest of those.
 729  */
 730 static struct isl_basic_set *convex_hull_1d(struct isl_ctx *ctx,
 731         struct isl_set *set)
 732 {
 733         struct isl_mat *c = NULL;
 734         isl_int *lower = NULL;
 735         isl_int *upper = NULL;
 736         int i, j, k;
 737         isl_int a, b;
 738         struct isl_basic_set *hull;
 739
 740         for (i = 0; i < set->n; ++i) {
 741                 set->p[i] = isl_basic_set_simplify(set->p[i]);
 742                 if (!set->p[i])
 743                         goto error;
 744         }
 745         set = isl_set_remove_empty_parts(set);
 746         if (!set)
 747                 goto error;
 748         isl_assert(ctx, set->n > 0, goto error);
 749         c = isl_mat_alloc(ctx, 2, 2);
 750         if (!c)
 751                 goto error;
 752
 753         if (set->p[0]->n_eq > 0) {
 754                 isl_assert(ctx, set->p[0]->n_eq == 1, goto error);
 755                 lower = c->row[0];
 756                 upper = c->row[1];
 757                 if (isl_int_is_pos(set->p[0]->eq[0][1])) {
 758                         isl_seq_cpy(lower, set->p[0]->eq[0], 2);
 759                         isl_seq_neg(upper, set->p[0]->eq[0], 2);
 760                 } else {
 761                         isl_seq_neg(lower, set->p[0]->eq[0], 2);
 762                         isl_seq_cpy(upper, set->p[0]->eq[0], 2);
 763                 }
 764         } else {
 765                 for (j = 0; j < set->p[0]->n_ineq; ++j) {
 766                         if (isl_int_is_pos(set->p[0]->ineq[j][1])) {
 767                                 lower = c->row[0];
 768                                 isl_seq_cpy(lower, set->p[0]->ineq[j], 2);
 769                         } else {
 770                                 upper = c->row[1];
 771                                 isl_seq_cpy(upper, set->p[0]->ineq[j], 2);
 772                         }
 773                 }
 774         }
 775
 776         isl_int_init(a);
 777         isl_int_init(b);
 778         for (i = 0; i < set->n; ++i) {
 779                 struct isl_basic_set *bset = set->p[i];
 780                 int has_lower = 0;
 781                 int has_upper = 0;
 782
 783                 for (j = 0; j < bset->n_eq; ++j) {
 784                         has_lower = 1;
 785                         has_upper = 1;
 786                         if (lower) {
 787                                 isl_int_mul(a, lower[0], bset->eq[j][1]);
 788                                 isl_int_mul(b, lower[1], bset->eq[j][0]);
 789                                 if (isl_int_lt(a, b) && isl_int_is_pos(bset->eq[j][1]))
 790                                         isl_seq_cpy(lower, bset->eq[j], 2);
 791                                 if (isl_int_gt(a, b) && isl_int_is_neg(bset->eq[j][1]))
 792                                         isl_seq_neg(lower, bset->eq[j], 2);
 793                         }
 794                         if (upper) {
 795                                 isl_int_mul(a, upper[0], bset->eq[j][1]);
 796                                 isl_int_mul(b, upper[1], bset->eq[j][0]);
 797                                 if (isl_int_lt(a, b) && isl_int_is_pos(bset->eq[j][1]))
 798                                         isl_seq_neg(upper, bset->eq[j], 2);
 799                                 if (isl_int_gt(a, b) && isl_int_is_neg(bset->eq[j][1]))
 800                                         isl_seq_cpy(upper, bset->eq[j], 2);
 801                         }
 802                 }
 803                 for (j = 0; j < bset->n_ineq; ++j) {
 804                         if (isl_int_is_pos(bset->ineq[j][1]))
 805                                 has_lower = 1;
 806                         if (isl_int_is_neg(bset->ineq[j][1]))
 807                                 has_upper = 1;
 808                         if (lower && isl_int_is_pos(bset->ineq[j][1])) {
 809                                 isl_int_mul(a, lower[0], bset->ineq[j][1]);
 810                                 isl_int_mul(b, lower[1], bset->ineq[j][0]);
 811                                 if (isl_int_lt(a, b))
 812                                         isl_seq_cpy(lower, bset->ineq[j], 2);
 813                         }
 814                         if (upper && isl_int_is_neg(bset->ineq[j][1])) {
 815                                 isl_int_mul(a, upper[0], bset->ineq[j][1]);
 816                                 isl_int_mul(b, upper[1], bset->ineq[j][0]);
 817                                 if (isl_int_gt(a, b))
 818                                         isl_seq_cpy(upper, bset->ineq[j], 2);
 819                         }
 820                 }
 821                 if (!has_lower)
 822                         lower = NULL;
 823                 if (!has_upper)
 824                         upper = NULL;
 825         }
 826         isl_int_clear(a);
 827         isl_int_clear(b);
 828
 829         hull = isl_basic_set_alloc(ctx, 0, 1, 0, 0, 2);
 830         hull = isl_basic_set_set_rational(hull);
 831         if (!hull)
 832                 goto error;
 833         if (lower) {
 834                 k = isl_basic_set_alloc_inequality(hull);
 835                 isl_seq_cpy(hull->ineq[k], lower, 2);
 836         }
 837         if (upper) {
 838                 k = isl_basic_set_alloc_inequality(hull);
 839                 isl_seq_cpy(hull->ineq[k], upper, 2);
 840         }
 841         hull = isl_basic_set_finalize(hull);
 842         isl_set_free(set);
 843         isl_mat_free(ctx, c);
 844         return hull;
 845 error:
 846         isl_set_free(set);
 847         isl_mat_free(ctx, c);
 848         return NULL;
 849 }
 850
 851 /* Project out final n dimensions using Fourier-Motzkin */
 852 static struct isl_set *set_project_out(struct isl_ctx *ctx,
 853         struct isl_set *set, unsigned n)
 854 {
 855         return isl_set_remove_dims(set, isl_set_n_dim(set) - n, n);
 856 }
 857
 858 static struct isl_basic_set *convex_hull_0d(struct isl_set *set)
 859 {
 860         struct isl_basic_set *convex_hull;
 861
 862         if (!set)
 863                 return NULL;
 864
 865         if (isl_set_is_empty(set))
 866                 convex_hull = isl_basic_set_empty(isl_dim_copy(set->dim));
 867         else
 868                 convex_hull = isl_basic_set_universe(isl_dim_copy(set->dim));
 869         isl_set_free(set);
 870         return convex_hull;
 871 }
 872
 873 /* Compute the convex hull of a pair of basic sets without any parameters or
 874  * integer divisions using Fourier-Motzkin elimination.
 875  * The convex hull is the set of all points that can be written as
 876  * the sum of points from both basic sets (in homogeneous coordinates).
 877  * We set up the constraints in a space with dimensions for each of
 878  * the three sets and then project out the dimensions corresponding
 879  * to the two original basic sets, retaining only those corresponding
 880  * to the convex hull.
 881  */
 882 static struct isl_basic_set *convex_hull_pair_elim(struct isl_basic_set *bset1,
 883         struct isl_basic_set *bset2)
 884 {
 885         int i, j, k;
 886         struct isl_basic_set *bset[2];
 887         struct isl_basic_set *hull = NULL;
 888         unsigned dim;
 889
 890         if (!bset1 || !bset2)
 891                 goto error;
 892
 893         dim = isl_basic_set_n_dim(bset1);
 894         hull = isl_basic_set_alloc(bset1->ctx, 0, 2 + 3 * dim, 0,
 895                                 1 + dim + bset1->n_eq + bset2->n_eq,
 896                                 2 + bset1->n_ineq + bset2->n_ineq);
 897         bset[0] = bset1;
 898         bset[1] = bset2;
 899         for (i = 0; i < 2; ++i) {
 900                 for (j = 0; j < bset[i]->n_eq; ++j) {
 901                         k = isl_basic_set_alloc_equality(hull);
 902                         if (k < 0)
 903                                 goto error;
 904                         isl_seq_clr(hull->eq[k], (i+1) * (1+dim));
 905                         isl_seq_clr(hull->eq[k]+(i+2)*(1+dim), (1-i)*(1+dim));
 906                         isl_seq_cpy(hull->eq[k]+(i+1)*(1+dim), bset[i]->eq[j],
 907                                         1+dim);
 908                 }
 909                 for (j = 0; j < bset[i]->n_ineq; ++j) {
 910                         k = isl_basic_set_alloc_inequality(hull);
 911                         if (k < 0)
 912                                 goto error;
 913                         isl_seq_clr(hull->ineq[k], (i+1) * (1+dim));
 914                         isl_seq_clr(hull->ineq[k]+(i+2)*(1+dim), (1-i)*(1+dim));
 915                         isl_seq_cpy(hull->ineq[k]+(i+1)*(1+dim),
 916                                         bset[i]->ineq[j], 1+dim);
 917                 }
 918                 k = isl_basic_set_alloc_inequality(hull);
 919                 if (k < 0)
 920                         goto error;
 921                 isl_seq_clr(hull->ineq[k], 1+2+3*dim);
 922                 isl_int_set_si(hull->ineq[k][(i+1)*(1+dim)], 1);
 923         }
 924         for (j = 0; j < 1+dim; ++j) {
 925                 k = isl_basic_set_alloc_equality(hull);
 926                 if (k < 0)
 927                         goto error;
 928                 isl_seq_clr(hull->eq[k], 1+2+3*dim);
 929                 isl_int_set_si(hull->eq[k][j], -1);
 930                 isl_int_set_si(hull->eq[k][1+dim+j], 1);
 931                 isl_int_set_si(hull->eq[k][2*(1+dim)+j], 1);
 932         }
 933         hull = isl_basic_set_set_rational(hull);
 934         hull = isl_basic_set_remove_dims(hull, dim, 2*(1+dim));
 935         hull = isl_basic_set_convex_hull(hull);
 936         isl_basic_set_free(bset1);
 937         isl_basic_set_free(bset2);
 938         return hull;
 939 error:
 940         isl_basic_set_free(bset1);
 941         isl_basic_set_free(bset2);
 942         isl_basic_set_free(hull);
 943         return NULL;
 944 }
 945
 946 static int isl_basic_set_is_bounded(struct isl_basic_set *bset)
 947 {
 948         struct isl_tab *tab;
 949         int bounded;
 950
 951         tab = isl_tab_from_recession_cone((struct isl_basic_map *)bset);
 952         bounded = isl_tab_cone_is_bounded(bset->ctx, tab);
 953         isl_tab_free(bset->ctx, tab);
 954         return bounded;
 955 }
 956
 957 static int isl_set_is_bounded(struct isl_set *set)
 958 {
 959         int i;
 960
 961         for (i = 0; i < set->n; ++i) {
 962                 int bounded = isl_basic_set_is_bounded(set->p[i]);
 963                 if (!bounded || bounded < 0)
 964                         return bounded;
 965         }
 966         return 1;
 967 }
 968
 969 /* Compute the lineality space of the convex hull of bset1 and bset2.
 970  *
 971  * We first compute the intersection of the recession cone of bset1
 972  * with the negative of the recession cone of bset2 and then compute
 973  * the linear hull of the resulting cone.
 974  */
 975 static struct isl_basic_set *induced_lineality_space(
 976         struct isl_basic_set *bset1, struct isl_basic_set *bset2)
 977 {
 978         int i, k;
 979         struct isl_basic_set *lin = NULL;
 980         unsigned dim;
 981
 982         if (!bset1 || !bset2)
 983                 goto error;
 984
 985         dim = isl_basic_set_total_dim(bset1);
 986         lin = isl_basic_set_alloc_dim(isl_basic_set_get_dim(bset1), 0,
 987                                         bset1->n_eq + bset2->n_eq,
 988                                         bset1->n_ineq + bset2->n_ineq);
 989         lin = isl_basic_set_set_rational(lin);
 990         if (!lin)
 991                 goto error;
 992         for (i = 0; i < bset1->n_eq; ++i) {
 993                 k = isl_basic_set_alloc_equality(lin);
 994                 if (k < 0)
 995                         goto error;
 996                 isl_int_set_si(lin->eq[k][0], 0);
 997                 isl_seq_cpy(lin->eq[k] + 1, bset1->eq[i] + 1, dim);
 998         }
 999         for (i = 0; i < bset1->n_ineq; ++i) {
1000                 k = isl_basic_set_alloc_inequality(lin);
1001                 if (k < 0)
1002                         goto error;
1003                 isl_int_set_si(lin->ineq[k][0], 0);
1004                 isl_seq_cpy(lin->ineq[k] + 1, bset1->ineq[i] + 1, dim);
1005         }
1006         for (i = 0; i < bset2->n_eq; ++i) {
1007                 k = isl_basic_set_alloc_equality(lin);
1008                 if (k < 0)
1009                         goto error;
1010                 isl_int_set_si(lin->eq[k][0], 0);
1011                 isl_seq_neg(lin->eq[k] + 1, bset2->eq[i] + 1, dim);
1012         }
1013         for (i = 0; i < bset2->n_ineq; ++i) {
1014                 k = isl_basic_set_alloc_inequality(lin);
1015                 if (k < 0)
1016                         goto error;
1017                 isl_int_set_si(lin->ineq[k][0], 0);
1018                 isl_seq_neg(lin->ineq[k] + 1, bset2->ineq[i] + 1, dim);
1019         }
1020
1021         isl_basic_set_free(bset1);
1022         isl_basic_set_free(bset2);
1023         return isl_basic_set_affine_hull(lin);
1024 error:
1025         isl_basic_set_free(lin);
1026         isl_basic_set_free(bset1);
1027         isl_basic_set_free(bset2);
1028         return NULL;
1029 }
1030
1031 static struct isl_basic_set *uset_convex_hull(struct isl_set *set);
1032
1033 /* Given a set and a linear space "lin" of dimension n > 0,
1034  * project the linear space from the set, compute the convex hull
1035  * and then map the set back to the original space.
1036  *
1037  * Let
1038  *
1039  *      M x = 0
1040  *
1041  * describe the linear space.  We first compute the Hermite normal
1042  * form H = M U of M = H Q, to obtain
1043  *
1044  *      H Q x = 0
1045  *
1046  * The last n rows of H will be zero, so the last n variables of x' = Q x
1047  * are the one we want to project out.  We do this by transforming each
1048  * basic set A x >= b to A U x' >= b and then removing the last n dimensions.
1049  * After computing the convex hull in x'_1, i.e., A' x'_1 >= b',
1050  * we transform the hull back to the original space as A' Q_1 x >= b',
1051  * with Q_1 all but the last n rows of Q.
1052  */
1053 static struct isl_basic_set *modulo_lineality(struct isl_set *set,
1054         struct isl_basic_set *lin)
1055 {
1056         unsigned total = isl_basic_set_total_dim(lin);
1057         unsigned lin_dim;
1058         struct isl_basic_set *hull;
1059         struct isl_mat *M, *U, *Q;
1060
1061         if (!set || !lin)
1062                 goto error;
1063         lin_dim = total - lin->n_eq;
1064         M = isl_mat_sub_alloc(set->ctx, lin->eq, 0, lin->n_eq, 1, total);
1065         M = isl_mat_left_hermite(set->ctx, M, 0, &U, &Q);
1066         if (!M)
1067                 goto error;
1068         isl_mat_free(set->ctx, M);
1069         isl_basic_set_free(lin);
1070
1071         isl_mat_drop_rows(set->ctx, Q, Q->n_row - lin_dim, lin_dim);
1072
1073         U = isl_mat_lin_to_aff(set->ctx, U);
1074         Q = isl_mat_lin_to_aff(set->ctx, Q);
1075
1076         set = isl_set_preimage(set, U);
1077         set = isl_set_remove_dims(set, total - lin_dim, lin_dim);
1078         hull = uset_convex_hull(set);
1079         hull = isl_basic_set_preimage(hull, Q);
1080
1081         return hull;
1082 error:
1083         isl_basic_set_free(lin);
1084         isl_set_free(set);
1085         return NULL;
1086 }
1087
1088 /* Given two polyhedra with as constraints h_{ij} x >= 0 in homegeneous space,
1089  * set up an LP for solving
1090  *
1091  *      \sum_j \alpha_{1j} h_{1j} = \sum_j \alpha_{2j} h_{2j}
1092  *
1093  * \alpha{i0} corresponds to the (implicit) positivity constraint 1 >= 0
1094  * The next \alpha{ij} correspond to the equalities and come in pairs.
1095  * The final \alpha{ij} correspond to the inequalities.
1096  */
1097 static struct isl_basic_set *valid_direction_lp(
1098         struct isl_basic_set *bset1, struct isl_basic_set *bset2)
1099 {
1100         struct isl_dim *dim;
1101         struct isl_basic_set *lp;
1102         unsigned d;
1103         int n;
1104         int i, j, k;
1105
1106         if (!bset1 || !bset2)
1107                 goto error;
1108         d = 1 + isl_basic_set_total_dim(bset1);
1109         n = 2 +
1110             2 * bset1->n_eq + bset1->n_ineq + 2 * bset2->n_eq + bset2->n_ineq;
1111         dim = isl_dim_set_alloc(bset1->ctx, 0, n);
1112         lp = isl_basic_set_alloc_dim(dim, 0, d, n);
1113         if (!lp)
1114                 goto error;
1115         for (i = 0; i < n; ++i) {
1116                 k = isl_basic_set_alloc_inequality(lp);
1117                 if (k < 0)
1118                         goto error;
1119                 isl_seq_clr(lp->ineq[k] + 1, n);
1120                 isl_int_set_si(lp->ineq[k][0], -1);
1121                 isl_int_set_si(lp->ineq[k][1 + i], 1);
1122         }
1123         for (i = 0; i < d; ++i) {
1124                 k = isl_basic_set_alloc_equality(lp);
1125                 if (k < 0)
1126                         goto error;
1127                 n = 0;
1128                 isl_int_set_si(lp->eq[k][n++], 0);
1129                 /* positivity constraint 1 >= 0 */
1130                 isl_int_set_si(lp->eq[k][n++], i == 0);
1131                 for (j = 0; j < bset1->n_eq; ++j) {
1132                         isl_int_set(lp->eq[k][n++], bset1->eq[j][i]);
1133                         isl_int_neg(lp->eq[k][n++], bset1->eq[j][i]);
1134                 }
1135                 for (j = 0; j < bset1->n_ineq; ++j)
1136                         isl_int_set(lp->eq[k][n++], bset1->ineq[j][i]);
1137                 /* positivity constraint 1 >= 0 */
1138                 isl_int_set_si(lp->eq[k][n++], -(i == 0));
1139                 for (j = 0; j < bset2->n_eq; ++j) {
1140                         isl_int_neg(lp->eq[k][n++], bset2->eq[j][i]);
1141                         isl_int_set(lp->eq[k][n++], bset2->eq[j][i]);
1142                 }
1143                 for (j = 0; j < bset2->n_ineq; ++j)
1144                         isl_int_neg(lp->eq[k][n++], bset2->ineq[j][i]);
1145         }
1146         lp = isl_basic_set_gauss(lp, NULL);
1147         isl_basic_set_free(bset1);
1148         isl_basic_set_free(bset2);
1149         return lp;
1150 error:
1151         isl_basic_set_free(bset1);
1152         isl_basic_set_free(bset2);
1153         return NULL;
1154 }
1155
1156 /* Compute a vector s in the homogeneous space such that <s, r> > 0
1157  * for all rays in the homogeneous space of the two cones that correspond
1158  * to the input polyhedra bset1 and bset2.
1159  *
1160  * We compute s as a vector that satisfies
1161  *
1162  *      s = \sum_j \alpha_{ij} h_{ij}   for i = 1,2                     (*)
1163  *
1164  * with h_{ij} the normals of the facets of polyhedron i
1165  * (including the "positivity constraint" 1 >= 0) and \alpha_{ij}
1166  * strictly positive numbers.  For simplicity we impose \alpha_{ij} >= 1.
1167  * We first set up an LP with as variables the \alpha{ij}.
1168  * In this formulateion, for each polyhedron i,
1169  * the first constraint is the positivity constraint, followed by pairs
1170  * of variables for the equalities, followed by variables for the inequalities.
1171  * We then simply pick a feasible solution and compute s using (*).
1172  *
1173  * Note that we simply pick any valid direction and make no attempt
1174  * to pick a "good" or even the "best" valid direction.
1175  */
1176 static struct isl_vec *valid_direction(
1177         struct isl_basic_set *bset1, struct isl_basic_set *bset2)
1178 {
1179         struct isl_ctx *ctx = NULL;
1180         struct isl_basic_set *lp;
1181         struct isl_tab *tab;
1182         struct isl_vec *sample = NULL;
1183         struct isl_vec *dir;
1184         unsigned d;
1185         int i;
1186         int n;
1187
1188         if (!bset1 || !bset2)
1189                 goto error;
1190         ctx = bset1->ctx;
1191         lp = valid_direction_lp(isl_basic_set_copy(bset1),
1192                                 isl_basic_set_copy(bset2));
1193         tab = isl_tab_from_basic_set(lp);
1194         sample = isl_tab_get_sample_value(ctx, tab);
1195         isl_tab_free(ctx, tab);
1196         isl_basic_set_free(lp);
1197         if (!sample)
1198                 goto error;
1199         d = isl_basic_set_total_dim(bset1);
1200         dir = isl_vec_alloc(ctx, 1 + d);
1201         if (!dir)
1202                 goto error;
1203         isl_seq_clr(dir->block.data + 1, dir->size - 1);
1204         n = 1;
1205         /* positivity constraint 1 >= 0 */
1206         isl_int_set(dir->block.data[0], sample->block.data[n++]);
1207         for (i = 0; i < bset1->n_eq; ++i) {
1208                 isl_int_sub(sample->block.data[n],
1209                             sample->block.data[n], sample->block.data[n+1]);
1210                 isl_seq_combine(dir->block.data,
1211                                 bset1->ctx->one, dir->block.data,
1212                                 sample->block.data[n], bset1->eq[i], 1 + d);
1213
1214                 n += 2;
1215         }
1216         for (i = 0; i < bset1->n_ineq; ++i)
1217                 isl_seq_combine(dir->block.data,
1218                                 bset1->ctx->one, dir->block.data,
1219                                 sample->block.data[n++], bset1->ineq[i], 1 + d);
1220         isl_vec_free(ctx, sample);
1221         isl_basic_set_free(bset1);
1222         isl_basic_set_free(bset2);
1223         isl_seq_normalize(dir->block.data + 1, dir->size - 1);
1224         return dir;
1225 error:
1226         isl_vec_free(ctx, sample);
1227         isl_basic_set_free(bset1);
1228         isl_basic_set_free(bset2);
1229         return NULL;
1230 }
1231
1232 /* Given a polyhedron b_i + A_i x >= 0 and a map T = S^{-1},
1233  * compute b_i' + A_i' x' >= 0, with
1234  *
1235  *      [ b_i A_i ]        [ y' ]                             [ y' ]
1236  *      [  1   0  ] S^{-1} [ x' ] >= 0  or      [ b_i' A_i' ] [ x' ] >= 0
1237  *
1238  * In particular, add the "positivity constraint" and then perform
1239  * the mapping.
1240  */
1241 static struct isl_basic_set *homogeneous_map(struct isl_basic_set *bset,
1242         struct isl_mat *T)
1243 {
1244         struct isl_ctx *ctx = NULL;
1245         int k;
1246
1247         if (!bset)
1248                 goto error;
1249         ctx = bset->ctx;
1250         bset = isl_basic_set_extend_constraints(bset, 0, 1);
1251         k = isl_basic_set_alloc_inequality(bset);
1252         if (k < 0)
1253                 goto error;
1254         isl_seq_clr(bset->ineq[k] + 1, isl_basic_set_total_dim(bset));
1255         isl_int_set_si(bset->ineq[k][0], 1);
1256         bset = isl_basic_set_preimage(bset, T);
1257         return bset;
1258 error:
1259         isl_mat_free(ctx, T);
1260         isl_basic_set_free(bset);
1261         return NULL;
1262 }
1263
1264 /* Compute the convex hull of a pair of basic sets without any parameters or
1265  * integer divisions, where the convex hull is known to be pointed,
1266  * but the basic sets may be unbounded.
1267  *
1268  * We turn this problem into the computation of a convex hull of a pair
1269  * _bounded_ polyhedra by "changing the direction of the homogeneous
1270  * dimension".  This idea is due to Matthias Koeppe.
1271  *
1272  * Consider the cones in homogeneous space that correspond to the
1273  * input polyhedra.  The rays of these cones are also rays of the
1274  * polyhedra if the coordinate that corresponds to the homogeneous
1275  * dimension is zero.  That is, if the inner product of the rays
1276  * with the homogeneous direction is zero.
1277  * The cones in the homogeneous space can also be considered to
1278  * correspond to other pairs of polyhedra by chosing a different
1279  * homogeneous direction.  To ensure that both of these polyhedra
1280  * are bounded, we need to make sure that all rays of the cones
1281  * correspond to vertices and not to rays.
1282  * Let s be a direction such that <s, r> > 0 for all rays r of both cones.
1283  * Then using s as a homogeneous direction, we obtain a pair of polytopes.
1284  * The vector s is computed in valid_direction.
1285  *
1286  * Note that we need to consider _all_ rays of the cones and not just
1287  * the rays that correspond to rays in the polyhedra.  If we were to
1288  * only consider those rays and turn them into vertices, then we
1289  * may inadvertently turn some vertices into rays.
1290  *
1291  * The standard homogeneous direction is the unit vector in the 0th coordinate.
1292  * We therefore transform the two polyhedra such that the selected
1293  * direction is mapped onto this standard direction and then proceed
1294  * with the normal computation.
1295  * Let S be a non-singular square matrix with s as its first row,
1296  * then we want to map the polyhedra to the space
1297  *
1298  *      [ y' ]     [ y ]                [ y ]          [ y' ]
1299  *      [ x' ] = S [ x ]        i.e.,   [ x ] = S^{-1} [ x' ]
1300  *
1301  * We take S to be the unimodular completion of s to limit the growth
1302  * of the coefficients in the following computations.
1303  *
1304  * Let b_i + A_i x >= 0 be the constraints of polyhedron i.
1305  * We first move to the homogeneous dimension
1306  *
1307  *      b_i y + A_i x >= 0              [ b_i A_i ] [ y ]    [ 0 ]
1308  *          y         >= 0      or      [  1   0  ] [ x ] >= [ 0 ]
1309  *
1310  * Then we change directoin
1311  *
1312  *      [ b_i A_i ]        [ y' ]                             [ y' ]
1313  *      [  1   0  ] S^{-1} [ x' ] >= 0  or      [ b_i' A_i' ] [ x' ] >= 0
1314  *
1315  * Then we compute the convex hull of the polytopes b_i' + A_i' x' >= 0
1316  * resulting in b' + A' x' >= 0, which we then convert back
1317  *
1318  *                  [ y ]                       [ y ]
1319  *      [ b' A' ] S [ x ] >= 0  or      [ b A ] [ x ] >= 0
1320  *
1321  * The polyhedron b + A x >= 0 is then the convex hull of the input polyhedra.
1322  */
1323 static struct isl_basic_set *convex_hull_pair_pointed(
1324         struct isl_basic_set *bset1, struct isl_basic_set *bset2)
1325 {
1326         struct isl_ctx *ctx = NULL;
1327         struct isl_vec *dir = NULL;
1328         struct isl_mat *T = NULL;
1329         struct isl_mat *T2 = NULL;
1330         struct isl_basic_set *hull;
1331         struct isl_set *set;
1332
1333         if (!bset1 || !bset2)
1334                 goto error;
1335         ctx = bset1->ctx;
1336         dir = valid_direction(isl_basic_set_copy(bset1),
1337                                 isl_basic_set_copy(bset2));
1338         if (!dir)
1339                 goto error;
1340         T = isl_mat_alloc(bset1->ctx, dir->size, dir->size);
1341         if (!T)
1342                 goto error;
1343         isl_seq_cpy(T->row[0], dir->block.data, dir->size);
1344         T = isl_mat_unimodular_complete(ctx, T, 1);
1345         T2 = isl_mat_right_inverse(ctx, isl_mat_copy(ctx, T));
1346
1347         bset1 = homogeneous_map(bset1, isl_mat_copy(ctx, T2));
1348         bset2 = homogeneous_map(bset2, T2);
1349         set = isl_set_alloc_dim(isl_basic_set_get_dim(bset1), 2, 0);
1350         set = isl_set_add(set, bset1);
1351         set = isl_set_add(set, bset2);
1352         hull = uset_convex_hull(set);
1353         hull = isl_basic_set_preimage(hull, T);
1354
1355         isl_vec_free(ctx, dir);
1356
1357         return hull;
1358 error:
1359         isl_vec_free(ctx, dir);
1360         isl_basic_set_free(bset1);
1361         isl_basic_set_free(bset2);
1362         return NULL;
1363 }
1364
1365 /* Compute the convex hull of a pair of basic sets without any parameters or
1366  * integer divisions.
1367  *
1368  * If the convex hull of the two basic sets would have a non-trivial
1369  * lineality space, we first project out this lineality space.
1370  */
1371 static struct isl_basic_set *convex_hull_pair(struct isl_basic_set *bset1,
1372         struct isl_basic_set *bset2)
1373 {
1374         struct isl_basic_set *lin;
1375
1376         if (isl_basic_set_is_bounded(bset1) || isl_basic_set_is_bounded(bset2))
1377                 return convex_hull_pair_pointed(bset1, bset2);
1378
1379         lin = induced_lineality_space(isl_basic_set_copy(bset1),
1380                                       isl_basic_set_copy(bset2));
1381         if (!lin)
1382                 goto error;
1383         if (isl_basic_set_is_universe(lin)) {
1384                 isl_basic_set_free(bset1);
1385                 isl_basic_set_free(bset2);
1386                 return lin;
1387         }
1388         if (lin->n_eq < isl_basic_set_total_dim(lin)) {
1389                 struct isl_set *set;
1390                 set = isl_set_alloc_dim(isl_basic_set_get_dim(bset1), 2, 0);
1391                 set = isl_set_add(set, bset1);
1392                 set = isl_set_add(set, bset2);
1393                 return modulo_lineality(set, lin);
1394         }
1395         isl_basic_set_free(lin);
1396
1397         return convex_hull_pair_pointed(bset1, bset2);
1398 error:
1399         isl_basic_set_free(bset1);
1400         isl_basic_set_free(bset2);
1401         return NULL;
1402 }
1403
1404 /* Compute the lineality space of an "underlying" basic set.
1405  * We basically just drop the constants and turn every inequality
1406  * into an equality.
1407  */
1408 static struct isl_basic_set *ubasic_set_lineality_space(
1409         struct isl_basic_set *bset)
1410 {
1411         int i, k;
1412         struct isl_basic_set *lin = NULL;
1413         unsigned dim;
1414
1415         if (!bset)
1416                 goto error;
1417         dim = isl_basic_set_total_dim(bset);
1418
1419         lin = isl_basic_set_alloc_dim(isl_basic_set_get_dim(bset), 0, dim, 0);
1420         if (!lin)
1421                 goto error;
1422         for (i = 0; i < bset->n_eq; ++i) {
1423                 k = isl_basic_set_alloc_equality(lin);
1424                 if (k < 0)
1425                         goto error;
1426                 isl_int_set_si(lin->eq[k][0], 0);
1427                 isl_seq_cpy(lin->eq[k] + 1, bset->eq[i] + 1, dim);
1428         }
1429         lin = isl_basic_set_gauss(lin, NULL);
1430         if (!lin)
1431                 goto error;
1432         for (i = 0; i < bset->n_ineq && lin->n_eq < dim; ++i) {
1433                 k = isl_basic_set_alloc_equality(lin);
1434                 if (k < 0)
1435                         goto error;
1436                 isl_int_set_si(lin->eq[k][0], 0);
1437                 isl_seq_cpy(lin->eq[k] + 1, bset->ineq[i] + 1, dim);
1438                 lin = isl_basic_set_gauss(lin, NULL);
1439                 if (!lin)
1440                         goto error;
1441         }
1442         isl_basic_set_free(bset);
1443         return lin;
1444 error:
1445         isl_basic_set_free(lin);
1446         isl_basic_set_free(bset);
1447         return NULL;
1448 }
1449
1450 /* Compute the (linear) hull of the lineality spaces of the basic sets in the
1451  * "underlying" set "set".
1452  */
1453 static struct isl_basic_set *uset_combined_lineality_space(struct isl_set *set)
1454 {
1455         int i;
1456         struct isl_set *lin = NULL;
1457
1458         if (!set)
1459                 return NULL;
1460         if (set->n == 0) {
1461                 struct isl_dim *dim = isl_set_get_dim(set);
1462                 isl_set_free(set);
1463                 return isl_basic_set_empty(dim);
1464         }
1465
1466         lin = isl_set_alloc_dim(isl_set_get_dim(set), set->n, 0);
1467         for (i = 0; i < set->n; ++i)
1468                 lin = isl_set_add(lin,
1469                     ubasic_set_lineality_space(isl_basic_set_copy(set->p[i])));
1470         isl_set_free(set);
1471         return isl_set_affine_hull(lin);
1472 }
1473
1474 /* Compute the convex hull of a set without any parameters or
1475  * integer divisions.
1476  * In each step, we combined two basic sets until only one
1477  * basic set is left.
1478  * The input basic sets are assumed not to have a non-trivial
1479  * lineality space.  If any of the intermediate results has
1480  * a non-trivial lineality space, it is projected out.
1481  */
1482 static struct isl_basic_set *uset_convex_hull_unbounded(struct isl_set *set)
1483 {
1484         struct isl_basic_set *convex_hull = NULL;
1485
1486         convex_hull = isl_set_copy_basic_set(set);
1487         set = isl_set_drop_basic_set(set, convex_hull);
1488         if (!set)
1489                 goto error;
1490         while (set->n > 0) {
1491                 struct isl_basic_set *t;
1492                 t = isl_set_copy_basic_set(set);
1493                 if (!t)
1494                         goto error;
1495                 set = isl_set_drop_basic_set(set, t);
1496                 if (!set)
1497                         goto error;
1498                 convex_hull = convex_hull_pair(convex_hull, t);
1499                 if (set->n == 0)
1500                         break;
1501                 t = ubasic_set_lineality_space(isl_basic_set_copy(convex_hull));
1502                 if (!t)
1503                         goto error;
1504                 if (isl_basic_set_is_universe(t)) {
1505                         isl_basic_set_free(convex_hull);
1506                         convex_hull = t;
1507                         break;
1508                 }
1509                 if (t->n_eq < isl_basic_set_total_dim(t)) {
1510                         set = isl_set_add(set, convex_hull);
1511                         return modulo_lineality(set, t);
1512                 }
1513                 isl_basic_set_free(t);
1514         }
1515         isl_set_free(set);
1516         return convex_hull;
1517 error:
1518         isl_set_free(set);
1519         isl_basic_set_free(convex_hull);
1520         return NULL;
1521 }
1522
1523 /* Compute an initial hull for wrapping containing a single initial
1524  * facet by first computing bounds on the set and then using these
1525  * bounds to construct an initial facet.
1526  * This function is a remnant of an older implementation where the
1527  * bounds were also used to check whether the set was bounded.
1528  * Since this function will now only be called when we know the
1529  * set to be bounded, the initial facet should probably be constructed
1530  * by simply using the coordinate directions instead.
1531  */
1532 static struct isl_basic_set *initial_hull(struct isl_basic_set *hull,
1533         struct isl_set *set)
1534 {
1535         struct isl_mat *bounds = NULL;
1536         unsigned dim;
1537         int k;
1538
1539         if (!hull)
1540                 goto error;
1541         bounds = independent_bounds(set->ctx, set);
1542         if (!bounds)
1543                 goto error;
1544         isl_assert(set->ctx, bounds->n_row == isl_set_n_dim(set), goto error);
1545         bounds = initial_facet_constraint(set->ctx, set, bounds);
1546         if (!bounds)
1547                 goto error;
1548         k = isl_basic_set_alloc_inequality(hull);
1549         if (k < 0)
1550                 goto error;
1551         dim = isl_set_n_dim(set);
1552         isl_assert(set->ctx, 1 + dim == bounds->n_col, goto error);
1553         isl_seq_cpy(hull->ineq[k], bounds->row[0], bounds->n_col);
1554         isl_mat_free(set->ctx, bounds);
1555
1556         return hull;
1557 error:
1558         isl_basic_set_free(hull);
1559         isl_mat_free(set->ctx, bounds);
1560         return NULL;
1561 }
1562
1563 struct max_constraint {
1564         struct isl_mat *c;
1565         int             count;
1566         int             ineq;
1567 };
1568
1569 static int max_constraint_equal(const void *entry, const void *val)
1570 {
1571         struct max_constraint *a = (struct max_constraint *)entry;
1572         isl_int *b = (isl_int *)val;
1573
1574         return isl_seq_eq(a->c->row[0] + 1, b, a->c->n_col - 1);
1575 }
1576
1577 static void update_constraint(struct isl_ctx *ctx, struct isl_hash_table *table,
1578         isl_int *con, unsigned len, int n, int ineq)
1579 {
1580         struct isl_hash_table_entry *entry;
1581         struct max_constraint *c;
1582         uint32_t c_hash;
1583
1584         c_hash = isl_seq_hash(con + 1, len, isl_hash_init());
1585         entry = isl_hash_table_find(ctx, table, c_hash, max_constraint_equal,
1586                         con + 1, 0);
1587         if (!entry)
1588                 return;
1589         c = entry->data;
1590         if (c->count < n) {
1591                 isl_hash_table_remove(ctx, table, entry);
1592                 return;
1593         }
1594         c->count++;
1595         if (isl_int_gt(c->c->row[0][0], con[0]))
1596                 return;
1597         if (isl_int_eq(c->c->row[0][0], con[0])) {
1598                 if (ineq)
1599                         c->ineq = ineq;
1600                 return;
1601         }
1602         c->c = isl_mat_cow(ctx, c->c);
1603         isl_int_set(c->c->row[0][0], con[0]);
1604         c->ineq = ineq;
1605 }
1606
1607 /* Check whether the constraint hash table "table" constains the constraint
1608  * "con".
1609  */
1610 static int has_constraint(struct isl_ctx *ctx, struct isl_hash_table *table,
1611         isl_int *con, unsigned len, int n)
1612 {
1613         struct isl_hash_table_entry *entry;
1614         struct max_constraint *c;
1615         uint32_t c_hash;
1616
1617         c_hash = isl_seq_hash(con + 1, len, isl_hash_init());
1618         entry = isl_hash_table_find(ctx, table, c_hash, max_constraint_equal,
1619                         con + 1, 0);
1620         if (!entry)
1621                 return 0;
1622         c = entry->data;
1623         if (c->count < n)
1624                 return 0;
1625         return isl_int_eq(c->c->row[0][0], con[0]);
1626 }
1627
1628 /* Check for inequality constraints of a basic set without equalities
1629  * such that the same or more stringent copies of the constraint appear
1630  * in all of the basic sets.  Such constraints are necessarily facet
1631  * constraints of the convex hull.
1632  *
1633  * If the resulting basic set is by chance identical to one of
1634  * the basic sets in "set", then we know that this basic set contains
1635  * all other basic sets and is therefore the convex hull of set.
1636  * In this case we set *is_hull to 1.
1637  */
1638 static struct isl_basic_set *common_constraints(struct isl_basic_set *hull,
1639         struct isl_set *set, int *is_hull)
1640 {
1641         int i, j, s, n;
1642         int min_constraints;
1643         int best;
1644         struct max_constraint *constraints = NULL;
1645         struct isl_hash_table *table = NULL;
1646         unsigned total;
1647
1648         *is_hull = 0;
1649
1650         for (i = 0; i < set->n; ++i)
1651                 if (set->p[i]->n_eq == 0)
1652                         break;
1653         if (i >= set->n)
1654                 return hull;
1655         min_constraints = set->p[i]->n_ineq;
1656         best = i;
1657         for (i = best + 1; i < set->n; ++i) {
1658                 if (set->p[i]->n_eq != 0)
1659                         continue;
1660                 if (set->p[i]->n_ineq >= min_constraints)
1661                         continue;
1662                 min_constraints = set->p[i]->n_ineq;
1663                 best = i;
1664         }
1665         constraints = isl_calloc_array(hull->ctx, struct max_constraint,
1666                                         min_constraints);
1667         if (!constraints)
1668                 return hull;
1669         table = isl_alloc_type(hull->ctx, struct isl_hash_table);
1670         if (isl_hash_table_init(hull->ctx, table, min_constraints))
1671                 goto error;
1672
1673         total = isl_dim_total(set->dim);
1674         for (i = 0; i < set->p[best]->n_ineq; ++i) {
1675                 constraints[i].c = isl_mat_sub_alloc(hull->ctx,
1676                         set->p[best]->ineq + i, 0, 1, 0, 1 + total);
1677                 if (!constraints[i].c)
1678                         goto error;
1679                 constraints[i].ineq = 1;
1680         }
1681         for (i = 0; i < min_constraints; ++i) {
1682                 struct isl_hash_table_entry *entry;
1683                 uint32_t c_hash;
1684                 c_hash = isl_seq_hash(constraints[i].c->row[0] + 1, total,
1685                                         isl_hash_init());
1686                 entry = isl_hash_table_find(hull->ctx, table, c_hash,
1687                         max_constraint_equal, constraints[i].c->row[0] + 1, 1);
1688                 if (!entry)
1689                         goto error;
1690                 isl_assert(hull->ctx, !entry->data, goto error);
1691                 entry->data = &constraints[i];
1692         }
1693
1694         n = 0;
1695         for (s = 0; s < set->n; ++s) {
1696                 if (s == best)
1697                         continue;
1698
1699                 for (i = 0; i < set->p[s]->n_eq; ++i) {
1700                         isl_int *eq = set->p[s]->eq[i];
1701                         for (j = 0; j < 2; ++j) {
1702                                 isl_seq_neg(eq, eq, 1 + total);
1703                                 update_constraint(hull->ctx, table,
1704                                                             eq, total, n, 0);
1705                         }
1706                 }
1707                 for (i = 0; i < set->p[s]->n_ineq; ++i) {
1708                         isl_int *ineq = set->p[s]->ineq[i];
1709                         update_constraint(hull->ctx, table, ineq, total, n,
1710                                 set->p[s]->n_eq == 0);
1711                 }
1712                 ++n;
1713         }
1714
1715         for (i = 0; i < min_constraints; ++i) {
1716                 if (constraints[i].count < n)
1717                         continue;
1718                 if (!constraints[i].ineq)
1719                         continue;
1720                 j = isl_basic_set_alloc_inequality(hull);
1721                 if (j < 0)
1722                         goto error;
1723                 isl_seq_cpy(hull->ineq[j], constraints[i].c->row[0], 1 + total);
1724         }
1725
1726         for (s = 0; s < set->n; ++s) {
1727                 if (set->p[s]->n_eq)
1728                         continue;
1729                 if (set->p[s]->n_ineq != hull->n_ineq)
1730                         continue;
1731                 for (i = 0; i < set->p[s]->n_ineq; ++i) {
1732                         isl_int *ineq = set->p[s]->ineq[i];
1733                         if (!has_constraint(hull->ctx, table, ineq, total, n))
1734                                 break;
1735                 }
1736                 if (i == set->p[s]->n_ineq)
1737                         *is_hull = 1;
1738         }
1739
1740         isl_hash_table_clear(table);
1741         for (i = 0; i < min_constraints; ++i)
1742                 isl_mat_free(hull->ctx, constraints[i].c);
1743         free(constraints);
1744         free(table);
1745         return hull;
1746 error:
1747         isl_hash_table_clear(table);
1748         free(table);
1749         if (constraints)
1750                 for (i = 0; i < min_constraints; ++i)
1751                         isl_mat_free(hull->ctx, constraints[i].c);
1752         free(constraints);
1753         return hull;
1754 }
1755
1756 /* Create a template for the convex hull of "set" and fill it up
1757  * obvious facet constraints, if any.  If the result happens to
1758  * be the convex hull of "set" then *is_hull is set to 1.
1759  */
1760 static struct isl_basic_set *proto_hull(struct isl_set *set, int *is_hull)
1761 {
1762         struct isl_basic_set *hull;
1763         unsigned n_ineq;
1764         int i;
1765
1766         n_ineq = 1;
1767         for (i = 0; i < set->n; ++i) {
1768                 n_ineq += set->p[i]->n_eq;
1769                 n_ineq += set->p[i]->n_ineq;
1770         }
1771         hull = isl_basic_set_alloc_dim(isl_dim_copy(set->dim), 0, 0, n_ineq);
1772         hull = isl_basic_set_set_rational(hull);
1773         if (!hull)
1774                 return NULL;
1775         return common_constraints(hull, set, is_hull);
1776 }
1777
1778 static struct isl_basic_set *uset_convex_hull_wrap(struct isl_set *set)
1779 {
1780         struct isl_basic_set *hull;
1781         int is_hull;
1782
1783         hull = proto_hull(set, &is_hull);
1784         if (hull && !is_hull) {
1785                 if (hull->n_ineq == 0)
1786                         hull = initial_hull(hull, set);
1787                 hull = extend(hull, set);
1788         }
1789         isl_set_free(set);
1790
1791         return hull;
1792 }
1793
1794 /* Compute the convex hull of a set without any parameters or
1795  * integer divisions.  Depending on whether the set is bounded,
1796  * we pass control to the wrapping based convex hull or
1797  * the Fourier-Motzkin elimination based convex hull.
1798  * We also handle a few special cases before checking the boundedness.
1799  */
1800 static struct isl_basic_set *uset_convex_hull(struct isl_set *set)
1801 {
1802         int i;
1803         struct isl_basic_set *convex_hull = NULL;
1804         struct isl_basic_set *lin;
1805
1806         if (isl_set_n_dim(set) == 0)
1807                 return convex_hull_0d(set);
1808
1809         set = isl_set_coalesce(set);
1810         set = isl_set_set_rational(set);
1811
1812         if (!set)
1813                 goto error;
1814         if (!set)
1815                 return NULL;
1816         if (set->n == 1) {
1817                 convex_hull = isl_basic_set_copy(set->p[0]);
1818                 isl_set_free(set);
1819                 return convex_hull;
1820         }
1821         if (isl_set_n_dim(set) == 1)
1822                 return convex_hull_1d(set->ctx, set);
1823
1824         if (isl_set_is_bounded(set))
1825                 return uset_convex_hull_wrap(set);
1826
1827         lin = uset_combined_lineality_space(isl_set_copy(set));
1828         if (!lin)
1829                 goto error;
1830         if (isl_basic_set_is_universe(lin)) {
1831                 isl_set_free(set);
1832                 return lin;
1833         }
1834         if (lin->n_eq < isl_basic_set_total_dim(lin))
1835                 return modulo_lineality(set, lin);
1836         isl_basic_set_free(lin);
1837
1838         return uset_convex_hull_unbounded(set);
1839 error:
1840         isl_set_free(set);
1841         isl_basic_set_free(convex_hull);
1842         return NULL;
1843 }
1844
1845 /* This is the core procedure, where "set" is a "pure" set, i.e.,
1846  * without parameters or divs and where the convex hull of set is
1847  * known to be full-dimensional.
1848  */
1849 static struct isl_basic_set *uset_convex_hull_wrap_bounded(struct isl_set *set)
1850 {
1851         int i;
1852         struct isl_basic_set *convex_hull = NULL;
1853
1854         if (isl_set_n_dim(set) == 0) {
1855                 convex_hull = isl_basic_set_universe(isl_dim_copy(set->dim));
1856                 isl_set_free(set);
1857                 convex_hull = isl_basic_set_set_rational(convex_hull);
1858                 return convex_hull;
1859         }
1860
1861         set = isl_set_set_rational(set);
1862
1863         if (!set)
1864                 goto error;
1865         set = isl_set_normalize(set);
1866         if (!set)
1867                 goto error;
1868         if (set->n == 1) {
1869                 convex_hull = isl_basic_set_copy(set->p[0]);
1870                 isl_set_free(set);
1871                 return convex_hull;
1872         }
1873         if (isl_set_n_dim(set) == 1)
1874                 return convex_hull_1d(set->ctx, set);
1875
1876         return uset_convex_hull_wrap(set);
1877 error:
1878         isl_set_free(set);
1879         return NULL;
1880 }
1881
1882 /* Compute the convex hull of set "set" with affine hull "affine_hull",
1883  * We first remove the equalities (transforming the set), compute the
1884  * convex hull of the transformed set and then add the equalities back
1885  * (after performing the inverse transformation.
1886  */
1887 static struct isl_basic_set *modulo_affine_hull(struct isl_ctx *ctx,
1888         struct isl_set *set, struct isl_basic_set *affine_hull)
1889 {
1890         struct isl_mat *T;
1891         struct isl_mat *T2;
1892         struct isl_basic_set *dummy;
1893         struct isl_basic_set *convex_hull;
1894
1895         dummy = isl_basic_set_remove_equalities(
1896                         isl_basic_set_copy(affine_hull), &T, &T2);
1897         if (!dummy)
1898                 goto error;
1899         isl_basic_set_free(dummy);
1900         set = isl_set_preimage(set, T);
1901         convex_hull = uset_convex_hull(set);
1902         convex_hull = isl_basic_set_preimage(convex_hull, T2);
1903         convex_hull = isl_basic_set_intersect(convex_hull, affine_hull);
1904         return convex_hull;
1905 error:
1906         isl_basic_set_free(affine_hull);
1907         isl_set_free(set);
1908         return NULL;
1909 }
1910
1911 /* Compute the convex hull of a map.
1912  *
1913  * The implementation was inspired by "Extended Convex Hull" by Fukuda et al.,
1914  * specifically, the wrapping of facets to obtain new facets.
1915  */
1916 struct isl_basic_map *isl_map_convex_hull(struct isl_map *map)
1917 {
1918         struct isl_basic_set *bset;
1919         struct isl_basic_map *model = NULL;
1920         struct isl_basic_set *affine_hull = NULL;
1921         struct isl_basic_map *convex_hull = NULL;
1922         struct isl_set *set = NULL;
1923         struct isl_ctx *ctx;
1924
1925         if (!map)
1926                 goto error;
1927
1928         ctx = map->ctx;
1929         if (map->n == 0) {
1930                 convex_hull = isl_basic_map_empty_like_map(map);
1931                 isl_map_free(map);
1932                 return convex_hull;
1933         }
1934
1935         map = isl_map_detect_equalities(map);
1936         map = isl_map_align_divs(map);
1937         model = isl_basic_map_copy(map->p[0]);
1938         set = isl_map_underlying_set(map);
1939         if (!set)
1940                 goto error;
1941
1942         affine_hull = isl_set_affine_hull(isl_set_copy(set));
1943         if (!affine_hull)
1944                 goto error;
1945         if (affine_hull->n_eq != 0)
1946                 bset = modulo_affine_hull(ctx, set, affine_hull);
1947         else {
1948                 isl_basic_set_free(affine_hull);
1949                 bset = uset_convex_hull(set);
1950         }
1951
1952         convex_hull = isl_basic_map_overlying_set(bset, model);
1953
1954         ISL_F_SET(convex_hull, ISL_BASIC_MAP_NO_IMPLICIT);
1955         ISL_F_SET(convex_hull, ISL_BASIC_MAP_ALL_EQUALITIES);
1956         ISL_F_CLR(convex_hull, ISL_BASIC_MAP_RATIONAL);
1957         return convex_hull;
1958 error:
1959         isl_set_free(set);
1960         isl_basic_map_free(model);
1961         return NULL;
1962 }
1963
1964 struct isl_basic_set *isl_set_convex_hull(struct isl_set *set)
1965 {
1966         return (struct isl_basic_set *)
1967                 isl_map_convex_hull((struct isl_map *)set);
1968 }
1969
1970 struct sh_data_entry {
1971         struct isl_hash_table   *table;
1972         struct isl_tab          *tab;
1973 };
1974
1975 /* Holds the data needed during the simple hull computation.
1976  * In particular,
1977  *      n               the number of basic sets in the original set
1978  *      hull_table      a hash table of already computed constraints
1979  *                      in the simple hull
1980  *      p               for each basic set,
1981  *              table           a hash table of the constraints
1982  *              tab             the tableau corresponding to the basic set
1983  */
1984 struct sh_data {
1985         struct isl_ctx          *ctx;
1986         unsigned                n;
1987         struct isl_hash_table   *hull_table;
1988         struct sh_data_entry    p[0];
1989 };
1990
1991 static void sh_data_free(struct sh_data *data)
1992 {
1993         int i;
1994
1995         if (!data)
1996                 return;
1997         isl_hash_table_free(data->ctx, data->hull_table);
1998         for (i = 0; i < data->n; ++i) {
1999                 isl_hash_table_free(data->ctx, data->p[i].table);
2000                 isl_tab_free(data->ctx, data->p[i].tab);
2001         }
2002         free(data);
2003 }
2004
2005 struct ineq_cmp_data {
2006         unsigned        len;
2007         isl_int         *p;
2008 };
2009
2010 static int has_ineq(const void *entry, const void *val)
2011 {
2012         isl_int *row = (isl_int *)entry;
2013         struct ineq_cmp_data *v = (struct ineq_cmp_data *)val;
2014
2015         return isl_seq_eq(row + 1, v->p + 1, v->len) ||
2016                isl_seq_is_neg(row + 1, v->p + 1, v->len);
2017 }
2018
2019 static int hash_ineq(struct isl_ctx *ctx, struct isl_hash_table *table,
2020                         isl_int *ineq, unsigned len)
2021 {
2022         uint32_t c_hash;
2023         struct ineq_cmp_data v;
2024         struct isl_hash_table_entry *entry;
2025
2026         v.len = len;
2027         v.p = ineq;
2028         c_hash = isl_seq_hash(ineq + 1, len, isl_hash_init());
2029         entry = isl_hash_table_find(ctx, table, c_hash, has_ineq, &v, 1);
2030         if (!entry)
2031                 return - 1;
2032         entry->data = ineq;
2033         return 0;
2034 }
2035
2036 /* Fill hash table "table" with the constraints of "bset".
2037  * Equalities are added as two inequalities.
2038  * The value in the hash table is a pointer to the (in)equality of "bset".
2039  */
2040 static int hash_basic_set(struct isl_hash_table *table,
2041                                 struct isl_basic_set *bset)
2042 {
2043         int i, j;
2044         unsigned dim = isl_basic_set_total_dim(bset);
2045
2046         for (i = 0; i < bset->n_eq; ++i) {
2047                 for (j = 0; j < 2; ++j) {
2048                         isl_seq_neg(bset->eq[i], bset->eq[i], 1 + dim);
2049                         if (hash_ineq(bset->ctx, table, bset->eq[i], dim) < 0)
2050                                 return -1;
2051                 }
2052         }
2053         for (i = 0; i < bset->n_ineq; ++i) {
2054                 if (hash_ineq(bset->ctx, table, bset->ineq[i], dim) < 0)
2055                         return -1;
2056         }
2057         return 0;
2058 }
2059
2060 static struct sh_data *sh_data_alloc(struct isl_set *set, unsigned n_ineq)
2061 {
2062         struct sh_data *data;
2063         int i;
2064
2065         data = isl_calloc(set->ctx, struct sh_data,
2066                 sizeof(struct sh_data) + set->n * sizeof(struct sh_data_entry));
2067         if (!data)
2068                 return NULL;
2069         data->ctx = set->ctx;
2070         data->n = set->n;
2071         data->hull_table = isl_hash_table_alloc(set->ctx, n_ineq);
2072         if (!data->hull_table)
2073                 goto error;
2074         for (i = 0; i < set->n; ++i) {
2075                 data->p[i].table = isl_hash_table_alloc(set->ctx,
2076                                     2 * set->p[i]->n_eq + set->p[i]->n_ineq);
2077                 if (!data->p[i].table)
2078                         goto error;
2079                 if (hash_basic_set(data->p[i].table, set->p[i]) < 0)
2080                         goto error;
2081         }
2082         return data;
2083 error:
2084         sh_data_free(data);
2085         return NULL;
2086 }
2087
2088 /* Check if inequality "ineq" is a bound for basic set "j" or if
2089  * it can be relaxed (by increasing the constant term) to become
2090  * a bound for that basic set.  In the latter case, the constant
2091  * term is updated.
2092  * Return 1 if "ineq" is a bound
2093  *        0 if "ineq" may attain arbitrarily small values on basic set "j"
2094  *       -1 if some error occurred
2095  */
2096 static int is_bound(struct sh_data *data, struct isl_set *set, int j,
2097                         isl_int *ineq)
2098 {
2099         enum isl_lp_result res;
2100         isl_int opt;
2101
2102         if (!data->p[j].tab) {
2103                 data->p[j].tab = isl_tab_from_basic_set(set->p[j]);
2104                 if (!data->p[j].tab)
2105                         return -1;
2106         }
2107
2108         isl_int_init(opt);
2109
2110         res = isl_tab_min(data->ctx, data->p[j].tab, ineq, data->ctx->one,
2111                                 &opt, NULL);
2112         if (res == isl_lp_ok && isl_int_is_neg(opt))
2113                 isl_int_sub(ineq[0], ineq[0], opt);
2114
2115         isl_int_clear(opt);
2116
2117         return res == isl_lp_ok ? 1 :
2118                res == isl_lp_unbounded ? 0 : -1;
2119 }
2120
2121 /* Check if inequality "ineq" from basic set "i" can be relaxed to
2122  * become a bound on the whole set.  If so, add the (relaxed) inequality
2123  * to "hull".
2124  *
2125  * We first check if "hull" already contains a translate of the inequality.
2126  * If so, we are done.
2127  * Then, we check if any of the previous basic sets contains a translate
2128  * of the inequality.  If so, then we have already considered this
2129  * inequality and we are done.
2130  * Otherwise, for each basic set other than "i", we check if the inequality
2131  * is a bound on the basic set.
2132  * For previous basic sets, we know that they do not contain a translate
2133  * of the inequality, so we directly call is_bound.
2134  * For following basic sets, we first check if a translate of the
2135  * inequality appears in its description and if so directly update
2136  * the inequality accordingly.
2137  */
2138 static struct isl_basic_set *add_bound(struct isl_basic_set *hull,
2139         struct sh_data *data, struct isl_set *set, int i, isl_int *ineq)
2140 {
2141         uint32_t c_hash;
2142         struct ineq_cmp_data v;
2143         struct isl_hash_table_entry *entry;
2144         int j, k;
2145
2146         if (!hull)
2147                 return NULL;
2148
2149         v.len = isl_basic_set_total_dim(hull);
2150         v.p = ineq;
2151         c_hash = isl_seq_hash(ineq + 1, v.len, isl_hash_init());
2152
2153         entry = isl_hash_table_find(hull->ctx, data->hull_table, c_hash,
2154                                         has_ineq, &v, 0);
2155         if (entry)
2156                 return hull;
2157
2158         for (j = 0; j < i; ++j) {
2159                 entry = isl_hash_table_find(hull->ctx, data->p[j].table,
2160                                                 c_hash, has_ineq, &v, 0);
2161                 if (entry)
2162                         break;
2163         }
2164         if (j < i)
2165                 return hull;
2166
2167         k = isl_basic_set_alloc_inequality(hull);
2168         isl_seq_cpy(hull->ineq[k], ineq, 1 + v.len);
2169         if (k < 0)
2170                 goto error;
2171
2172         for (j = 0; j < i; ++j) {
2173                 int bound;
2174                 bound = is_bound(data, set, j, hull->ineq[k]);
2175                 if (bound < 0)
2176                         goto error;
2177                 if (!bound)
2178                         break;
2179         }
2180         if (j < i) {
2181                 isl_basic_set_free_inequality(hull, 1);
2182                 return hull;
2183         }
2184
2185         for (j = i + 1; j < set->n; ++j) {
2186                 int bound, neg;
2187                 isl_int *ineq_j;
2188                 entry = isl_hash_table_find(hull->ctx, data->p[j].table,
2189                                                 c_hash, has_ineq, &v, 0);
2190                 if (entry) {
2191                         ineq_j = entry->data;
2192                         neg = isl_seq_is_neg(ineq_j + 1,
2193                                              hull->ineq[k] + 1, v.len);
2194                         if (neg)
2195                                 isl_int_neg(ineq_j[0], ineq_j[0]);
2196                         if (isl_int_gt(ineq_j[0], hull->ineq[k][0]))
2197                                 isl_int_set(hull->ineq[k][0], ineq_j[0]);
2198                         if (neg)
2199                                 isl_int_neg(ineq_j[0], ineq_j[0]);
2200                         continue;
2201                 }
2202                 bound = is_bound(data, set, j, hull->ineq[k]);
2203                 if (bound < 0)
2204                         goto error;
2205                 if (!bound)
2206                         break;
2207         }
2208         if (j < set->n) {
2209                 isl_basic_set_free_inequality(hull, 1);
2210                 return hull;
2211         }
2212
2213         entry = isl_hash_table_find(hull->ctx, data->hull_table, c_hash,
2214                                         has_ineq, &v, 1);
2215         if (!entry)
2216                 goto error;
2217         entry->data = hull->ineq[k];
2218
2219         return hull;
2220 error:
2221         isl_basic_set_free(hull);
2222         return NULL;
2223 }
2224
2225 /* Check if any inequality from basic set "i" can be relaxed to
2226  * become a bound on the whole set.  If so, add the (relaxed) inequality
2227  * to "hull".
2228  */
2229 static struct isl_basic_set *add_bounds(struct isl_basic_set *bset,
2230         struct sh_data *data, struct isl_set *set, int i)
2231 {
2232         int j, k;
2233         unsigned dim = isl_basic_set_total_dim(bset);
2234
2235         for (j = 0; j < set->p[i]->n_eq; ++j) {
2236                 for (k = 0; k < 2; ++k) {
2237                         isl_seq_neg(set->p[i]->eq[j], set->p[i]->eq[j], 1+dim);
2238                         add_bound(bset, data, set, i, set->p[i]->eq[j]);
2239                 }
2240         }
2241         for (j = 0; j < set->p[i]->n_ineq; ++j)
2242                 add_bound(bset, data, set, i, set->p[i]->ineq[j]);
2243         return bset;
2244 }
2245
2246 /* Compute a superset of the convex hull of set that is described
2247  * by only translates of the constraints in the constituents of set.
2248  */
2249 static struct isl_basic_set *uset_simple_hull(struct isl_set *set)
2250 {
2251         struct sh_data *data = NULL;
2252         struct isl_basic_set *hull = NULL;
2253         unsigned n_ineq;
2254         int i, j;
2255
2256         if (!set)
2257                 return NULL;
2258
2259         n_ineq = 0;
2260         for (i = 0; i < set->n; ++i) {
2261                 if (!set->p[i])
2262                         goto error;
2263                 n_ineq += 2 * set->p[i]->n_eq + set->p[i]->n_ineq;
2264         }
2265
2266         hull = isl_basic_set_alloc_dim(isl_dim_copy(set->dim), 0, 0, n_ineq);
2267         if (!hull)
2268                 goto error;
2269
2270         data = sh_data_alloc(set, n_ineq);
2271         if (!data)
2272                 goto error;
2273
2274         for (i = 0; i < set->n; ++i)
2275                 hull = add_bounds(hull, data, set, i);
2276
2277         sh_data_free(data);
2278         isl_set_free(set);
2279
2280         return hull;
2281 error:
2282         sh_data_free(data);
2283         isl_basic_set_free(hull);
2284         isl_set_free(set);
2285         return NULL;
2286 }
2287
2288 /* Compute a superset of the convex hull of map that is described
2289  * by only translates of the constraints in the constituents of map.
2290  */
2291 struct isl_basic_map *isl_map_simple_hull(struct isl_map *map)
2292 {
2293         struct isl_set *set = NULL;
2294         struct isl_basic_map *model = NULL;
2295         struct isl_basic_map *hull;
2296         struct isl_basic_map *affine_hull;
2297         struct isl_basic_set *bset = NULL;
2298
2299         if (!map)
2300                 return NULL;
2301         if (map->n == 0) {
2302                 hull = isl_basic_map_empty_like_map(map);
2303                 isl_map_free(map);
2304                 return hull;
2305         }
2306         if (map->n == 1) {
2307                 hull = isl_basic_map_copy(map->p[0]);
2308                 isl_map_free(map);
2309                 return hull;
2310         }
2311
2312         map = isl_map_detect_equalities(map);
2313         affine_hull = isl_map_affine_hull(isl_map_copy(map));
2314         map = isl_map_align_divs(map);
2315         model = isl_basic_map_copy(map->p[0]);
2316
2317         set = isl_map_underlying_set(map);
2318
2319         bset = uset_simple_hull(set);
2320
2321         hull = isl_basic_map_overlying_set(bset, model);
2322
2323         hull = isl_basic_map_intersect(hull, affine_hull);
2324         hull = isl_basic_map_convex_hull(hull);
2325         ISL_F_SET(hull, ISL_BASIC_MAP_NO_IMPLICIT);
2326         ISL_F_SET(hull, ISL_BASIC_MAP_ALL_EQUALITIES);
2327
2328         return hull;
2329 }
2330
2331 struct isl_basic_set *isl_set_simple_hull(struct isl_set *set)
2332 {
2333         return (struct isl_basic_set *)
2334                 isl_map_simple_hull((struct isl_map *)set);
2335 }
2336
2337 /* Given a set "set", return parametric bounds on the dimension "dim".
2338  */
2339 static struct isl_basic_set *set_bounds(struct isl_set *set, int dim)
2340 {
2341         unsigned set_dim = isl_set_dim(set, isl_dim_set);
2342         set = isl_set_copy(set);
2343         set = isl_set_eliminate_dims(set, dim + 1, set_dim - (dim + 1));
2344         set = isl_set_eliminate_dims(set, 0, dim);
2345         return isl_set_convex_hull(set);
2346 }
2347
2348 /* Computes a "simple hull" and then check if each dimension in the
2349  * resulting hull is bounded by a symbolic constant.  If not, the
2350  * hull is intersected with the corresponding bounds on the whole set.
2351  */
2352 struct isl_basic_set *isl_set_bounded_simple_hull(struct isl_set *set)
2353 {
2354         int i, j;
2355         struct isl_basic_set *hull;
2356         unsigned nparam, left;
2357         int removed_divs = 0;
2358
2359         hull = isl_set_simple_hull(isl_set_copy(set));
2360         if (!hull)
2361                 goto error;
2362
2363         nparam = isl_basic_set_dim(hull, isl_dim_param);
2364         for (i = 0; i < isl_basic_set_dim(hull, isl_dim_set); ++i) {
2365                 int lower = 0, upper = 0;
2366                 struct isl_basic_set *bounds;
2367
2368                 left = isl_basic_set_total_dim(hull) - nparam - i - 1;
2369                 for (j = 0; j < hull->n_eq; ++j) {
2370                         if (isl_int_is_zero(hull->eq[j][1 + nparam + i]))
2371                                 continue;
2372                         if (isl_seq_first_non_zero(hull->eq[j]+1+nparam+i+1,
2373                                                     left) == -1)
2374                                 break;
2375                 }
2376                 if (j < hull->n_eq)
2377                         continue;
2378
2379                 for (j = 0; j < hull->n_ineq; ++j) {
2380                         if (isl_int_is_zero(hull->ineq[j][1 + nparam + i]))
2381                                 continue;
2382                         if (isl_seq_first_non_zero(hull->ineq[j]+1+nparam+i+1,
2383                                                     left) != -1 ||
2384                             isl_seq_first_non_zero(hull->ineq[j]+1+nparam,
2385                                                     i) != -1)
2386                                 continue;
2387                         if (isl_int_is_pos(hull->ineq[j][1 + nparam + i]))
2388                                 lower = 1;
2389                         else
2390                                 upper = 1;
2391                         if (lower && upper)
2392                                 break;
2393                 }
2394
2395                 if (lower && upper)
2396                         continue;
2397
2398                 if (!removed_divs) {
2399                         set = isl_set_remove_divs(set);
2400                         if (!set)
2401                                 goto error;
2402                         removed_divs = 1;
2403                 }
2404                 bounds = set_bounds(set, i);
2405                 hull = isl_basic_set_intersect(hull, bounds);
2406                 if (!hull)
2407                         goto error;
2408         }
2409
2410         isl_set_free(set);
2411         return hull;
2412 error:
2413         isl_set_free(set);
2414         return NULL;
2415 }