drivers/pci/pci-sysfs.c

   1 /*
   2  * drivers/pci/pci-sysfs.c
   3  *
   4  * (C) Copyright 2002-2004 Greg Kroah-Hartman <greg@kroah.com>
   5  * (C) Copyright 2002-2004 IBM Corp.
   6  * (C) Copyright 2003 Matthew Wilcox
   7  * (C) Copyright 2003 Hewlett-Packard
   8  * (C) Copyright 2004 Jon Smirl <jonsmirl@yahoo.com>
   9  * (C) Copyright 2004 Silicon Graphics, Inc. Jesse Barnes <jbarnes@sgi.com>
  10  *
  11  * File attributes for PCI devices
  12  *
  13  * Modeled after usb's driverfs.c
  14  *
  15  */
  16
  17
  18 #include <linux/kernel.h>
  19 #include <linux/sched.h>
  20 #include <linux/pci.h>
  21 #include <linux/stat.h>
  22 #include <linux/export.h>
  23 #include <linux/topology.h>
  24 #include <linux/mm.h>
  25 #include <linux/fs.h>
  26 #include <linux/capability.h>
  27 #include <linux/security.h>
  28 #include <linux/pci-aspm.h>
  29 #include <linux/slab.h>
  30 #include <linux/vgaarb.h>
  31 #include <linux/pm_runtime.h>
  32 #include "pci.h"
  33
  34 static int sysfs_initialized;   /* = 0 */
  35
  36 /* show configuration fields */
  37 #define pci_config_attr(field, format_string)                           \
  38 static ssize_t                                                          \
  39 field##_show(struct device *dev, struct device_attribute *attr, char *buf)                              \
  40 {                                                                       \
  41         struct pci_dev *pdev;                                           \
  42                                                                         \
  43         pdev = to_pci_dev (dev);                                        \
  44         return sprintf (buf, format_string, pdev->field);               \
  45 }                                                                       \
  46 static DEVICE_ATTR_RO(field)
  47
  48 pci_config_attr(vendor, "0x%04x\n");
  49 pci_config_attr(device, "0x%04x\n");
  50 pci_config_attr(subsystem_vendor, "0x%04x\n");
  51 pci_config_attr(subsystem_device, "0x%04x\n");
  52 pci_config_attr(class, "0x%06x\n");
  53 pci_config_attr(irq, "%u\n");
  54
  55 static ssize_t broken_parity_status_show(struct device *dev,
  56                                          struct device_attribute *attr,
  57                                          char *buf)
  58 {
  59         struct pci_dev *pdev = to_pci_dev(dev);
  60         return sprintf (buf, "%u\n", pdev->broken_parity_status);
  61 }
  62
  63 static ssize_t broken_parity_status_store(struct device *dev,
  64                                           struct device_attribute *attr,
  65                                           const char *buf, size_t count)
  66 {
  67         struct pci_dev *pdev = to_pci_dev(dev);
  68         unsigned long val;
  69
  70         if (kstrtoul(buf, 0, &val) < 0)
  71                 return -EINVAL;
  72
  73         pdev->broken_parity_status = !!val;
  74
  75         return count;
  76 }
  77 static DEVICE_ATTR_RW(broken_parity_status);
  78
  79 static ssize_t pci_dev_show_local_cpu(struct device *dev,
  80                 int type,
  81                 struct device_attribute *attr,
  82                 char *buf)
  83 {
  84         const struct cpumask *mask;
  85         int len;
  86
  87 #ifdef CONFIG_NUMA
  88         mask = (dev_to_node(dev) == -1) ? cpu_online_mask :
  89                                           cpumask_of_node(dev_to_node(dev));
  90 #else
  91         mask = cpumask_of_pcibus(to_pci_dev(dev)->bus);
  92 #endif
  93         len = type ?
  94                 cpumask_scnprintf(buf, PAGE_SIZE-2, mask) :
  95                 cpulist_scnprintf(buf, PAGE_SIZE-2, mask);
  96
  97         buf[len++] = '\n';
  98         buf[len] = '\0';
  99         return len;
 100 }
 101
 102 static ssize_t local_cpus_show(struct device *dev,
 103                         struct device_attribute *attr, char *buf)
 104 {
 105         return pci_dev_show_local_cpu(dev, 1, attr, buf);
 106 }
 107 static DEVICE_ATTR_RO(local_cpus);
 108
 109 static ssize_t local_cpulist_show(struct device *dev,
 110                         struct device_attribute *attr, char *buf)
 111 {
 112         return pci_dev_show_local_cpu(dev, 0, attr, buf);
 113 }
 114 static DEVICE_ATTR_RO(local_cpulist);
 115
 116 /*
 117  * PCI Bus Class Devices
 118  */
 119 static ssize_t pci_bus_show_cpuaffinity(struct device *dev,
 120                                         int type,
 121                                         struct device_attribute *attr,
 122                                         char *buf)
 123 {
 124         int ret;
 125         const struct cpumask *cpumask;
 126
 127         cpumask = cpumask_of_pcibus(to_pci_bus(dev));
 128         ret = type ?
 129                 cpulist_scnprintf(buf, PAGE_SIZE-2, cpumask) :
 130                 cpumask_scnprintf(buf, PAGE_SIZE-2, cpumask);
 131         buf[ret++] = '\n';
 132         buf[ret] = '\0';
 133         return ret;
 134 }
 135
 136 static ssize_t cpuaffinity_show(struct device *dev,
 137                                 struct device_attribute *attr, char *buf)
 138 {
 139         return pci_bus_show_cpuaffinity(dev, 0, attr, buf);
 140 }
 141 static DEVICE_ATTR_RO(cpuaffinity);
 142
 143 static ssize_t cpulistaffinity_show(struct device *dev,
 144                                     struct device_attribute *attr, char *buf)
 145 {
 146         return pci_bus_show_cpuaffinity(dev, 1, attr, buf);
 147 }
 148 static DEVICE_ATTR_RO(cpulistaffinity);
 149
 150 /* show resources */
 151 static ssize_t
 152 resource_show(struct device * dev, struct device_attribute *attr, char * buf)
 153 {
 154         struct pci_dev * pci_dev = to_pci_dev(dev);
 155         char * str = buf;
 156         int i;
 157         int max;
 158         resource_size_t start, end;
 159
 160         if (pci_dev->subordinate)
 161                 max = DEVICE_COUNT_RESOURCE;
 162         else
 163                 max = PCI_BRIDGE_RESOURCES;
 164
 165         for (i = 0; i < max; i++) {
 166                 struct resource *res =  &pci_dev->resource[i];
 167                 pci_resource_to_user(pci_dev, i, res, &start, &end);
 168                 str += sprintf(str,"0x%016llx 0x%016llx 0x%016llx\n",
 169                                (unsigned long long)start,
 170                                (unsigned long long)end,
 171                                (unsigned long long)res->flags);
 172         }
 173         return (str - buf);
 174 }
 175 static DEVICE_ATTR_RO(resource);
 176
 177 static ssize_t modalias_show(struct device *dev, struct device_attribute *attr, char *buf)
 178 {
 179         struct pci_dev *pci_dev = to_pci_dev(dev);
 180
 181         return sprintf(buf, "pci:v%08Xd%08Xsv%08Xsd%08Xbc%02Xsc%02Xi%02x\n",
 182                        pci_dev->vendor, pci_dev->device,
 183                        pci_dev->subsystem_vendor, pci_dev->subsystem_device,
 184                        (u8)(pci_dev->class >> 16), (u8)(pci_dev->class >> 8),
 185                        (u8)(pci_dev->class));
 186 }
 187 static DEVICE_ATTR_RO(modalias);
 188
 189 static ssize_t enabled_store(struct device *dev,
 190                              struct device_attribute *attr, const char *buf,
 191                              size_t count)
 192 {
 193         struct pci_dev *pdev = to_pci_dev(dev);
 194         unsigned long val;
 195         ssize_t result = kstrtoul(buf, 0, &val);
 196
 197         if (result < 0)
 198                 return result;
 199
 200         /* this can crash the machine when done on the "wrong" device */
 201         if (!capable(CAP_SYS_ADMIN))
 202                 return -EPERM;
 203
 204         if (!val) {
 205                 if (pci_is_enabled(pdev))
 206                         pci_disable_device(pdev);
 207                 else
 208                         result = -EIO;
 209         } else
 210                 result = pci_enable_device(pdev);
 211
 212         return result < 0 ? result : count;
 213 }
 214
 215 static ssize_t enabled_show(struct device *dev,
 216                             struct device_attribute *attr, char *buf)
 217 {
 218         struct pci_dev *pdev;
 219
 220         pdev = to_pci_dev (dev);
 221         return sprintf (buf, "%u\n", atomic_read(&pdev->enable_cnt));
 222 }
 223 static DEVICE_ATTR_RW(enabled);
 224
 225 #ifdef CONFIG_NUMA
 226 static ssize_t
 227 numa_node_show(struct device *dev, struct device_attribute *attr, char *buf)
 228 {
 229         return sprintf (buf, "%d\n", dev->numa_node);
 230 }
 231 static DEVICE_ATTR_RO(numa_node);
 232 #endif
 233
 234 static ssize_t
 235 dma_mask_bits_show(struct device *dev, struct device_attribute *attr, char *buf)
 236 {
 237         struct pci_dev *pdev = to_pci_dev(dev);
 238
 239         return sprintf (buf, "%d\n", fls64(pdev->dma_mask));
 240 }
 241 static DEVICE_ATTR_RO(dma_mask_bits);
 242
 243 static ssize_t
 244 consistent_dma_mask_bits_show(struct device *dev, struct device_attribute *attr,
 245                                  char *buf)
 246 {
 247         return sprintf (buf, "%d\n", fls64(dev->coherent_dma_mask));
 248 }
 249 static DEVICE_ATTR_RO(consistent_dma_mask_bits);
 250
 251 static ssize_t
 252 msi_bus_show(struct device *dev, struct device_attribute *attr, char *buf)
 253 {
 254         struct pci_dev *pdev = to_pci_dev(dev);
 255
 256         if (!pdev->subordinate)
 257                 return 0;
 258
 259         return sprintf (buf, "%u\n",
 260                         !(pdev->subordinate->bus_flags & PCI_BUS_FLAGS_NO_MSI));
 261 }
 262
 263 static ssize_t
 264 msi_bus_store(struct device *dev, struct device_attribute *attr,
 265               const char *buf, size_t count)
 266 {
 267         struct pci_dev *pdev = to_pci_dev(dev);
 268         unsigned long val;
 269
 270         if (kstrtoul(buf, 0, &val) < 0)
 271                 return -EINVAL;
 272
 273         /*
 274          * Bad things may happen if the no_msi flag is changed
 275          * while drivers are loaded.
 276          */
 277         if (!capable(CAP_SYS_ADMIN))
 278                 return -EPERM;
 279
 280         /*
 281          * Maybe devices without subordinate buses shouldn't have this
 282          * attribute in the first place?
 283          */
 284         if (!pdev->subordinate)
 285                 return count;
 286
 287         /* Is the flag going to change, or keep the value it already had? */
 288         if (!(pdev->subordinate->bus_flags & PCI_BUS_FLAGS_NO_MSI) ^
 289             !!val) {
 290                 pdev->subordinate->bus_flags ^= PCI_BUS_FLAGS_NO_MSI;
 291
 292                 dev_warn(&pdev->dev, "forced subordinate bus to%s support MSI,"
 293                          " bad things could happen\n", val ? "" : " not");
 294         }
 295
 296         return count;
 297 }
 298 static DEVICE_ATTR_RW(msi_bus);
 299
 300 static DEFINE_MUTEX(pci_remove_rescan_mutex);
 301 static ssize_t bus_rescan_store(struct bus_type *bus, const char *buf,
 302                                 size_t count)
 303 {
 304         unsigned long val;
 305         struct pci_bus *b = NULL;
 306
 307         if (kstrtoul(buf, 0, &val) < 0)
 308                 return -EINVAL;
 309
 310         if (val) {
 311                 mutex_lock(&pci_remove_rescan_mutex);
 312                 while ((b = pci_find_next_bus(b)) != NULL)
 313                         pci_rescan_bus(b);
 314                 mutex_unlock(&pci_remove_rescan_mutex);
 315         }
 316         return count;
 317 }
 318 static BUS_ATTR(rescan, (S_IWUSR|S_IWGRP), NULL, bus_rescan_store);
 319
 320 static struct attribute *pci_bus_attrs[] = {
 321         &bus_attr_rescan.attr,
 322         NULL,
 323 };
 324
 325 static const struct attribute_group pci_bus_group = {
 326         .attrs = pci_bus_attrs,
 327 };
 328
 329 const struct attribute_group *pci_bus_groups[] = {
 330         &pci_bus_group,
 331         NULL,
 332 };
 333
 334 static ssize_t
 335 dev_rescan_store(struct device *dev, struct device_attribute *attr,
 336                  const char *buf, size_t count)
 337 {
 338         unsigned long val;
 339         struct pci_dev *pdev = to_pci_dev(dev);
 340
 341         if (kstrtoul(buf, 0, &val) < 0)
 342                 return -EINVAL;
 343
 344         if (val) {
 345                 mutex_lock(&pci_remove_rescan_mutex);
 346                 pci_rescan_bus(pdev->bus);
 347                 mutex_unlock(&pci_remove_rescan_mutex);
 348         }
 349         return count;
 350 }
 351 static struct device_attribute dev_rescan_attr = __ATTR(rescan,
 352                                                         (S_IWUSR|S_IWGRP),
 353                                                         NULL, dev_rescan_store);
 354
 355 static ssize_t
 356 remove_store(struct device *dev, struct device_attribute *attr,
 357              const char *buf, size_t count)
 358 {
 359         unsigned long val;
 360
 361         if (kstrtoul(buf, 0, &val) < 0)
 362                 return -EINVAL;
 363
 364         if (val && device_remove_file_self(dev, attr)) {
 365                 mutex_lock(&pci_remove_rescan_mutex);
 366                 pci_stop_and_remove_bus_device(to_pci_dev(dev));
 367                 mutex_unlock(&pci_remove_rescan_mutex);
 368         }
 369         return count;
 370 }
 371 static struct device_attribute dev_remove_attr = __ATTR(remove,
 372                                                         (S_IWUSR|S_IWGRP),
 373                                                         NULL, remove_store);
 374
 375 static ssize_t
 376 dev_bus_rescan_store(struct device *dev, struct device_attribute *attr,
 377                  const char *buf, size_t count)
 378 {
 379         unsigned long val;
 380         struct pci_bus *bus = to_pci_bus(dev);
 381
 382         if (kstrtoul(buf, 0, &val) < 0)
 383                 return -EINVAL;
 384
 385         if (val) {
 386                 mutex_lock(&pci_remove_rescan_mutex);
 387                 if (!pci_is_root_bus(bus) && list_empty(&bus->devices))
 388                         pci_rescan_bus_bridge_resize(bus->self);
 389                 else
 390                         pci_rescan_bus(bus);
 391                 mutex_unlock(&pci_remove_rescan_mutex);
 392         }
 393         return count;
 394 }
 395 static DEVICE_ATTR(rescan, (S_IWUSR|S_IWGRP), NULL, dev_bus_rescan_store);
 396
 397 #if defined(CONFIG_PM_RUNTIME) && defined(CONFIG_ACPI)
 398 static ssize_t d3cold_allowed_store(struct device *dev,
 399                                     struct device_attribute *attr,
 400                                     const char *buf, size_t count)
 401 {
 402         struct pci_dev *pdev = to_pci_dev(dev);
 403         unsigned long val;
 404
 405         if (kstrtoul(buf, 0, &val) < 0)
 406                 return -EINVAL;
 407
 408         pdev->d3cold_allowed = !!val;
 409         pm_runtime_resume(dev);
 410
 411         return count;
 412 }
 413
 414 static ssize_t d3cold_allowed_show(struct device *dev,
 415                                    struct device_attribute *attr, char *buf)
 416 {
 417         struct pci_dev *pdev = to_pci_dev(dev);
 418         return sprintf (buf, "%u\n", pdev->d3cold_allowed);
 419 }
 420 static DEVICE_ATTR_RW(d3cold_allowed);
 421 #endif
 422
 423 #ifdef CONFIG_PCI_IOV
 424 static ssize_t sriov_totalvfs_show(struct device *dev,
 425                                    struct device_attribute *attr,
 426                                    char *buf)
 427 {
 428         struct pci_dev *pdev = to_pci_dev(dev);
 429
 430         return sprintf(buf, "%u\n", pci_sriov_get_totalvfs(pdev));
 431 }
 432
 433
 434 static ssize_t sriov_numvfs_show(struct device *dev,
 435                                  struct device_attribute *attr,
 436                                  char *buf)
 437 {
 438         struct pci_dev *pdev = to_pci_dev(dev);
 439
 440         return sprintf(buf, "%u\n", pdev->sriov->num_VFs);
 441 }
 442
 443 /*
 444  * num_vfs > 0; number of VFs to enable
 445  * num_vfs = 0; disable all VFs
 446  *
 447  * Note: SRIOV spec doesn't allow partial VF
 448  *       disable, so it's all or none.
 449  */
 450 static ssize_t sriov_numvfs_store(struct device *dev,
 451                                   struct device_attribute *attr,
 452                                   const char *buf, size_t count)
 453 {
 454         struct pci_dev *pdev = to_pci_dev(dev);
 455         int ret;
 456         u16 num_vfs;
 457
 458         ret = kstrtou16(buf, 0, &num_vfs);
 459         if (ret < 0)
 460                 return ret;
 461
 462         if (num_vfs > pci_sriov_get_totalvfs(pdev))
 463                 return -ERANGE;
 464
 465         if (num_vfs == pdev->sriov->num_VFs)
 466                 return count;           /* no change */
 467
 468         /* is PF driver loaded w/callback */
 469         if (!pdev->driver || !pdev->driver->sriov_configure) {
 470                 dev_info(&pdev->dev, "Driver doesn't support SRIOV configuration via sysfs\n");
 471                 return -ENOSYS;
 472         }
 473
 474         if (num_vfs == 0) {
 475                 /* disable VFs */
 476                 ret = pdev->driver->sriov_configure(pdev, 0);
 477                 if (ret < 0)
 478                         return ret;
 479                 return count;
 480         }
 481
 482         /* enable VFs */
 483         if (pdev->sriov->num_VFs) {
 484                 dev_warn(&pdev->dev, "%d VFs already enabled. Disable before enabling %d VFs\n",
 485                          pdev->sriov->num_VFs, num_vfs);
 486                 return -EBUSY;
 487         }
 488
 489         ret = pdev->driver->sriov_configure(pdev, num_vfs);
 490         if (ret < 0)
 491                 return ret;
 492
 493         if (ret != num_vfs)
 494                 dev_warn(&pdev->dev, "%d VFs requested; only %d enabled\n",
 495                          num_vfs, ret);
 496
 497         return count;
 498 }
 499
 500 static struct device_attribute sriov_totalvfs_attr = __ATTR_RO(sriov_totalvfs);
 501 static struct device_attribute sriov_numvfs_attr =
 502                 __ATTR(sriov_numvfs, (S_IRUGO|S_IWUSR|S_IWGRP),
 503                        sriov_numvfs_show, sriov_numvfs_store);
 504 #endif /* CONFIG_PCI_IOV */
 505
 506 static struct attribute *pci_dev_attrs[] = {
 507         &dev_attr_resource.attr,
 508         &dev_attr_vendor.attr,
 509         &dev_attr_device.attr,
 510         &dev_attr_subsystem_vendor.attr,
 511         &dev_attr_subsystem_device.attr,
 512         &dev_attr_class.attr,
 513         &dev_attr_irq.attr,
 514         &dev_attr_local_cpus.attr,
 515         &dev_attr_local_cpulist.attr,
 516         &dev_attr_modalias.attr,
 517 #ifdef CONFIG_NUMA
 518         &dev_attr_numa_node.attr,
 519 #endif
 520         &dev_attr_dma_mask_bits.attr,
 521         &dev_attr_consistent_dma_mask_bits.attr,
 522         &dev_attr_enabled.attr,
 523         &dev_attr_broken_parity_status.attr,
 524         &dev_attr_msi_bus.attr,
 525 #if defined(CONFIG_PM_RUNTIME) && defined(CONFIG_ACPI)
 526         &dev_attr_d3cold_allowed.attr,
 527 #endif
 528         NULL,
 529 };
 530
 531 static const struct attribute_group pci_dev_group = {
 532         .attrs = pci_dev_attrs,
 533 };
 534
 535 const struct attribute_group *pci_dev_groups[] = {
 536         &pci_dev_group,
 537         NULL,
 538 };
 539
 540 static struct attribute *pcibus_attrs[] = {
 541         &dev_attr_rescan.attr,
 542         &dev_attr_cpuaffinity.attr,
 543         &dev_attr_cpulistaffinity.attr,
 544         NULL,
 545 };
 546
 547 static const struct attribute_group pcibus_group = {
 548         .attrs = pcibus_attrs,
 549 };
 550
 551 const struct attribute_group *pcibus_groups[] = {
 552         &pcibus_group,
 553         NULL,
 554 };
 555
 556 static ssize_t
 557 boot_vga_show(struct device *dev, struct device_attribute *attr, char *buf)
 558 {
 559         struct pci_dev *pdev = to_pci_dev(dev);
 560         struct pci_dev *vga_dev = vga_default_device();
 561
 562         if (vga_dev)
 563                 return sprintf(buf, "%u\n", (pdev == vga_dev));
 564
 565         return sprintf(buf, "%u\n",
 566                 !!(pdev->resource[PCI_ROM_RESOURCE].flags &
 567                    IORESOURCE_ROM_SHADOW));
 568 }
 569 static struct device_attribute vga_attr = __ATTR_RO(boot_vga);
 570
 571 static ssize_t
 572 pci_read_config(struct file *filp, struct kobject *kobj,
 573                 struct bin_attribute *bin_attr,
 574                 char *buf, loff_t off, size_t count)
 575 {
 576         struct pci_dev *dev = to_pci_dev(container_of(kobj,struct device,kobj));
 577         unsigned int size = 64;
 578         loff_t init_off = off;
 579         u8 *data = (u8*) buf;
 580
 581         /* Several chips lock up trying to read undefined config space */
 582         if (security_capable(filp->f_cred, &init_user_ns, CAP_SYS_ADMIN) == 0) {
 583                 size = dev->cfg_size;
 584         } else if (dev->hdr_type == PCI_HEADER_TYPE_CARDBUS) {
 585                 size = 128;
 586         }
 587
 588         if (off > size)
 589                 return 0;
 590         if (off + count > size) {
 591                 size -= off;
 592                 count = size;
 593         } else {
 594                 size = count;
 595         }
 596
 597         pci_config_pm_runtime_get(dev);
 598
 599         if ((off & 1) && size) {
 600                 u8 val;
 601                 pci_user_read_config_byte(dev, off, &val);
 602                 data[off - init_off] = val;
 603                 off++;
 604                 size--;
 605         }
 606
 607         if ((off & 3) && size > 2) {
 608                 u16 val;
 609                 pci_user_read_config_word(dev, off, &val);
 610                 data[off - init_off] = val & 0xff;
 611                 data[off - init_off + 1] = (val >> 8) & 0xff;
 612                 off += 2;
 613                 size -= 2;
 614         }
 615
 616         while (size > 3) {
 617                 u32 val;
 618                 pci_user_read_config_dword(dev, off, &val);
 619                 data[off - init_off] = val & 0xff;
 620                 data[off - init_off + 1] = (val >> 8) & 0xff;
 621                 data[off - init_off + 2] = (val >> 16) & 0xff;
 622                 data[off - init_off + 3] = (val >> 24) & 0xff;
 623                 off += 4;
 624                 size -= 4;
 625         }
 626
 627         if (size >= 2) {
 628                 u16 val;
 629                 pci_user_read_config_word(dev, off, &val);
 630                 data[off - init_off] = val & 0xff;
 631                 data[off - init_off + 1] = (val >> 8) & 0xff;
 632                 off += 2;
 633                 size -= 2;
 634         }
 635
 636         if (size > 0) {
 637                 u8 val;
 638                 pci_user_read_config_byte(dev, off, &val);
 639                 data[off - init_off] = val;
 640                 off++;
 641                 --size;
 642         }
 643
 644         pci_config_pm_runtime_put(dev);
 645
 646         return count;
 647 }
 648
 649 static ssize_t
 650 pci_write_config(struct file* filp, struct kobject *kobj,
 651                  struct bin_attribute *bin_attr,
 652                  char *buf, loff_t off, size_t count)
 653 {
 654         struct pci_dev *dev = to_pci_dev(container_of(kobj,struct device,kobj));
 655         unsigned int size = count;
 656         loff_t init_off = off;
 657         u8 *data = (u8*) buf;
 658
 659         if (off > dev->cfg_size)
 660                 return 0;
 661         if (off + count > dev->cfg_size) {
 662                 size = dev->cfg_size - off;
 663                 count = size;
 664         }
 665
 666         pci_config_pm_runtime_get(dev);
 667
 668         if ((off & 1) && size) {
 669                 pci_user_write_config_byte(dev, off, data[off - init_off]);
 670                 off++;
 671                 size--;
 672         }
 673
 674         if ((off & 3) && size > 2) {
 675                 u16 val = data[off - init_off];
 676                 val |= (u16) data[off - init_off + 1] << 8;
 677                 pci_user_write_config_word(dev, off, val);
 678                 off += 2;
 679                 size -= 2;
 680         }
 681
 682         while (size > 3) {
 683                 u32 val = data[off - init_off];
 684                 val |= (u32) data[off - init_off + 1] << 8;
 685                 val |= (u32) data[off - init_off + 2] << 16;
 686                 val |= (u32) data[off - init_off + 3] << 24;
 687                 pci_user_write_config_dword(dev, off, val);
 688                 off += 4;
 689                 size -= 4;
 690         }
 691
 692         if (size >= 2) {
 693                 u16 val = data[off - init_off];
 694                 val |= (u16) data[off - init_off + 1] << 8;
 695                 pci_user_write_config_word(dev, off, val);
 696                 off += 2;
 697                 size -= 2;
 698         }
 699
 700         if (size) {
 701                 pci_user_write_config_byte(dev, off, data[off - init_off]);
 702                 off++;
 703                 --size;
 704         }
 705
 706         pci_config_pm_runtime_put(dev);
 707
 708         return count;
 709 }
 710
 711 static ssize_t
 712 read_vpd_attr(struct file *filp, struct kobject *kobj,
 713               struct bin_attribute *bin_attr,
 714               char *buf, loff_t off, size_t count)
 715 {
 716         struct pci_dev *dev =
 717                 to_pci_dev(container_of(kobj, struct device, kobj));
 718
 719         if (off > bin_attr->size)
 720                 count = 0;
 721         else if (count > bin_attr->size - off)
 722                 count = bin_attr->size - off;
 723
 724         return pci_read_vpd(dev, off, count, buf);
 725 }
 726
 727 static ssize_t
 728 write_vpd_attr(struct file *filp, struct kobject *kobj,
 729                struct bin_attribute *bin_attr,
 730                char *buf, loff_t off, size_t count)
 731 {
 732         struct pci_dev *dev =
 733                 to_pci_dev(container_of(kobj, struct device, kobj));
 734
 735         if (off > bin_attr->size)
 736                 count = 0;
 737         else if (count > bin_attr->size - off)
 738                 count = bin_attr->size - off;
 739
 740         return pci_write_vpd(dev, off, count, buf);
 741 }
 742
 743 #ifdef HAVE_PCI_LEGACY
 744 /**
 745  * pci_read_legacy_io - read byte(s) from legacy I/O port space
 746  * @filp: open sysfs file
 747  * @kobj: kobject corresponding to file to read from
 748  * @bin_attr: struct bin_attribute for this file
 749  * @buf: buffer to store results
 750  * @off: offset into legacy I/O port space
 751  * @count: number of bytes to read
 752  *
 753  * Reads 1, 2, or 4 bytes from legacy I/O port space using an arch specific
 754  * callback routine (pci_legacy_read).
 755  */
 756 static ssize_t
 757 pci_read_legacy_io(struct file *filp, struct kobject *kobj,
 758                    struct bin_attribute *bin_attr,
 759                    char *buf, loff_t off, size_t count)
 760 {
 761         struct pci_bus *bus = to_pci_bus(container_of(kobj,
 762                                                       struct device,
 763                                                       kobj));
 764
 765         /* Only support 1, 2 or 4 byte accesses */
 766         if (count != 1 && count != 2 && count != 4)
 767                 return -EINVAL;
 768
 769         return pci_legacy_read(bus, off, (u32 *)buf, count);
 770 }
 771
 772 /**
 773  * pci_write_legacy_io - write byte(s) to legacy I/O port space
 774  * @filp: open sysfs file
 775  * @kobj: kobject corresponding to file to read from
 776  * @bin_attr: struct bin_attribute for this file
 777  * @buf: buffer containing value to be written
 778  * @off: offset into legacy I/O port space
 779  * @count: number of bytes to write
 780  *
 781  * Writes 1, 2, or 4 bytes from legacy I/O port space using an arch specific
 782  * callback routine (pci_legacy_write).
 783  */
 784 static ssize_t
 785 pci_write_legacy_io(struct file *filp, struct kobject *kobj,
 786                     struct bin_attribute *bin_attr,
 787                     char *buf, loff_t off, size_t count)
 788 {
 789         struct pci_bus *bus = to_pci_bus(container_of(kobj,
 790                                                       struct device,
 791                                                       kobj));
 792         /* Only support 1, 2 or 4 byte accesses */
 793         if (count != 1 && count != 2 && count != 4)
 794                 return -EINVAL;
 795
 796         return pci_legacy_write(bus, off, *(u32 *)buf, count);
 797 }
 798
 799 /**
 800  * pci_mmap_legacy_mem - map legacy PCI memory into user memory space
 801  * @filp: open sysfs file
 802  * @kobj: kobject corresponding to device to be mapped
 803  * @attr: struct bin_attribute for this file
 804  * @vma: struct vm_area_struct passed to mmap
 805  *
 806  * Uses an arch specific callback, pci_mmap_legacy_mem_page_range, to mmap
 807  * legacy memory space (first meg of bus space) into application virtual
 808  * memory space.
 809  */
 810 static int
 811 pci_mmap_legacy_mem(struct file *filp, struct kobject *kobj,
 812                     struct bin_attribute *attr,
 813                     struct vm_area_struct *vma)
 814 {
 815         struct pci_bus *bus = to_pci_bus(container_of(kobj,
 816                                                       struct device,
 817                                                       kobj));
 818
 819         return pci_mmap_legacy_page_range(bus, vma, pci_mmap_mem);
 820 }
 821
 822 /**
 823  * pci_mmap_legacy_io - map legacy PCI IO into user memory space
 824  * @filp: open sysfs file
 825  * @kobj: kobject corresponding to device to be mapped
 826  * @attr: struct bin_attribute for this file
 827  * @vma: struct vm_area_struct passed to mmap
 828  *
 829  * Uses an arch specific callback, pci_mmap_legacy_io_page_range, to mmap
 830  * legacy IO space (first meg of bus space) into application virtual
 831  * memory space. Returns -ENOSYS if the operation isn't supported
 832  */
 833 static int
 834 pci_mmap_legacy_io(struct file *filp, struct kobject *kobj,
 835                    struct bin_attribute *attr,
 836                    struct vm_area_struct *vma)
 837 {
 838         struct pci_bus *bus = to_pci_bus(container_of(kobj,
 839                                                       struct device,
 840                                                       kobj));
 841
 842         return pci_mmap_legacy_page_range(bus, vma, pci_mmap_io);
 843 }
 844
 845 /**
 846  * pci_adjust_legacy_attr - adjustment of legacy file attributes
 847  * @b: bus to create files under
 848  * @mmap_type: I/O port or memory
 849  *
 850  * Stub implementation. Can be overridden by arch if necessary.
 851  */
 852 void __weak
 853 pci_adjust_legacy_attr(struct pci_bus *b, enum pci_mmap_state mmap_type)
 854 {
 855         return;
 856 }
 857
 858 /**
 859  * pci_create_legacy_files - create legacy I/O port and memory files
 860  * @b: bus to create files under
 861  *
 862  * Some platforms allow access to legacy I/O port and ISA memory space on
 863  * a per-bus basis.  This routine creates the files and ties them into
 864  * their associated read, write and mmap files from pci-sysfs.c
 865  *
 866  * On error unwind, but don't propagate the error to the caller
 867  * as it is ok to set up the PCI bus without these files.
 868  */
 869 void pci_create_legacy_files(struct pci_bus *b)
 870 {
 871         int error;
 872
 873         b->legacy_io = kzalloc(sizeof(struct bin_attribute) * 2,
 874                                GFP_ATOMIC);
 875         if (!b->legacy_io)
 876                 goto kzalloc_err;
 877
 878         sysfs_bin_attr_init(b->legacy_io);
 879         b->legacy_io->attr.name = "legacy_io";
 880         b->legacy_io->size = 0xffff;
 881         b->legacy_io->attr.mode = S_IRUSR | S_IWUSR;
 882         b->legacy_io->read = pci_read_legacy_io;
 883         b->legacy_io->write = pci_write_legacy_io;
 884         b->legacy_io->mmap = pci_mmap_legacy_io;
 885         pci_adjust_legacy_attr(b, pci_mmap_io);
 886         error = device_create_bin_file(&b->dev, b->legacy_io);
 887         if (error)
 888                 goto legacy_io_err;
 889
 890         /* Allocated above after the legacy_io struct */
 891         b->legacy_mem = b->legacy_io + 1;
 892         sysfs_bin_attr_init(b->legacy_mem);
 893         b->legacy_mem->attr.name = "legacy_mem";
 894         b->legacy_mem->size = 1024*1024;
 895         b->legacy_mem->attr.mode = S_IRUSR | S_IWUSR;
 896         b->legacy_mem->mmap = pci_mmap_legacy_mem;
 897         pci_adjust_legacy_attr(b, pci_mmap_mem);
 898         error = device_create_bin_file(&b->dev, b->legacy_mem);
 899         if (error)
 900                 goto legacy_mem_err;
 901
 902         return;
 903
 904 legacy_mem_err:
 905         device_remove_bin_file(&b->dev, b->legacy_io);
 906 legacy_io_err:
 907         kfree(b->legacy_io);
 908         b->legacy_io = NULL;
 909 kzalloc_err:
 910         printk(KERN_WARNING "pci: warning: could not create legacy I/O port "
 911                "and ISA memory resources to sysfs\n");
 912         return;
 913 }
 914
 915 void pci_remove_legacy_files(struct pci_bus *b)
 916 {
 917         if (b->legacy_io) {
 918                 device_remove_bin_file(&b->dev, b->legacy_io);
 919                 device_remove_bin_file(&b->dev, b->legacy_mem);
 920                 kfree(b->legacy_io); /* both are allocated here */
 921         }
 922 }
 923 #endif /* HAVE_PCI_LEGACY */
 924
 925 #ifdef HAVE_PCI_MMAP
 926
 927 int pci_mmap_fits(struct pci_dev *pdev, int resno, struct vm_area_struct *vma,
 928                   enum pci_mmap_api mmap_api)
 929 {
 930         unsigned long nr, start, size, pci_start;
 931
 932         if (pci_resource_len(pdev, resno) == 0)
 933                 return 0;
 934         nr = vma_pages(vma);
 935         start = vma->vm_pgoff;
 936         size = ((pci_resource_len(pdev, resno) - 1) >> PAGE_SHIFT) + 1;
 937         pci_start = (mmap_api == PCI_MMAP_PROCFS) ?
 938                         pci_resource_start(pdev, resno) >> PAGE_SHIFT : 0;
 939         if (start >= pci_start && start < pci_start + size &&
 940                         start + nr <= pci_start + size)
 941                 return 1;
 942         return 0;
 943 }
 944
 945 /**
 946  * pci_mmap_resource - map a PCI resource into user memory space
 947  * @kobj: kobject for mapping
 948  * @attr: struct bin_attribute for the file being mapped
 949  * @vma: struct vm_area_struct passed into the mmap
 950  * @write_combine: 1 for write_combine mapping
 951  *
 952  * Use the regular PCI mapping routines to map a PCI resource into userspace.
 953  */
 954 static int
 955 pci_mmap_resource(struct kobject *kobj, struct bin_attribute *attr,
 956                   struct vm_area_struct *vma, int write_combine)
 957 {
 958         struct pci_dev *pdev = to_pci_dev(container_of(kobj,
 959                                                        struct device, kobj));
 960         struct resource *res = attr->private;
 961         enum pci_mmap_state mmap_type;
 962         resource_size_t start, end;
 963         int i;
 964
 965         for (i = 0; i < PCI_ROM_RESOURCE; i++)
 966                 if (res == &pdev->resource[i])
 967                         break;
 968         if (i >= PCI_ROM_RESOURCE)
 969                 return -ENODEV;
 970
 971         if (!pci_mmap_fits(pdev, i, vma, PCI_MMAP_SYSFS)) {
 972                 WARN(1, "process \"%s\" tried to map 0x%08lx bytes "
 973                         "at page 0x%08lx on %s BAR %d (start 0x%16Lx, size 0x%16Lx)\n",
 974                         current->comm, vma->vm_end-vma->vm_start, vma->vm_pgoff,
 975                         pci_name(pdev), i,
 976                         (u64)pci_resource_start(pdev, i),
 977                         (u64)pci_resource_len(pdev, i));
 978                 return -EINVAL;
 979         }
 980
 981         /* pci_mmap_page_range() expects the same kind of entry as coming
 982          * from /proc/bus/pci/ which is a "user visible" value. If this is
 983          * different from the resource itself, arch will do necessary fixup.
 984          */
 985         pci_resource_to_user(pdev, i, res, &start, &end);
 986         vma->vm_pgoff += start >> PAGE_SHIFT;
 987         mmap_type = res->flags & IORESOURCE_MEM ? pci_mmap_mem : pci_mmap_io;
 988
 989         if (res->flags & IORESOURCE_MEM && iomem_is_exclusive(start))
 990                 return -EINVAL;
 991
 992         return pci_mmap_page_range(pdev, vma, mmap_type, write_combine);
 993 }
 994
 995 static int
 996 pci_mmap_resource_uc(struct file *filp, struct kobject *kobj,
 997                      struct bin_attribute *attr,
 998                      struct vm_area_struct *vma)
 999 {
1000         return pci_mmap_resource(kobj, attr, vma, 0);
1001 }
1002
1003 static int
1004 pci_mmap_resource_wc(struct file *filp, struct kobject *kobj,
1005                      struct bin_attribute *attr,
1006                      struct vm_area_struct *vma)
1007 {
1008         return pci_mmap_resource(kobj, attr, vma, 1);
1009 }
1010
1011 static ssize_t
1012 pci_resource_io(struct file *filp, struct kobject *kobj,
1013                 struct bin_attribute *attr, char *buf,
1014                 loff_t off, size_t count, bool write)
1015 {
1016         struct pci_dev *pdev = to_pci_dev(container_of(kobj,
1017                                                        struct device, kobj));
1018         struct resource *res = attr->private;
1019         unsigned long port = off;
1020         int i;
1021
1022         for (i = 0; i < PCI_ROM_RESOURCE; i++)
1023                 if (res == &pdev->resource[i])
1024                         break;
1025         if (i >= PCI_ROM_RESOURCE)
1026                 return -ENODEV;
1027
1028         port += pci_resource_start(pdev, i);
1029
1030         if (port > pci_resource_end(pdev, i))
1031                 return 0;
1032
1033         if (port + count - 1 > pci_resource_end(pdev, i))
1034                 return -EINVAL;
1035
1036         switch (count) {
1037         case 1:
1038                 if (write)
1039                         outb(*(u8 *)buf, port);
1040                 else
1041                         *(u8 *)buf = inb(port);
1042                 return 1;
1043         case 2:
1044                 if (write)
1045                         outw(*(u16 *)buf, port);
1046                 else
1047                         *(u16 *)buf = inw(port);
1048                 return 2;
1049         case 4:
1050                 if (write)
1051                         outl(*(u32 *)buf, port);
1052                 else
1053                         *(u32 *)buf = inl(port);
1054                 return 4;
1055         }
1056         return -EINVAL;
1057 }
1058
1059 static ssize_t
1060 pci_read_resource_io(struct file *filp, struct kobject *kobj,
1061                      struct bin_attribute *attr, char *buf,
1062                      loff_t off, size_t count)
1063 {
1064         return pci_resource_io(filp, kobj, attr, buf, off, count, false);
1065 }
1066
1067 static ssize_t
1068 pci_write_resource_io(struct file *filp, struct kobject *kobj,
1069                       struct bin_attribute *attr, char *buf,
1070                       loff_t off, size_t count)
1071 {
1072         return pci_resource_io(filp, kobj, attr, buf, off, count, true);
1073 }
1074
1075 /**
1076  * pci_remove_resource_files - cleanup resource files
1077  * @pdev: dev to cleanup
1078  *
1079  * If we created resource files for @pdev, remove them from sysfs and
1080  * free their resources.
1081  */
1082 static void
1083 pci_remove_resource_files(struct pci_dev *pdev)
1084 {
1085         int i;
1086
1087         for (i = 0; i < PCI_ROM_RESOURCE; i++) {
1088                 struct bin_attribute *res_attr;
1089
1090                 res_attr = pdev->res_attr[i];
1091                 if (res_attr) {
1092                         sysfs_remove_bin_file(&pdev->dev.kobj, res_attr);
1093                         kfree(res_attr);
1094                 }
1095
1096                 res_attr = pdev->res_attr_wc[i];
1097                 if (res_attr) {
1098                         sysfs_remove_bin_file(&pdev->dev.kobj, res_attr);
1099                         kfree(res_attr);
1100                 }
1101         }
1102 }
1103
1104 static int pci_create_attr(struct pci_dev *pdev, int num, int write_combine)
1105 {
1106         /* allocate attribute structure, piggyback attribute name */
1107         int name_len = write_combine ? 13 : 10;
1108         struct bin_attribute *res_attr;
1109         int retval;
1110
1111         res_attr = kzalloc(sizeof(*res_attr) + name_len, GFP_ATOMIC);
1112         if (res_attr) {
1113                 char *res_attr_name = (char *)(res_attr + 1);
1114
1115                 sysfs_bin_attr_init(res_attr);
1116                 if (write_combine) {
1117                         pdev->res_attr_wc[num] = res_attr;
1118                         sprintf(res_attr_name, "resource%d_wc", num);
1119                         res_attr->mmap = pci_mmap_resource_wc;
1120                 } else {
1121                         pdev->res_attr[num] = res_attr;
1122                         sprintf(res_attr_name, "resource%d", num);
1123                         res_attr->mmap = pci_mmap_resource_uc;
1124                 }
1125                 if (pci_resource_flags(pdev, num) & IORESOURCE_IO) {
1126                         res_attr->read = pci_read_resource_io;
1127                         res_attr->write = pci_write_resource_io;
1128                 }
1129                 res_attr->attr.name = res_attr_name;
1130                 res_attr->attr.mode = S_IRUSR | S_IWUSR;
1131                 res_attr->size = pci_resource_len(pdev, num);
1132                 res_attr->private = &pdev->resource[num];
1133                 retval = sysfs_create_bin_file(&pdev->dev.kobj, res_attr);
1134         } else
1135                 retval = -ENOMEM;
1136
1137         return retval;
1138 }
1139
1140 /**
1141  * pci_create_resource_files - create resource files in sysfs for @dev
1142  * @pdev: dev in question
1143  *
1144  * Walk the resources in @pdev creating files for each resource available.
1145  */
1146 static int pci_create_resource_files(struct pci_dev *pdev)
1147 {
1148         int i;
1149         int retval;
1150
1151         /* Expose the PCI resources from this device as files */
1152         for (i = 0; i < PCI_ROM_RESOURCE; i++) {
1153
1154                 /* skip empty resources */
1155                 if (!pci_resource_len(pdev, i))
1156                         continue;
1157
1158                 retval = pci_create_attr(pdev, i, 0);
1159                 /* for prefetchable resources, create a WC mappable file */
1160                 if (!retval && pdev->resource[i].flags & IORESOURCE_PREFETCH)
1161                         retval = pci_create_attr(pdev, i, 1);
1162
1163                 if (retval) {
1164                         pci_remove_resource_files(pdev);
1165                         return retval;
1166                 }
1167         }
1168         return 0;
1169 }
1170 #else /* !HAVE_PCI_MMAP */
1171 int __weak pci_create_resource_files(struct pci_dev *dev) { return 0; }
1172 void __weak pci_remove_resource_files(struct pci_dev *dev) { return; }
1173 #endif /* HAVE_PCI_MMAP */
1174
1175 /**
1176  * pci_write_rom - used to enable access to the PCI ROM display
1177  * @filp: sysfs file
1178  * @kobj: kernel object handle
1179  * @bin_attr: struct bin_attribute for this file
1180  * @buf: user input
1181  * @off: file offset
1182  * @count: number of byte in input
1183  *
1184  * writing anything except 0 enables it
1185  */
1186 static ssize_t
1187 pci_write_rom(struct file *filp, struct kobject *kobj,
1188               struct bin_attribute *bin_attr,
1189               char *buf, loff_t off, size_t count)
1190 {
1191         struct pci_dev *pdev = to_pci_dev(container_of(kobj, struct device, kobj));
1192
1193         if ((off ==  0) && (*buf == '0') && (count == 2))
1194                 pdev->rom_attr_enabled = 0;
1195         else
1196                 pdev->rom_attr_enabled = 1;
1197
1198         return count;
1199 }
1200
1201 /**
1202  * pci_read_rom - read a PCI ROM
1203  * @filp: sysfs file
1204  * @kobj: kernel object handle
1205  * @bin_attr: struct bin_attribute for this file
1206  * @buf: where to put the data we read from the ROM
1207  * @off: file offset
1208  * @count: number of bytes to read
1209  *
1210  * Put @count bytes starting at @off into @buf from the ROM in the PCI
1211  * device corresponding to @kobj.
1212  */
1213 static ssize_t
1214 pci_read_rom(struct file *filp, struct kobject *kobj,
1215              struct bin_attribute *bin_attr,
1216              char *buf, loff_t off, size_t count)
1217 {
1218         struct pci_dev *pdev = to_pci_dev(container_of(kobj, struct device, kobj));
1219         void __iomem *rom;
1220         size_t size;
1221
1222         if (!pdev->rom_attr_enabled)
1223                 return -EINVAL;
1224
1225         rom = pci_map_rom(pdev, &size); /* size starts out as PCI window size */
1226         if (!rom || !size)
1227                 return -EIO;
1228
1229         if (off >= size)
1230                 count = 0;
1231         else {
1232                 if (off + count > size)
1233                         count = size - off;
1234
1235                 memcpy_fromio(buf, rom + off, count);
1236         }
1237         pci_unmap_rom(pdev, rom);
1238
1239         return count;
1240 }
1241
1242 static struct bin_attribute pci_config_attr = {
1243         .attr = {
1244                 .name = "config",
1245                 .mode = S_IRUGO | S_IWUSR,
1246         },
1247         .size = PCI_CFG_SPACE_SIZE,
1248         .read = pci_read_config,
1249         .write = pci_write_config,
1250 };
1251
1252 static struct bin_attribute pcie_config_attr = {
1253         .attr = {
1254                 .name = "config",
1255                 .mode = S_IRUGO | S_IWUSR,
1256         },
1257         .size = PCI_CFG_SPACE_EXP_SIZE,
1258         .read = pci_read_config,
1259         .write = pci_write_config,
1260 };
1261
1262 int __weak pcibios_add_platform_entries(struct pci_dev *dev)
1263 {
1264         return 0;
1265 }
1266
1267 static ssize_t reset_store(struct device *dev,
1268                            struct device_attribute *attr, const char *buf,
1269                            size_t count)
1270 {
1271         struct pci_dev *pdev = to_pci_dev(dev);
1272         unsigned long val;
1273         ssize_t result = kstrtoul(buf, 0, &val);
1274
1275         if (result < 0)
1276                 return result;
1277
1278         if (val != 1)
1279                 return -EINVAL;
1280
1281         result = pci_reset_function(pdev);
1282         if (result < 0)
1283                 return result;
1284
1285         return count;
1286 }
1287
1288 static struct device_attribute reset_attr = __ATTR(reset, 0200, NULL, reset_store);
1289
1290 static int pci_create_capabilities_sysfs(struct pci_dev *dev)
1291 {
1292         int retval;
1293         struct bin_attribute *attr;
1294
1295         /* If the device has VPD, try to expose it in sysfs. */
1296         if (dev->vpd) {
1297                 attr = kzalloc(sizeof(*attr), GFP_ATOMIC);
1298                 if (!attr)
1299                         return -ENOMEM;
1300
1301                 sysfs_bin_attr_init(attr);
1302                 attr->size = dev->vpd->len;
1303                 attr->attr.name = "vpd";
1304                 attr->attr.mode = S_IRUSR | S_IWUSR;
1305                 attr->read = read_vpd_attr;
1306                 attr->write = write_vpd_attr;
1307                 retval = sysfs_create_bin_file(&dev->dev.kobj, attr);
1308                 if (retval) {
1309                         kfree(attr);
1310                         return retval;
1311                 }
1312                 dev->vpd->attr = attr;
1313         }
1314
1315         /* Active State Power Management */
1316         pcie_aspm_create_sysfs_dev_files(dev);
1317
1318         if (!pci_probe_reset_function(dev)) {
1319                 retval = device_create_file(&dev->dev, &reset_attr);
1320                 if (retval)
1321                         goto error;
1322                 dev->reset_fn = 1;
1323         }
1324         return 0;
1325
1326 error:
1327         pcie_aspm_remove_sysfs_dev_files(dev);
1328         if (dev->vpd && dev->vpd->attr) {
1329                 sysfs_remove_bin_file(&dev->dev.kobj, dev->vpd->attr);
1330                 kfree(dev->vpd->attr);
1331         }
1332
1333         return retval;
1334 }
1335
1336 int __must_check pci_create_sysfs_dev_files (struct pci_dev *pdev)
1337 {
1338         int retval;
1339         int rom_size = 0;
1340         struct bin_attribute *attr;
1341
1342         if (!sysfs_initialized)
1343                 return -EACCES;
1344
1345         if (pdev->cfg_size < PCI_CFG_SPACE_EXP_SIZE)
1346                 retval = sysfs_create_bin_file(&pdev->dev.kobj, &pci_config_attr);
1347         else
1348                 retval = sysfs_create_bin_file(&pdev->dev.kobj, &pcie_config_attr);
1349         if (retval)
1350                 goto err;
1351
1352         retval = pci_create_resource_files(pdev);
1353         if (retval)
1354                 goto err_config_file;
1355
1356         if (pci_resource_len(pdev, PCI_ROM_RESOURCE))
1357                 rom_size = pci_resource_len(pdev, PCI_ROM_RESOURCE);
1358         else if (pdev->resource[PCI_ROM_RESOURCE].flags & IORESOURCE_ROM_SHADOW)
1359                 rom_size = 0x20000;
1360
1361         /* If the device has a ROM, try to expose it in sysfs. */
1362         if (rom_size) {
1363                 attr = kzalloc(sizeof(*attr), GFP_ATOMIC);
1364                 if (!attr) {
1365                         retval = -ENOMEM;
1366                         goto err_resource_files;
1367                 }
1368                 sysfs_bin_attr_init(attr);
1369                 attr->size = rom_size;
1370                 attr->attr.name = "rom";
1371                 attr->attr.mode = S_IRUSR | S_IWUSR;
1372                 attr->read = pci_read_rom;
1373                 attr->write = pci_write_rom;
1374                 retval = sysfs_create_bin_file(&pdev->dev.kobj, attr);
1375                 if (retval) {
1376                         kfree(attr);
1377                         goto err_resource_files;
1378                 }
1379                 pdev->rom_attr = attr;
1380         }
1381
1382         /* add platform-specific attributes */
1383         retval = pcibios_add_platform_entries(pdev);
1384         if (retval)
1385                 goto err_rom_file;
1386
1387         /* add sysfs entries for various capabilities */
1388         retval = pci_create_capabilities_sysfs(pdev);
1389         if (retval)
1390                 goto err_rom_file;
1391
1392         pci_create_firmware_label_files(pdev);
1393
1394         return 0;
1395
1396 err_rom_file:
1397         if (rom_size) {
1398                 sysfs_remove_bin_file(&pdev->dev.kobj, pdev->rom_attr);
1399                 kfree(pdev->rom_attr);
1400                 pdev->rom_attr = NULL;
1401         }
1402 err_resource_files:
1403         pci_remove_resource_files(pdev);
1404 err_config_file:
1405         if (pdev->cfg_size < PCI_CFG_SPACE_EXP_SIZE)
1406                 sysfs_remove_bin_file(&pdev->dev.kobj, &pci_config_attr);
1407         else
1408                 sysfs_remove_bin_file(&pdev->dev.kobj, &pcie_config_attr);
1409 err:
1410         return retval;
1411 }
1412
1413 static void pci_remove_capabilities_sysfs(struct pci_dev *dev)
1414 {
1415         if (dev->vpd && dev->vpd->attr) {
1416                 sysfs_remove_bin_file(&dev->dev.kobj, dev->vpd->attr);
1417                 kfree(dev->vpd->attr);
1418         }
1419
1420         pcie_aspm_remove_sysfs_dev_files(dev);
1421         if (dev->reset_fn) {
1422                 device_remove_file(&dev->dev, &reset_attr);
1423                 dev->reset_fn = 0;
1424         }
1425 }
1426
1427 /**
1428  * pci_remove_sysfs_dev_files - cleanup PCI specific sysfs files
1429  * @pdev: device whose entries we should free
1430  *
1431  * Cleanup when @pdev is removed from sysfs.
1432  */
1433 void pci_remove_sysfs_dev_files(struct pci_dev *pdev)
1434 {
1435         int rom_size = 0;
1436
1437         if (!sysfs_initialized)
1438                 return;
1439
1440         pci_remove_capabilities_sysfs(pdev);
1441
1442         if (pdev->cfg_size < PCI_CFG_SPACE_EXP_SIZE)
1443                 sysfs_remove_bin_file(&pdev->dev.kobj, &pci_config_attr);
1444         else
1445                 sysfs_remove_bin_file(&pdev->dev.kobj, &pcie_config_attr);
1446
1447         pci_remove_resource_files(pdev);
1448
1449         if (pci_resource_len(pdev, PCI_ROM_RESOURCE))
1450                 rom_size = pci_resource_len(pdev, PCI_ROM_RESOURCE);
1451         else if (pdev->resource[PCI_ROM_RESOURCE].flags & IORESOURCE_ROM_SHADOW)
1452                 rom_size = 0x20000;
1453
1454         if (rom_size && pdev->rom_attr) {
1455                 sysfs_remove_bin_file(&pdev->dev.kobj, pdev->rom_attr);
1456                 kfree(pdev->rom_attr);
1457         }
1458
1459         pci_remove_firmware_label_files(pdev);
1460
1461 }
1462
1463 static int __init pci_sysfs_init(void)
1464 {
1465         struct pci_dev *pdev = NULL;
1466         int retval;
1467
1468         sysfs_initialized = 1;
1469         for_each_pci_dev(pdev) {
1470                 retval = pci_create_sysfs_dev_files(pdev);
1471                 if (retval) {
1472                         pci_dev_put(pdev);
1473                         return retval;
1474                 }
1475         }
1476
1477         return 0;
1478 }
1479
1480 late_initcall(pci_sysfs_init);
1481
1482 static struct attribute *pci_dev_dev_attrs[] = {
1483         &vga_attr.attr,
1484         NULL,
1485 };
1486
1487 static umode_t pci_dev_attrs_are_visible(struct kobject *kobj,
1488                                                 struct attribute *a, int n)
1489 {
1490         struct device *dev = container_of(kobj, struct device, kobj);
1491         struct pci_dev *pdev = to_pci_dev(dev);
1492
1493         if (a == &vga_attr.attr)
1494                 if ((pdev->class >> 8) != PCI_CLASS_DISPLAY_VGA)
1495                         return 0;
1496
1497         return a->mode;
1498 }
1499
1500 static struct attribute *pci_dev_hp_attrs[] = {
1501         &dev_remove_attr.attr,
1502         &dev_rescan_attr.attr,
1503         NULL,
1504 };
1505
1506 static umode_t pci_dev_hp_attrs_are_visible(struct kobject *kobj,
1507                                                 struct attribute *a, int n)
1508 {
1509         struct device *dev = container_of(kobj, struct device, kobj);
1510         struct pci_dev *pdev = to_pci_dev(dev);
1511
1512         if (pdev->is_virtfn)
1513                 return 0;
1514
1515         return a->mode;
1516 }
1517
1518 static struct attribute_group pci_dev_hp_attr_group = {
1519         .attrs = pci_dev_hp_attrs,
1520         .is_visible = pci_dev_hp_attrs_are_visible,
1521 };
1522
1523 #ifdef CONFIG_PCI_IOV
1524 static struct attribute *sriov_dev_attrs[] = {
1525         &sriov_totalvfs_attr.attr,
1526         &sriov_numvfs_attr.attr,
1527         NULL,
1528 };
1529
1530 static umode_t sriov_attrs_are_visible(struct kobject *kobj,
1531                                          struct attribute *a, int n)
1532 {
1533         struct device *dev = container_of(kobj, struct device, kobj);
1534
1535         if (!dev_is_pf(dev))
1536                 return 0;
1537
1538         return a->mode;
1539 }
1540
1541 static struct attribute_group sriov_dev_attr_group = {
1542         .attrs = sriov_dev_attrs,
1543         .is_visible = sriov_attrs_are_visible,
1544 };
1545 #endif /* CONFIG_PCI_IOV */
1546
1547 static struct attribute_group pci_dev_attr_group = {
1548         .attrs = pci_dev_dev_attrs,
1549         .is_visible = pci_dev_attrs_are_visible,
1550 };
1551
1552 static const struct attribute_group *pci_dev_attr_groups[] = {
1553         &pci_dev_attr_group,
1554         &pci_dev_hp_attr_group,
1555 #ifdef CONFIG_PCI_IOV
1556         &sriov_dev_attr_group,
1557 #endif
1558         NULL,
1559 };
1560
1561 struct device_type pci_dev_type = {
1562         .groups = pci_dev_attr_groups,
1563 };