PCI: iproc: Add sorted dma ranges resource entries to host bridge
authorSrinath Mannam <srinath.mannam@broadcom.com>
Fri, 3 May 2019 14:05:34 +0000 (19:35 +0530)
committerBjorn Helgaas <bhelgaas@google.com>
Mon, 6 May 2019 21:03:50 +0000 (16:03 -0500)
The iProc host controller allows only a subset of physical address space as
target of inbound PCI memory transaction addresses.

PCI device memory transactions targeting memory regions that are not
allowed for inbound transactions in the host controller are rejected by the
host controller and cannot reach the upstream buses.

The firmware device tree description defines the DMA ranges that are
addressable by devices DMA transactions; parse the device tree dma-ranges
property and add its ranges to the PCI host bridge dma_ranges list; the
iova_reserve_pci_windows() call executed at iommu_dma_init_domain() will
reserve the IOVA address ranges that are not addressable (ie memory holes
in the dma-ranges set) so that they are not allocated to PCI devices for
DMA transfers.

All allowed address ranges are listed in the dma-ranges DT parameter.  For
example:

  dma-ranges = < \
    0x43000000 0x00 0x80000000 0x00 0x80000000 0x00 0x80000000 \
    0x43000000 0x08 0x00000000 0x08 0x00000000 0x08 0x00000000 \
    0x43000000 0x80 0x00000000 0x80 0x00000000 0x40 0x00000000>

In the above example of dma-ranges, memory address from

  0x0 - 0x80000000,
  0x100000000 - 0x800000000,
  0x1000000000 - 0x8000000000 and
  0x10000000000 - 0xffffffffffffffff.

are not allowed to be used as inbound addresses.

Based-on-a-patch-by: Oza Pawandeep <oza.oza@broadcom.com>
Signed-off-by: Srinath Mannam <srinath.mannam@broadcom.com>
[lorenzo.pieralisi@arm.com: updated commit log]
Signed-off-by: Lorenzo Pieralisi <lorenzo.pieralisi@arm.com>
[bhelgaas: fix function prototype style]
Signed-off-by: Bjorn Helgaas <bhelgaas@google.com>
Reviewed-by: Oza Pawandeep <poza@codeaurora.org>
Reviewed-by: Eric Auger <eric.auger@redhat.com>
drivers/pci/controller/pcie-iproc.c

index c20fd6b..f76a75b 100644 (file)
@@ -1146,11 +1146,43 @@ err_ib:
        return ret;
 }
 
+static int iproc_pcie_add_dma_range(struct device *dev,
+                                   struct list_head *resources,
+                                   struct of_pci_range *range)
+{
+       struct resource *res;
+       struct resource_entry *entry, *tmp;
+       struct list_head *head = resources;
+
+       res = devm_kzalloc(dev, sizeof(struct resource), GFP_KERNEL);
+       if (!res)
+               return -ENOMEM;
+
+       resource_list_for_each_entry(tmp, resources) {
+               if (tmp->res->start < range->cpu_addr)
+                       head = &tmp->node;
+       }
+
+       res->start = range->cpu_addr;
+       res->end = res->start + range->size - 1;
+
+       entry = resource_list_create_entry(res, 0);
+       if (!entry)
+               return -ENOMEM;
+
+       entry->offset = res->start - range->cpu_addr;
+       resource_list_add(entry, head);
+
+       return 0;
+}
+
 static int iproc_pcie_map_dma_ranges(struct iproc_pcie *pcie)
 {
+       struct pci_host_bridge *host = pci_host_bridge_from_priv(pcie);
        struct of_pci_range range;
        struct of_pci_range_parser parser;
        int ret;
+       LIST_HEAD(resources);
 
        /* Get the dma-ranges from DT */
        ret = of_pci_dma_range_parser_init(&parser, pcie->dev->of_node);
@@ -1158,13 +1190,23 @@ static int iproc_pcie_map_dma_ranges(struct iproc_pcie *pcie)
                return ret;
 
        for_each_of_pci_range(&parser, &range) {
+               ret = iproc_pcie_add_dma_range(pcie->dev,
+                                              &resources,
+                                              &range);
+               if (ret)
+                       goto out;
                /* Each range entry corresponds to an inbound mapping region */
                ret = iproc_pcie_setup_ib(pcie, &range, IPROC_PCIE_IB_MAP_MEM);
                if (ret)
-                       return ret;
+                       goto out;
        }
 
+       list_splice_init(&resources, &host->dma_ranges);
+
        return 0;
+out:
+       pci_free_resource_list(&resources);
+       return ret;
 }
 
 static int iproce_pcie_get_msi(struct iproc_pcie *pcie,