EDAC/qcom: Do not pass llcc_driv_data as edac_device_ctl_info's pvt_info
[platform/kernel/linux-rpi.git] / drivers / mtd / mtdcore.c
1 // SPDX-License-Identifier: GPL-2.0-or-later
2 /*
3  * Core registration and callback routines for MTD
4  * drivers and users.
5  *
6  * Copyright © 1999-2010 David Woodhouse <dwmw2@infradead.org>
7  * Copyright © 2006      Red Hat UK Limited 
8  */
9
10 #include <linux/module.h>
11 #include <linux/kernel.h>
12 #include <linux/ptrace.h>
13 #include <linux/seq_file.h>
14 #include <linux/string.h>
15 #include <linux/timer.h>
16 #include <linux/major.h>
17 #include <linux/fs.h>
18 #include <linux/err.h>
19 #include <linux/ioctl.h>
20 #include <linux/init.h>
21 #include <linux/of.h>
22 #include <linux/proc_fs.h>
23 #include <linux/idr.h>
24 #include <linux/backing-dev.h>
25 #include <linux/gfp.h>
26 #include <linux/slab.h>
27 #include <linux/reboot.h>
28 #include <linux/leds.h>
29 #include <linux/debugfs.h>
30 #include <linux/nvmem-provider.h>
31
32 #include <linux/mtd/mtd.h>
33 #include <linux/mtd/partitions.h>
34
35 #include "mtdcore.h"
36
37 struct backing_dev_info *mtd_bdi;
38
39 #ifdef CONFIG_PM_SLEEP
40
41 static int mtd_cls_suspend(struct device *dev)
42 {
43         struct mtd_info *mtd = dev_get_drvdata(dev);
44
45         return mtd ? mtd_suspend(mtd) : 0;
46 }
47
48 static int mtd_cls_resume(struct device *dev)
49 {
50         struct mtd_info *mtd = dev_get_drvdata(dev);
51
52         if (mtd)
53                 mtd_resume(mtd);
54         return 0;
55 }
56
57 static SIMPLE_DEV_PM_OPS(mtd_cls_pm_ops, mtd_cls_suspend, mtd_cls_resume);
58 #define MTD_CLS_PM_OPS (&mtd_cls_pm_ops)
59 #else
60 #define MTD_CLS_PM_OPS NULL
61 #endif
62
63 static struct class mtd_class = {
64         .name = "mtd",
65         .owner = THIS_MODULE,
66         .pm = MTD_CLS_PM_OPS,
67 };
68
69 static DEFINE_IDR(mtd_idr);
70
71 /* These are exported solely for the purpose of mtd_blkdevs.c. You
72    should not use them for _anything_ else */
73 DEFINE_MUTEX(mtd_table_mutex);
74 EXPORT_SYMBOL_GPL(mtd_table_mutex);
75
76 struct mtd_info *__mtd_next_device(int i)
77 {
78         return idr_get_next(&mtd_idr, &i);
79 }
80 EXPORT_SYMBOL_GPL(__mtd_next_device);
81
82 static LIST_HEAD(mtd_notifiers);
83
84
85 #define MTD_DEVT(index) MKDEV(MTD_CHAR_MAJOR, (index)*2)
86
87 /* REVISIT once MTD uses the driver model better, whoever allocates
88  * the mtd_info will probably want to use the release() hook...
89  */
90 static void mtd_release(struct device *dev)
91 {
92         struct mtd_info *mtd = dev_get_drvdata(dev);
93         dev_t index = MTD_DEVT(mtd->index);
94
95         /* remove /dev/mtdXro node */
96         device_destroy(&mtd_class, index + 1);
97 }
98
99 #define MTD_DEVICE_ATTR_RO(name) \
100 static DEVICE_ATTR(name, 0444, mtd_##name##_show, NULL)
101
102 #define MTD_DEVICE_ATTR_RW(name) \
103 static DEVICE_ATTR(name, 0644, mtd_##name##_show, mtd_##name##_store)
104
105 static ssize_t mtd_type_show(struct device *dev,
106                 struct device_attribute *attr, char *buf)
107 {
108         struct mtd_info *mtd = dev_get_drvdata(dev);
109         char *type;
110
111         switch (mtd->type) {
112         case MTD_ABSENT:
113                 type = "absent";
114                 break;
115         case MTD_RAM:
116                 type = "ram";
117                 break;
118         case MTD_ROM:
119                 type = "rom";
120                 break;
121         case MTD_NORFLASH:
122                 type = "nor";
123                 break;
124         case MTD_NANDFLASH:
125                 type = "nand";
126                 break;
127         case MTD_DATAFLASH:
128                 type = "dataflash";
129                 break;
130         case MTD_UBIVOLUME:
131                 type = "ubi";
132                 break;
133         case MTD_MLCNANDFLASH:
134                 type = "mlc-nand";
135                 break;
136         default:
137                 type = "unknown";
138         }
139
140         return sysfs_emit(buf, "%s\n", type);
141 }
142 MTD_DEVICE_ATTR_RO(type);
143
144 static ssize_t mtd_flags_show(struct device *dev,
145                 struct device_attribute *attr, char *buf)
146 {
147         struct mtd_info *mtd = dev_get_drvdata(dev);
148
149         return sysfs_emit(buf, "0x%lx\n", (unsigned long)mtd->flags);
150 }
151 MTD_DEVICE_ATTR_RO(flags);
152
153 static ssize_t mtd_size_show(struct device *dev,
154                 struct device_attribute *attr, char *buf)
155 {
156         struct mtd_info *mtd = dev_get_drvdata(dev);
157
158         return sysfs_emit(buf, "%llu\n", (unsigned long long)mtd->size);
159 }
160 MTD_DEVICE_ATTR_RO(size);
161
162 static ssize_t mtd_erasesize_show(struct device *dev,
163                 struct device_attribute *attr, char *buf)
164 {
165         struct mtd_info *mtd = dev_get_drvdata(dev);
166
167         return sysfs_emit(buf, "%lu\n", (unsigned long)mtd->erasesize);
168 }
169 MTD_DEVICE_ATTR_RO(erasesize);
170
171 static ssize_t mtd_writesize_show(struct device *dev,
172                 struct device_attribute *attr, char *buf)
173 {
174         struct mtd_info *mtd = dev_get_drvdata(dev);
175
176         return sysfs_emit(buf, "%lu\n", (unsigned long)mtd->writesize);
177 }
178 MTD_DEVICE_ATTR_RO(writesize);
179
180 static ssize_t mtd_subpagesize_show(struct device *dev,
181                 struct device_attribute *attr, char *buf)
182 {
183         struct mtd_info *mtd = dev_get_drvdata(dev);
184         unsigned int subpagesize = mtd->writesize >> mtd->subpage_sft;
185
186         return sysfs_emit(buf, "%u\n", subpagesize);
187 }
188 MTD_DEVICE_ATTR_RO(subpagesize);
189
190 static ssize_t mtd_oobsize_show(struct device *dev,
191                 struct device_attribute *attr, char *buf)
192 {
193         struct mtd_info *mtd = dev_get_drvdata(dev);
194
195         return sysfs_emit(buf, "%lu\n", (unsigned long)mtd->oobsize);
196 }
197 MTD_DEVICE_ATTR_RO(oobsize);
198
199 static ssize_t mtd_oobavail_show(struct device *dev,
200                                  struct device_attribute *attr, char *buf)
201 {
202         struct mtd_info *mtd = dev_get_drvdata(dev);
203
204         return sysfs_emit(buf, "%u\n", mtd->oobavail);
205 }
206 MTD_DEVICE_ATTR_RO(oobavail);
207
208 static ssize_t mtd_numeraseregions_show(struct device *dev,
209                 struct device_attribute *attr, char *buf)
210 {
211         struct mtd_info *mtd = dev_get_drvdata(dev);
212
213         return sysfs_emit(buf, "%u\n", mtd->numeraseregions);
214 }
215 MTD_DEVICE_ATTR_RO(numeraseregions);
216
217 static ssize_t mtd_name_show(struct device *dev,
218                 struct device_attribute *attr, char *buf)
219 {
220         struct mtd_info *mtd = dev_get_drvdata(dev);
221
222         return sysfs_emit(buf, "%s\n", mtd->name);
223 }
224 MTD_DEVICE_ATTR_RO(name);
225
226 static ssize_t mtd_ecc_strength_show(struct device *dev,
227                                      struct device_attribute *attr, char *buf)
228 {
229         struct mtd_info *mtd = dev_get_drvdata(dev);
230
231         return sysfs_emit(buf, "%u\n", mtd->ecc_strength);
232 }
233 MTD_DEVICE_ATTR_RO(ecc_strength);
234
235 static ssize_t mtd_bitflip_threshold_show(struct device *dev,
236                                           struct device_attribute *attr,
237                                           char *buf)
238 {
239         struct mtd_info *mtd = dev_get_drvdata(dev);
240
241         return sysfs_emit(buf, "%u\n", mtd->bitflip_threshold);
242 }
243
244 static ssize_t mtd_bitflip_threshold_store(struct device *dev,
245                                            struct device_attribute *attr,
246                                            const char *buf, size_t count)
247 {
248         struct mtd_info *mtd = dev_get_drvdata(dev);
249         unsigned int bitflip_threshold;
250         int retval;
251
252         retval = kstrtouint(buf, 0, &bitflip_threshold);
253         if (retval)
254                 return retval;
255
256         mtd->bitflip_threshold = bitflip_threshold;
257         return count;
258 }
259 MTD_DEVICE_ATTR_RW(bitflip_threshold);
260
261 static ssize_t mtd_ecc_step_size_show(struct device *dev,
262                 struct device_attribute *attr, char *buf)
263 {
264         struct mtd_info *mtd = dev_get_drvdata(dev);
265
266         return sysfs_emit(buf, "%u\n", mtd->ecc_step_size);
267
268 }
269 MTD_DEVICE_ATTR_RO(ecc_step_size);
270
271 static ssize_t mtd_corrected_bits_show(struct device *dev,
272                 struct device_attribute *attr, char *buf)
273 {
274         struct mtd_info *mtd = dev_get_drvdata(dev);
275         struct mtd_ecc_stats *ecc_stats = &mtd->ecc_stats;
276
277         return sysfs_emit(buf, "%u\n", ecc_stats->corrected);
278 }
279 MTD_DEVICE_ATTR_RO(corrected_bits);     /* ecc stats corrected */
280
281 static ssize_t mtd_ecc_failures_show(struct device *dev,
282                 struct device_attribute *attr, char *buf)
283 {
284         struct mtd_info *mtd = dev_get_drvdata(dev);
285         struct mtd_ecc_stats *ecc_stats = &mtd->ecc_stats;
286
287         return sysfs_emit(buf, "%u\n", ecc_stats->failed);
288 }
289 MTD_DEVICE_ATTR_RO(ecc_failures);       /* ecc stats errors */
290
291 static ssize_t mtd_bad_blocks_show(struct device *dev,
292                 struct device_attribute *attr, char *buf)
293 {
294         struct mtd_info *mtd = dev_get_drvdata(dev);
295         struct mtd_ecc_stats *ecc_stats = &mtd->ecc_stats;
296
297         return sysfs_emit(buf, "%u\n", ecc_stats->badblocks);
298 }
299 MTD_DEVICE_ATTR_RO(bad_blocks);
300
301 static ssize_t mtd_bbt_blocks_show(struct device *dev,
302                 struct device_attribute *attr, char *buf)
303 {
304         struct mtd_info *mtd = dev_get_drvdata(dev);
305         struct mtd_ecc_stats *ecc_stats = &mtd->ecc_stats;
306
307         return sysfs_emit(buf, "%u\n", ecc_stats->bbtblocks);
308 }
309 MTD_DEVICE_ATTR_RO(bbt_blocks);
310
311 static struct attribute *mtd_attrs[] = {
312         &dev_attr_type.attr,
313         &dev_attr_flags.attr,
314         &dev_attr_size.attr,
315         &dev_attr_erasesize.attr,
316         &dev_attr_writesize.attr,
317         &dev_attr_subpagesize.attr,
318         &dev_attr_oobsize.attr,
319         &dev_attr_oobavail.attr,
320         &dev_attr_numeraseregions.attr,
321         &dev_attr_name.attr,
322         &dev_attr_ecc_strength.attr,
323         &dev_attr_ecc_step_size.attr,
324         &dev_attr_corrected_bits.attr,
325         &dev_attr_ecc_failures.attr,
326         &dev_attr_bad_blocks.attr,
327         &dev_attr_bbt_blocks.attr,
328         &dev_attr_bitflip_threshold.attr,
329         NULL,
330 };
331 ATTRIBUTE_GROUPS(mtd);
332
333 static const struct device_type mtd_devtype = {
334         .name           = "mtd",
335         .groups         = mtd_groups,
336         .release        = mtd_release,
337 };
338
339 static int mtd_partid_debug_show(struct seq_file *s, void *p)
340 {
341         struct mtd_info *mtd = s->private;
342
343         seq_printf(s, "%s\n", mtd->dbg.partid);
344
345         return 0;
346 }
347
348 DEFINE_SHOW_ATTRIBUTE(mtd_partid_debug);
349
350 static int mtd_partname_debug_show(struct seq_file *s, void *p)
351 {
352         struct mtd_info *mtd = s->private;
353
354         seq_printf(s, "%s\n", mtd->dbg.partname);
355
356         return 0;
357 }
358
359 DEFINE_SHOW_ATTRIBUTE(mtd_partname_debug);
360
361 static struct dentry *dfs_dir_mtd;
362
363 static void mtd_debugfs_populate(struct mtd_info *mtd)
364 {
365         struct mtd_info *master = mtd_get_master(mtd);
366         struct device *dev = &mtd->dev;
367         struct dentry *root;
368
369         if (IS_ERR_OR_NULL(dfs_dir_mtd))
370                 return;
371
372         root = debugfs_create_dir(dev_name(dev), dfs_dir_mtd);
373         mtd->dbg.dfs_dir = root;
374
375         if (master->dbg.partid)
376                 debugfs_create_file("partid", 0400, root, master,
377                                     &mtd_partid_debug_fops);
378
379         if (master->dbg.partname)
380                 debugfs_create_file("partname", 0400, root, master,
381                                     &mtd_partname_debug_fops);
382 }
383
384 #ifndef CONFIG_MMU
385 unsigned mtd_mmap_capabilities(struct mtd_info *mtd)
386 {
387         switch (mtd->type) {
388         case MTD_RAM:
389                 return NOMMU_MAP_COPY | NOMMU_MAP_DIRECT | NOMMU_MAP_EXEC |
390                         NOMMU_MAP_READ | NOMMU_MAP_WRITE;
391         case MTD_ROM:
392                 return NOMMU_MAP_COPY | NOMMU_MAP_DIRECT | NOMMU_MAP_EXEC |
393                         NOMMU_MAP_READ;
394         default:
395                 return NOMMU_MAP_COPY;
396         }
397 }
398 EXPORT_SYMBOL_GPL(mtd_mmap_capabilities);
399 #endif
400
401 static int mtd_reboot_notifier(struct notifier_block *n, unsigned long state,
402                                void *cmd)
403 {
404         struct mtd_info *mtd;
405
406         mtd = container_of(n, struct mtd_info, reboot_notifier);
407         mtd->_reboot(mtd);
408
409         return NOTIFY_DONE;
410 }
411
412 /**
413  * mtd_wunit_to_pairing_info - get pairing information of a wunit
414  * @mtd: pointer to new MTD device info structure
415  * @wunit: write unit we are interested in
416  * @info: returned pairing information
417  *
418  * Retrieve pairing information associated to the wunit.
419  * This is mainly useful when dealing with MLC/TLC NANDs where pages can be
420  * paired together, and where programming a page may influence the page it is
421  * paired with.
422  * The notion of page is replaced by the term wunit (write-unit) to stay
423  * consistent with the ->writesize field.
424  *
425  * The @wunit argument can be extracted from an absolute offset using
426  * mtd_offset_to_wunit(). @info is filled with the pairing information attached
427  * to @wunit.
428  *
429  * From the pairing info the MTD user can find all the wunits paired with
430  * @wunit using the following loop:
431  *
432  * for (i = 0; i < mtd_pairing_groups(mtd); i++) {
433  *      info.pair = i;
434  *      mtd_pairing_info_to_wunit(mtd, &info);
435  *      ...
436  * }
437  */
438 int mtd_wunit_to_pairing_info(struct mtd_info *mtd, int wunit,
439                               struct mtd_pairing_info *info)
440 {
441         struct mtd_info *master = mtd_get_master(mtd);
442         int npairs = mtd_wunit_per_eb(master) / mtd_pairing_groups(master);
443
444         if (wunit < 0 || wunit >= npairs)
445                 return -EINVAL;
446
447         if (master->pairing && master->pairing->get_info)
448                 return master->pairing->get_info(master, wunit, info);
449
450         info->group = 0;
451         info->pair = wunit;
452
453         return 0;
454 }
455 EXPORT_SYMBOL_GPL(mtd_wunit_to_pairing_info);
456
457 /**
458  * mtd_pairing_info_to_wunit - get wunit from pairing information
459  * @mtd: pointer to new MTD device info structure
460  * @info: pairing information struct
461  *
462  * Returns a positive number representing the wunit associated to the info
463  * struct, or a negative error code.
464  *
465  * This is the reverse of mtd_wunit_to_pairing_info(), and can help one to
466  * iterate over all wunits of a given pair (see mtd_wunit_to_pairing_info()
467  * doc).
468  *
469  * It can also be used to only program the first page of each pair (i.e.
470  * page attached to group 0), which allows one to use an MLC NAND in
471  * software-emulated SLC mode:
472  *
473  * info.group = 0;
474  * npairs = mtd_wunit_per_eb(mtd) / mtd_pairing_groups(mtd);
475  * for (info.pair = 0; info.pair < npairs; info.pair++) {
476  *      wunit = mtd_pairing_info_to_wunit(mtd, &info);
477  *      mtd_write(mtd, mtd_wunit_to_offset(mtd, blkoffs, wunit),
478  *                mtd->writesize, &retlen, buf + (i * mtd->writesize));
479  * }
480  */
481 int mtd_pairing_info_to_wunit(struct mtd_info *mtd,
482                               const struct mtd_pairing_info *info)
483 {
484         struct mtd_info *master = mtd_get_master(mtd);
485         int ngroups = mtd_pairing_groups(master);
486         int npairs = mtd_wunit_per_eb(master) / ngroups;
487
488         if (!info || info->pair < 0 || info->pair >= npairs ||
489             info->group < 0 || info->group >= ngroups)
490                 return -EINVAL;
491
492         if (master->pairing && master->pairing->get_wunit)
493                 return mtd->pairing->get_wunit(master, info);
494
495         return info->pair;
496 }
497 EXPORT_SYMBOL_GPL(mtd_pairing_info_to_wunit);
498
499 /**
500  * mtd_pairing_groups - get the number of pairing groups
501  * @mtd: pointer to new MTD device info structure
502  *
503  * Returns the number of pairing groups.
504  *
505  * This number is usually equal to the number of bits exposed by a single
506  * cell, and can be used in conjunction with mtd_pairing_info_to_wunit()
507  * to iterate over all pages of a given pair.
508  */
509 int mtd_pairing_groups(struct mtd_info *mtd)
510 {
511         struct mtd_info *master = mtd_get_master(mtd);
512
513         if (!master->pairing || !master->pairing->ngroups)
514                 return 1;
515
516         return master->pairing->ngroups;
517 }
518 EXPORT_SYMBOL_GPL(mtd_pairing_groups);
519
520 static int mtd_nvmem_reg_read(void *priv, unsigned int offset,
521                               void *val, size_t bytes)
522 {
523         struct mtd_info *mtd = priv;
524         size_t retlen;
525         int err;
526
527         err = mtd_read(mtd, offset, bytes, &retlen, val);
528         if (err && err != -EUCLEAN)
529                 return err;
530
531         return retlen == bytes ? 0 : -EIO;
532 }
533
534 static int mtd_nvmem_add(struct mtd_info *mtd)
535 {
536         struct device_node *node = mtd_get_of_node(mtd);
537         struct nvmem_config config = {};
538
539         config.id = -1;
540         config.dev = &mtd->dev;
541         config.name = dev_name(&mtd->dev);
542         config.owner = THIS_MODULE;
543         config.reg_read = mtd_nvmem_reg_read;
544         config.size = mtd->size;
545         config.word_size = 1;
546         config.stride = 1;
547         config.read_only = true;
548         config.root_only = true;
549         config.ignore_wp = true;
550         config.no_of_node = !of_device_is_compatible(node, "nvmem-cells");
551         config.priv = mtd;
552
553         mtd->nvmem = nvmem_register(&config);
554         if (IS_ERR(mtd->nvmem)) {
555                 /* Just ignore if there is no NVMEM support in the kernel */
556                 if (PTR_ERR(mtd->nvmem) == -EOPNOTSUPP) {
557                         mtd->nvmem = NULL;
558                 } else {
559                         dev_err(&mtd->dev, "Failed to register NVMEM device\n");
560                         return PTR_ERR(mtd->nvmem);
561                 }
562         }
563
564         return 0;
565 }
566
567 /**
568  *      add_mtd_device - register an MTD device
569  *      @mtd: pointer to new MTD device info structure
570  *
571  *      Add a device to the list of MTD devices present in the system, and
572  *      notify each currently active MTD 'user' of its arrival. Returns
573  *      zero on success or non-zero on failure.
574  */
575
576 int add_mtd_device(struct mtd_info *mtd)
577 {
578         struct mtd_info *master = mtd_get_master(mtd);
579         struct mtd_notifier *not;
580         int i, error;
581
582         /*
583          * May occur, for instance, on buggy drivers which call
584          * mtd_device_parse_register() multiple times on the same master MTD,
585          * especially with CONFIG_MTD_PARTITIONED_MASTER=y.
586          */
587         if (WARN_ONCE(mtd->dev.type, "MTD already registered\n"))
588                 return -EEXIST;
589
590         BUG_ON(mtd->writesize == 0);
591
592         /*
593          * MTD drivers should implement ->_{write,read}() or
594          * ->_{write,read}_oob(), but not both.
595          */
596         if (WARN_ON((mtd->_write && mtd->_write_oob) ||
597                     (mtd->_read && mtd->_read_oob)))
598                 return -EINVAL;
599
600         if (WARN_ON((!mtd->erasesize || !master->_erase) &&
601                     !(mtd->flags & MTD_NO_ERASE)))
602                 return -EINVAL;
603
604         /*
605          * MTD_SLC_ON_MLC_EMULATION can only be set on partitions, when the
606          * master is an MLC NAND and has a proper pairing scheme defined.
607          * We also reject masters that implement ->_writev() for now, because
608          * NAND controller drivers don't implement this hook, and adding the
609          * SLC -> MLC address/length conversion to this path is useless if we
610          * don't have a user.
611          */
612         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION &&
613             (!mtd_is_partition(mtd) || master->type != MTD_MLCNANDFLASH ||
614              !master->pairing || master->_writev))
615                 return -EINVAL;
616
617         mutex_lock(&mtd_table_mutex);
618
619         i = idr_alloc(&mtd_idr, mtd, 0, 0, GFP_KERNEL);
620         if (i < 0) {
621                 error = i;
622                 goto fail_locked;
623         }
624
625         mtd->index = i;
626         mtd->usecount = 0;
627
628         /* default value if not set by driver */
629         if (mtd->bitflip_threshold == 0)
630                 mtd->bitflip_threshold = mtd->ecc_strength;
631
632         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION) {
633                 int ngroups = mtd_pairing_groups(master);
634
635                 mtd->erasesize /= ngroups;
636                 mtd->size = (u64)mtd_div_by_eb(mtd->size, master) *
637                             mtd->erasesize;
638         }
639
640         if (is_power_of_2(mtd->erasesize))
641                 mtd->erasesize_shift = ffs(mtd->erasesize) - 1;
642         else
643                 mtd->erasesize_shift = 0;
644
645         if (is_power_of_2(mtd->writesize))
646                 mtd->writesize_shift = ffs(mtd->writesize) - 1;
647         else
648                 mtd->writesize_shift = 0;
649
650         mtd->erasesize_mask = (1 << mtd->erasesize_shift) - 1;
651         mtd->writesize_mask = (1 << mtd->writesize_shift) - 1;
652
653         /* Some chips always power up locked. Unlock them now */
654         if ((mtd->flags & MTD_WRITEABLE) && (mtd->flags & MTD_POWERUP_LOCK)) {
655                 error = mtd_unlock(mtd, 0, mtd->size);
656                 if (error && error != -EOPNOTSUPP)
657                         printk(KERN_WARNING
658                                "%s: unlock failed, writes may not work\n",
659                                mtd->name);
660                 /* Ignore unlock failures? */
661                 error = 0;
662         }
663
664         /* Caller should have set dev.parent to match the
665          * physical device, if appropriate.
666          */
667         mtd->dev.type = &mtd_devtype;
668         mtd->dev.class = &mtd_class;
669         mtd->dev.devt = MTD_DEVT(i);
670         dev_set_name(&mtd->dev, "mtd%d", i);
671         dev_set_drvdata(&mtd->dev, mtd);
672         of_node_get(mtd_get_of_node(mtd));
673         error = device_register(&mtd->dev);
674         if (error) {
675                 put_device(&mtd->dev);
676                 goto fail_added;
677         }
678
679         /* Add the nvmem provider */
680         error = mtd_nvmem_add(mtd);
681         if (error)
682                 goto fail_nvmem_add;
683
684         mtd_debugfs_populate(mtd);
685
686         device_create(&mtd_class, mtd->dev.parent, MTD_DEVT(i) + 1, NULL,
687                       "mtd%dro", i);
688
689         pr_debug("mtd: Giving out device %d to %s\n", i, mtd->name);
690         /* No need to get a refcount on the module containing
691            the notifier, since we hold the mtd_table_mutex */
692         list_for_each_entry(not, &mtd_notifiers, list)
693                 not->add(mtd);
694
695         mutex_unlock(&mtd_table_mutex);
696         /* We _know_ we aren't being removed, because
697            our caller is still holding us here. So none
698            of this try_ nonsense, and no bitching about it
699            either. :) */
700         __module_get(THIS_MODULE);
701         return 0;
702
703 fail_nvmem_add:
704         device_unregister(&mtd->dev);
705 fail_added:
706         of_node_put(mtd_get_of_node(mtd));
707         idr_remove(&mtd_idr, i);
708 fail_locked:
709         mutex_unlock(&mtd_table_mutex);
710         return error;
711 }
712
713 /**
714  *      del_mtd_device - unregister an MTD device
715  *      @mtd: pointer to MTD device info structure
716  *
717  *      Remove a device from the list of MTD devices present in the system,
718  *      and notify each currently active MTD 'user' of its departure.
719  *      Returns zero on success or 1 on failure, which currently will happen
720  *      if the requested device does not appear to be present in the list.
721  */
722
723 int del_mtd_device(struct mtd_info *mtd)
724 {
725         int ret;
726         struct mtd_notifier *not;
727
728         mutex_lock(&mtd_table_mutex);
729
730         if (idr_find(&mtd_idr, mtd->index) != mtd) {
731                 ret = -ENODEV;
732                 goto out_error;
733         }
734
735         /* No need to get a refcount on the module containing
736                 the notifier, since we hold the mtd_table_mutex */
737         list_for_each_entry(not, &mtd_notifiers, list)
738                 not->remove(mtd);
739
740         if (mtd->usecount) {
741                 printk(KERN_NOTICE "Removing MTD device #%d (%s) with use count %d\n",
742                        mtd->index, mtd->name, mtd->usecount);
743                 ret = -EBUSY;
744         } else {
745                 debugfs_remove_recursive(mtd->dbg.dfs_dir);
746
747                 /* Try to remove the NVMEM provider */
748                 if (mtd->nvmem)
749                         nvmem_unregister(mtd->nvmem);
750
751                 device_unregister(&mtd->dev);
752
753                 idr_remove(&mtd_idr, mtd->index);
754                 of_node_put(mtd_get_of_node(mtd));
755
756                 module_put(THIS_MODULE);
757                 ret = 0;
758         }
759
760 out_error:
761         mutex_unlock(&mtd_table_mutex);
762         return ret;
763 }
764
765 /*
766  * Set a few defaults based on the parent devices, if not provided by the
767  * driver
768  */
769 static void mtd_set_dev_defaults(struct mtd_info *mtd)
770 {
771         if (mtd->dev.parent) {
772                 if (!mtd->owner && mtd->dev.parent->driver)
773                         mtd->owner = mtd->dev.parent->driver->owner;
774                 if (!mtd->name)
775                         mtd->name = dev_name(mtd->dev.parent);
776         } else {
777                 pr_debug("mtd device won't show a device symlink in sysfs\n");
778         }
779
780         INIT_LIST_HEAD(&mtd->partitions);
781         mutex_init(&mtd->master.partitions_lock);
782         mutex_init(&mtd->master.chrdev_lock);
783 }
784
785 static ssize_t mtd_otp_size(struct mtd_info *mtd, bool is_user)
786 {
787         struct otp_info *info;
788         ssize_t size = 0;
789         unsigned int i;
790         size_t retlen;
791         int ret;
792
793         info = kmalloc(PAGE_SIZE, GFP_KERNEL);
794         if (!info)
795                 return -ENOMEM;
796
797         if (is_user)
798                 ret = mtd_get_user_prot_info(mtd, PAGE_SIZE, &retlen, info);
799         else
800                 ret = mtd_get_fact_prot_info(mtd, PAGE_SIZE, &retlen, info);
801         if (ret)
802                 goto err;
803
804         for (i = 0; i < retlen / sizeof(*info); i++)
805                 size += info[i].length;
806
807         kfree(info);
808         return size;
809
810 err:
811         kfree(info);
812
813         /* ENODATA means there is no OTP region. */
814         return ret == -ENODATA ? 0 : ret;
815 }
816
817 static struct nvmem_device *mtd_otp_nvmem_register(struct mtd_info *mtd,
818                                                    const char *compatible,
819                                                    int size,
820                                                    nvmem_reg_read_t reg_read)
821 {
822         struct nvmem_device *nvmem = NULL;
823         struct nvmem_config config = {};
824         struct device_node *np;
825
826         /* DT binding is optional */
827         np = of_get_compatible_child(mtd->dev.of_node, compatible);
828
829         /* OTP nvmem will be registered on the physical device */
830         config.dev = mtd->dev.parent;
831         config.name = kasprintf(GFP_KERNEL, "%s-%s", dev_name(&mtd->dev), compatible);
832         config.id = NVMEM_DEVID_NONE;
833         config.owner = THIS_MODULE;
834         config.type = NVMEM_TYPE_OTP;
835         config.root_only = true;
836         config.ignore_wp = true;
837         config.reg_read = reg_read;
838         config.size = size;
839         config.of_node = np;
840         config.priv = mtd;
841
842         nvmem = nvmem_register(&config);
843         /* Just ignore if there is no NVMEM support in the kernel */
844         if (IS_ERR(nvmem) && PTR_ERR(nvmem) == -EOPNOTSUPP)
845                 nvmem = NULL;
846
847         of_node_put(np);
848         kfree(config.name);
849
850         return nvmem;
851 }
852
853 static int mtd_nvmem_user_otp_reg_read(void *priv, unsigned int offset,
854                                        void *val, size_t bytes)
855 {
856         struct mtd_info *mtd = priv;
857         size_t retlen;
858         int ret;
859
860         ret = mtd_read_user_prot_reg(mtd, offset, bytes, &retlen, val);
861         if (ret)
862                 return ret;
863
864         return retlen == bytes ? 0 : -EIO;
865 }
866
867 static int mtd_nvmem_fact_otp_reg_read(void *priv, unsigned int offset,
868                                        void *val, size_t bytes)
869 {
870         struct mtd_info *mtd = priv;
871         size_t retlen;
872         int ret;
873
874         ret = mtd_read_fact_prot_reg(mtd, offset, bytes, &retlen, val);
875         if (ret)
876                 return ret;
877
878         return retlen == bytes ? 0 : -EIO;
879 }
880
881 static int mtd_otp_nvmem_add(struct mtd_info *mtd)
882 {
883         struct nvmem_device *nvmem;
884         ssize_t size;
885         int err;
886
887         if (mtd->_get_user_prot_info && mtd->_read_user_prot_reg) {
888                 size = mtd_otp_size(mtd, true);
889                 if (size < 0)
890                         return size;
891
892                 if (size > 0) {
893                         nvmem = mtd_otp_nvmem_register(mtd, "user-otp", size,
894                                                        mtd_nvmem_user_otp_reg_read);
895                         if (IS_ERR(nvmem)) {
896                                 dev_err(&mtd->dev, "Failed to register OTP NVMEM device\n");
897                                 return PTR_ERR(nvmem);
898                         }
899                         mtd->otp_user_nvmem = nvmem;
900                 }
901         }
902
903         if (mtd->_get_fact_prot_info && mtd->_read_fact_prot_reg) {
904                 size = mtd_otp_size(mtd, false);
905                 if (size < 0) {
906                         err = size;
907                         goto err;
908                 }
909
910                 if (size > 0) {
911                         nvmem = mtd_otp_nvmem_register(mtd, "factory-otp", size,
912                                                        mtd_nvmem_fact_otp_reg_read);
913                         if (IS_ERR(nvmem)) {
914                                 dev_err(&mtd->dev, "Failed to register OTP NVMEM device\n");
915                                 err = PTR_ERR(nvmem);
916                                 goto err;
917                         }
918                         mtd->otp_factory_nvmem = nvmem;
919                 }
920         }
921
922         return 0;
923
924 err:
925         if (mtd->otp_user_nvmem)
926                 nvmem_unregister(mtd->otp_user_nvmem);
927         return err;
928 }
929
930 /**
931  * mtd_device_parse_register - parse partitions and register an MTD device.
932  *
933  * @mtd: the MTD device to register
934  * @types: the list of MTD partition probes to try, see
935  *         'parse_mtd_partitions()' for more information
936  * @parser_data: MTD partition parser-specific data
937  * @parts: fallback partition information to register, if parsing fails;
938  *         only valid if %nr_parts > %0
939  * @nr_parts: the number of partitions in parts, if zero then the full
940  *            MTD device is registered if no partition info is found
941  *
942  * This function aggregates MTD partitions parsing (done by
943  * 'parse_mtd_partitions()') and MTD device and partitions registering. It
944  * basically follows the most common pattern found in many MTD drivers:
945  *
946  * * If the MTD_PARTITIONED_MASTER option is set, then the device as a whole is
947  *   registered first.
948  * * Then It tries to probe partitions on MTD device @mtd using parsers
949  *   specified in @types (if @types is %NULL, then the default list of parsers
950  *   is used, see 'parse_mtd_partitions()' for more information). If none are
951  *   found this functions tries to fallback to information specified in
952  *   @parts/@nr_parts.
953  * * If no partitions were found this function just registers the MTD device
954  *   @mtd and exits.
955  *
956  * Returns zero in case of success and a negative error code in case of failure.
957  */
958 int mtd_device_parse_register(struct mtd_info *mtd, const char * const *types,
959                               struct mtd_part_parser_data *parser_data,
960                               const struct mtd_partition *parts,
961                               int nr_parts)
962 {
963         int ret;
964
965         mtd_set_dev_defaults(mtd);
966
967         if (IS_ENABLED(CONFIG_MTD_PARTITIONED_MASTER)) {
968                 ret = add_mtd_device(mtd);
969                 if (ret)
970                         return ret;
971         }
972
973         /* Prefer parsed partitions over driver-provided fallback */
974         ret = parse_mtd_partitions(mtd, types, parser_data);
975         if (ret == -EPROBE_DEFER)
976                 goto out;
977
978         if (ret > 0)
979                 ret = 0;
980         else if (nr_parts)
981                 ret = add_mtd_partitions(mtd, parts, nr_parts);
982         else if (!device_is_registered(&mtd->dev))
983                 ret = add_mtd_device(mtd);
984         else
985                 ret = 0;
986
987         if (ret)
988                 goto out;
989
990         /*
991          * FIXME: some drivers unfortunately call this function more than once.
992          * So we have to check if we've already assigned the reboot notifier.
993          *
994          * Generally, we can make multiple calls work for most cases, but it
995          * does cause problems with parse_mtd_partitions() above (e.g.,
996          * cmdlineparts will register partitions more than once).
997          */
998         WARN_ONCE(mtd->_reboot && mtd->reboot_notifier.notifier_call,
999                   "MTD already registered\n");
1000         if (mtd->_reboot && !mtd->reboot_notifier.notifier_call) {
1001                 mtd->reboot_notifier.notifier_call = mtd_reboot_notifier;
1002                 register_reboot_notifier(&mtd->reboot_notifier);
1003         }
1004
1005         ret = mtd_otp_nvmem_add(mtd);
1006
1007 out:
1008         if (ret && device_is_registered(&mtd->dev))
1009                 del_mtd_device(mtd);
1010
1011         return ret;
1012 }
1013 EXPORT_SYMBOL_GPL(mtd_device_parse_register);
1014
1015 /**
1016  * mtd_device_unregister - unregister an existing MTD device.
1017  *
1018  * @master: the MTD device to unregister.  This will unregister both the master
1019  *          and any partitions if registered.
1020  */
1021 int mtd_device_unregister(struct mtd_info *master)
1022 {
1023         int err;
1024
1025         if (master->_reboot)
1026                 unregister_reboot_notifier(&master->reboot_notifier);
1027
1028         if (master->otp_user_nvmem)
1029                 nvmem_unregister(master->otp_user_nvmem);
1030
1031         if (master->otp_factory_nvmem)
1032                 nvmem_unregister(master->otp_factory_nvmem);
1033
1034         err = del_mtd_partitions(master);
1035         if (err)
1036                 return err;
1037
1038         if (!device_is_registered(&master->dev))
1039                 return 0;
1040
1041         return del_mtd_device(master);
1042 }
1043 EXPORT_SYMBOL_GPL(mtd_device_unregister);
1044
1045 /**
1046  *      register_mtd_user - register a 'user' of MTD devices.
1047  *      @new: pointer to notifier info structure
1048  *
1049  *      Registers a pair of callbacks function to be called upon addition
1050  *      or removal of MTD devices. Causes the 'add' callback to be immediately
1051  *      invoked for each MTD device currently present in the system.
1052  */
1053 void register_mtd_user (struct mtd_notifier *new)
1054 {
1055         struct mtd_info *mtd;
1056
1057         mutex_lock(&mtd_table_mutex);
1058
1059         list_add(&new->list, &mtd_notifiers);
1060
1061         __module_get(THIS_MODULE);
1062
1063         mtd_for_each_device(mtd)
1064                 new->add(mtd);
1065
1066         mutex_unlock(&mtd_table_mutex);
1067 }
1068 EXPORT_SYMBOL_GPL(register_mtd_user);
1069
1070 /**
1071  *      unregister_mtd_user - unregister a 'user' of MTD devices.
1072  *      @old: pointer to notifier info structure
1073  *
1074  *      Removes a callback function pair from the list of 'users' to be
1075  *      notified upon addition or removal of MTD devices. Causes the
1076  *      'remove' callback to be immediately invoked for each MTD device
1077  *      currently present in the system.
1078  */
1079 int unregister_mtd_user (struct mtd_notifier *old)
1080 {
1081         struct mtd_info *mtd;
1082
1083         mutex_lock(&mtd_table_mutex);
1084
1085         module_put(THIS_MODULE);
1086
1087         mtd_for_each_device(mtd)
1088                 old->remove(mtd);
1089
1090         list_del(&old->list);
1091         mutex_unlock(&mtd_table_mutex);
1092         return 0;
1093 }
1094 EXPORT_SYMBOL_GPL(unregister_mtd_user);
1095
1096 /**
1097  *      get_mtd_device - obtain a validated handle for an MTD device
1098  *      @mtd: last known address of the required MTD device
1099  *      @num: internal device number of the required MTD device
1100  *
1101  *      Given a number and NULL address, return the num'th entry in the device
1102  *      table, if any.  Given an address and num == -1, search the device table
1103  *      for a device with that address and return if it's still present. Given
1104  *      both, return the num'th driver only if its address matches. Return
1105  *      error code if not.
1106  */
1107 struct mtd_info *get_mtd_device(struct mtd_info *mtd, int num)
1108 {
1109         struct mtd_info *ret = NULL, *other;
1110         int err = -ENODEV;
1111
1112         mutex_lock(&mtd_table_mutex);
1113
1114         if (num == -1) {
1115                 mtd_for_each_device(other) {
1116                         if (other == mtd) {
1117                                 ret = mtd;
1118                                 break;
1119                         }
1120                 }
1121         } else if (num >= 0) {
1122                 ret = idr_find(&mtd_idr, num);
1123                 if (mtd && mtd != ret)
1124                         ret = NULL;
1125         }
1126
1127         if (!ret) {
1128                 ret = ERR_PTR(err);
1129                 goto out;
1130         }
1131
1132         err = __get_mtd_device(ret);
1133         if (err)
1134                 ret = ERR_PTR(err);
1135 out:
1136         mutex_unlock(&mtd_table_mutex);
1137         return ret;
1138 }
1139 EXPORT_SYMBOL_GPL(get_mtd_device);
1140
1141
1142 int __get_mtd_device(struct mtd_info *mtd)
1143 {
1144         struct mtd_info *master = mtd_get_master(mtd);
1145         int err;
1146
1147         if (!try_module_get(master->owner))
1148                 return -ENODEV;
1149
1150         if (master->_get_device) {
1151                 err = master->_get_device(mtd);
1152
1153                 if (err) {
1154                         module_put(master->owner);
1155                         return err;
1156                 }
1157         }
1158
1159         master->usecount++;
1160
1161         while (mtd->parent) {
1162                 mtd->usecount++;
1163                 mtd = mtd->parent;
1164         }
1165
1166         return 0;
1167 }
1168 EXPORT_SYMBOL_GPL(__get_mtd_device);
1169
1170 /**
1171  *      get_mtd_device_nm - obtain a validated handle for an MTD device by
1172  *      device name
1173  *      @name: MTD device name to open
1174  *
1175  *      This function returns MTD device description structure in case of
1176  *      success and an error code in case of failure.
1177  */
1178 struct mtd_info *get_mtd_device_nm(const char *name)
1179 {
1180         int err = -ENODEV;
1181         struct mtd_info *mtd = NULL, *other;
1182
1183         mutex_lock(&mtd_table_mutex);
1184
1185         mtd_for_each_device(other) {
1186                 if (!strcmp(name, other->name)) {
1187                         mtd = other;
1188                         break;
1189                 }
1190         }
1191
1192         if (!mtd)
1193                 goto out_unlock;
1194
1195         err = __get_mtd_device(mtd);
1196         if (err)
1197                 goto out_unlock;
1198
1199         mutex_unlock(&mtd_table_mutex);
1200         return mtd;
1201
1202 out_unlock:
1203         mutex_unlock(&mtd_table_mutex);
1204         return ERR_PTR(err);
1205 }
1206 EXPORT_SYMBOL_GPL(get_mtd_device_nm);
1207
1208 void put_mtd_device(struct mtd_info *mtd)
1209 {
1210         mutex_lock(&mtd_table_mutex);
1211         __put_mtd_device(mtd);
1212         mutex_unlock(&mtd_table_mutex);
1213
1214 }
1215 EXPORT_SYMBOL_GPL(put_mtd_device);
1216
1217 void __put_mtd_device(struct mtd_info *mtd)
1218 {
1219         struct mtd_info *master = mtd_get_master(mtd);
1220
1221         while (mtd->parent) {
1222                 --mtd->usecount;
1223                 BUG_ON(mtd->usecount < 0);
1224                 mtd = mtd->parent;
1225         }
1226
1227         master->usecount--;
1228
1229         if (master->_put_device)
1230                 master->_put_device(master);
1231
1232         module_put(master->owner);
1233 }
1234 EXPORT_SYMBOL_GPL(__put_mtd_device);
1235
1236 /*
1237  * Erase is an synchronous operation. Device drivers are epected to return a
1238  * negative error code if the operation failed and update instr->fail_addr
1239  * to point the portion that was not properly erased.
1240  */
1241 int mtd_erase(struct mtd_info *mtd, struct erase_info *instr)
1242 {
1243         struct mtd_info *master = mtd_get_master(mtd);
1244         u64 mst_ofs = mtd_get_master_ofs(mtd, 0);
1245         struct erase_info adjinstr;
1246         int ret;
1247
1248         instr->fail_addr = MTD_FAIL_ADDR_UNKNOWN;
1249         adjinstr = *instr;
1250
1251         if (!mtd->erasesize || !master->_erase)
1252                 return -ENOTSUPP;
1253
1254         if (instr->addr >= mtd->size || instr->len > mtd->size - instr->addr)
1255                 return -EINVAL;
1256         if (!(mtd->flags & MTD_WRITEABLE))
1257                 return -EROFS;
1258
1259         if (!instr->len)
1260                 return 0;
1261
1262         ledtrig_mtd_activity();
1263
1264         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION) {
1265                 adjinstr.addr = (loff_t)mtd_div_by_eb(instr->addr, mtd) *
1266                                 master->erasesize;
1267                 adjinstr.len = ((u64)mtd_div_by_eb(instr->addr + instr->len, mtd) *
1268                                 master->erasesize) -
1269                                adjinstr.addr;
1270         }
1271
1272         adjinstr.addr += mst_ofs;
1273
1274         ret = master->_erase(master, &adjinstr);
1275
1276         if (adjinstr.fail_addr != MTD_FAIL_ADDR_UNKNOWN) {
1277                 instr->fail_addr = adjinstr.fail_addr - mst_ofs;
1278                 if (mtd->flags & MTD_SLC_ON_MLC_EMULATION) {
1279                         instr->fail_addr = mtd_div_by_eb(instr->fail_addr,
1280                                                          master);
1281                         instr->fail_addr *= mtd->erasesize;
1282                 }
1283         }
1284
1285         return ret;
1286 }
1287 EXPORT_SYMBOL_GPL(mtd_erase);
1288
1289 /*
1290  * This stuff for eXecute-In-Place. phys is optional and may be set to NULL.
1291  */
1292 int mtd_point(struct mtd_info *mtd, loff_t from, size_t len, size_t *retlen,
1293               void **virt, resource_size_t *phys)
1294 {
1295         struct mtd_info *master = mtd_get_master(mtd);
1296
1297         *retlen = 0;
1298         *virt = NULL;
1299         if (phys)
1300                 *phys = 0;
1301         if (!master->_point)
1302                 return -EOPNOTSUPP;
1303         if (from < 0 || from >= mtd->size || len > mtd->size - from)
1304                 return -EINVAL;
1305         if (!len)
1306                 return 0;
1307
1308         from = mtd_get_master_ofs(mtd, from);
1309         return master->_point(master, from, len, retlen, virt, phys);
1310 }
1311 EXPORT_SYMBOL_GPL(mtd_point);
1312
1313 /* We probably shouldn't allow XIP if the unpoint isn't a NULL */
1314 int mtd_unpoint(struct mtd_info *mtd, loff_t from, size_t len)
1315 {
1316         struct mtd_info *master = mtd_get_master(mtd);
1317
1318         if (!master->_unpoint)
1319                 return -EOPNOTSUPP;
1320         if (from < 0 || from >= mtd->size || len > mtd->size - from)
1321                 return -EINVAL;
1322         if (!len)
1323                 return 0;
1324         return master->_unpoint(master, mtd_get_master_ofs(mtd, from), len);
1325 }
1326 EXPORT_SYMBOL_GPL(mtd_unpoint);
1327
1328 /*
1329  * Allow NOMMU mmap() to directly map the device (if not NULL)
1330  * - return the address to which the offset maps
1331  * - return -ENOSYS to indicate refusal to do the mapping
1332  */
1333 unsigned long mtd_get_unmapped_area(struct mtd_info *mtd, unsigned long len,
1334                                     unsigned long offset, unsigned long flags)
1335 {
1336         size_t retlen;
1337         void *virt;
1338         int ret;
1339
1340         ret = mtd_point(mtd, offset, len, &retlen, &virt, NULL);
1341         if (ret)
1342                 return ret;
1343         if (retlen != len) {
1344                 mtd_unpoint(mtd, offset, retlen);
1345                 return -ENOSYS;
1346         }
1347         return (unsigned long)virt;
1348 }
1349 EXPORT_SYMBOL_GPL(mtd_get_unmapped_area);
1350
1351 static void mtd_update_ecc_stats(struct mtd_info *mtd, struct mtd_info *master,
1352                                  const struct mtd_ecc_stats *old_stats)
1353 {
1354         struct mtd_ecc_stats diff;
1355
1356         if (master == mtd)
1357                 return;
1358
1359         diff = master->ecc_stats;
1360         diff.failed -= old_stats->failed;
1361         diff.corrected -= old_stats->corrected;
1362
1363         while (mtd->parent) {
1364                 mtd->ecc_stats.failed += diff.failed;
1365                 mtd->ecc_stats.corrected += diff.corrected;
1366                 mtd = mtd->parent;
1367         }
1368 }
1369
1370 int mtd_read(struct mtd_info *mtd, loff_t from, size_t len, size_t *retlen,
1371              u_char *buf)
1372 {
1373         struct mtd_oob_ops ops = {
1374                 .len = len,
1375                 .datbuf = buf,
1376         };
1377         int ret;
1378
1379         ret = mtd_read_oob(mtd, from, &ops);
1380         *retlen = ops.retlen;
1381
1382         return ret;
1383 }
1384 EXPORT_SYMBOL_GPL(mtd_read);
1385
1386 int mtd_write(struct mtd_info *mtd, loff_t to, size_t len, size_t *retlen,
1387               const u_char *buf)
1388 {
1389         struct mtd_oob_ops ops = {
1390                 .len = len,
1391                 .datbuf = (u8 *)buf,
1392         };
1393         int ret;
1394
1395         ret = mtd_write_oob(mtd, to, &ops);
1396         *retlen = ops.retlen;
1397
1398         return ret;
1399 }
1400 EXPORT_SYMBOL_GPL(mtd_write);
1401
1402 /*
1403  * In blackbox flight recorder like scenarios we want to make successful writes
1404  * in interrupt context. panic_write() is only intended to be called when its
1405  * known the kernel is about to panic and we need the write to succeed. Since
1406  * the kernel is not going to be running for much longer, this function can
1407  * break locks and delay to ensure the write succeeds (but not sleep).
1408  */
1409 int mtd_panic_write(struct mtd_info *mtd, loff_t to, size_t len, size_t *retlen,
1410                     const u_char *buf)
1411 {
1412         struct mtd_info *master = mtd_get_master(mtd);
1413
1414         *retlen = 0;
1415         if (!master->_panic_write)
1416                 return -EOPNOTSUPP;
1417         if (to < 0 || to >= mtd->size || len > mtd->size - to)
1418                 return -EINVAL;
1419         if (!(mtd->flags & MTD_WRITEABLE))
1420                 return -EROFS;
1421         if (!len)
1422                 return 0;
1423         if (!master->oops_panic_write)
1424                 master->oops_panic_write = true;
1425
1426         return master->_panic_write(master, mtd_get_master_ofs(mtd, to), len,
1427                                     retlen, buf);
1428 }
1429 EXPORT_SYMBOL_GPL(mtd_panic_write);
1430
1431 static int mtd_check_oob_ops(struct mtd_info *mtd, loff_t offs,
1432                              struct mtd_oob_ops *ops)
1433 {
1434         /*
1435          * Some users are setting ->datbuf or ->oobbuf to NULL, but are leaving
1436          * ->len or ->ooblen uninitialized. Force ->len and ->ooblen to 0 in
1437          *  this case.
1438          */
1439         if (!ops->datbuf)
1440                 ops->len = 0;
1441
1442         if (!ops->oobbuf)
1443                 ops->ooblen = 0;
1444
1445         if (offs < 0 || offs + ops->len > mtd->size)
1446                 return -EINVAL;
1447
1448         if (ops->ooblen) {
1449                 size_t maxooblen;
1450
1451                 if (ops->ooboffs >= mtd_oobavail(mtd, ops))
1452                         return -EINVAL;
1453
1454                 maxooblen = ((size_t)(mtd_div_by_ws(mtd->size, mtd) -
1455                                       mtd_div_by_ws(offs, mtd)) *
1456                              mtd_oobavail(mtd, ops)) - ops->ooboffs;
1457                 if (ops->ooblen > maxooblen)
1458                         return -EINVAL;
1459         }
1460
1461         return 0;
1462 }
1463
1464 static int mtd_read_oob_std(struct mtd_info *mtd, loff_t from,
1465                             struct mtd_oob_ops *ops)
1466 {
1467         struct mtd_info *master = mtd_get_master(mtd);
1468         int ret;
1469
1470         from = mtd_get_master_ofs(mtd, from);
1471         if (master->_read_oob)
1472                 ret = master->_read_oob(master, from, ops);
1473         else
1474                 ret = master->_read(master, from, ops->len, &ops->retlen,
1475                                     ops->datbuf);
1476
1477         return ret;
1478 }
1479
1480 static int mtd_write_oob_std(struct mtd_info *mtd, loff_t to,
1481                              struct mtd_oob_ops *ops)
1482 {
1483         struct mtd_info *master = mtd_get_master(mtd);
1484         int ret;
1485
1486         to = mtd_get_master_ofs(mtd, to);
1487         if (master->_write_oob)
1488                 ret = master->_write_oob(master, to, ops);
1489         else
1490                 ret = master->_write(master, to, ops->len, &ops->retlen,
1491                                      ops->datbuf);
1492
1493         return ret;
1494 }
1495
1496 static int mtd_io_emulated_slc(struct mtd_info *mtd, loff_t start, bool read,
1497                                struct mtd_oob_ops *ops)
1498 {
1499         struct mtd_info *master = mtd_get_master(mtd);
1500         int ngroups = mtd_pairing_groups(master);
1501         int npairs = mtd_wunit_per_eb(master) / ngroups;
1502         struct mtd_oob_ops adjops = *ops;
1503         unsigned int wunit, oobavail;
1504         struct mtd_pairing_info info;
1505         int max_bitflips = 0;
1506         u32 ebofs, pageofs;
1507         loff_t base, pos;
1508
1509         ebofs = mtd_mod_by_eb(start, mtd);
1510         base = (loff_t)mtd_div_by_eb(start, mtd) * master->erasesize;
1511         info.group = 0;
1512         info.pair = mtd_div_by_ws(ebofs, mtd);
1513         pageofs = mtd_mod_by_ws(ebofs, mtd);
1514         oobavail = mtd_oobavail(mtd, ops);
1515
1516         while (ops->retlen < ops->len || ops->oobretlen < ops->ooblen) {
1517                 int ret;
1518
1519                 if (info.pair >= npairs) {
1520                         info.pair = 0;
1521                         base += master->erasesize;
1522                 }
1523
1524                 wunit = mtd_pairing_info_to_wunit(master, &info);
1525                 pos = mtd_wunit_to_offset(mtd, base, wunit);
1526
1527                 adjops.len = ops->len - ops->retlen;
1528                 if (adjops.len > mtd->writesize - pageofs)
1529                         adjops.len = mtd->writesize - pageofs;
1530
1531                 adjops.ooblen = ops->ooblen - ops->oobretlen;
1532                 if (adjops.ooblen > oobavail - adjops.ooboffs)
1533                         adjops.ooblen = oobavail - adjops.ooboffs;
1534
1535                 if (read) {
1536                         ret = mtd_read_oob_std(mtd, pos + pageofs, &adjops);
1537                         if (ret > 0)
1538                                 max_bitflips = max(max_bitflips, ret);
1539                 } else {
1540                         ret = mtd_write_oob_std(mtd, pos + pageofs, &adjops);
1541                 }
1542
1543                 if (ret < 0)
1544                         return ret;
1545
1546                 max_bitflips = max(max_bitflips, ret);
1547                 ops->retlen += adjops.retlen;
1548                 ops->oobretlen += adjops.oobretlen;
1549                 adjops.datbuf += adjops.retlen;
1550                 adjops.oobbuf += adjops.oobretlen;
1551                 adjops.ooboffs = 0;
1552                 pageofs = 0;
1553                 info.pair++;
1554         }
1555
1556         return max_bitflips;
1557 }
1558
1559 int mtd_read_oob(struct mtd_info *mtd, loff_t from, struct mtd_oob_ops *ops)
1560 {
1561         struct mtd_info *master = mtd_get_master(mtd);
1562         struct mtd_ecc_stats old_stats = master->ecc_stats;
1563         int ret_code;
1564
1565         ops->retlen = ops->oobretlen = 0;
1566
1567         ret_code = mtd_check_oob_ops(mtd, from, ops);
1568         if (ret_code)
1569                 return ret_code;
1570
1571         ledtrig_mtd_activity();
1572
1573         /* Check the validity of a potential fallback on mtd->_read */
1574         if (!master->_read_oob && (!master->_read || ops->oobbuf))
1575                 return -EOPNOTSUPP;
1576
1577         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION)
1578                 ret_code = mtd_io_emulated_slc(mtd, from, true, ops);
1579         else
1580                 ret_code = mtd_read_oob_std(mtd, from, ops);
1581
1582         mtd_update_ecc_stats(mtd, master, &old_stats);
1583
1584         /*
1585          * In cases where ops->datbuf != NULL, mtd->_read_oob() has semantics
1586          * similar to mtd->_read(), returning a non-negative integer
1587          * representing max bitflips. In other cases, mtd->_read_oob() may
1588          * return -EUCLEAN. In all cases, perform similar logic to mtd_read().
1589          */
1590         if (unlikely(ret_code < 0))
1591                 return ret_code;
1592         if (mtd->ecc_strength == 0)
1593                 return 0;       /* device lacks ecc */
1594         return ret_code >= mtd->bitflip_threshold ? -EUCLEAN : 0;
1595 }
1596 EXPORT_SYMBOL_GPL(mtd_read_oob);
1597
1598 int mtd_write_oob(struct mtd_info *mtd, loff_t to,
1599                                 struct mtd_oob_ops *ops)
1600 {
1601         struct mtd_info *master = mtd_get_master(mtd);
1602         int ret;
1603
1604         ops->retlen = ops->oobretlen = 0;
1605
1606         if (!(mtd->flags & MTD_WRITEABLE))
1607                 return -EROFS;
1608
1609         ret = mtd_check_oob_ops(mtd, to, ops);
1610         if (ret)
1611                 return ret;
1612
1613         ledtrig_mtd_activity();
1614
1615         /* Check the validity of a potential fallback on mtd->_write */
1616         if (!master->_write_oob && (!master->_write || ops->oobbuf))
1617                 return -EOPNOTSUPP;
1618
1619         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION)
1620                 return mtd_io_emulated_slc(mtd, to, false, ops);
1621
1622         return mtd_write_oob_std(mtd, to, ops);
1623 }
1624 EXPORT_SYMBOL_GPL(mtd_write_oob);
1625
1626 /**
1627  * mtd_ooblayout_ecc - Get the OOB region definition of a specific ECC section
1628  * @mtd: MTD device structure
1629  * @section: ECC section. Depending on the layout you may have all the ECC
1630  *           bytes stored in a single contiguous section, or one section
1631  *           per ECC chunk (and sometime several sections for a single ECC
1632  *           ECC chunk)
1633  * @oobecc: OOB region struct filled with the appropriate ECC position
1634  *          information
1635  *
1636  * This function returns ECC section information in the OOB area. If you want
1637  * to get all the ECC bytes information, then you should call
1638  * mtd_ooblayout_ecc(mtd, section++, oobecc) until it returns -ERANGE.
1639  *
1640  * Returns zero on success, a negative error code otherwise.
1641  */
1642 int mtd_ooblayout_ecc(struct mtd_info *mtd, int section,
1643                       struct mtd_oob_region *oobecc)
1644 {
1645         struct mtd_info *master = mtd_get_master(mtd);
1646
1647         memset(oobecc, 0, sizeof(*oobecc));
1648
1649         if (!master || section < 0)
1650                 return -EINVAL;
1651
1652         if (!master->ooblayout || !master->ooblayout->ecc)
1653                 return -ENOTSUPP;
1654
1655         return master->ooblayout->ecc(master, section, oobecc);
1656 }
1657 EXPORT_SYMBOL_GPL(mtd_ooblayout_ecc);
1658
1659 /**
1660  * mtd_ooblayout_free - Get the OOB region definition of a specific free
1661  *                      section
1662  * @mtd: MTD device structure
1663  * @section: Free section you are interested in. Depending on the layout
1664  *           you may have all the free bytes stored in a single contiguous
1665  *           section, or one section per ECC chunk plus an extra section
1666  *           for the remaining bytes (or other funky layout).
1667  * @oobfree: OOB region struct filled with the appropriate free position
1668  *           information
1669  *
1670  * This function returns free bytes position in the OOB area. If you want
1671  * to get all the free bytes information, then you should call
1672  * mtd_ooblayout_free(mtd, section++, oobfree) until it returns -ERANGE.
1673  *
1674  * Returns zero on success, a negative error code otherwise.
1675  */
1676 int mtd_ooblayout_free(struct mtd_info *mtd, int section,
1677                        struct mtd_oob_region *oobfree)
1678 {
1679         struct mtd_info *master = mtd_get_master(mtd);
1680
1681         memset(oobfree, 0, sizeof(*oobfree));
1682
1683         if (!master || section < 0)
1684                 return -EINVAL;
1685
1686         if (!master->ooblayout || !master->ooblayout->free)
1687                 return -ENOTSUPP;
1688
1689         return master->ooblayout->free(master, section, oobfree);
1690 }
1691 EXPORT_SYMBOL_GPL(mtd_ooblayout_free);
1692
1693 /**
1694  * mtd_ooblayout_find_region - Find the region attached to a specific byte
1695  * @mtd: mtd info structure
1696  * @byte: the byte we are searching for
1697  * @sectionp: pointer where the section id will be stored
1698  * @oobregion: used to retrieve the ECC position
1699  * @iter: iterator function. Should be either mtd_ooblayout_free or
1700  *        mtd_ooblayout_ecc depending on the region type you're searching for
1701  *
1702  * This function returns the section id and oobregion information of a
1703  * specific byte. For example, say you want to know where the 4th ECC byte is
1704  * stored, you'll use:
1705  *
1706  * mtd_ooblayout_find_region(mtd, 3, &section, &oobregion, mtd_ooblayout_ecc);
1707  *
1708  * Returns zero on success, a negative error code otherwise.
1709  */
1710 static int mtd_ooblayout_find_region(struct mtd_info *mtd, int byte,
1711                                 int *sectionp, struct mtd_oob_region *oobregion,
1712                                 int (*iter)(struct mtd_info *,
1713                                             int section,
1714                                             struct mtd_oob_region *oobregion))
1715 {
1716         int pos = 0, ret, section = 0;
1717
1718         memset(oobregion, 0, sizeof(*oobregion));
1719
1720         while (1) {
1721                 ret = iter(mtd, section, oobregion);
1722                 if (ret)
1723                         return ret;
1724
1725                 if (pos + oobregion->length > byte)
1726                         break;
1727
1728                 pos += oobregion->length;
1729                 section++;
1730         }
1731
1732         /*
1733          * Adjust region info to make it start at the beginning at the
1734          * 'start' ECC byte.
1735          */
1736         oobregion->offset += byte - pos;
1737         oobregion->length -= byte - pos;
1738         *sectionp = section;
1739
1740         return 0;
1741 }
1742
1743 /**
1744  * mtd_ooblayout_find_eccregion - Find the ECC region attached to a specific
1745  *                                ECC byte
1746  * @mtd: mtd info structure
1747  * @eccbyte: the byte we are searching for
1748  * @section: pointer where the section id will be stored
1749  * @oobregion: OOB region information
1750  *
1751  * Works like mtd_ooblayout_find_region() except it searches for a specific ECC
1752  * byte.
1753  *
1754  * Returns zero on success, a negative error code otherwise.
1755  */
1756 int mtd_ooblayout_find_eccregion(struct mtd_info *mtd, int eccbyte,
1757                                  int *section,
1758                                  struct mtd_oob_region *oobregion)
1759 {
1760         return mtd_ooblayout_find_region(mtd, eccbyte, section, oobregion,
1761                                          mtd_ooblayout_ecc);
1762 }
1763 EXPORT_SYMBOL_GPL(mtd_ooblayout_find_eccregion);
1764
1765 /**
1766  * mtd_ooblayout_get_bytes - Extract OOB bytes from the oob buffer
1767  * @mtd: mtd info structure
1768  * @buf: destination buffer to store OOB bytes
1769  * @oobbuf: OOB buffer
1770  * @start: first byte to retrieve
1771  * @nbytes: number of bytes to retrieve
1772  * @iter: section iterator
1773  *
1774  * Extract bytes attached to a specific category (ECC or free)
1775  * from the OOB buffer and copy them into buf.
1776  *
1777  * Returns zero on success, a negative error code otherwise.
1778  */
1779 static int mtd_ooblayout_get_bytes(struct mtd_info *mtd, u8 *buf,
1780                                 const u8 *oobbuf, int start, int nbytes,
1781                                 int (*iter)(struct mtd_info *,
1782                                             int section,
1783                                             struct mtd_oob_region *oobregion))
1784 {
1785         struct mtd_oob_region oobregion;
1786         int section, ret;
1787
1788         ret = mtd_ooblayout_find_region(mtd, start, &section,
1789                                         &oobregion, iter);
1790
1791         while (!ret) {
1792                 int cnt;
1793
1794                 cnt = min_t(int, nbytes, oobregion.length);
1795                 memcpy(buf, oobbuf + oobregion.offset, cnt);
1796                 buf += cnt;
1797                 nbytes -= cnt;
1798
1799                 if (!nbytes)
1800                         break;
1801
1802                 ret = iter(mtd, ++section, &oobregion);
1803         }
1804
1805         return ret;
1806 }
1807
1808 /**
1809  * mtd_ooblayout_set_bytes - put OOB bytes into the oob buffer
1810  * @mtd: mtd info structure
1811  * @buf: source buffer to get OOB bytes from
1812  * @oobbuf: OOB buffer
1813  * @start: first OOB byte to set
1814  * @nbytes: number of OOB bytes to set
1815  * @iter: section iterator
1816  *
1817  * Fill the OOB buffer with data provided in buf. The category (ECC or free)
1818  * is selected by passing the appropriate iterator.
1819  *
1820  * Returns zero on success, a negative error code otherwise.
1821  */
1822 static int mtd_ooblayout_set_bytes(struct mtd_info *mtd, const u8 *buf,
1823                                 u8 *oobbuf, int start, int nbytes,
1824                                 int (*iter)(struct mtd_info *,
1825                                             int section,
1826                                             struct mtd_oob_region *oobregion))
1827 {
1828         struct mtd_oob_region oobregion;
1829         int section, ret;
1830
1831         ret = mtd_ooblayout_find_region(mtd, start, &section,
1832                                         &oobregion, iter);
1833
1834         while (!ret) {
1835                 int cnt;
1836
1837                 cnt = min_t(int, nbytes, oobregion.length);
1838                 memcpy(oobbuf + oobregion.offset, buf, cnt);
1839                 buf += cnt;
1840                 nbytes -= cnt;
1841
1842                 if (!nbytes)
1843                         break;
1844
1845                 ret = iter(mtd, ++section, &oobregion);
1846         }
1847
1848         return ret;
1849 }
1850
1851 /**
1852  * mtd_ooblayout_count_bytes - count the number of bytes in a OOB category
1853  * @mtd: mtd info structure
1854  * @iter: category iterator
1855  *
1856  * Count the number of bytes in a given category.
1857  *
1858  * Returns a positive value on success, a negative error code otherwise.
1859  */
1860 static int mtd_ooblayout_count_bytes(struct mtd_info *mtd,
1861                                 int (*iter)(struct mtd_info *,
1862                                             int section,
1863                                             struct mtd_oob_region *oobregion))
1864 {
1865         struct mtd_oob_region oobregion;
1866         int section = 0, ret, nbytes = 0;
1867
1868         while (1) {
1869                 ret = iter(mtd, section++, &oobregion);
1870                 if (ret) {
1871                         if (ret == -ERANGE)
1872                                 ret = nbytes;
1873                         break;
1874                 }
1875
1876                 nbytes += oobregion.length;
1877         }
1878
1879         return ret;
1880 }
1881
1882 /**
1883  * mtd_ooblayout_get_eccbytes - extract ECC bytes from the oob buffer
1884  * @mtd: mtd info structure
1885  * @eccbuf: destination buffer to store ECC bytes
1886  * @oobbuf: OOB buffer
1887  * @start: first ECC byte to retrieve
1888  * @nbytes: number of ECC bytes to retrieve
1889  *
1890  * Works like mtd_ooblayout_get_bytes(), except it acts on ECC bytes.
1891  *
1892  * Returns zero on success, a negative error code otherwise.
1893  */
1894 int mtd_ooblayout_get_eccbytes(struct mtd_info *mtd, u8 *eccbuf,
1895                                const u8 *oobbuf, int start, int nbytes)
1896 {
1897         return mtd_ooblayout_get_bytes(mtd, eccbuf, oobbuf, start, nbytes,
1898                                        mtd_ooblayout_ecc);
1899 }
1900 EXPORT_SYMBOL_GPL(mtd_ooblayout_get_eccbytes);
1901
1902 /**
1903  * mtd_ooblayout_set_eccbytes - set ECC bytes into the oob buffer
1904  * @mtd: mtd info structure
1905  * @eccbuf: source buffer to get ECC bytes from
1906  * @oobbuf: OOB buffer
1907  * @start: first ECC byte to set
1908  * @nbytes: number of ECC bytes to set
1909  *
1910  * Works like mtd_ooblayout_set_bytes(), except it acts on ECC bytes.
1911  *
1912  * Returns zero on success, a negative error code otherwise.
1913  */
1914 int mtd_ooblayout_set_eccbytes(struct mtd_info *mtd, const u8 *eccbuf,
1915                                u8 *oobbuf, int start, int nbytes)
1916 {
1917         return mtd_ooblayout_set_bytes(mtd, eccbuf, oobbuf, start, nbytes,
1918                                        mtd_ooblayout_ecc);
1919 }
1920 EXPORT_SYMBOL_GPL(mtd_ooblayout_set_eccbytes);
1921
1922 /**
1923  * mtd_ooblayout_get_databytes - extract data bytes from the oob buffer
1924  * @mtd: mtd info structure
1925  * @databuf: destination buffer to store ECC bytes
1926  * @oobbuf: OOB buffer
1927  * @start: first ECC byte to retrieve
1928  * @nbytes: number of ECC bytes to retrieve
1929  *
1930  * Works like mtd_ooblayout_get_bytes(), except it acts on free bytes.
1931  *
1932  * Returns zero on success, a negative error code otherwise.
1933  */
1934 int mtd_ooblayout_get_databytes(struct mtd_info *mtd, u8 *databuf,
1935                                 const u8 *oobbuf, int start, int nbytes)
1936 {
1937         return mtd_ooblayout_get_bytes(mtd, databuf, oobbuf, start, nbytes,
1938                                        mtd_ooblayout_free);
1939 }
1940 EXPORT_SYMBOL_GPL(mtd_ooblayout_get_databytes);
1941
1942 /**
1943  * mtd_ooblayout_set_databytes - set data bytes into the oob buffer
1944  * @mtd: mtd info structure
1945  * @databuf: source buffer to get data bytes from
1946  * @oobbuf: OOB buffer
1947  * @start: first ECC byte to set
1948  * @nbytes: number of ECC bytes to set
1949  *
1950  * Works like mtd_ooblayout_set_bytes(), except it acts on free bytes.
1951  *
1952  * Returns zero on success, a negative error code otherwise.
1953  */
1954 int mtd_ooblayout_set_databytes(struct mtd_info *mtd, const u8 *databuf,
1955                                 u8 *oobbuf, int start, int nbytes)
1956 {
1957         return mtd_ooblayout_set_bytes(mtd, databuf, oobbuf, start, nbytes,
1958                                        mtd_ooblayout_free);
1959 }
1960 EXPORT_SYMBOL_GPL(mtd_ooblayout_set_databytes);
1961
1962 /**
1963  * mtd_ooblayout_count_freebytes - count the number of free bytes in OOB
1964  * @mtd: mtd info structure
1965  *
1966  * Works like mtd_ooblayout_count_bytes(), except it count free bytes.
1967  *
1968  * Returns zero on success, a negative error code otherwise.
1969  */
1970 int mtd_ooblayout_count_freebytes(struct mtd_info *mtd)
1971 {
1972         return mtd_ooblayout_count_bytes(mtd, mtd_ooblayout_free);
1973 }
1974 EXPORT_SYMBOL_GPL(mtd_ooblayout_count_freebytes);
1975
1976 /**
1977  * mtd_ooblayout_count_eccbytes - count the number of ECC bytes in OOB
1978  * @mtd: mtd info structure
1979  *
1980  * Works like mtd_ooblayout_count_bytes(), except it count ECC bytes.
1981  *
1982  * Returns zero on success, a negative error code otherwise.
1983  */
1984 int mtd_ooblayout_count_eccbytes(struct mtd_info *mtd)
1985 {
1986         return mtd_ooblayout_count_bytes(mtd, mtd_ooblayout_ecc);
1987 }
1988 EXPORT_SYMBOL_GPL(mtd_ooblayout_count_eccbytes);
1989
1990 /*
1991  * Method to access the protection register area, present in some flash
1992  * devices. The user data is one time programmable but the factory data is read
1993  * only.
1994  */
1995 int mtd_get_fact_prot_info(struct mtd_info *mtd, size_t len, size_t *retlen,
1996                            struct otp_info *buf)
1997 {
1998         struct mtd_info *master = mtd_get_master(mtd);
1999
2000         if (!master->_get_fact_prot_info)
2001                 return -EOPNOTSUPP;
2002         if (!len)
2003                 return 0;
2004         return master->_get_fact_prot_info(master, len, retlen, buf);
2005 }
2006 EXPORT_SYMBOL_GPL(mtd_get_fact_prot_info);
2007
2008 int mtd_read_fact_prot_reg(struct mtd_info *mtd, loff_t from, size_t len,
2009                            size_t *retlen, u_char *buf)
2010 {
2011         struct mtd_info *master = mtd_get_master(mtd);
2012
2013         *retlen = 0;
2014         if (!master->_read_fact_prot_reg)
2015                 return -EOPNOTSUPP;
2016         if (!len)
2017                 return 0;
2018         return master->_read_fact_prot_reg(master, from, len, retlen, buf);
2019 }
2020 EXPORT_SYMBOL_GPL(mtd_read_fact_prot_reg);
2021
2022 int mtd_get_user_prot_info(struct mtd_info *mtd, size_t len, size_t *retlen,
2023                            struct otp_info *buf)
2024 {
2025         struct mtd_info *master = mtd_get_master(mtd);
2026
2027         if (!master->_get_user_prot_info)
2028                 return -EOPNOTSUPP;
2029         if (!len)
2030                 return 0;
2031         return master->_get_user_prot_info(master, len, retlen, buf);
2032 }
2033 EXPORT_SYMBOL_GPL(mtd_get_user_prot_info);
2034
2035 int mtd_read_user_prot_reg(struct mtd_info *mtd, loff_t from, size_t len,
2036                            size_t *retlen, u_char *buf)
2037 {
2038         struct mtd_info *master = mtd_get_master(mtd);
2039
2040         *retlen = 0;
2041         if (!master->_read_user_prot_reg)
2042                 return -EOPNOTSUPP;
2043         if (!len)
2044                 return 0;
2045         return master->_read_user_prot_reg(master, from, len, retlen, buf);
2046 }
2047 EXPORT_SYMBOL_GPL(mtd_read_user_prot_reg);
2048
2049 int mtd_write_user_prot_reg(struct mtd_info *mtd, loff_t to, size_t len,
2050                             size_t *retlen, const u_char *buf)
2051 {
2052         struct mtd_info *master = mtd_get_master(mtd);
2053         int ret;
2054
2055         *retlen = 0;
2056         if (!master->_write_user_prot_reg)
2057                 return -EOPNOTSUPP;
2058         if (!len)
2059                 return 0;
2060         ret = master->_write_user_prot_reg(master, to, len, retlen, buf);
2061         if (ret)
2062                 return ret;
2063
2064         /*
2065          * If no data could be written at all, we are out of memory and
2066          * must return -ENOSPC.
2067          */
2068         return (*retlen) ? 0 : -ENOSPC;
2069 }
2070 EXPORT_SYMBOL_GPL(mtd_write_user_prot_reg);
2071
2072 int mtd_lock_user_prot_reg(struct mtd_info *mtd, loff_t from, size_t len)
2073 {
2074         struct mtd_info *master = mtd_get_master(mtd);
2075
2076         if (!master->_lock_user_prot_reg)
2077                 return -EOPNOTSUPP;
2078         if (!len)
2079                 return 0;
2080         return master->_lock_user_prot_reg(master, from, len);
2081 }
2082 EXPORT_SYMBOL_GPL(mtd_lock_user_prot_reg);
2083
2084 int mtd_erase_user_prot_reg(struct mtd_info *mtd, loff_t from, size_t len)
2085 {
2086         struct mtd_info *master = mtd_get_master(mtd);
2087
2088         if (!master->_erase_user_prot_reg)
2089                 return -EOPNOTSUPP;
2090         if (!len)
2091                 return 0;
2092         return master->_erase_user_prot_reg(master, from, len);
2093 }
2094 EXPORT_SYMBOL_GPL(mtd_erase_user_prot_reg);
2095
2096 /* Chip-supported device locking */
2097 int mtd_lock(struct mtd_info *mtd, loff_t ofs, uint64_t len)
2098 {
2099         struct mtd_info *master = mtd_get_master(mtd);
2100
2101         if (!master->_lock)
2102                 return -EOPNOTSUPP;
2103         if (ofs < 0 || ofs >= mtd->size || len > mtd->size - ofs)
2104                 return -EINVAL;
2105         if (!len)
2106                 return 0;
2107
2108         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION) {
2109                 ofs = (loff_t)mtd_div_by_eb(ofs, mtd) * master->erasesize;
2110                 len = (u64)mtd_div_by_eb(len, mtd) * master->erasesize;
2111         }
2112
2113         return master->_lock(master, mtd_get_master_ofs(mtd, ofs), len);
2114 }
2115 EXPORT_SYMBOL_GPL(mtd_lock);
2116
2117 int mtd_unlock(struct mtd_info *mtd, loff_t ofs, uint64_t len)
2118 {
2119         struct mtd_info *master = mtd_get_master(mtd);
2120
2121         if (!master->_unlock)
2122                 return -EOPNOTSUPP;
2123         if (ofs < 0 || ofs >= mtd->size || len > mtd->size - ofs)
2124                 return -EINVAL;
2125         if (!len)
2126                 return 0;
2127
2128         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION) {
2129                 ofs = (loff_t)mtd_div_by_eb(ofs, mtd) * master->erasesize;
2130                 len = (u64)mtd_div_by_eb(len, mtd) * master->erasesize;
2131         }
2132
2133         return master->_unlock(master, mtd_get_master_ofs(mtd, ofs), len);
2134 }
2135 EXPORT_SYMBOL_GPL(mtd_unlock);
2136
2137 int mtd_is_locked(struct mtd_info *mtd, loff_t ofs, uint64_t len)
2138 {
2139         struct mtd_info *master = mtd_get_master(mtd);
2140
2141         if (!master->_is_locked)
2142                 return -EOPNOTSUPP;
2143         if (ofs < 0 || ofs >= mtd->size || len > mtd->size - ofs)
2144                 return -EINVAL;
2145         if (!len)
2146                 return 0;
2147
2148         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION) {
2149                 ofs = (loff_t)mtd_div_by_eb(ofs, mtd) * master->erasesize;
2150                 len = (u64)mtd_div_by_eb(len, mtd) * master->erasesize;
2151         }
2152
2153         return master->_is_locked(master, mtd_get_master_ofs(mtd, ofs), len);
2154 }
2155 EXPORT_SYMBOL_GPL(mtd_is_locked);
2156
2157 int mtd_block_isreserved(struct mtd_info *mtd, loff_t ofs)
2158 {
2159         struct mtd_info *master = mtd_get_master(mtd);
2160
2161         if (ofs < 0 || ofs >= mtd->size)
2162                 return -EINVAL;
2163         if (!master->_block_isreserved)
2164                 return 0;
2165
2166         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION)
2167                 ofs = (loff_t)mtd_div_by_eb(ofs, mtd) * master->erasesize;
2168
2169         return master->_block_isreserved(master, mtd_get_master_ofs(mtd, ofs));
2170 }
2171 EXPORT_SYMBOL_GPL(mtd_block_isreserved);
2172
2173 int mtd_block_isbad(struct mtd_info *mtd, loff_t ofs)
2174 {
2175         struct mtd_info *master = mtd_get_master(mtd);
2176
2177         if (ofs < 0 || ofs >= mtd->size)
2178                 return -EINVAL;
2179         if (!master->_block_isbad)
2180                 return 0;
2181
2182         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION)
2183                 ofs = (loff_t)mtd_div_by_eb(ofs, mtd) * master->erasesize;
2184
2185         return master->_block_isbad(master, mtd_get_master_ofs(mtd, ofs));
2186 }
2187 EXPORT_SYMBOL_GPL(mtd_block_isbad);
2188
2189 int mtd_block_markbad(struct mtd_info *mtd, loff_t ofs)
2190 {
2191         struct mtd_info *master = mtd_get_master(mtd);
2192         int ret;
2193
2194         if (!master->_block_markbad)
2195                 return -EOPNOTSUPP;
2196         if (ofs < 0 || ofs >= mtd->size)
2197                 return -EINVAL;
2198         if (!(mtd->flags & MTD_WRITEABLE))
2199                 return -EROFS;
2200
2201         if (mtd->flags & MTD_SLC_ON_MLC_EMULATION)
2202                 ofs = (loff_t)mtd_div_by_eb(ofs, mtd) * master->erasesize;
2203
2204         ret = master->_block_markbad(master, mtd_get_master_ofs(mtd, ofs));
2205         if (ret)
2206                 return ret;
2207
2208         while (mtd->parent) {
2209                 mtd->ecc_stats.badblocks++;
2210                 mtd = mtd->parent;
2211         }
2212
2213         return 0;
2214 }
2215 EXPORT_SYMBOL_GPL(mtd_block_markbad);
2216
2217 /*
2218  * default_mtd_writev - the default writev method
2219  * @mtd: mtd device description object pointer
2220  * @vecs: the vectors to write
2221  * @count: count of vectors in @vecs
2222  * @to: the MTD device offset to write to
2223  * @retlen: on exit contains the count of bytes written to the MTD device.
2224  *
2225  * This function returns zero in case of success and a negative error code in
2226  * case of failure.
2227  */
2228 static int default_mtd_writev(struct mtd_info *mtd, const struct kvec *vecs,
2229                               unsigned long count, loff_t to, size_t *retlen)
2230 {
2231         unsigned long i;
2232         size_t totlen = 0, thislen;
2233         int ret = 0;
2234
2235         for (i = 0; i < count; i++) {
2236                 if (!vecs[i].iov_len)
2237                         continue;
2238                 ret = mtd_write(mtd, to, vecs[i].iov_len, &thislen,
2239                                 vecs[i].iov_base);
2240                 totlen += thislen;
2241                 if (ret || thislen != vecs[i].iov_len)
2242                         break;
2243                 to += vecs[i].iov_len;
2244         }
2245         *retlen = totlen;
2246         return ret;
2247 }
2248
2249 /*
2250  * mtd_writev - the vector-based MTD write method
2251  * @mtd: mtd device description object pointer
2252  * @vecs: the vectors to write
2253  * @count: count of vectors in @vecs
2254  * @to: the MTD device offset to write to
2255  * @retlen: on exit contains the count of bytes written to the MTD device.
2256  *
2257  * This function returns zero in case of success and a negative error code in
2258  * case of failure.
2259  */
2260 int mtd_writev(struct mtd_info *mtd, const struct kvec *vecs,
2261                unsigned long count, loff_t to, size_t *retlen)
2262 {
2263         struct mtd_info *master = mtd_get_master(mtd);
2264
2265         *retlen = 0;
2266         if (!(mtd->flags & MTD_WRITEABLE))
2267                 return -EROFS;
2268
2269         if (!master->_writev)
2270                 return default_mtd_writev(mtd, vecs, count, to, retlen);
2271
2272         return master->_writev(master, vecs, count,
2273                                mtd_get_master_ofs(mtd, to), retlen);
2274 }
2275 EXPORT_SYMBOL_GPL(mtd_writev);
2276
2277 /**
2278  * mtd_kmalloc_up_to - allocate a contiguous buffer up to the specified size
2279  * @mtd: mtd device description object pointer
2280  * @size: a pointer to the ideal or maximum size of the allocation, points
2281  *        to the actual allocation size on success.
2282  *
2283  * This routine attempts to allocate a contiguous kernel buffer up to
2284  * the specified size, backing off the size of the request exponentially
2285  * until the request succeeds or until the allocation size falls below
2286  * the system page size. This attempts to make sure it does not adversely
2287  * impact system performance, so when allocating more than one page, we
2288  * ask the memory allocator to avoid re-trying, swapping, writing back
2289  * or performing I/O.
2290  *
2291  * Note, this function also makes sure that the allocated buffer is aligned to
2292  * the MTD device's min. I/O unit, i.e. the "mtd->writesize" value.
2293  *
2294  * This is called, for example by mtd_{read,write} and jffs2_scan_medium,
2295  * to handle smaller (i.e. degraded) buffer allocations under low- or
2296  * fragmented-memory situations where such reduced allocations, from a
2297  * requested ideal, are allowed.
2298  *
2299  * Returns a pointer to the allocated buffer on success; otherwise, NULL.
2300  */
2301 void *mtd_kmalloc_up_to(const struct mtd_info *mtd, size_t *size)
2302 {
2303         gfp_t flags = __GFP_NOWARN | __GFP_DIRECT_RECLAIM | __GFP_NORETRY;
2304         size_t min_alloc = max_t(size_t, mtd->writesize, PAGE_SIZE);
2305         void *kbuf;
2306
2307         *size = min_t(size_t, *size, KMALLOC_MAX_SIZE);
2308
2309         while (*size > min_alloc) {
2310                 kbuf = kmalloc(*size, flags);
2311                 if (kbuf)
2312                         return kbuf;
2313
2314                 *size >>= 1;
2315                 *size = ALIGN(*size, mtd->writesize);
2316         }
2317
2318         /*
2319          * For the last resort allocation allow 'kmalloc()' to do all sorts of
2320          * things (write-back, dropping caches, etc) by using GFP_KERNEL.
2321          */
2322         return kmalloc(*size, GFP_KERNEL);
2323 }
2324 EXPORT_SYMBOL_GPL(mtd_kmalloc_up_to);
2325
2326 #ifdef CONFIG_PROC_FS
2327
2328 /*====================================================================*/
2329 /* Support for /proc/mtd */
2330
2331 static int mtd_proc_show(struct seq_file *m, void *v)
2332 {
2333         struct mtd_info *mtd;
2334
2335         seq_puts(m, "dev:    size   erasesize  name\n");
2336         mutex_lock(&mtd_table_mutex);
2337         mtd_for_each_device(mtd) {
2338                 seq_printf(m, "mtd%d: %8.8llx %8.8x \"%s\"\n",
2339                            mtd->index, (unsigned long long)mtd->size,
2340                            mtd->erasesize, mtd->name);
2341         }
2342         mutex_unlock(&mtd_table_mutex);
2343         return 0;
2344 }
2345 #endif /* CONFIG_PROC_FS */
2346
2347 /*====================================================================*/
2348 /* Init code */
2349
2350 static struct backing_dev_info * __init mtd_bdi_init(const char *name)
2351 {
2352         struct backing_dev_info *bdi;
2353         int ret;
2354
2355         bdi = bdi_alloc(NUMA_NO_NODE);
2356         if (!bdi)
2357                 return ERR_PTR(-ENOMEM);
2358         bdi->ra_pages = 0;
2359         bdi->io_pages = 0;
2360
2361         /*
2362          * We put '-0' suffix to the name to get the same name format as we
2363          * used to get. Since this is called only once, we get a unique name. 
2364          */
2365         ret = bdi_register(bdi, "%.28s-0", name);
2366         if (ret)
2367                 bdi_put(bdi);
2368
2369         return ret ? ERR_PTR(ret) : bdi;
2370 }
2371
2372 static struct proc_dir_entry *proc_mtd;
2373
2374 static int __init init_mtd(void)
2375 {
2376         int ret;
2377
2378         ret = class_register(&mtd_class);
2379         if (ret)
2380                 goto err_reg;
2381
2382         mtd_bdi = mtd_bdi_init("mtd");
2383         if (IS_ERR(mtd_bdi)) {
2384                 ret = PTR_ERR(mtd_bdi);
2385                 goto err_bdi;
2386         }
2387
2388         proc_mtd = proc_create_single("mtd", 0, NULL, mtd_proc_show);
2389
2390         ret = init_mtdchar();
2391         if (ret)
2392                 goto out_procfs;
2393
2394         dfs_dir_mtd = debugfs_create_dir("mtd", NULL);
2395
2396         return 0;
2397
2398 out_procfs:
2399         if (proc_mtd)
2400                 remove_proc_entry("mtd", NULL);
2401         bdi_put(mtd_bdi);
2402 err_bdi:
2403         class_unregister(&mtd_class);
2404 err_reg:
2405         pr_err("Error registering mtd class or bdi: %d\n", ret);
2406         return ret;
2407 }
2408
2409 static void __exit cleanup_mtd(void)
2410 {
2411         debugfs_remove_recursive(dfs_dir_mtd);
2412         cleanup_mtdchar();
2413         if (proc_mtd)
2414                 remove_proc_entry("mtd", NULL);
2415         class_unregister(&mtd_class);
2416         bdi_put(mtd_bdi);
2417         idr_destroy(&mtd_idr);
2418 }
2419
2420 module_init(init_mtd);
2421 module_exit(cleanup_mtd);
2422
2423 MODULE_LICENSE("GPL");
2424 MODULE_AUTHOR("David Woodhouse <dwmw2@infradead.org>");
2425 MODULE_DESCRIPTION("Core MTD registration and access routines");