btrfs-progs: README: update links, enhance contribution section
[platform/upstream/btrfs-progs.git] / file-item.c
1 /*
2  * Copyright (C) 2007 Oracle.  All rights reserved.
3  *
4  * This program is free software; you can redistribute it and/or
5  * modify it under the terms of the GNU General Public
6  * License v2 as published by the Free Software Foundation.
7  *
8  * This program is distributed in the hope that it will be useful,
9  * but WITHOUT ANY WARRANTY; without even the implied warranty of
10  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
11  * General Public License for more details.
12  *
13  * You should have received a copy of the GNU General Public
14  * License along with this program; if not, write to the
15  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
16  * Boston, MA 021110-1307, USA.
17  */
18
19 #include <stdio.h>
20 #include <stdlib.h>
21 #include "kerncompat.h"
22 #include "radix-tree.h"
23 #include "ctree.h"
24 #include "disk-io.h"
25 #include "transaction.h"
26 #include "print-tree.h"
27 #include "crc32c.h"
28 #include "internal.h"
29
30 #define MAX_CSUM_ITEMS(r,size) ((((BTRFS_LEAF_DATA_SIZE(r) - \
31                                sizeof(struct btrfs_item) * 2) / \
32                                size) - 1))
33 int btrfs_insert_file_extent(struct btrfs_trans_handle *trans,
34                              struct btrfs_root *root,
35                              u64 objectid, u64 pos, u64 offset,
36                              u64 disk_num_bytes, u64 num_bytes)
37 {
38         int ret = 0;
39         int is_hole = 0;
40         struct btrfs_file_extent_item *item;
41         struct btrfs_key file_key;
42         struct btrfs_path *path;
43         struct extent_buffer *leaf;
44
45         if (offset == 0)
46                 is_hole = 1;
47         /* For NO_HOLES, we don't insert hole file extent */
48         if (btrfs_fs_incompat(root->fs_info, NO_HOLES) && is_hole)
49                 return 0;
50
51         /* For hole, its disk_bytenr and disk_num_bytes must be 0 */
52         if (is_hole)
53                 disk_num_bytes = 0;
54
55         path = btrfs_alloc_path();
56         if (!path)
57                 return -ENOMEM;
58
59         file_key.objectid = objectid;
60         file_key.offset = pos;
61         file_key.type = BTRFS_EXTENT_DATA_KEY;
62
63         ret = btrfs_insert_empty_item(trans, root, path, &file_key,
64                                       sizeof(*item));
65         if (ret < 0)
66                 goto out;
67         BUG_ON(ret);
68         leaf = path->nodes[0];
69         item = btrfs_item_ptr(leaf, path->slots[0],
70                               struct btrfs_file_extent_item);
71         btrfs_set_file_extent_disk_bytenr(leaf, item, offset);
72         btrfs_set_file_extent_disk_num_bytes(leaf, item, disk_num_bytes);
73         btrfs_set_file_extent_offset(leaf, item, 0);
74         btrfs_set_file_extent_num_bytes(leaf, item, num_bytes);
75         btrfs_set_file_extent_ram_bytes(leaf, item, num_bytes);
76         btrfs_set_file_extent_generation(leaf, item, trans->transid);
77         btrfs_set_file_extent_type(leaf, item, BTRFS_FILE_EXTENT_REG);
78         btrfs_set_file_extent_compression(leaf, item, 0);
79         btrfs_set_file_extent_encryption(leaf, item, 0);
80         btrfs_set_file_extent_other_encoding(leaf, item, 0);
81         btrfs_mark_buffer_dirty(leaf);
82 out:
83         btrfs_free_path(path);
84         return ret;
85 }
86
87 int btrfs_insert_inline_extent(struct btrfs_trans_handle *trans,
88                                struct btrfs_root *root, u64 objectid,
89                                u64 offset, const char *buffer, size_t size)
90 {
91         struct btrfs_key key;
92         struct btrfs_path *path;
93         struct extent_buffer *leaf;
94         unsigned long ptr;
95         struct btrfs_file_extent_item *ei;
96         u32 datasize;
97         int err = 0;
98         int ret;
99
100         path = btrfs_alloc_path();
101         if (!path)
102                 return -ENOMEM;
103
104         key.objectid = objectid;
105         key.offset = offset;
106         key.type = BTRFS_EXTENT_DATA_KEY;
107
108         datasize = btrfs_file_extent_calc_inline_size(size);
109         ret = btrfs_insert_empty_item(trans, root, path, &key, datasize);
110         if (ret) {
111                 err = ret;
112                 goto fail;
113         }
114
115         leaf = path->nodes[0];
116         ei = btrfs_item_ptr(leaf, path->slots[0],
117                             struct btrfs_file_extent_item);
118         btrfs_set_file_extent_generation(leaf, ei, trans->transid);
119         btrfs_set_file_extent_type(leaf, ei, BTRFS_FILE_EXTENT_INLINE);
120         btrfs_set_file_extent_ram_bytes(leaf, ei, size);
121         btrfs_set_file_extent_compression(leaf, ei, 0);
122         btrfs_set_file_extent_encryption(leaf, ei, 0);
123         btrfs_set_file_extent_other_encoding(leaf, ei, 0);
124
125         ptr = btrfs_file_extent_inline_start(ei) + offset - key.offset;
126         write_extent_buffer(leaf, buffer, ptr, size);
127         btrfs_mark_buffer_dirty(leaf);
128 fail:
129         btrfs_free_path(path);
130         return err;
131 }
132
133 static struct btrfs_csum_item *
134 btrfs_lookup_csum(struct btrfs_trans_handle *trans,
135                   struct btrfs_root *root,
136                   struct btrfs_path *path,
137                   u64 bytenr, int cow)
138 {
139         int ret;
140         struct btrfs_key file_key;
141         struct btrfs_key found_key;
142         struct btrfs_csum_item *item;
143         struct extent_buffer *leaf;
144         u64 csum_offset = 0;
145         u16 csum_size =
146                 btrfs_super_csum_size(root->fs_info->super_copy);
147         int csums_in_item;
148
149         file_key.objectid = BTRFS_EXTENT_CSUM_OBJECTID;
150         file_key.offset = bytenr;
151         file_key.type = BTRFS_EXTENT_CSUM_KEY;
152         ret = btrfs_search_slot(trans, root, &file_key, path, 0, cow);
153         if (ret < 0)
154                 goto fail;
155         leaf = path->nodes[0];
156         if (ret > 0) {
157                 ret = 1;
158                 if (path->slots[0] == 0)
159                         goto fail;
160                 path->slots[0]--;
161                 btrfs_item_key_to_cpu(leaf, &found_key, path->slots[0]);
162                 if (found_key.type != BTRFS_EXTENT_CSUM_KEY)
163                         goto fail;
164
165                 csum_offset = (bytenr - found_key.offset) /
166                                 root->fs_info->sectorsize;
167                 csums_in_item = btrfs_item_size_nr(leaf, path->slots[0]);
168                 csums_in_item /= csum_size;
169
170                 if (csum_offset >= csums_in_item) {
171                         ret = -EFBIG;
172                         goto fail;
173                 }
174         }
175         item = btrfs_item_ptr(leaf, path->slots[0], struct btrfs_csum_item);
176         item = (struct btrfs_csum_item *)((unsigned char *)item +
177                                           csum_offset * csum_size);
178         return item;
179 fail:
180         if (ret > 0)
181                 ret = -ENOENT;
182         return ERR_PTR(ret);
183 }
184
185 int btrfs_csum_file_block(struct btrfs_trans_handle *trans,
186                           struct btrfs_root *root, u64 alloc_end,
187                           u64 bytenr, char *data, size_t len)
188 {
189         int ret = 0;
190         struct btrfs_key file_key;
191         struct btrfs_key found_key;
192         u64 next_offset = (u64)-1;
193         int found_next = 0;
194         struct btrfs_path *path;
195         struct btrfs_csum_item *item;
196         struct extent_buffer *leaf = NULL;
197         u64 csum_offset;
198         u32 csum_result = ~(u32)0;
199         u32 sectorsize = root->fs_info->sectorsize;
200         u32 nritems;
201         u32 ins_size;
202         u16 csum_size =
203                 btrfs_super_csum_size(root->fs_info->super_copy);
204
205         path = btrfs_alloc_path();
206         if (!path)
207                 return -ENOMEM;
208
209         file_key.objectid = BTRFS_EXTENT_CSUM_OBJECTID;
210         file_key.offset = bytenr;
211         file_key.type = BTRFS_EXTENT_CSUM_KEY;
212
213         item = btrfs_lookup_csum(trans, root, path, bytenr, 1);
214         if (!IS_ERR(item)) {
215                 leaf = path->nodes[0];
216                 ret = 0;
217                 goto found;
218         }
219         ret = PTR_ERR(item);
220         if (ret == -EFBIG) {
221                 u32 item_size;
222                 /* we found one, but it isn't big enough yet */
223                 leaf = path->nodes[0];
224                 item_size = btrfs_item_size_nr(leaf, path->slots[0]);
225                 if ((item_size / csum_size) >= MAX_CSUM_ITEMS(root, csum_size)) {
226                         /* already at max size, make a new one */
227                         goto insert;
228                 }
229         } else {
230                 int slot = path->slots[0] + 1;
231                 /* we didn't find a csum item, insert one */
232                 nritems = btrfs_header_nritems(path->nodes[0]);
233                 if (path->slots[0] >= nritems - 1) {
234                         ret = btrfs_next_leaf(root, path);
235                         if (ret == 1)
236                                 found_next = 1;
237                         if (ret != 0)
238                                 goto insert;
239                         slot = 0;
240                 }
241                 btrfs_item_key_to_cpu(path->nodes[0], &found_key, slot);
242                 if (found_key.objectid != BTRFS_EXTENT_CSUM_OBJECTID ||
243                     found_key.type != BTRFS_EXTENT_CSUM_KEY) {
244                         found_next = 1;
245                         goto insert;
246                 }
247                 next_offset = found_key.offset;
248                 found_next = 1;
249                 goto insert;
250         }
251
252         /*
253          * at this point, we know the tree has an item, but it isn't big
254          * enough yet to put our csum in.  Grow it
255          */
256         btrfs_release_path(path);
257         ret = btrfs_search_slot(trans, root, &file_key, path,
258                                 csum_size, 1);
259         if (ret < 0)
260                 goto fail;
261         if (ret == 0) {
262                 BUG();
263         }
264         if (path->slots[0] == 0) {
265                 goto insert;
266         }
267         path->slots[0]--;
268         leaf = path->nodes[0];
269         btrfs_item_key_to_cpu(leaf, &found_key, path->slots[0]);
270         csum_offset = (file_key.offset - found_key.offset) / sectorsize;
271         if (found_key.objectid != BTRFS_EXTENT_CSUM_OBJECTID ||
272             found_key.type != BTRFS_EXTENT_CSUM_KEY ||
273             csum_offset >= MAX_CSUM_ITEMS(root, csum_size)) {
274                 goto insert;
275         }
276         if (csum_offset >= btrfs_item_size_nr(leaf, path->slots[0]) /
277             csum_size) {
278                 u32 diff = (csum_offset + 1) * csum_size;
279                 diff = diff - btrfs_item_size_nr(leaf, path->slots[0]);
280                 if (diff != csum_size)
281                         goto insert;
282                 ret = btrfs_extend_item(root, path, diff);
283                 BUG_ON(ret);
284                 goto csum;
285         }
286
287 insert:
288         btrfs_release_path(path);
289         csum_offset = 0;
290         if (found_next) {
291                 u64 tmp = min(alloc_end, next_offset);
292                 tmp -= file_key.offset;
293                 tmp /= sectorsize;
294                 tmp = max((u64)1, tmp);
295                 tmp = min(tmp, (u64)MAX_CSUM_ITEMS(root, csum_size));
296                 ins_size = csum_size * tmp;
297         } else {
298                 ins_size = csum_size;
299         }
300         ret = btrfs_insert_empty_item(trans, root, path, &file_key,
301                                       ins_size);
302         if (ret < 0)
303                 goto fail;
304         if (ret != 0) {
305                 WARN_ON(1);
306                 goto fail;
307         }
308 csum:
309         leaf = path->nodes[0];
310         item = btrfs_item_ptr(leaf, path->slots[0], struct btrfs_csum_item);
311         ret = 0;
312         item = (struct btrfs_csum_item *)((unsigned char *)item +
313                                           csum_offset * csum_size);
314 found:
315         csum_result = btrfs_csum_data(data, csum_result, len);
316         btrfs_csum_final(csum_result, (u8 *)&csum_result);
317         if (csum_result == 0) {
318                 printk("csum result is 0 for block %llu\n",
319                        (unsigned long long)bytenr);
320         }
321
322         write_extent_buffer(leaf, &csum_result, (unsigned long)item,
323                             csum_size);
324         btrfs_mark_buffer_dirty(path->nodes[0]);
325 fail:
326         btrfs_free_path(path);
327         return ret;
328 }
329
330 /*
331  * helper function for csum removal, this expects the
332  * key to describe the csum pointed to by the path, and it expects
333  * the csum to overlap the range [bytenr, len]
334  *
335  * The csum should not be entirely contained in the range and the
336  * range should not be entirely contained in the csum.
337  *
338  * This calls btrfs_truncate_item with the correct args based on the
339  * overlap, and fixes up the key as required.
340  */
341 static noinline int truncate_one_csum(struct btrfs_root *root,
342                                       struct btrfs_path *path,
343                                       struct btrfs_key *key,
344                                       u64 bytenr, u64 len)
345 {
346         struct extent_buffer *leaf;
347         u16 csum_size =
348                 btrfs_super_csum_size(root->fs_info->super_copy);
349         u64 csum_end;
350         u64 end_byte = bytenr + len;
351         u32 blocksize = root->fs_info->sectorsize;
352         int ret;
353
354         leaf = path->nodes[0];
355         csum_end = btrfs_item_size_nr(leaf, path->slots[0]) / csum_size;
356         csum_end *= root->fs_info->sectorsize;
357         csum_end += key->offset;
358
359         if (key->offset < bytenr && csum_end <= end_byte) {
360                 /*
361                  *         [ bytenr - len ]
362                  *         [   ]
363                  *   [csum     ]
364                  *   A simple truncate off the end of the item
365                  */
366                 u32 new_size = (bytenr - key->offset) / blocksize;
367                 new_size *= csum_size;
368                 ret = btrfs_truncate_item(root, path, new_size, 1);
369                 BUG_ON(ret);
370         } else if (key->offset >= bytenr && csum_end > end_byte &&
371                    end_byte > key->offset) {
372                 /*
373                  *         [ bytenr - len ]
374                  *                 [ ]
375                  *                 [csum     ]
376                  * we need to truncate from the beginning of the csum
377                  */
378                 u32 new_size = (csum_end - end_byte) / blocksize;
379                 new_size *= csum_size;
380
381                 ret = btrfs_truncate_item(root, path, new_size, 0);
382                 BUG_ON(ret);
383
384                 key->offset = end_byte;
385                 ret = btrfs_set_item_key_safe(root, path, key);
386                 BUG_ON(ret);
387         } else {
388                 BUG();
389         }
390         return 0;
391 }
392
393 /*
394  * deletes the csum items from the csum tree for a given
395  * range of bytes.
396  */
397 int btrfs_del_csums(struct btrfs_trans_handle *trans,
398                     struct btrfs_root *root, u64 bytenr, u64 len)
399 {
400         struct btrfs_path *path;
401         struct btrfs_key key;
402         u64 end_byte = bytenr + len;
403         u64 csum_end;
404         struct extent_buffer *leaf;
405         int ret;
406         u16 csum_size =
407                 btrfs_super_csum_size(root->fs_info->super_copy);
408         int blocksize = root->fs_info->sectorsize;
409
410         root = root->fs_info->csum_root;
411
412         path = btrfs_alloc_path();
413         if (!path)
414                 return -ENOMEM;
415
416         while (1) {
417                 key.objectid = BTRFS_EXTENT_CSUM_OBJECTID;
418                 key.offset = end_byte - 1;
419                 key.type = BTRFS_EXTENT_CSUM_KEY;
420
421                 ret = btrfs_search_slot(trans, root, &key, path, -1, 1);
422                 if (ret > 0) {
423                         if (path->slots[0] == 0)
424                                 goto out;
425                         path->slots[0]--;
426                 }
427                 leaf = path->nodes[0];
428                 btrfs_item_key_to_cpu(leaf, &key, path->slots[0]);
429
430                 if (key.objectid != BTRFS_EXTENT_CSUM_OBJECTID ||
431                     key.type != BTRFS_EXTENT_CSUM_KEY) {
432                         break;
433                 }
434
435                 if (key.offset >= end_byte)
436                         break;
437
438                 csum_end = btrfs_item_size_nr(leaf, path->slots[0]) / csum_size;
439                 csum_end *= blocksize;
440                 csum_end += key.offset;
441
442                 /* this csum ends before we start, we're done */
443                 if (csum_end <= bytenr)
444                         break;
445
446                 /* delete the entire item, it is inside our range */
447                 if (key.offset >= bytenr && csum_end <= end_byte) {
448                         ret = btrfs_del_item(trans, root, path);
449                         BUG_ON(ret);
450                 } else if (key.offset < bytenr && csum_end > end_byte) {
451                         unsigned long offset;
452                         unsigned long shift_len;
453                         unsigned long item_offset;
454                         /*
455                          *        [ bytenr - len ]
456                          *     [csum                ]
457                          *
458                          * Our bytes are in the middle of the csum,
459                          * we need to split this item and insert a new one.
460                          *
461                          * But we can't drop the path because the
462                          * csum could change, get removed, extended etc.
463                          *
464                          * The trick here is the max size of a csum item leaves
465                          * enough room in the tree block for a single
466                          * item header.  So, we split the item in place,
467                          * adding a new header pointing to the existing
468                          * bytes.  Then we loop around again and we have
469                          * a nicely formed csum item that we can neatly
470                          * truncate.
471                          */
472                         offset = (bytenr - key.offset) / blocksize;
473                         offset *= csum_size;
474
475                         shift_len = (len / blocksize) * csum_size;
476
477                         item_offset = btrfs_item_ptr_offset(leaf,
478                                                             path->slots[0]);
479
480                         memset_extent_buffer(leaf, 0, item_offset + offset,
481                                              shift_len);
482                         key.offset = bytenr;
483
484                         /*
485                          * btrfs_split_item returns -EAGAIN when the
486                          * item changed size or key
487                          */
488                         ret = btrfs_split_item(trans, root, path, &key, offset);
489                         BUG_ON(ret && ret != -EAGAIN);
490
491                         key.offset = end_byte - 1;
492                 } else {
493                         ret = truncate_one_csum(root, path, &key, bytenr, len);
494                         BUG_ON(ret);
495                 }
496                 btrfs_release_path(path);
497         }
498 out:
499         btrfs_free_path(path);
500         return 0;
501 }