Btrfs: close all bdevs on mount failure
[pandora-kernel.git] / fs / btrfs / ctree.h
1 /*
2  * Copyright (C) 2007 Oracle.  All rights reserved.
3  *
4  * This program is free software; you can redistribute it and/or
5  * modify it under the terms of the GNU General Public
6  * License v2 as published by the Free Software Foundation.
7  *
8  * This program is distributed in the hope that it will be useful,
9  * but WITHOUT ANY WARRANTY; without even the implied warranty of
10  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
11  * General Public License for more details.
12  *
13  * You should have received a copy of the GNU General Public
14  * License along with this program; if not, write to the
15  * Free Software Foundation, Inc., 59 Temple Place - Suite 330,
16  * Boston, MA 021110-1307, USA.
17  */
18
19 #ifndef __BTRFS_CTREE__
20 #define __BTRFS_CTREE__
21
22 #include <linux/mm.h>
23 #include <linux/highmem.h>
24 #include <linux/fs.h>
25 #include <linux/rwsem.h>
26 #include <linux/completion.h>
27 #include <linux/backing-dev.h>
28 #include <linux/wait.h>
29 #include <linux/slab.h>
30 #include <linux/kobject.h>
31 #include <trace/events/btrfs.h>
32 #include <asm/kmap_types.h>
33 #include <linux/pagemap.h>
34 #include "extent_io.h"
35 #include "extent_map.h"
36 #include "async-thread.h"
37 #include "ioctl.h"
38
39 struct btrfs_trans_handle;
40 struct btrfs_transaction;
41 struct btrfs_pending_snapshot;
42 extern struct kmem_cache *btrfs_trans_handle_cachep;
43 extern struct kmem_cache *btrfs_transaction_cachep;
44 extern struct kmem_cache *btrfs_bit_radix_cachep;
45 extern struct kmem_cache *btrfs_path_cachep;
46 extern struct kmem_cache *btrfs_free_space_cachep;
47 struct btrfs_ordered_sum;
48
49 #define BTRFS_MAGIC "_BHRfS_M"
50
51 #define BTRFS_MAX_LEVEL 8
52
53 #define BTRFS_COMPAT_EXTENT_TREE_V0
54
55 /*
56  * files bigger than this get some pre-flushing when they are added
57  * to the ordered operations list.  That way we limit the total
58  * work done by the commit
59  */
60 #define BTRFS_ORDERED_OPERATIONS_FLUSH_LIMIT (8 * 1024 * 1024)
61
62 /* holds pointers to all of the tree roots */
63 #define BTRFS_ROOT_TREE_OBJECTID 1ULL
64
65 /* stores information about which extents are in use, and reference counts */
66 #define BTRFS_EXTENT_TREE_OBJECTID 2ULL
67
68 /*
69  * chunk tree stores translations from logical -> physical block numbering
70  * the super block points to the chunk tree
71  */
72 #define BTRFS_CHUNK_TREE_OBJECTID 3ULL
73
74 /*
75  * stores information about which areas of a given device are in use.
76  * one per device.  The tree of tree roots points to the device tree
77  */
78 #define BTRFS_DEV_TREE_OBJECTID 4ULL
79
80 /* one per subvolume, storing files and directories */
81 #define BTRFS_FS_TREE_OBJECTID 5ULL
82
83 /* directory objectid inside the root tree */
84 #define BTRFS_ROOT_TREE_DIR_OBJECTID 6ULL
85
86 /* holds checksums of all the data extents */
87 #define BTRFS_CSUM_TREE_OBJECTID 7ULL
88
89 /* orhpan objectid for tracking unlinked/truncated files */
90 #define BTRFS_ORPHAN_OBJECTID -5ULL
91
92 /* does write ahead logging to speed up fsyncs */
93 #define BTRFS_TREE_LOG_OBJECTID -6ULL
94 #define BTRFS_TREE_LOG_FIXUP_OBJECTID -7ULL
95
96 /* for space balancing */
97 #define BTRFS_TREE_RELOC_OBJECTID -8ULL
98 #define BTRFS_DATA_RELOC_TREE_OBJECTID -9ULL
99
100 /*
101  * extent checksums all have this objectid
102  * this allows them to share the logging tree
103  * for fsyncs
104  */
105 #define BTRFS_EXTENT_CSUM_OBJECTID -10ULL
106
107 /* For storing free space cache */
108 #define BTRFS_FREE_SPACE_OBJECTID -11ULL
109
110 /*
111  * The inode number assigned to the special inode for sotring
112  * free ino cache
113  */
114 #define BTRFS_FREE_INO_OBJECTID -12ULL
115
116 /* dummy objectid represents multiple objectids */
117 #define BTRFS_MULTIPLE_OBJECTIDS -255ULL
118
119 /*
120  * All files have objectids in this range.
121  */
122 #define BTRFS_FIRST_FREE_OBJECTID 256ULL
123 #define BTRFS_LAST_FREE_OBJECTID -256ULL
124 #define BTRFS_FIRST_CHUNK_TREE_OBJECTID 256ULL
125
126
127 /*
128  * the device items go into the chunk tree.  The key is in the form
129  * [ 1 BTRFS_DEV_ITEM_KEY device_id ]
130  */
131 #define BTRFS_DEV_ITEMS_OBJECTID 1ULL
132
133 #define BTRFS_BTREE_INODE_OBJECTID 1
134
135 #define BTRFS_EMPTY_SUBVOL_DIR_OBJECTID 2
136
137 /*
138  * we can actually store much bigger names, but lets not confuse the rest
139  * of linux
140  */
141 #define BTRFS_NAME_LEN 255
142
143 /* 32 bytes in various csum fields */
144 #define BTRFS_CSUM_SIZE 32
145
146 /* csum types */
147 #define BTRFS_CSUM_TYPE_CRC32   0
148
149 static int btrfs_csum_sizes[] = { 4, 0 };
150
151 /* four bytes for CRC32 */
152 #define BTRFS_EMPTY_DIR_SIZE 0
153
154 #define BTRFS_FT_UNKNOWN        0
155 #define BTRFS_FT_REG_FILE       1
156 #define BTRFS_FT_DIR            2
157 #define BTRFS_FT_CHRDEV         3
158 #define BTRFS_FT_BLKDEV         4
159 #define BTRFS_FT_FIFO           5
160 #define BTRFS_FT_SOCK           6
161 #define BTRFS_FT_SYMLINK        7
162 #define BTRFS_FT_XATTR          8
163 #define BTRFS_FT_MAX            9
164
165 /*
166  * The key defines the order in the tree, and so it also defines (optimal)
167  * block layout.
168  *
169  * objectid corresponds to the inode number.
170  *
171  * type tells us things about the object, and is a kind of stream selector.
172  * so for a given inode, keys with type of 1 might refer to the inode data,
173  * type of 2 may point to file data in the btree and type == 3 may point to
174  * extents.
175  *
176  * offset is the starting byte offset for this key in the stream.
177  *
178  * btrfs_disk_key is in disk byte order.  struct btrfs_key is always
179  * in cpu native order.  Otherwise they are identical and their sizes
180  * should be the same (ie both packed)
181  */
182 struct btrfs_disk_key {
183         __le64 objectid;
184         u8 type;
185         __le64 offset;
186 } __attribute__ ((__packed__));
187
188 struct btrfs_key {
189         u64 objectid;
190         u8 type;
191         u64 offset;
192 } __attribute__ ((__packed__));
193
194 struct btrfs_mapping_tree {
195         struct extent_map_tree map_tree;
196 };
197
198 struct btrfs_dev_item {
199         /* the internal btrfs device id */
200         __le64 devid;
201
202         /* size of the device */
203         __le64 total_bytes;
204
205         /* bytes used */
206         __le64 bytes_used;
207
208         /* optimal io alignment for this device */
209         __le32 io_align;
210
211         /* optimal io width for this device */
212         __le32 io_width;
213
214         /* minimal io size for this device */
215         __le32 sector_size;
216
217         /* type and info about this device */
218         __le64 type;
219
220         /* expected generation for this device */
221         __le64 generation;
222
223         /*
224          * starting byte of this partition on the device,
225          * to allow for stripe alignment in the future
226          */
227         __le64 start_offset;
228
229         /* grouping information for allocation decisions */
230         __le32 dev_group;
231
232         /* seek speed 0-100 where 100 is fastest */
233         u8 seek_speed;
234
235         /* bandwidth 0-100 where 100 is fastest */
236         u8 bandwidth;
237
238         /* btrfs generated uuid for this device */
239         u8 uuid[BTRFS_UUID_SIZE];
240
241         /* uuid of FS who owns this device */
242         u8 fsid[BTRFS_UUID_SIZE];
243 } __attribute__ ((__packed__));
244
245 struct btrfs_stripe {
246         __le64 devid;
247         __le64 offset;
248         u8 dev_uuid[BTRFS_UUID_SIZE];
249 } __attribute__ ((__packed__));
250
251 struct btrfs_chunk {
252         /* size of this chunk in bytes */
253         __le64 length;
254
255         /* objectid of the root referencing this chunk */
256         __le64 owner;
257
258         __le64 stripe_len;
259         __le64 type;
260
261         /* optimal io alignment for this chunk */
262         __le32 io_align;
263
264         /* optimal io width for this chunk */
265         __le32 io_width;
266
267         /* minimal io size for this chunk */
268         __le32 sector_size;
269
270         /* 2^16 stripes is quite a lot, a second limit is the size of a single
271          * item in the btree
272          */
273         __le16 num_stripes;
274
275         /* sub stripes only matter for raid10 */
276         __le16 sub_stripes;
277         struct btrfs_stripe stripe;
278         /* additional stripes go here */
279 } __attribute__ ((__packed__));
280
281 #define BTRFS_FREE_SPACE_EXTENT 1
282 #define BTRFS_FREE_SPACE_BITMAP 2
283
284 struct btrfs_free_space_entry {
285         __le64 offset;
286         __le64 bytes;
287         u8 type;
288 } __attribute__ ((__packed__));
289
290 struct btrfs_free_space_header {
291         struct btrfs_disk_key location;
292         __le64 generation;
293         __le64 num_entries;
294         __le64 num_bitmaps;
295 } __attribute__ ((__packed__));
296
297 static inline unsigned long btrfs_chunk_item_size(int num_stripes)
298 {
299         BUG_ON(num_stripes == 0);
300         return sizeof(struct btrfs_chunk) +
301                 sizeof(struct btrfs_stripe) * (num_stripes - 1);
302 }
303
304 #define BTRFS_HEADER_FLAG_WRITTEN       (1ULL << 0)
305 #define BTRFS_HEADER_FLAG_RELOC         (1ULL << 1)
306
307 /*
308  * File system states
309  */
310
311 /* Errors detected */
312 #define BTRFS_SUPER_FLAG_ERROR          (1ULL << 2)
313
314 #define BTRFS_SUPER_FLAG_SEEDING        (1ULL << 32)
315 #define BTRFS_SUPER_FLAG_METADUMP       (1ULL << 33)
316
317 #define BTRFS_BACKREF_REV_MAX           256
318 #define BTRFS_BACKREF_REV_SHIFT         56
319 #define BTRFS_BACKREF_REV_MASK          (((u64)BTRFS_BACKREF_REV_MAX - 1) << \
320                                          BTRFS_BACKREF_REV_SHIFT)
321
322 #define BTRFS_OLD_BACKREF_REV           0
323 #define BTRFS_MIXED_BACKREF_REV         1
324
325 /*
326  * every tree block (leaf or node) starts with this header.
327  */
328 struct btrfs_header {
329         /* these first four must match the super block */
330         u8 csum[BTRFS_CSUM_SIZE];
331         u8 fsid[BTRFS_FSID_SIZE]; /* FS specific uuid */
332         __le64 bytenr; /* which block this node is supposed to live in */
333         __le64 flags;
334
335         /* allowed to be different from the super from here on down */
336         u8 chunk_tree_uuid[BTRFS_UUID_SIZE];
337         __le64 generation;
338         __le64 owner;
339         __le32 nritems;
340         u8 level;
341 } __attribute__ ((__packed__));
342
343 #define BTRFS_NODEPTRS_PER_BLOCK(r) (((r)->nodesize - \
344                                       sizeof(struct btrfs_header)) / \
345                                      sizeof(struct btrfs_key_ptr))
346 #define __BTRFS_LEAF_DATA_SIZE(bs) ((bs) - sizeof(struct btrfs_header))
347 #define BTRFS_LEAF_DATA_SIZE(r) (__BTRFS_LEAF_DATA_SIZE(r->leafsize))
348 #define BTRFS_MAX_INLINE_DATA_SIZE(r) (BTRFS_LEAF_DATA_SIZE(r) - \
349                                         sizeof(struct btrfs_item) - \
350                                         sizeof(struct btrfs_file_extent_item))
351 #define BTRFS_MAX_XATTR_SIZE(r) (BTRFS_LEAF_DATA_SIZE(r) - \
352                                  sizeof(struct btrfs_item) -\
353                                  sizeof(struct btrfs_dir_item))
354
355
356 /*
357  * this is a very generous portion of the super block, giving us
358  * room to translate 14 chunks with 3 stripes each.
359  */
360 #define BTRFS_SYSTEM_CHUNK_ARRAY_SIZE 2048
361 #define BTRFS_LABEL_SIZE 256
362
363 /*
364  * the super block basically lists the main trees of the FS
365  * it currently lacks any block count etc etc
366  */
367 struct btrfs_super_block {
368         u8 csum[BTRFS_CSUM_SIZE];
369         /* the first 4 fields must match struct btrfs_header */
370         u8 fsid[BTRFS_FSID_SIZE];    /* FS specific uuid */
371         __le64 bytenr; /* this block number */
372         __le64 flags;
373
374         /* allowed to be different from the btrfs_header from here own down */
375         __le64 magic;
376         __le64 generation;
377         __le64 root;
378         __le64 chunk_root;
379         __le64 log_root;
380
381         /* this will help find the new super based on the log root */
382         __le64 log_root_transid;
383         __le64 total_bytes;
384         __le64 bytes_used;
385         __le64 root_dir_objectid;
386         __le64 num_devices;
387         __le32 sectorsize;
388         __le32 nodesize;
389         __le32 leafsize;
390         __le32 stripesize;
391         __le32 sys_chunk_array_size;
392         __le64 chunk_root_generation;
393         __le64 compat_flags;
394         __le64 compat_ro_flags;
395         __le64 incompat_flags;
396         __le16 csum_type;
397         u8 root_level;
398         u8 chunk_root_level;
399         u8 log_root_level;
400         struct btrfs_dev_item dev_item;
401
402         char label[BTRFS_LABEL_SIZE];
403
404         __le64 cache_generation;
405
406         /* future expansion */
407         __le64 reserved[31];
408         u8 sys_chunk_array[BTRFS_SYSTEM_CHUNK_ARRAY_SIZE];
409 } __attribute__ ((__packed__));
410
411 /*
412  * Compat flags that we support.  If any incompat flags are set other than the
413  * ones specified below then we will fail to mount
414  */
415 #define BTRFS_FEATURE_INCOMPAT_MIXED_BACKREF    (1ULL << 0)
416 #define BTRFS_FEATURE_INCOMPAT_DEFAULT_SUBVOL   (1ULL << 1)
417 #define BTRFS_FEATURE_INCOMPAT_MIXED_GROUPS     (1ULL << 2)
418 #define BTRFS_FEATURE_INCOMPAT_COMPRESS_LZO     (1ULL << 3)
419
420 #define BTRFS_FEATURE_COMPAT_SUPP               0ULL
421 #define BTRFS_FEATURE_COMPAT_RO_SUPP            0ULL
422 #define BTRFS_FEATURE_INCOMPAT_SUPP                     \
423         (BTRFS_FEATURE_INCOMPAT_MIXED_BACKREF |         \
424          BTRFS_FEATURE_INCOMPAT_DEFAULT_SUBVOL |        \
425          BTRFS_FEATURE_INCOMPAT_MIXED_GROUPS |          \
426          BTRFS_FEATURE_INCOMPAT_COMPRESS_LZO)
427
428 /*
429  * A leaf is full of items. offset and size tell us where to find
430  * the item in the leaf (relative to the start of the data area)
431  */
432 struct btrfs_item {
433         struct btrfs_disk_key key;
434         __le32 offset;
435         __le32 size;
436 } __attribute__ ((__packed__));
437
438 /*
439  * leaves have an item area and a data area:
440  * [item0, item1....itemN] [free space] [dataN...data1, data0]
441  *
442  * The data is separate from the items to get the keys closer together
443  * during searches.
444  */
445 struct btrfs_leaf {
446         struct btrfs_header header;
447         struct btrfs_item items[];
448 } __attribute__ ((__packed__));
449
450 /*
451  * all non-leaf blocks are nodes, they hold only keys and pointers to
452  * other blocks
453  */
454 struct btrfs_key_ptr {
455         struct btrfs_disk_key key;
456         __le64 blockptr;
457         __le64 generation;
458 } __attribute__ ((__packed__));
459
460 struct btrfs_node {
461         struct btrfs_header header;
462         struct btrfs_key_ptr ptrs[];
463 } __attribute__ ((__packed__));
464
465 /*
466  * btrfs_paths remember the path taken from the root down to the leaf.
467  * level 0 is always the leaf, and nodes[1...BTRFS_MAX_LEVEL] will point
468  * to any other levels that are present.
469  *
470  * The slots array records the index of the item or block pointer
471  * used while walking the tree.
472  */
473 struct btrfs_path {
474         struct extent_buffer *nodes[BTRFS_MAX_LEVEL];
475         int slots[BTRFS_MAX_LEVEL];
476         /* if there is real range locking, this locks field will change */
477         int locks[BTRFS_MAX_LEVEL];
478         int reada;
479         /* keep some upper locks as we walk down */
480         int lowest_level;
481
482         /*
483          * set by btrfs_split_item, tells search_slot to keep all locks
484          * and to force calls to keep space in the nodes
485          */
486         unsigned int search_for_split:1;
487         unsigned int keep_locks:1;
488         unsigned int skip_locking:1;
489         unsigned int leave_spinning:1;
490         unsigned int search_commit_root:1;
491 };
492
493 /*
494  * items in the extent btree are used to record the objectid of the
495  * owner of the block and the number of references
496  */
497
498 struct btrfs_extent_item {
499         __le64 refs;
500         __le64 generation;
501         __le64 flags;
502 } __attribute__ ((__packed__));
503
504 struct btrfs_extent_item_v0 {
505         __le32 refs;
506 } __attribute__ ((__packed__));
507
508 #define BTRFS_MAX_EXTENT_ITEM_SIZE(r) ((BTRFS_LEAF_DATA_SIZE(r) >> 4) - \
509                                         sizeof(struct btrfs_item))
510
511 #define BTRFS_EXTENT_FLAG_DATA          (1ULL << 0)
512 #define BTRFS_EXTENT_FLAG_TREE_BLOCK    (1ULL << 1)
513
514 /* following flags only apply to tree blocks */
515
516 /* use full backrefs for extent pointers in the block */
517 #define BTRFS_BLOCK_FLAG_FULL_BACKREF   (1ULL << 8)
518
519 /*
520  * this flag is only used internally by scrub and may be changed at any time
521  * it is only declared here to avoid collisions
522  */
523 #define BTRFS_EXTENT_FLAG_SUPER         (1ULL << 48)
524
525 struct btrfs_tree_block_info {
526         struct btrfs_disk_key key;
527         u8 level;
528 } __attribute__ ((__packed__));
529
530 struct btrfs_extent_data_ref {
531         __le64 root;
532         __le64 objectid;
533         __le64 offset;
534         __le32 count;
535 } __attribute__ ((__packed__));
536
537 struct btrfs_shared_data_ref {
538         __le32 count;
539 } __attribute__ ((__packed__));
540
541 struct btrfs_extent_inline_ref {
542         u8 type;
543         __le64 offset;
544 } __attribute__ ((__packed__));
545
546 /* old style backrefs item */
547 struct btrfs_extent_ref_v0 {
548         __le64 root;
549         __le64 generation;
550         __le64 objectid;
551         __le32 count;
552 } __attribute__ ((__packed__));
553
554
555 /* dev extents record free space on individual devices.  The owner
556  * field points back to the chunk allocation mapping tree that allocated
557  * the extent.  The chunk tree uuid field is a way to double check the owner
558  */
559 struct btrfs_dev_extent {
560         __le64 chunk_tree;
561         __le64 chunk_objectid;
562         __le64 chunk_offset;
563         __le64 length;
564         u8 chunk_tree_uuid[BTRFS_UUID_SIZE];
565 } __attribute__ ((__packed__));
566
567 struct btrfs_inode_ref {
568         __le64 index;
569         __le16 name_len;
570         /* name goes here */
571 } __attribute__ ((__packed__));
572
573 struct btrfs_timespec {
574         __le64 sec;
575         __le32 nsec;
576 } __attribute__ ((__packed__));
577
578 enum btrfs_compression_type {
579         BTRFS_COMPRESS_NONE  = 0,
580         BTRFS_COMPRESS_ZLIB  = 1,
581         BTRFS_COMPRESS_LZO   = 2,
582         BTRFS_COMPRESS_TYPES = 2,
583         BTRFS_COMPRESS_LAST  = 3,
584 };
585
586 struct btrfs_inode_item {
587         /* nfs style generation number */
588         __le64 generation;
589         /* transid that last touched this inode */
590         __le64 transid;
591         __le64 size;
592         __le64 nbytes;
593         __le64 block_group;
594         __le32 nlink;
595         __le32 uid;
596         __le32 gid;
597         __le32 mode;
598         __le64 rdev;
599         __le64 flags;
600
601         /* modification sequence number for NFS */
602         __le64 sequence;
603
604         /*
605          * a little future expansion, for more than this we can
606          * just grow the inode item and version it
607          */
608         __le64 reserved[4];
609         struct btrfs_timespec atime;
610         struct btrfs_timespec ctime;
611         struct btrfs_timespec mtime;
612         struct btrfs_timespec otime;
613 } __attribute__ ((__packed__));
614
615 struct btrfs_dir_log_item {
616         __le64 end;
617 } __attribute__ ((__packed__));
618
619 struct btrfs_dir_item {
620         struct btrfs_disk_key location;
621         __le64 transid;
622         __le16 data_len;
623         __le16 name_len;
624         u8 type;
625 } __attribute__ ((__packed__));
626
627 #define BTRFS_ROOT_SUBVOL_RDONLY        (1ULL << 0)
628
629 struct btrfs_root_item {
630         struct btrfs_inode_item inode;
631         __le64 generation;
632         __le64 root_dirid;
633         __le64 bytenr;
634         __le64 byte_limit;
635         __le64 bytes_used;
636         __le64 last_snapshot;
637         __le64 flags;
638         __le32 refs;
639         struct btrfs_disk_key drop_progress;
640         u8 drop_level;
641         u8 level;
642 } __attribute__ ((__packed__));
643
644 /*
645  * this is used for both forward and backward root refs
646  */
647 struct btrfs_root_ref {
648         __le64 dirid;
649         __le64 sequence;
650         __le16 name_len;
651 } __attribute__ ((__packed__));
652
653 #define BTRFS_FILE_EXTENT_INLINE 0
654 #define BTRFS_FILE_EXTENT_REG 1
655 #define BTRFS_FILE_EXTENT_PREALLOC 2
656
657 struct btrfs_file_extent_item {
658         /*
659          * transaction id that created this extent
660          */
661         __le64 generation;
662         /*
663          * max number of bytes to hold this extent in ram
664          * when we split a compressed extent we can't know how big
665          * each of the resulting pieces will be.  So, this is
666          * an upper limit on the size of the extent in ram instead of
667          * an exact limit.
668          */
669         __le64 ram_bytes;
670
671         /*
672          * 32 bits for the various ways we might encode the data,
673          * including compression and encryption.  If any of these
674          * are set to something a given disk format doesn't understand
675          * it is treated like an incompat flag for reading and writing,
676          * but not for stat.
677          */
678         u8 compression;
679         u8 encryption;
680         __le16 other_encoding; /* spare for later use */
681
682         /* are we inline data or a real extent? */
683         u8 type;
684
685         /*
686          * disk space consumed by the extent, checksum blocks are included
687          * in these numbers
688          */
689         __le64 disk_bytenr;
690         __le64 disk_num_bytes;
691         /*
692          * the logical offset in file blocks (no csums)
693          * this extent record is for.  This allows a file extent to point
694          * into the middle of an existing extent on disk, sharing it
695          * between two snapshots (useful if some bytes in the middle of the
696          * extent have changed
697          */
698         __le64 offset;
699         /*
700          * the logical number of file blocks (no csums included).  This
701          * always reflects the size uncompressed and without encoding.
702          */
703         __le64 num_bytes;
704
705 } __attribute__ ((__packed__));
706
707 struct btrfs_csum_item {
708         u8 csum;
709 } __attribute__ ((__packed__));
710
711 /* different types of block groups (and chunks) */
712 #define BTRFS_BLOCK_GROUP_DATA     (1 << 0)
713 #define BTRFS_BLOCK_GROUP_SYSTEM   (1 << 1)
714 #define BTRFS_BLOCK_GROUP_METADATA (1 << 2)
715 #define BTRFS_BLOCK_GROUP_RAID0    (1 << 3)
716 #define BTRFS_BLOCK_GROUP_RAID1    (1 << 4)
717 #define BTRFS_BLOCK_GROUP_DUP      (1 << 5)
718 #define BTRFS_BLOCK_GROUP_RAID10   (1 << 6)
719 #define BTRFS_NR_RAID_TYPES        5
720
721 struct btrfs_block_group_item {
722         __le64 used;
723         __le64 chunk_objectid;
724         __le64 flags;
725 } __attribute__ ((__packed__));
726
727 struct btrfs_space_info {
728         u64 flags;
729
730         u64 total_bytes;        /* total bytes in the space,
731                                    this doesn't take mirrors into account */
732         u64 bytes_used;         /* total bytes used,
733                                    this doesn't take mirrors into account */
734         u64 bytes_pinned;       /* total bytes pinned, will be freed when the
735                                    transaction finishes */
736         u64 bytes_reserved;     /* total bytes the allocator has reserved for
737                                    current allocations */
738         u64 bytes_readonly;     /* total bytes that are read only */
739
740         u64 bytes_may_use;      /* number of bytes that may be used for
741                                    delalloc/allocations */
742         u64 disk_used;          /* total bytes used on disk */
743         u64 disk_total;         /* total bytes on disk, takes mirrors into
744                                    account */
745
746         /*
747          * we bump reservation progress every time we decrement
748          * bytes_reserved.  This way people waiting for reservations
749          * know something good has happened and they can check
750          * for progress.  The number here isn't to be trusted, it
751          * just shows reclaim activity
752          */
753         unsigned long reservation_progress;
754
755         unsigned int full:1;    /* indicates that we cannot allocate any more
756                                    chunks for this space */
757         unsigned int chunk_alloc:1;     /* set if we are allocating a chunk */
758
759         unsigned int flush:1;           /* set if we are trying to make space */
760
761         unsigned int force_alloc;       /* set if we need to force a chunk
762                                            alloc for this space */
763
764         struct list_head list;
765
766         /* for block groups in our same type */
767         struct list_head block_groups[BTRFS_NR_RAID_TYPES];
768         spinlock_t lock;
769         struct rw_semaphore groups_sem;
770         wait_queue_head_t wait;
771 };
772
773 struct btrfs_block_rsv {
774         u64 size;
775         u64 reserved;
776         struct btrfs_space_info *space_info;
777         spinlock_t lock;
778         unsigned int full:1;
779 };
780
781 /*
782  * free clusters are used to claim free space in relatively large chunks,
783  * allowing us to do less seeky writes.  They are used for all metadata
784  * allocations and data allocations in ssd mode.
785  */
786 struct btrfs_free_cluster {
787         spinlock_t lock;
788         spinlock_t refill_lock;
789         struct rb_root root;
790
791         /* largest extent in this cluster */
792         u64 max_size;
793
794         /* first extent starting offset */
795         u64 window_start;
796
797         struct btrfs_block_group_cache *block_group;
798         /*
799          * when a cluster is allocated from a block group, we put the
800          * cluster onto a list in the block group so that it can
801          * be freed before the block group is freed.
802          */
803         struct list_head block_group_list;
804 };
805
806 enum btrfs_caching_type {
807         BTRFS_CACHE_NO          = 0,
808         BTRFS_CACHE_STARTED     = 1,
809         BTRFS_CACHE_FINISHED    = 2,
810 };
811
812 enum btrfs_disk_cache_state {
813         BTRFS_DC_WRITTEN        = 0,
814         BTRFS_DC_ERROR          = 1,
815         BTRFS_DC_CLEAR          = 2,
816         BTRFS_DC_SETUP          = 3,
817         BTRFS_DC_NEED_WRITE     = 4,
818 };
819
820 struct btrfs_caching_control {
821         struct list_head list;
822         struct mutex mutex;
823         wait_queue_head_t wait;
824         struct btrfs_work work;
825         struct btrfs_block_group_cache *block_group;
826         u64 progress;
827         atomic_t count;
828 };
829
830 struct btrfs_block_group_cache {
831         struct btrfs_key key;
832         struct btrfs_block_group_item item;
833         struct btrfs_fs_info *fs_info;
834         struct inode *inode;
835         spinlock_t lock;
836         u64 pinned;
837         u64 reserved;
838         u64 bytes_super;
839         u64 flags;
840         u64 sectorsize;
841         u64 cache_generation;
842         unsigned int ro:1;
843         unsigned int dirty:1;
844         unsigned int iref:1;
845
846         int disk_cache_state;
847
848         /* cache tracking stuff */
849         int cached;
850         struct btrfs_caching_control *caching_ctl;
851         u64 last_byte_to_unpin;
852
853         struct btrfs_space_info *space_info;
854
855         /* free space cache stuff */
856         struct btrfs_free_space_ctl *free_space_ctl;
857
858         /* block group cache stuff */
859         struct rb_node cache_node;
860
861         /* for block groups in the same raid type */
862         struct list_head list;
863
864         /* usage count */
865         atomic_t count;
866
867         /* List of struct btrfs_free_clusters for this block group.
868          * Today it will only have one thing on it, but that may change
869          */
870         struct list_head cluster_list;
871 };
872
873 struct reloc_control;
874 struct btrfs_device;
875 struct btrfs_fs_devices;
876 struct btrfs_delayed_root;
877 struct btrfs_fs_info {
878         u8 fsid[BTRFS_FSID_SIZE];
879         u8 chunk_tree_uuid[BTRFS_UUID_SIZE];
880         struct btrfs_root *extent_root;
881         struct btrfs_root *tree_root;
882         struct btrfs_root *chunk_root;
883         struct btrfs_root *dev_root;
884         struct btrfs_root *fs_root;
885         struct btrfs_root *csum_root;
886
887         /* the log root tree is a directory of all the other log roots */
888         struct btrfs_root *log_root_tree;
889
890         spinlock_t fs_roots_radix_lock;
891         struct radix_tree_root fs_roots_radix;
892
893         /* block group cache stuff */
894         spinlock_t block_group_cache_lock;
895         struct rb_root block_group_cache_tree;
896
897         /* keep track of unallocated space */
898         spinlock_t free_chunk_lock;
899         u64 free_chunk_space;
900
901         struct extent_io_tree freed_extents[2];
902         struct extent_io_tree *pinned_extents;
903
904         /* logical->physical extent mapping */
905         struct btrfs_mapping_tree mapping_tree;
906
907         /*
908          * block reservation for extent, checksum, root tree and
909          * delayed dir index item
910          */
911         struct btrfs_block_rsv global_block_rsv;
912         /* block reservation for delay allocation */
913         struct btrfs_block_rsv delalloc_block_rsv;
914         /* block reservation for metadata operations */
915         struct btrfs_block_rsv trans_block_rsv;
916         /* block reservation for chunk tree */
917         struct btrfs_block_rsv chunk_block_rsv;
918
919         struct btrfs_block_rsv empty_block_rsv;
920
921         u64 generation;
922         u64 last_trans_committed;
923
924         /*
925          * this is updated to the current trans every time a full commit
926          * is required instead of the faster short fsync log commits
927          */
928         u64 last_trans_log_full_commit;
929         unsigned long mount_opt:20;
930         unsigned long compress_type:4;
931         u64 max_inline;
932         u64 alloc_start;
933         struct btrfs_transaction *running_transaction;
934         wait_queue_head_t transaction_throttle;
935         wait_queue_head_t transaction_wait;
936         wait_queue_head_t transaction_blocked_wait;
937         wait_queue_head_t async_submit_wait;
938
939         struct btrfs_super_block super_copy;
940         struct btrfs_super_block super_for_commit;
941         struct block_device *__bdev;
942         struct super_block *sb;
943         struct inode *btree_inode;
944         struct backing_dev_info bdi;
945         struct mutex tree_log_mutex;
946         struct mutex transaction_kthread_mutex;
947         struct mutex cleaner_mutex;
948         struct mutex chunk_mutex;
949         struct mutex volume_mutex;
950         /*
951          * this protects the ordered operations list only while we are
952          * processing all of the entries on it.  This way we make
953          * sure the commit code doesn't find the list temporarily empty
954          * because another function happens to be doing non-waiting preflush
955          * before jumping into the main commit.
956          */
957         struct mutex ordered_operations_mutex;
958         struct rw_semaphore extent_commit_sem;
959
960         struct rw_semaphore cleanup_work_sem;
961
962         struct rw_semaphore subvol_sem;
963         struct srcu_struct subvol_srcu;
964
965         spinlock_t trans_lock;
966         /*
967          * the reloc mutex goes with the trans lock, it is taken
968          * during commit to protect us from the relocation code
969          */
970         struct mutex reloc_mutex;
971
972         struct list_head trans_list;
973         struct list_head hashers;
974         struct list_head dead_roots;
975         struct list_head caching_block_groups;
976
977         spinlock_t delayed_iput_lock;
978         struct list_head delayed_iputs;
979
980         atomic_t nr_async_submits;
981         atomic_t async_submit_draining;
982         atomic_t nr_async_bios;
983         atomic_t async_delalloc_pages;
984         atomic_t open_ioctl_trans;
985
986         /*
987          * this is used by the balancing code to wait for all the pending
988          * ordered extents
989          */
990         spinlock_t ordered_extent_lock;
991
992         /*
993          * all of the data=ordered extents pending writeback
994          * these can span multiple transactions and basically include
995          * every dirty data page that isn't from nodatacow
996          */
997         struct list_head ordered_extents;
998
999         /*
1000          * all of the inodes that have delalloc bytes.  It is possible for
1001          * this list to be empty even when there is still dirty data=ordered
1002          * extents waiting to finish IO.
1003          */
1004         struct list_head delalloc_inodes;
1005
1006         /*
1007          * special rename and truncate targets that must be on disk before
1008          * we're allowed to commit.  This is basically the ext3 style
1009          * data=ordered list.
1010          */
1011         struct list_head ordered_operations;
1012
1013         /*
1014          * there is a pool of worker threads for checksumming during writes
1015          * and a pool for checksumming after reads.  This is because readers
1016          * can run with FS locks held, and the writers may be waiting for
1017          * those locks.  We don't want ordering in the pending list to cause
1018          * deadlocks, and so the two are serviced separately.
1019          *
1020          * A third pool does submit_bio to avoid deadlocking with the other
1021          * two
1022          */
1023         struct btrfs_workers generic_worker;
1024         struct btrfs_workers workers;
1025         struct btrfs_workers delalloc_workers;
1026         struct btrfs_workers endio_workers;
1027         struct btrfs_workers endio_meta_workers;
1028         struct btrfs_workers endio_meta_write_workers;
1029         struct btrfs_workers endio_write_workers;
1030         struct btrfs_workers endio_freespace_worker;
1031         struct btrfs_workers submit_workers;
1032         struct btrfs_workers caching_workers;
1033
1034         /*
1035          * fixup workers take dirty pages that didn't properly go through
1036          * the cow mechanism and make them safe to write.  It happens
1037          * for the sys_munmap function call path
1038          */
1039         struct btrfs_workers fixup_workers;
1040         struct btrfs_workers delayed_workers;
1041         struct task_struct *transaction_kthread;
1042         struct task_struct *cleaner_kthread;
1043         int thread_pool_size;
1044
1045         struct kobject super_kobj;
1046         struct completion kobj_unregister;
1047         int do_barriers;
1048         int closing;
1049         int log_root_recovering;
1050         int enospc_unlink;
1051         int trans_no_join;
1052
1053         u64 total_pinned;
1054
1055         /* protected by the delalloc lock, used to keep from writing
1056          * metadata until there is a nice batch
1057          */
1058         u64 dirty_metadata_bytes;
1059         struct list_head dirty_cowonly_roots;
1060
1061         struct btrfs_fs_devices *fs_devices;
1062
1063         /*
1064          * the space_info list is almost entirely read only.  It only changes
1065          * when we add a new raid type to the FS, and that happens
1066          * very rarely.  RCU is used to protect it.
1067          */
1068         struct list_head space_info;
1069
1070         struct reloc_control *reloc_ctl;
1071
1072         spinlock_t delalloc_lock;
1073         u64 delalloc_bytes;
1074
1075         /* data_alloc_cluster is only used in ssd mode */
1076         struct btrfs_free_cluster data_alloc_cluster;
1077
1078         /* all metadata allocations go through this cluster */
1079         struct btrfs_free_cluster meta_alloc_cluster;
1080
1081         /* auto defrag inodes go here */
1082         spinlock_t defrag_inodes_lock;
1083         struct rb_root defrag_inodes;
1084         atomic_t defrag_running;
1085
1086         spinlock_t ref_cache_lock;
1087         u64 total_ref_cache_size;
1088
1089         u64 avail_data_alloc_bits;
1090         u64 avail_metadata_alloc_bits;
1091         u64 avail_system_alloc_bits;
1092         u64 data_alloc_profile;
1093         u64 metadata_alloc_profile;
1094         u64 system_alloc_profile;
1095
1096         unsigned data_chunk_allocations;
1097         unsigned metadata_ratio;
1098
1099         void *bdev_holder;
1100
1101         /* private scrub information */
1102         struct mutex scrub_lock;
1103         atomic_t scrubs_running;
1104         atomic_t scrub_pause_req;
1105         atomic_t scrubs_paused;
1106         atomic_t scrub_cancel_req;
1107         wait_queue_head_t scrub_pause_wait;
1108         struct rw_semaphore scrub_super_lock;
1109         int scrub_workers_refcnt;
1110         struct btrfs_workers scrub_workers;
1111
1112         /* filesystem state */
1113         u64 fs_state;
1114
1115         struct btrfs_delayed_root *delayed_root;
1116 };
1117
1118 /*
1119  * in ram representation of the tree.  extent_root is used for all allocations
1120  * and for the extent tree extent_root root.
1121  */
1122 struct btrfs_root {
1123         struct extent_buffer *node;
1124
1125         struct extent_buffer *commit_root;
1126         struct btrfs_root *log_root;
1127         struct btrfs_root *reloc_root;
1128
1129         struct btrfs_root_item root_item;
1130         struct btrfs_key root_key;
1131         struct btrfs_fs_info *fs_info;
1132         struct extent_io_tree dirty_log_pages;
1133
1134         struct kobject root_kobj;
1135         struct completion kobj_unregister;
1136         struct mutex objectid_mutex;
1137
1138         spinlock_t accounting_lock;
1139         struct btrfs_block_rsv *block_rsv;
1140
1141         /* free ino cache stuff */
1142         struct mutex fs_commit_mutex;
1143         struct btrfs_free_space_ctl *free_ino_ctl;
1144         enum btrfs_caching_type cached;
1145         spinlock_t cache_lock;
1146         wait_queue_head_t cache_wait;
1147         struct btrfs_free_space_ctl *free_ino_pinned;
1148         u64 cache_progress;
1149         struct inode *cache_inode;
1150
1151         struct mutex log_mutex;
1152         wait_queue_head_t log_writer_wait;
1153         wait_queue_head_t log_commit_wait[2];
1154         atomic_t log_writers;
1155         atomic_t log_commit[2];
1156         unsigned long log_transid;
1157         unsigned long last_log_commit;
1158         unsigned long log_batch;
1159         pid_t log_start_pid;
1160         bool log_multiple_pids;
1161
1162         u64 objectid;
1163         u64 last_trans;
1164
1165         /* data allocations are done in sectorsize units */
1166         u32 sectorsize;
1167
1168         /* node allocations are done in nodesize units */
1169         u32 nodesize;
1170
1171         /* leaf allocations are done in leafsize units */
1172         u32 leafsize;
1173
1174         u32 stripesize;
1175
1176         u32 type;
1177
1178         u64 highest_objectid;
1179
1180         /* btrfs_record_root_in_trans is a multi-step process,
1181          * and it can race with the balancing code.   But the
1182          * race is very small, and only the first time the root
1183          * is added to each transaction.  So in_trans_setup
1184          * is used to tell us when more checks are required
1185          */
1186         unsigned long in_trans_setup;
1187         int ref_cows;
1188         int track_dirty;
1189         int in_radix;
1190
1191         u64 defrag_trans_start;
1192         struct btrfs_key defrag_progress;
1193         struct btrfs_key defrag_max;
1194         int defrag_running;
1195         char *name;
1196
1197         /* the dirty list is only used by non-reference counted roots */
1198         struct list_head dirty_list;
1199
1200         struct list_head root_list;
1201
1202         spinlock_t orphan_lock;
1203         struct list_head orphan_list;
1204         struct btrfs_block_rsv *orphan_block_rsv;
1205         int orphan_item_inserted;
1206         int orphan_cleanup_state;
1207
1208         spinlock_t inode_lock;
1209         /* red-black tree that keeps track of in-memory inodes */
1210         struct rb_root inode_tree;
1211
1212         /*
1213          * radix tree that keeps track of delayed nodes of every inode,
1214          * protected by inode_lock
1215          */
1216         struct radix_tree_root delayed_nodes_tree;
1217         /*
1218          * right now this just gets used so that a root has its own devid
1219          * for stat.  It may be used for more later
1220          */
1221         dev_t anon_dev;
1222 };
1223
1224 struct btrfs_ioctl_defrag_range_args {
1225         /* start of the defrag operation */
1226         __u64 start;
1227
1228         /* number of bytes to defrag, use (u64)-1 to say all */
1229         __u64 len;
1230
1231         /*
1232          * flags for the operation, which can include turning
1233          * on compression for this one defrag
1234          */
1235         __u64 flags;
1236
1237         /*
1238          * any extent bigger than this will be considered
1239          * already defragged.  Use 0 to take the kernel default
1240          * Use 1 to say every single extent must be rewritten
1241          */
1242         __u32 extent_thresh;
1243
1244         /*
1245          * which compression method to use if turning on compression
1246          * for this defrag operation.  If unspecified, zlib will
1247          * be used
1248          */
1249         __u32 compress_type;
1250
1251         /* spare for later */
1252         __u32 unused[4];
1253 };
1254
1255
1256 /*
1257  * inode items have the data typically returned from stat and store other
1258  * info about object characteristics.  There is one for every file and dir in
1259  * the FS
1260  */
1261 #define BTRFS_INODE_ITEM_KEY            1
1262 #define BTRFS_INODE_REF_KEY             12
1263 #define BTRFS_XATTR_ITEM_KEY            24
1264 #define BTRFS_ORPHAN_ITEM_KEY           48
1265 /* reserve 2-15 close to the inode for later flexibility */
1266
1267 /*
1268  * dir items are the name -> inode pointers in a directory.  There is one
1269  * for every name in a directory.
1270  */
1271 #define BTRFS_DIR_LOG_ITEM_KEY  60
1272 #define BTRFS_DIR_LOG_INDEX_KEY 72
1273 #define BTRFS_DIR_ITEM_KEY      84
1274 #define BTRFS_DIR_INDEX_KEY     96
1275 /*
1276  * extent data is for file data
1277  */
1278 #define BTRFS_EXTENT_DATA_KEY   108
1279
1280 /*
1281  * extent csums are stored in a separate tree and hold csums for
1282  * an entire extent on disk.
1283  */
1284 #define BTRFS_EXTENT_CSUM_KEY   128
1285
1286 /*
1287  * root items point to tree roots.  They are typically in the root
1288  * tree used by the super block to find all the other trees
1289  */
1290 #define BTRFS_ROOT_ITEM_KEY     132
1291
1292 /*
1293  * root backrefs tie subvols and snapshots to the directory entries that
1294  * reference them
1295  */
1296 #define BTRFS_ROOT_BACKREF_KEY  144
1297
1298 /*
1299  * root refs make a fast index for listing all of the snapshots and
1300  * subvolumes referenced by a given root.  They point directly to the
1301  * directory item in the root that references the subvol
1302  */
1303 #define BTRFS_ROOT_REF_KEY      156
1304
1305 /*
1306  * extent items are in the extent map tree.  These record which blocks
1307  * are used, and how many references there are to each block
1308  */
1309 #define BTRFS_EXTENT_ITEM_KEY   168
1310
1311 #define BTRFS_TREE_BLOCK_REF_KEY        176
1312
1313 #define BTRFS_EXTENT_DATA_REF_KEY       178
1314
1315 #define BTRFS_EXTENT_REF_V0_KEY         180
1316
1317 #define BTRFS_SHARED_BLOCK_REF_KEY      182
1318
1319 #define BTRFS_SHARED_DATA_REF_KEY       184
1320
1321 /*
1322  * block groups give us hints into the extent allocation trees.  Which
1323  * blocks are free etc etc
1324  */
1325 #define BTRFS_BLOCK_GROUP_ITEM_KEY 192
1326
1327 #define BTRFS_DEV_EXTENT_KEY    204
1328 #define BTRFS_DEV_ITEM_KEY      216
1329 #define BTRFS_CHUNK_ITEM_KEY    228
1330
1331 /*
1332  * string items are for debugging.  They just store a short string of
1333  * data in the FS
1334  */
1335 #define BTRFS_STRING_ITEM_KEY   253
1336
1337 /*
1338  * Flags for mount options.
1339  *
1340  * Note: don't forget to add new options to btrfs_show_options()
1341  */
1342 #define BTRFS_MOUNT_NODATASUM           (1 << 0)
1343 #define BTRFS_MOUNT_NODATACOW           (1 << 1)
1344 #define BTRFS_MOUNT_NOBARRIER           (1 << 2)
1345 #define BTRFS_MOUNT_SSD                 (1 << 3)
1346 #define BTRFS_MOUNT_DEGRADED            (1 << 4)
1347 #define BTRFS_MOUNT_COMPRESS            (1 << 5)
1348 #define BTRFS_MOUNT_NOTREELOG           (1 << 6)
1349 #define BTRFS_MOUNT_FLUSHONCOMMIT       (1 << 7)
1350 #define BTRFS_MOUNT_SSD_SPREAD          (1 << 8)
1351 #define BTRFS_MOUNT_NOSSD               (1 << 9)
1352 #define BTRFS_MOUNT_DISCARD             (1 << 10)
1353 #define BTRFS_MOUNT_FORCE_COMPRESS      (1 << 11)
1354 #define BTRFS_MOUNT_SPACE_CACHE         (1 << 12)
1355 #define BTRFS_MOUNT_CLEAR_CACHE         (1 << 13)
1356 #define BTRFS_MOUNT_USER_SUBVOL_RM_ALLOWED (1 << 14)
1357 #define BTRFS_MOUNT_ENOSPC_DEBUG         (1 << 15)
1358 #define BTRFS_MOUNT_AUTO_DEFRAG         (1 << 16)
1359 #define BTRFS_MOUNT_INODE_MAP_CACHE     (1 << 17)
1360
1361 #define btrfs_clear_opt(o, opt)         ((o) &= ~BTRFS_MOUNT_##opt)
1362 #define btrfs_set_opt(o, opt)           ((o) |= BTRFS_MOUNT_##opt)
1363 #define btrfs_test_opt(root, opt)       ((root)->fs_info->mount_opt & \
1364                                          BTRFS_MOUNT_##opt)
1365 /*
1366  * Inode flags
1367  */
1368 #define BTRFS_INODE_NODATASUM           (1 << 0)
1369 #define BTRFS_INODE_NODATACOW           (1 << 1)
1370 #define BTRFS_INODE_READONLY            (1 << 2)
1371 #define BTRFS_INODE_NOCOMPRESS          (1 << 3)
1372 #define BTRFS_INODE_PREALLOC            (1 << 4)
1373 #define BTRFS_INODE_SYNC                (1 << 5)
1374 #define BTRFS_INODE_IMMUTABLE           (1 << 6)
1375 #define BTRFS_INODE_APPEND              (1 << 7)
1376 #define BTRFS_INODE_NODUMP              (1 << 8)
1377 #define BTRFS_INODE_NOATIME             (1 << 9)
1378 #define BTRFS_INODE_DIRSYNC             (1 << 10)
1379 #define BTRFS_INODE_COMPRESS            (1 << 11)
1380
1381 #define BTRFS_INODE_ROOT_ITEM_INIT      (1 << 31)
1382
1383 /* some macros to generate set/get funcs for the struct fields.  This
1384  * assumes there is a lefoo_to_cpu for every type, so lets make a simple
1385  * one for u8:
1386  */
1387 #define le8_to_cpu(v) (v)
1388 #define cpu_to_le8(v) (v)
1389 #define __le8 u8
1390
1391 #define read_eb_member(eb, ptr, type, member, result) (                 \
1392         read_extent_buffer(eb, (char *)(result),                        \
1393                            ((unsigned long)(ptr)) +                     \
1394                             offsetof(type, member),                     \
1395                            sizeof(((type *)0)->member)))
1396
1397 #define write_eb_member(eb, ptr, type, member, result) (                \
1398         write_extent_buffer(eb, (char *)(result),                       \
1399                            ((unsigned long)(ptr)) +                     \
1400                             offsetof(type, member),                     \
1401                            sizeof(((type *)0)->member)))
1402
1403 #ifndef BTRFS_SETGET_FUNCS
1404 #define BTRFS_SETGET_FUNCS(name, type, member, bits)                    \
1405 u##bits btrfs_##name(struct extent_buffer *eb, type *s);                \
1406 void btrfs_set_##name(struct extent_buffer *eb, type *s, u##bits val);
1407 #endif
1408
1409 #define BTRFS_SETGET_HEADER_FUNCS(name, type, member, bits)             \
1410 static inline u##bits btrfs_##name(struct extent_buffer *eb)            \
1411 {                                                                       \
1412         type *p = page_address(eb->first_page);                         \
1413         u##bits res = le##bits##_to_cpu(p->member);                     \
1414         return res;                                                     \
1415 }                                                                       \
1416 static inline void btrfs_set_##name(struct extent_buffer *eb,           \
1417                                     u##bits val)                        \
1418 {                                                                       \
1419         type *p = page_address(eb->first_page);                         \
1420         p->member = cpu_to_le##bits(val);                               \
1421 }
1422
1423 #define BTRFS_SETGET_STACK_FUNCS(name, type, member, bits)              \
1424 static inline u##bits btrfs_##name(type *s)                             \
1425 {                                                                       \
1426         return le##bits##_to_cpu(s->member);                            \
1427 }                                                                       \
1428 static inline void btrfs_set_##name(type *s, u##bits val)               \
1429 {                                                                       \
1430         s->member = cpu_to_le##bits(val);                               \
1431 }
1432
1433 BTRFS_SETGET_FUNCS(device_type, struct btrfs_dev_item, type, 64);
1434 BTRFS_SETGET_FUNCS(device_total_bytes, struct btrfs_dev_item, total_bytes, 64);
1435 BTRFS_SETGET_FUNCS(device_bytes_used, struct btrfs_dev_item, bytes_used, 64);
1436 BTRFS_SETGET_FUNCS(device_io_align, struct btrfs_dev_item, io_align, 32);
1437 BTRFS_SETGET_FUNCS(device_io_width, struct btrfs_dev_item, io_width, 32);
1438 BTRFS_SETGET_FUNCS(device_start_offset, struct btrfs_dev_item,
1439                    start_offset, 64);
1440 BTRFS_SETGET_FUNCS(device_sector_size, struct btrfs_dev_item, sector_size, 32);
1441 BTRFS_SETGET_FUNCS(device_id, struct btrfs_dev_item, devid, 64);
1442 BTRFS_SETGET_FUNCS(device_group, struct btrfs_dev_item, dev_group, 32);
1443 BTRFS_SETGET_FUNCS(device_seek_speed, struct btrfs_dev_item, seek_speed, 8);
1444 BTRFS_SETGET_FUNCS(device_bandwidth, struct btrfs_dev_item, bandwidth, 8);
1445 BTRFS_SETGET_FUNCS(device_generation, struct btrfs_dev_item, generation, 64);
1446
1447 BTRFS_SETGET_STACK_FUNCS(stack_device_type, struct btrfs_dev_item, type, 64);
1448 BTRFS_SETGET_STACK_FUNCS(stack_device_total_bytes, struct btrfs_dev_item,
1449                          total_bytes, 64);
1450 BTRFS_SETGET_STACK_FUNCS(stack_device_bytes_used, struct btrfs_dev_item,
1451                          bytes_used, 64);
1452 BTRFS_SETGET_STACK_FUNCS(stack_device_io_align, struct btrfs_dev_item,
1453                          io_align, 32);
1454 BTRFS_SETGET_STACK_FUNCS(stack_device_io_width, struct btrfs_dev_item,
1455                          io_width, 32);
1456 BTRFS_SETGET_STACK_FUNCS(stack_device_sector_size, struct btrfs_dev_item,
1457                          sector_size, 32);
1458 BTRFS_SETGET_STACK_FUNCS(stack_device_id, struct btrfs_dev_item, devid, 64);
1459 BTRFS_SETGET_STACK_FUNCS(stack_device_group, struct btrfs_dev_item,
1460                          dev_group, 32);
1461 BTRFS_SETGET_STACK_FUNCS(stack_device_seek_speed, struct btrfs_dev_item,
1462                          seek_speed, 8);
1463 BTRFS_SETGET_STACK_FUNCS(stack_device_bandwidth, struct btrfs_dev_item,
1464                          bandwidth, 8);
1465 BTRFS_SETGET_STACK_FUNCS(stack_device_generation, struct btrfs_dev_item,
1466                          generation, 64);
1467
1468 static inline char *btrfs_device_uuid(struct btrfs_dev_item *d)
1469 {
1470         return (char *)d + offsetof(struct btrfs_dev_item, uuid);
1471 }
1472
1473 static inline char *btrfs_device_fsid(struct btrfs_dev_item *d)
1474 {
1475         return (char *)d + offsetof(struct btrfs_dev_item, fsid);
1476 }
1477
1478 BTRFS_SETGET_FUNCS(chunk_length, struct btrfs_chunk, length, 64);
1479 BTRFS_SETGET_FUNCS(chunk_owner, struct btrfs_chunk, owner, 64);
1480 BTRFS_SETGET_FUNCS(chunk_stripe_len, struct btrfs_chunk, stripe_len, 64);
1481 BTRFS_SETGET_FUNCS(chunk_io_align, struct btrfs_chunk, io_align, 32);
1482 BTRFS_SETGET_FUNCS(chunk_io_width, struct btrfs_chunk, io_width, 32);
1483 BTRFS_SETGET_FUNCS(chunk_sector_size, struct btrfs_chunk, sector_size, 32);
1484 BTRFS_SETGET_FUNCS(chunk_type, struct btrfs_chunk, type, 64);
1485 BTRFS_SETGET_FUNCS(chunk_num_stripes, struct btrfs_chunk, num_stripes, 16);
1486 BTRFS_SETGET_FUNCS(chunk_sub_stripes, struct btrfs_chunk, sub_stripes, 16);
1487 BTRFS_SETGET_FUNCS(stripe_devid, struct btrfs_stripe, devid, 64);
1488 BTRFS_SETGET_FUNCS(stripe_offset, struct btrfs_stripe, offset, 64);
1489
1490 static inline char *btrfs_stripe_dev_uuid(struct btrfs_stripe *s)
1491 {
1492         return (char *)s + offsetof(struct btrfs_stripe, dev_uuid);
1493 }
1494
1495 BTRFS_SETGET_STACK_FUNCS(stack_chunk_length, struct btrfs_chunk, length, 64);
1496 BTRFS_SETGET_STACK_FUNCS(stack_chunk_owner, struct btrfs_chunk, owner, 64);
1497 BTRFS_SETGET_STACK_FUNCS(stack_chunk_stripe_len, struct btrfs_chunk,
1498                          stripe_len, 64);
1499 BTRFS_SETGET_STACK_FUNCS(stack_chunk_io_align, struct btrfs_chunk,
1500                          io_align, 32);
1501 BTRFS_SETGET_STACK_FUNCS(stack_chunk_io_width, struct btrfs_chunk,
1502                          io_width, 32);
1503 BTRFS_SETGET_STACK_FUNCS(stack_chunk_sector_size, struct btrfs_chunk,
1504                          sector_size, 32);
1505 BTRFS_SETGET_STACK_FUNCS(stack_chunk_type, struct btrfs_chunk, type, 64);
1506 BTRFS_SETGET_STACK_FUNCS(stack_chunk_num_stripes, struct btrfs_chunk,
1507                          num_stripes, 16);
1508 BTRFS_SETGET_STACK_FUNCS(stack_chunk_sub_stripes, struct btrfs_chunk,
1509                          sub_stripes, 16);
1510 BTRFS_SETGET_STACK_FUNCS(stack_stripe_devid, struct btrfs_stripe, devid, 64);
1511 BTRFS_SETGET_STACK_FUNCS(stack_stripe_offset, struct btrfs_stripe, offset, 64);
1512
1513 static inline struct btrfs_stripe *btrfs_stripe_nr(struct btrfs_chunk *c,
1514                                                    int nr)
1515 {
1516         unsigned long offset = (unsigned long)c;
1517         offset += offsetof(struct btrfs_chunk, stripe);
1518         offset += nr * sizeof(struct btrfs_stripe);
1519         return (struct btrfs_stripe *)offset;
1520 }
1521
1522 static inline char *btrfs_stripe_dev_uuid_nr(struct btrfs_chunk *c, int nr)
1523 {
1524         return btrfs_stripe_dev_uuid(btrfs_stripe_nr(c, nr));
1525 }
1526
1527 static inline u64 btrfs_stripe_offset_nr(struct extent_buffer *eb,
1528                                          struct btrfs_chunk *c, int nr)
1529 {
1530         return btrfs_stripe_offset(eb, btrfs_stripe_nr(c, nr));
1531 }
1532
1533 static inline u64 btrfs_stripe_devid_nr(struct extent_buffer *eb,
1534                                          struct btrfs_chunk *c, int nr)
1535 {
1536         return btrfs_stripe_devid(eb, btrfs_stripe_nr(c, nr));
1537 }
1538
1539 /* struct btrfs_block_group_item */
1540 BTRFS_SETGET_STACK_FUNCS(block_group_used, struct btrfs_block_group_item,
1541                          used, 64);
1542 BTRFS_SETGET_FUNCS(disk_block_group_used, struct btrfs_block_group_item,
1543                          used, 64);
1544 BTRFS_SETGET_STACK_FUNCS(block_group_chunk_objectid,
1545                         struct btrfs_block_group_item, chunk_objectid, 64);
1546
1547 BTRFS_SETGET_FUNCS(disk_block_group_chunk_objectid,
1548                    struct btrfs_block_group_item, chunk_objectid, 64);
1549 BTRFS_SETGET_FUNCS(disk_block_group_flags,
1550                    struct btrfs_block_group_item, flags, 64);
1551 BTRFS_SETGET_STACK_FUNCS(block_group_flags,
1552                         struct btrfs_block_group_item, flags, 64);
1553
1554 /* struct btrfs_inode_ref */
1555 BTRFS_SETGET_FUNCS(inode_ref_name_len, struct btrfs_inode_ref, name_len, 16);
1556 BTRFS_SETGET_FUNCS(inode_ref_index, struct btrfs_inode_ref, index, 64);
1557
1558 /* struct btrfs_inode_item */
1559 BTRFS_SETGET_FUNCS(inode_generation, struct btrfs_inode_item, generation, 64);
1560 BTRFS_SETGET_FUNCS(inode_sequence, struct btrfs_inode_item, sequence, 64);
1561 BTRFS_SETGET_FUNCS(inode_transid, struct btrfs_inode_item, transid, 64);
1562 BTRFS_SETGET_FUNCS(inode_size, struct btrfs_inode_item, size, 64);
1563 BTRFS_SETGET_FUNCS(inode_nbytes, struct btrfs_inode_item, nbytes, 64);
1564 BTRFS_SETGET_FUNCS(inode_block_group, struct btrfs_inode_item, block_group, 64);
1565 BTRFS_SETGET_FUNCS(inode_nlink, struct btrfs_inode_item, nlink, 32);
1566 BTRFS_SETGET_FUNCS(inode_uid, struct btrfs_inode_item, uid, 32);
1567 BTRFS_SETGET_FUNCS(inode_gid, struct btrfs_inode_item, gid, 32);
1568 BTRFS_SETGET_FUNCS(inode_mode, struct btrfs_inode_item, mode, 32);
1569 BTRFS_SETGET_FUNCS(inode_rdev, struct btrfs_inode_item, rdev, 64);
1570 BTRFS_SETGET_FUNCS(inode_flags, struct btrfs_inode_item, flags, 64);
1571
1572 static inline struct btrfs_timespec *
1573 btrfs_inode_atime(struct btrfs_inode_item *inode_item)
1574 {
1575         unsigned long ptr = (unsigned long)inode_item;
1576         ptr += offsetof(struct btrfs_inode_item, atime);
1577         return (struct btrfs_timespec *)ptr;
1578 }
1579
1580 static inline struct btrfs_timespec *
1581 btrfs_inode_mtime(struct btrfs_inode_item *inode_item)
1582 {
1583         unsigned long ptr = (unsigned long)inode_item;
1584         ptr += offsetof(struct btrfs_inode_item, mtime);
1585         return (struct btrfs_timespec *)ptr;
1586 }
1587
1588 static inline struct btrfs_timespec *
1589 btrfs_inode_ctime(struct btrfs_inode_item *inode_item)
1590 {
1591         unsigned long ptr = (unsigned long)inode_item;
1592         ptr += offsetof(struct btrfs_inode_item, ctime);
1593         return (struct btrfs_timespec *)ptr;
1594 }
1595
1596 BTRFS_SETGET_FUNCS(timespec_sec, struct btrfs_timespec, sec, 64);
1597 BTRFS_SETGET_FUNCS(timespec_nsec, struct btrfs_timespec, nsec, 32);
1598
1599 /* struct btrfs_dev_extent */
1600 BTRFS_SETGET_FUNCS(dev_extent_chunk_tree, struct btrfs_dev_extent,
1601                    chunk_tree, 64);
1602 BTRFS_SETGET_FUNCS(dev_extent_chunk_objectid, struct btrfs_dev_extent,
1603                    chunk_objectid, 64);
1604 BTRFS_SETGET_FUNCS(dev_extent_chunk_offset, struct btrfs_dev_extent,
1605                    chunk_offset, 64);
1606 BTRFS_SETGET_FUNCS(dev_extent_length, struct btrfs_dev_extent, length, 64);
1607
1608 static inline u8 *btrfs_dev_extent_chunk_tree_uuid(struct btrfs_dev_extent *dev)
1609 {
1610         unsigned long ptr = offsetof(struct btrfs_dev_extent, chunk_tree_uuid);
1611         return (u8 *)((unsigned long)dev + ptr);
1612 }
1613
1614 BTRFS_SETGET_FUNCS(extent_refs, struct btrfs_extent_item, refs, 64);
1615 BTRFS_SETGET_FUNCS(extent_generation, struct btrfs_extent_item,
1616                    generation, 64);
1617 BTRFS_SETGET_FUNCS(extent_flags, struct btrfs_extent_item, flags, 64);
1618
1619 BTRFS_SETGET_FUNCS(extent_refs_v0, struct btrfs_extent_item_v0, refs, 32);
1620
1621
1622 BTRFS_SETGET_FUNCS(tree_block_level, struct btrfs_tree_block_info, level, 8);
1623
1624 static inline void btrfs_tree_block_key(struct extent_buffer *eb,
1625                                         struct btrfs_tree_block_info *item,
1626                                         struct btrfs_disk_key *key)
1627 {
1628         read_eb_member(eb, item, struct btrfs_tree_block_info, key, key);
1629 }
1630
1631 static inline void btrfs_set_tree_block_key(struct extent_buffer *eb,
1632                                             struct btrfs_tree_block_info *item,
1633                                             struct btrfs_disk_key *key)
1634 {
1635         write_eb_member(eb, item, struct btrfs_tree_block_info, key, key);
1636 }
1637
1638 BTRFS_SETGET_FUNCS(extent_data_ref_root, struct btrfs_extent_data_ref,
1639                    root, 64);
1640 BTRFS_SETGET_FUNCS(extent_data_ref_objectid, struct btrfs_extent_data_ref,
1641                    objectid, 64);
1642 BTRFS_SETGET_FUNCS(extent_data_ref_offset, struct btrfs_extent_data_ref,
1643                    offset, 64);
1644 BTRFS_SETGET_FUNCS(extent_data_ref_count, struct btrfs_extent_data_ref,
1645                    count, 32);
1646
1647 BTRFS_SETGET_FUNCS(shared_data_ref_count, struct btrfs_shared_data_ref,
1648                    count, 32);
1649
1650 BTRFS_SETGET_FUNCS(extent_inline_ref_type, struct btrfs_extent_inline_ref,
1651                    type, 8);
1652 BTRFS_SETGET_FUNCS(extent_inline_ref_offset, struct btrfs_extent_inline_ref,
1653                    offset, 64);
1654
1655 static inline u32 btrfs_extent_inline_ref_size(int type)
1656 {
1657         if (type == BTRFS_TREE_BLOCK_REF_KEY ||
1658             type == BTRFS_SHARED_BLOCK_REF_KEY)
1659                 return sizeof(struct btrfs_extent_inline_ref);
1660         if (type == BTRFS_SHARED_DATA_REF_KEY)
1661                 return sizeof(struct btrfs_shared_data_ref) +
1662                        sizeof(struct btrfs_extent_inline_ref);
1663         if (type == BTRFS_EXTENT_DATA_REF_KEY)
1664                 return sizeof(struct btrfs_extent_data_ref) +
1665                        offsetof(struct btrfs_extent_inline_ref, offset);
1666         BUG();
1667         return 0;
1668 }
1669
1670 BTRFS_SETGET_FUNCS(ref_root_v0, struct btrfs_extent_ref_v0, root, 64);
1671 BTRFS_SETGET_FUNCS(ref_generation_v0, struct btrfs_extent_ref_v0,
1672                    generation, 64);
1673 BTRFS_SETGET_FUNCS(ref_objectid_v0, struct btrfs_extent_ref_v0, objectid, 64);
1674 BTRFS_SETGET_FUNCS(ref_count_v0, struct btrfs_extent_ref_v0, count, 32);
1675
1676 /* struct btrfs_node */
1677 BTRFS_SETGET_FUNCS(key_blockptr, struct btrfs_key_ptr, blockptr, 64);
1678 BTRFS_SETGET_FUNCS(key_generation, struct btrfs_key_ptr, generation, 64);
1679
1680 static inline u64 btrfs_node_blockptr(struct extent_buffer *eb, int nr)
1681 {
1682         unsigned long ptr;
1683         ptr = offsetof(struct btrfs_node, ptrs) +
1684                 sizeof(struct btrfs_key_ptr) * nr;
1685         return btrfs_key_blockptr(eb, (struct btrfs_key_ptr *)ptr);
1686 }
1687
1688 static inline void btrfs_set_node_blockptr(struct extent_buffer *eb,
1689                                            int nr, u64 val)
1690 {
1691         unsigned long ptr;
1692         ptr = offsetof(struct btrfs_node, ptrs) +
1693                 sizeof(struct btrfs_key_ptr) * nr;
1694         btrfs_set_key_blockptr(eb, (struct btrfs_key_ptr *)ptr, val);
1695 }
1696
1697 static inline u64 btrfs_node_ptr_generation(struct extent_buffer *eb, int nr)
1698 {
1699         unsigned long ptr;
1700         ptr = offsetof(struct btrfs_node, ptrs) +
1701                 sizeof(struct btrfs_key_ptr) * nr;
1702         return btrfs_key_generation(eb, (struct btrfs_key_ptr *)ptr);
1703 }
1704
1705 static inline void btrfs_set_node_ptr_generation(struct extent_buffer *eb,
1706                                                  int nr, u64 val)
1707 {
1708         unsigned long ptr;
1709         ptr = offsetof(struct btrfs_node, ptrs) +
1710                 sizeof(struct btrfs_key_ptr) * nr;
1711         btrfs_set_key_generation(eb, (struct btrfs_key_ptr *)ptr, val);
1712 }
1713
1714 static inline unsigned long btrfs_node_key_ptr_offset(int nr)
1715 {
1716         return offsetof(struct btrfs_node, ptrs) +
1717                 sizeof(struct btrfs_key_ptr) * nr;
1718 }
1719
1720 void btrfs_node_key(struct extent_buffer *eb,
1721                     struct btrfs_disk_key *disk_key, int nr);
1722
1723 static inline void btrfs_set_node_key(struct extent_buffer *eb,
1724                                       struct btrfs_disk_key *disk_key, int nr)
1725 {
1726         unsigned long ptr;
1727         ptr = btrfs_node_key_ptr_offset(nr);
1728         write_eb_member(eb, (struct btrfs_key_ptr *)ptr,
1729                        struct btrfs_key_ptr, key, disk_key);
1730 }
1731
1732 /* struct btrfs_item */
1733 BTRFS_SETGET_FUNCS(item_offset, struct btrfs_item, offset, 32);
1734 BTRFS_SETGET_FUNCS(item_size, struct btrfs_item, size, 32);
1735
1736 static inline unsigned long btrfs_item_nr_offset(int nr)
1737 {
1738         return offsetof(struct btrfs_leaf, items) +
1739                 sizeof(struct btrfs_item) * nr;
1740 }
1741
1742 static inline struct btrfs_item *btrfs_item_nr(struct extent_buffer *eb,
1743                                                int nr)
1744 {
1745         return (struct btrfs_item *)btrfs_item_nr_offset(nr);
1746 }
1747
1748 static inline u32 btrfs_item_end(struct extent_buffer *eb,
1749                                  struct btrfs_item *item)
1750 {
1751         return btrfs_item_offset(eb, item) + btrfs_item_size(eb, item);
1752 }
1753
1754 static inline u32 btrfs_item_end_nr(struct extent_buffer *eb, int nr)
1755 {
1756         return btrfs_item_end(eb, btrfs_item_nr(eb, nr));
1757 }
1758
1759 static inline u32 btrfs_item_offset_nr(struct extent_buffer *eb, int nr)
1760 {
1761         return btrfs_item_offset(eb, btrfs_item_nr(eb, nr));
1762 }
1763
1764 static inline u32 btrfs_item_size_nr(struct extent_buffer *eb, int nr)
1765 {
1766         return btrfs_item_size(eb, btrfs_item_nr(eb, nr));
1767 }
1768
1769 static inline void btrfs_item_key(struct extent_buffer *eb,
1770                            struct btrfs_disk_key *disk_key, int nr)
1771 {
1772         struct btrfs_item *item = btrfs_item_nr(eb, nr);
1773         read_eb_member(eb, item, struct btrfs_item, key, disk_key);
1774 }
1775
1776 static inline void btrfs_set_item_key(struct extent_buffer *eb,
1777                                struct btrfs_disk_key *disk_key, int nr)
1778 {
1779         struct btrfs_item *item = btrfs_item_nr(eb, nr);
1780         write_eb_member(eb, item, struct btrfs_item, key, disk_key);
1781 }
1782
1783 BTRFS_SETGET_FUNCS(dir_log_end, struct btrfs_dir_log_item, end, 64);
1784
1785 /*
1786  * struct btrfs_root_ref
1787  */
1788 BTRFS_SETGET_FUNCS(root_ref_dirid, struct btrfs_root_ref, dirid, 64);
1789 BTRFS_SETGET_FUNCS(root_ref_sequence, struct btrfs_root_ref, sequence, 64);
1790 BTRFS_SETGET_FUNCS(root_ref_name_len, struct btrfs_root_ref, name_len, 16);
1791
1792 /* struct btrfs_dir_item */
1793 BTRFS_SETGET_FUNCS(dir_data_len, struct btrfs_dir_item, data_len, 16);
1794 BTRFS_SETGET_FUNCS(dir_type, struct btrfs_dir_item, type, 8);
1795 BTRFS_SETGET_FUNCS(dir_name_len, struct btrfs_dir_item, name_len, 16);
1796 BTRFS_SETGET_FUNCS(dir_transid, struct btrfs_dir_item, transid, 64);
1797
1798 static inline void btrfs_dir_item_key(struct extent_buffer *eb,
1799                                       struct btrfs_dir_item *item,
1800                                       struct btrfs_disk_key *key)
1801 {
1802         read_eb_member(eb, item, struct btrfs_dir_item, location, key);
1803 }
1804
1805 static inline void btrfs_set_dir_item_key(struct extent_buffer *eb,
1806                                           struct btrfs_dir_item *item,
1807                                           struct btrfs_disk_key *key)
1808 {
1809         write_eb_member(eb, item, struct btrfs_dir_item, location, key);
1810 }
1811
1812 BTRFS_SETGET_FUNCS(free_space_entries, struct btrfs_free_space_header,
1813                    num_entries, 64);
1814 BTRFS_SETGET_FUNCS(free_space_bitmaps, struct btrfs_free_space_header,
1815                    num_bitmaps, 64);
1816 BTRFS_SETGET_FUNCS(free_space_generation, struct btrfs_free_space_header,
1817                    generation, 64);
1818
1819 static inline void btrfs_free_space_key(struct extent_buffer *eb,
1820                                         struct btrfs_free_space_header *h,
1821                                         struct btrfs_disk_key *key)
1822 {
1823         read_eb_member(eb, h, struct btrfs_free_space_header, location, key);
1824 }
1825
1826 static inline void btrfs_set_free_space_key(struct extent_buffer *eb,
1827                                             struct btrfs_free_space_header *h,
1828                                             struct btrfs_disk_key *key)
1829 {
1830         write_eb_member(eb, h, struct btrfs_free_space_header, location, key);
1831 }
1832
1833 /* struct btrfs_disk_key */
1834 BTRFS_SETGET_STACK_FUNCS(disk_key_objectid, struct btrfs_disk_key,
1835                          objectid, 64);
1836 BTRFS_SETGET_STACK_FUNCS(disk_key_offset, struct btrfs_disk_key, offset, 64);
1837 BTRFS_SETGET_STACK_FUNCS(disk_key_type, struct btrfs_disk_key, type, 8);
1838
1839 static inline void btrfs_disk_key_to_cpu(struct btrfs_key *cpu,
1840                                          struct btrfs_disk_key *disk)
1841 {
1842         cpu->offset = le64_to_cpu(disk->offset);
1843         cpu->type = disk->type;
1844         cpu->objectid = le64_to_cpu(disk->objectid);
1845 }
1846
1847 static inline void btrfs_cpu_key_to_disk(struct btrfs_disk_key *disk,
1848                                          struct btrfs_key *cpu)
1849 {
1850         disk->offset = cpu_to_le64(cpu->offset);
1851         disk->type = cpu->type;
1852         disk->objectid = cpu_to_le64(cpu->objectid);
1853 }
1854
1855 static inline void btrfs_node_key_to_cpu(struct extent_buffer *eb,
1856                                   struct btrfs_key *key, int nr)
1857 {
1858         struct btrfs_disk_key disk_key;
1859         btrfs_node_key(eb, &disk_key, nr);
1860         btrfs_disk_key_to_cpu(key, &disk_key);
1861 }
1862
1863 static inline void btrfs_item_key_to_cpu(struct extent_buffer *eb,
1864                                   struct btrfs_key *key, int nr)
1865 {
1866         struct btrfs_disk_key disk_key;
1867         btrfs_item_key(eb, &disk_key, nr);
1868         btrfs_disk_key_to_cpu(key, &disk_key);
1869 }
1870
1871 static inline void btrfs_dir_item_key_to_cpu(struct extent_buffer *eb,
1872                                       struct btrfs_dir_item *item,
1873                                       struct btrfs_key *key)
1874 {
1875         struct btrfs_disk_key disk_key;
1876         btrfs_dir_item_key(eb, item, &disk_key);
1877         btrfs_disk_key_to_cpu(key, &disk_key);
1878 }
1879
1880
1881 static inline u8 btrfs_key_type(struct btrfs_key *key)
1882 {
1883         return key->type;
1884 }
1885
1886 static inline void btrfs_set_key_type(struct btrfs_key *key, u8 val)
1887 {
1888         key->type = val;
1889 }
1890
1891 /* struct btrfs_header */
1892 BTRFS_SETGET_HEADER_FUNCS(header_bytenr, struct btrfs_header, bytenr, 64);
1893 BTRFS_SETGET_HEADER_FUNCS(header_generation, struct btrfs_header,
1894                           generation, 64);
1895 BTRFS_SETGET_HEADER_FUNCS(header_owner, struct btrfs_header, owner, 64);
1896 BTRFS_SETGET_HEADER_FUNCS(header_nritems, struct btrfs_header, nritems, 32);
1897 BTRFS_SETGET_HEADER_FUNCS(header_flags, struct btrfs_header, flags, 64);
1898 BTRFS_SETGET_HEADER_FUNCS(header_level, struct btrfs_header, level, 8);
1899
1900 static inline int btrfs_header_flag(struct extent_buffer *eb, u64 flag)
1901 {
1902         return (btrfs_header_flags(eb) & flag) == flag;
1903 }
1904
1905 static inline int btrfs_set_header_flag(struct extent_buffer *eb, u64 flag)
1906 {
1907         u64 flags = btrfs_header_flags(eb);
1908         btrfs_set_header_flags(eb, flags | flag);
1909         return (flags & flag) == flag;
1910 }
1911
1912 static inline int btrfs_clear_header_flag(struct extent_buffer *eb, u64 flag)
1913 {
1914         u64 flags = btrfs_header_flags(eb);
1915         btrfs_set_header_flags(eb, flags & ~flag);
1916         return (flags & flag) == flag;
1917 }
1918
1919 static inline int btrfs_header_backref_rev(struct extent_buffer *eb)
1920 {
1921         u64 flags = btrfs_header_flags(eb);
1922         return flags >> BTRFS_BACKREF_REV_SHIFT;
1923 }
1924
1925 static inline void btrfs_set_header_backref_rev(struct extent_buffer *eb,
1926                                                 int rev)
1927 {
1928         u64 flags = btrfs_header_flags(eb);
1929         flags &= ~BTRFS_BACKREF_REV_MASK;
1930         flags |= (u64)rev << BTRFS_BACKREF_REV_SHIFT;
1931         btrfs_set_header_flags(eb, flags);
1932 }
1933
1934 static inline u8 *btrfs_header_fsid(struct extent_buffer *eb)
1935 {
1936         unsigned long ptr = offsetof(struct btrfs_header, fsid);
1937         return (u8 *)ptr;
1938 }
1939
1940 static inline u8 *btrfs_header_chunk_tree_uuid(struct extent_buffer *eb)
1941 {
1942         unsigned long ptr = offsetof(struct btrfs_header, chunk_tree_uuid);
1943         return (u8 *)ptr;
1944 }
1945
1946 static inline int btrfs_is_leaf(struct extent_buffer *eb)
1947 {
1948         return btrfs_header_level(eb) == 0;
1949 }
1950
1951 /* struct btrfs_root_item */
1952 BTRFS_SETGET_FUNCS(disk_root_generation, struct btrfs_root_item,
1953                    generation, 64);
1954 BTRFS_SETGET_FUNCS(disk_root_refs, struct btrfs_root_item, refs, 32);
1955 BTRFS_SETGET_FUNCS(disk_root_bytenr, struct btrfs_root_item, bytenr, 64);
1956 BTRFS_SETGET_FUNCS(disk_root_level, struct btrfs_root_item, level, 8);
1957
1958 BTRFS_SETGET_STACK_FUNCS(root_generation, struct btrfs_root_item,
1959                          generation, 64);
1960 BTRFS_SETGET_STACK_FUNCS(root_bytenr, struct btrfs_root_item, bytenr, 64);
1961 BTRFS_SETGET_STACK_FUNCS(root_level, struct btrfs_root_item, level, 8);
1962 BTRFS_SETGET_STACK_FUNCS(root_dirid, struct btrfs_root_item, root_dirid, 64);
1963 BTRFS_SETGET_STACK_FUNCS(root_refs, struct btrfs_root_item, refs, 32);
1964 BTRFS_SETGET_STACK_FUNCS(root_flags, struct btrfs_root_item, flags, 64);
1965 BTRFS_SETGET_STACK_FUNCS(root_used, struct btrfs_root_item, bytes_used, 64);
1966 BTRFS_SETGET_STACK_FUNCS(root_limit, struct btrfs_root_item, byte_limit, 64);
1967 BTRFS_SETGET_STACK_FUNCS(root_last_snapshot, struct btrfs_root_item,
1968                          last_snapshot, 64);
1969
1970 static inline bool btrfs_root_readonly(struct btrfs_root *root)
1971 {
1972         return root->root_item.flags & BTRFS_ROOT_SUBVOL_RDONLY;
1973 }
1974
1975 /* struct btrfs_super_block */
1976
1977 BTRFS_SETGET_STACK_FUNCS(super_bytenr, struct btrfs_super_block, bytenr, 64);
1978 BTRFS_SETGET_STACK_FUNCS(super_flags, struct btrfs_super_block, flags, 64);
1979 BTRFS_SETGET_STACK_FUNCS(super_generation, struct btrfs_super_block,
1980                          generation, 64);
1981 BTRFS_SETGET_STACK_FUNCS(super_root, struct btrfs_super_block, root, 64);
1982 BTRFS_SETGET_STACK_FUNCS(super_sys_array_size,
1983                          struct btrfs_super_block, sys_chunk_array_size, 32);
1984 BTRFS_SETGET_STACK_FUNCS(super_chunk_root_generation,
1985                          struct btrfs_super_block, chunk_root_generation, 64);
1986 BTRFS_SETGET_STACK_FUNCS(super_root_level, struct btrfs_super_block,
1987                          root_level, 8);
1988 BTRFS_SETGET_STACK_FUNCS(super_chunk_root, struct btrfs_super_block,
1989                          chunk_root, 64);
1990 BTRFS_SETGET_STACK_FUNCS(super_chunk_root_level, struct btrfs_super_block,
1991                          chunk_root_level, 8);
1992 BTRFS_SETGET_STACK_FUNCS(super_log_root, struct btrfs_super_block,
1993                          log_root, 64);
1994 BTRFS_SETGET_STACK_FUNCS(super_log_root_transid, struct btrfs_super_block,
1995                          log_root_transid, 64);
1996 BTRFS_SETGET_STACK_FUNCS(super_log_root_level, struct btrfs_super_block,
1997                          log_root_level, 8);
1998 BTRFS_SETGET_STACK_FUNCS(super_total_bytes, struct btrfs_super_block,
1999                          total_bytes, 64);
2000 BTRFS_SETGET_STACK_FUNCS(super_bytes_used, struct btrfs_super_block,
2001                          bytes_used, 64);
2002 BTRFS_SETGET_STACK_FUNCS(super_sectorsize, struct btrfs_super_block,
2003                          sectorsize, 32);
2004 BTRFS_SETGET_STACK_FUNCS(super_nodesize, struct btrfs_super_block,
2005                          nodesize, 32);
2006 BTRFS_SETGET_STACK_FUNCS(super_leafsize, struct btrfs_super_block,
2007                          leafsize, 32);
2008 BTRFS_SETGET_STACK_FUNCS(super_stripesize, struct btrfs_super_block,
2009                          stripesize, 32);
2010 BTRFS_SETGET_STACK_FUNCS(super_root_dir, struct btrfs_super_block,
2011                          root_dir_objectid, 64);
2012 BTRFS_SETGET_STACK_FUNCS(super_num_devices, struct btrfs_super_block,
2013                          num_devices, 64);
2014 BTRFS_SETGET_STACK_FUNCS(super_compat_flags, struct btrfs_super_block,
2015                          compat_flags, 64);
2016 BTRFS_SETGET_STACK_FUNCS(super_compat_ro_flags, struct btrfs_super_block,
2017                          compat_ro_flags, 64);
2018 BTRFS_SETGET_STACK_FUNCS(super_incompat_flags, struct btrfs_super_block,
2019                          incompat_flags, 64);
2020 BTRFS_SETGET_STACK_FUNCS(super_csum_type, struct btrfs_super_block,
2021                          csum_type, 16);
2022 BTRFS_SETGET_STACK_FUNCS(super_cache_generation, struct btrfs_super_block,
2023                          cache_generation, 64);
2024
2025 static inline int btrfs_super_csum_size(struct btrfs_super_block *s)
2026 {
2027         int t = btrfs_super_csum_type(s);
2028         BUG_ON(t >= ARRAY_SIZE(btrfs_csum_sizes));
2029         return btrfs_csum_sizes[t];
2030 }
2031
2032 static inline unsigned long btrfs_leaf_data(struct extent_buffer *l)
2033 {
2034         return offsetof(struct btrfs_leaf, items);
2035 }
2036
2037 /* struct btrfs_file_extent_item */
2038 BTRFS_SETGET_FUNCS(file_extent_type, struct btrfs_file_extent_item, type, 8);
2039
2040 static inline unsigned long
2041 btrfs_file_extent_inline_start(struct btrfs_file_extent_item *e)
2042 {
2043         unsigned long offset = (unsigned long)e;
2044         offset += offsetof(struct btrfs_file_extent_item, disk_bytenr);
2045         return offset;
2046 }
2047
2048 static inline u32 btrfs_file_extent_calc_inline_size(u32 datasize)
2049 {
2050         return offsetof(struct btrfs_file_extent_item, disk_bytenr) + datasize;
2051 }
2052
2053 BTRFS_SETGET_FUNCS(file_extent_disk_bytenr, struct btrfs_file_extent_item,
2054                    disk_bytenr, 64);
2055 BTRFS_SETGET_FUNCS(file_extent_generation, struct btrfs_file_extent_item,
2056                    generation, 64);
2057 BTRFS_SETGET_FUNCS(file_extent_disk_num_bytes, struct btrfs_file_extent_item,
2058                    disk_num_bytes, 64);
2059 BTRFS_SETGET_FUNCS(file_extent_offset, struct btrfs_file_extent_item,
2060                   offset, 64);
2061 BTRFS_SETGET_FUNCS(file_extent_num_bytes, struct btrfs_file_extent_item,
2062                    num_bytes, 64);
2063 BTRFS_SETGET_FUNCS(file_extent_ram_bytes, struct btrfs_file_extent_item,
2064                    ram_bytes, 64);
2065 BTRFS_SETGET_FUNCS(file_extent_compression, struct btrfs_file_extent_item,
2066                    compression, 8);
2067 BTRFS_SETGET_FUNCS(file_extent_encryption, struct btrfs_file_extent_item,
2068                    encryption, 8);
2069 BTRFS_SETGET_FUNCS(file_extent_other_encoding, struct btrfs_file_extent_item,
2070                    other_encoding, 16);
2071
2072 /* this returns the number of file bytes represented by the inline item.
2073  * If an item is compressed, this is the uncompressed size
2074  */
2075 static inline u32 btrfs_file_extent_inline_len(struct extent_buffer *eb,
2076                                                struct btrfs_file_extent_item *e)
2077 {
2078         return btrfs_file_extent_ram_bytes(eb, e);
2079 }
2080
2081 /*
2082  * this returns the number of bytes used by the item on disk, minus the
2083  * size of any extent headers.  If a file is compressed on disk, this is
2084  * the compressed size
2085  */
2086 static inline u32 btrfs_file_extent_inline_item_len(struct extent_buffer *eb,
2087                                                     struct btrfs_item *e)
2088 {
2089         unsigned long offset;
2090         offset = offsetof(struct btrfs_file_extent_item, disk_bytenr);
2091         return btrfs_item_size(eb, e) - offset;
2092 }
2093
2094 static inline struct btrfs_root *btrfs_sb(struct super_block *sb)
2095 {
2096         return sb->s_fs_info;
2097 }
2098
2099 static inline u32 btrfs_level_size(struct btrfs_root *root, int level)
2100 {
2101         if (level == 0)
2102                 return root->leafsize;
2103         return root->nodesize;
2104 }
2105
2106 /* helper function to cast into the data area of the leaf. */
2107 #define btrfs_item_ptr(leaf, slot, type) \
2108         ((type *)(btrfs_leaf_data(leaf) + \
2109         btrfs_item_offset_nr(leaf, slot)))
2110
2111 #define btrfs_item_ptr_offset(leaf, slot) \
2112         ((unsigned long)(btrfs_leaf_data(leaf) + \
2113         btrfs_item_offset_nr(leaf, slot)))
2114
2115 static inline struct dentry *fdentry(struct file *file)
2116 {
2117         return file->f_path.dentry;
2118 }
2119
2120 static inline bool btrfs_mixed_space_info(struct btrfs_space_info *space_info)
2121 {
2122         return ((space_info->flags & BTRFS_BLOCK_GROUP_METADATA) &&
2123                 (space_info->flags & BTRFS_BLOCK_GROUP_DATA));
2124 }
2125
2126 static inline gfp_t btrfs_alloc_write_mask(struct address_space *mapping)
2127 {
2128         return mapping_gfp_mask(mapping) & ~__GFP_FS;
2129 }
2130
2131 /* extent-tree.c */
2132 static inline u64 btrfs_calc_trans_metadata_size(struct btrfs_root *root,
2133                                                  unsigned num_items)
2134 {
2135         return (root->leafsize + root->nodesize * (BTRFS_MAX_LEVEL - 1)) *
2136                 3 * num_items;
2137 }
2138
2139 /*
2140  * Doing a truncate won't result in new nodes or leaves, just what we need for
2141  * COW.
2142  */
2143 static inline u64 btrfs_calc_trunc_metadata_size(struct btrfs_root *root,
2144                                                  unsigned num_items)
2145 {
2146         return (root->leafsize + root->nodesize * (BTRFS_MAX_LEVEL - 1)) *
2147                 num_items;
2148 }
2149
2150 void btrfs_put_block_group(struct btrfs_block_group_cache *cache);
2151 int btrfs_run_delayed_refs(struct btrfs_trans_handle *trans,
2152                            struct btrfs_root *root, unsigned long count);
2153 int btrfs_lookup_extent(struct btrfs_root *root, u64 start, u64 len);
2154 int btrfs_lookup_extent_info(struct btrfs_trans_handle *trans,
2155                              struct btrfs_root *root, u64 bytenr,
2156                              u64 num_bytes, u64 *refs, u64 *flags);
2157 int btrfs_pin_extent(struct btrfs_root *root,
2158                      u64 bytenr, u64 num, int reserved);
2159 int btrfs_cross_ref_exist(struct btrfs_trans_handle *trans,
2160                           struct btrfs_root *root,
2161                           u64 objectid, u64 offset, u64 bytenr);
2162 struct btrfs_block_group_cache *btrfs_lookup_block_group(
2163                                                  struct btrfs_fs_info *info,
2164                                                  u64 bytenr);
2165 void btrfs_put_block_group(struct btrfs_block_group_cache *cache);
2166 u64 btrfs_find_block_group(struct btrfs_root *root,
2167                            u64 search_start, u64 search_hint, int owner);
2168 struct extent_buffer *btrfs_alloc_free_block(struct btrfs_trans_handle *trans,
2169                                         struct btrfs_root *root, u32 blocksize,
2170                                         u64 parent, u64 root_objectid,
2171                                         struct btrfs_disk_key *key, int level,
2172                                         u64 hint, u64 empty_size);
2173 void btrfs_free_tree_block(struct btrfs_trans_handle *trans,
2174                            struct btrfs_root *root,
2175                            struct extent_buffer *buf,
2176                            u64 parent, int last_ref);
2177 struct extent_buffer *btrfs_init_new_buffer(struct btrfs_trans_handle *trans,
2178                                             struct btrfs_root *root,
2179                                             u64 bytenr, u32 blocksize,
2180                                             int level);
2181 int btrfs_alloc_reserved_file_extent(struct btrfs_trans_handle *trans,
2182                                      struct btrfs_root *root,
2183                                      u64 root_objectid, u64 owner,
2184                                      u64 offset, struct btrfs_key *ins);
2185 int btrfs_alloc_logged_file_extent(struct btrfs_trans_handle *trans,
2186                                    struct btrfs_root *root,
2187                                    u64 root_objectid, u64 owner, u64 offset,
2188                                    struct btrfs_key *ins);
2189 int btrfs_reserve_extent(struct btrfs_trans_handle *trans,
2190                                   struct btrfs_root *root,
2191                                   u64 num_bytes, u64 min_alloc_size,
2192                                   u64 empty_size, u64 hint_byte,
2193                                   u64 search_end, struct btrfs_key *ins,
2194                                   u64 data);
2195 int btrfs_inc_ref(struct btrfs_trans_handle *trans, struct btrfs_root *root,
2196                   struct extent_buffer *buf, int full_backref);
2197 int btrfs_dec_ref(struct btrfs_trans_handle *trans, struct btrfs_root *root,
2198                   struct extent_buffer *buf, int full_backref);
2199 int btrfs_set_disk_extent_flags(struct btrfs_trans_handle *trans,
2200                                 struct btrfs_root *root,
2201                                 u64 bytenr, u64 num_bytes, u64 flags,
2202                                 int is_data);
2203 int btrfs_free_extent(struct btrfs_trans_handle *trans,
2204                       struct btrfs_root *root,
2205                       u64 bytenr, u64 num_bytes, u64 parent,
2206                       u64 root_objectid, u64 owner, u64 offset);
2207
2208 int btrfs_free_reserved_extent(struct btrfs_root *root, u64 start, u64 len);
2209 int btrfs_prepare_extent_commit(struct btrfs_trans_handle *trans,
2210                                 struct btrfs_root *root);
2211 int btrfs_finish_extent_commit(struct btrfs_trans_handle *trans,
2212                                struct btrfs_root *root);
2213 int btrfs_inc_extent_ref(struct btrfs_trans_handle *trans,
2214                          struct btrfs_root *root,
2215                          u64 bytenr, u64 num_bytes, u64 parent,
2216                          u64 root_objectid, u64 owner, u64 offset);
2217
2218 int btrfs_write_dirty_block_groups(struct btrfs_trans_handle *trans,
2219                                     struct btrfs_root *root);
2220 int btrfs_extent_readonly(struct btrfs_root *root, u64 bytenr);
2221 int btrfs_free_block_groups(struct btrfs_fs_info *info);
2222 int btrfs_read_block_groups(struct btrfs_root *root);
2223 int btrfs_can_relocate(struct btrfs_root *root, u64 bytenr);
2224 int btrfs_make_block_group(struct btrfs_trans_handle *trans,
2225                            struct btrfs_root *root, u64 bytes_used,
2226                            u64 type, u64 chunk_objectid, u64 chunk_offset,
2227                            u64 size);
2228 int btrfs_remove_block_group(struct btrfs_trans_handle *trans,
2229                              struct btrfs_root *root, u64 group_start);
2230 u64 btrfs_reduce_alloc_profile(struct btrfs_root *root, u64 flags);
2231 u64 btrfs_get_alloc_profile(struct btrfs_root *root, int data);
2232 void btrfs_set_inode_space_info(struct btrfs_root *root, struct inode *ionde);
2233 void btrfs_clear_space_info_full(struct btrfs_fs_info *info);
2234 int btrfs_check_data_free_space(struct inode *inode, u64 bytes);
2235 void btrfs_free_reserved_data_space(struct inode *inode, u64 bytes);
2236 void btrfs_trans_release_metadata(struct btrfs_trans_handle *trans,
2237                                 struct btrfs_root *root);
2238 int btrfs_orphan_reserve_metadata(struct btrfs_trans_handle *trans,
2239                                   struct inode *inode);
2240 void btrfs_orphan_release_metadata(struct inode *inode);
2241 int btrfs_snap_reserve_metadata(struct btrfs_trans_handle *trans,
2242                                 struct btrfs_pending_snapshot *pending);
2243 int btrfs_delalloc_reserve_metadata(struct inode *inode, u64 num_bytes);
2244 void btrfs_delalloc_release_metadata(struct inode *inode, u64 num_bytes);
2245 int btrfs_delalloc_reserve_space(struct inode *inode, u64 num_bytes);
2246 void btrfs_delalloc_release_space(struct inode *inode, u64 num_bytes);
2247 void btrfs_init_block_rsv(struct btrfs_block_rsv *rsv);
2248 struct btrfs_block_rsv *btrfs_alloc_block_rsv(struct btrfs_root *root);
2249 void btrfs_free_block_rsv(struct btrfs_root *root,
2250                           struct btrfs_block_rsv *rsv);
2251 int btrfs_block_rsv_add(struct btrfs_root *root,
2252                         struct btrfs_block_rsv *block_rsv,
2253                         u64 num_bytes);
2254 int btrfs_block_rsv_check(struct btrfs_root *root,
2255                           struct btrfs_block_rsv *block_rsv, int min_factor);
2256 int btrfs_block_rsv_refill(struct btrfs_root *root,
2257                           struct btrfs_block_rsv *block_rsv,
2258                           u64 min_reserved);
2259 int btrfs_block_rsv_migrate(struct btrfs_block_rsv *src_rsv,
2260                             struct btrfs_block_rsv *dst_rsv,
2261                             u64 num_bytes);
2262 void btrfs_block_rsv_release(struct btrfs_root *root,
2263                              struct btrfs_block_rsv *block_rsv,
2264                              u64 num_bytes);
2265 int btrfs_set_block_group_ro(struct btrfs_root *root,
2266                              struct btrfs_block_group_cache *cache);
2267 int btrfs_set_block_group_rw(struct btrfs_root *root,
2268                              struct btrfs_block_group_cache *cache);
2269 void btrfs_put_block_group_cache(struct btrfs_fs_info *info);
2270 u64 btrfs_account_ro_block_groups_free_space(struct btrfs_space_info *sinfo);
2271 int btrfs_error_unpin_extent_range(struct btrfs_root *root,
2272                                    u64 start, u64 end);
2273 int btrfs_error_discard_extent(struct btrfs_root *root, u64 bytenr,
2274                                u64 num_bytes, u64 *actual_bytes);
2275 int btrfs_force_chunk_alloc(struct btrfs_trans_handle *trans,
2276                             struct btrfs_root *root, u64 type);
2277 int btrfs_trim_fs(struct btrfs_root *root, struct fstrim_range *range);
2278
2279 int btrfs_init_space_info(struct btrfs_fs_info *fs_info);
2280 /* ctree.c */
2281 int btrfs_bin_search(struct extent_buffer *eb, struct btrfs_key *key,
2282                      int level, int *slot);
2283 int btrfs_comp_cpu_keys(struct btrfs_key *k1, struct btrfs_key *k2);
2284 int btrfs_previous_item(struct btrfs_root *root,
2285                         struct btrfs_path *path, u64 min_objectid,
2286                         int type);
2287 int btrfs_set_item_key_safe(struct btrfs_trans_handle *trans,
2288                             struct btrfs_root *root, struct btrfs_path *path,
2289                             struct btrfs_key *new_key);
2290 struct extent_buffer *btrfs_root_node(struct btrfs_root *root);
2291 struct extent_buffer *btrfs_lock_root_node(struct btrfs_root *root);
2292 int btrfs_find_next_key(struct btrfs_root *root, struct btrfs_path *path,
2293                         struct btrfs_key *key, int lowest_level,
2294                         int cache_only, u64 min_trans);
2295 int btrfs_search_forward(struct btrfs_root *root, struct btrfs_key *min_key,
2296                          struct btrfs_key *max_key,
2297                          struct btrfs_path *path, int cache_only,
2298                          u64 min_trans);
2299 int btrfs_cow_block(struct btrfs_trans_handle *trans,
2300                     struct btrfs_root *root, struct extent_buffer *buf,
2301                     struct extent_buffer *parent, int parent_slot,
2302                     struct extent_buffer **cow_ret);
2303 int btrfs_copy_root(struct btrfs_trans_handle *trans,
2304                       struct btrfs_root *root,
2305                       struct extent_buffer *buf,
2306                       struct extent_buffer **cow_ret, u64 new_root_objectid);
2307 int btrfs_block_can_be_shared(struct btrfs_root *root,
2308                               struct extent_buffer *buf);
2309 int btrfs_extend_item(struct btrfs_trans_handle *trans, struct btrfs_root
2310                       *root, struct btrfs_path *path, u32 data_size);
2311 int btrfs_truncate_item(struct btrfs_trans_handle *trans,
2312                         struct btrfs_root *root,
2313                         struct btrfs_path *path,
2314                         u32 new_size, int from_end);
2315 int btrfs_split_item(struct btrfs_trans_handle *trans,
2316                      struct btrfs_root *root,
2317                      struct btrfs_path *path,
2318                      struct btrfs_key *new_key,
2319                      unsigned long split_offset);
2320 int btrfs_duplicate_item(struct btrfs_trans_handle *trans,
2321                          struct btrfs_root *root,
2322                          struct btrfs_path *path,
2323                          struct btrfs_key *new_key);
2324 int btrfs_search_slot(struct btrfs_trans_handle *trans, struct btrfs_root
2325                       *root, struct btrfs_key *key, struct btrfs_path *p, int
2326                       ins_len, int cow);
2327 int btrfs_realloc_node(struct btrfs_trans_handle *trans,
2328                        struct btrfs_root *root, struct extent_buffer *parent,
2329                        int start_slot, int cache_only, u64 *last_ret,
2330                        struct btrfs_key *progress);
2331 void btrfs_release_path(struct btrfs_path *p);
2332 struct btrfs_path *btrfs_alloc_path(void);
2333 void btrfs_free_path(struct btrfs_path *p);
2334 void btrfs_set_path_blocking(struct btrfs_path *p);
2335 void btrfs_clear_path_blocking(struct btrfs_path *p,
2336                                struct extent_buffer *held, int held_rw);
2337 void btrfs_unlock_up_safe(struct btrfs_path *p, int level);
2338
2339 int btrfs_del_items(struct btrfs_trans_handle *trans, struct btrfs_root *root,
2340                    struct btrfs_path *path, int slot, int nr);
2341 static inline int btrfs_del_item(struct btrfs_trans_handle *trans,
2342                                  struct btrfs_root *root,
2343                                  struct btrfs_path *path)
2344 {
2345         return btrfs_del_items(trans, root, path, path->slots[0], 1);
2346 }
2347
2348 int setup_items_for_insert(struct btrfs_trans_handle *trans,
2349                            struct btrfs_root *root, struct btrfs_path *path,
2350                            struct btrfs_key *cpu_key, u32 *data_size,
2351                            u32 total_data, u32 total_size, int nr);
2352 int btrfs_insert_item(struct btrfs_trans_handle *trans, struct btrfs_root
2353                       *root, struct btrfs_key *key, void *data, u32 data_size);
2354 int btrfs_insert_empty_items(struct btrfs_trans_handle *trans,
2355                              struct btrfs_root *root,
2356                              struct btrfs_path *path,
2357                              struct btrfs_key *cpu_key, u32 *data_size, int nr);
2358
2359 static inline int btrfs_insert_empty_item(struct btrfs_trans_handle *trans,
2360                                           struct btrfs_root *root,
2361                                           struct btrfs_path *path,
2362                                           struct btrfs_key *key,
2363                                           u32 data_size)
2364 {
2365         return btrfs_insert_empty_items(trans, root, path, key, &data_size, 1);
2366 }
2367
2368 int btrfs_next_leaf(struct btrfs_root *root, struct btrfs_path *path);
2369 int btrfs_prev_leaf(struct btrfs_root *root, struct btrfs_path *path);
2370 int btrfs_leaf_free_space(struct btrfs_root *root, struct extent_buffer *leaf);
2371 void btrfs_drop_snapshot(struct btrfs_root *root,
2372                          struct btrfs_block_rsv *block_rsv, int update_ref);
2373 int btrfs_drop_subtree(struct btrfs_trans_handle *trans,
2374                         struct btrfs_root *root,
2375                         struct extent_buffer *node,
2376                         struct extent_buffer *parent);
2377 static inline int btrfs_fs_closing(struct btrfs_fs_info *fs_info)
2378 {
2379         /*
2380          * Get synced with close_ctree()
2381          */
2382         smp_mb();
2383         return fs_info->closing;
2384 }
2385
2386 /* root-item.c */
2387 int btrfs_find_root_ref(struct btrfs_root *tree_root,
2388                         struct btrfs_path *path,
2389                         u64 root_id, u64 ref_id);
2390 int btrfs_add_root_ref(struct btrfs_trans_handle *trans,
2391                        struct btrfs_root *tree_root,
2392                        u64 root_id, u64 ref_id, u64 dirid, u64 sequence,
2393                        const char *name, int name_len);
2394 int btrfs_del_root_ref(struct btrfs_trans_handle *trans,
2395                        struct btrfs_root *tree_root,
2396                        u64 root_id, u64 ref_id, u64 dirid, u64 *sequence,
2397                        const char *name, int name_len);
2398 int btrfs_del_root(struct btrfs_trans_handle *trans, struct btrfs_root *root,
2399                    struct btrfs_key *key);
2400 int btrfs_insert_root(struct btrfs_trans_handle *trans, struct btrfs_root
2401                       *root, struct btrfs_key *key, struct btrfs_root_item
2402                       *item);
2403 int btrfs_update_root(struct btrfs_trans_handle *trans, struct btrfs_root
2404                       *root, struct btrfs_key *key, struct btrfs_root_item
2405                       *item);
2406 int btrfs_find_last_root(struct btrfs_root *root, u64 objectid, struct
2407                          btrfs_root_item *item, struct btrfs_key *key);
2408 int btrfs_find_dead_roots(struct btrfs_root *root, u64 objectid);
2409 int btrfs_find_orphan_roots(struct btrfs_root *tree_root);
2410 void btrfs_set_root_node(struct btrfs_root_item *item,
2411                          struct extent_buffer *node);
2412 void btrfs_check_and_init_root_item(struct btrfs_root_item *item);
2413
2414 /* dir-item.c */
2415 int btrfs_insert_dir_item(struct btrfs_trans_handle *trans,
2416                           struct btrfs_root *root, const char *name,
2417                           int name_len, struct inode *dir,
2418                           struct btrfs_key *location, u8 type, u64 index);
2419 struct btrfs_dir_item *btrfs_lookup_dir_item(struct btrfs_trans_handle *trans,
2420                                              struct btrfs_root *root,
2421                                              struct btrfs_path *path, u64 dir,
2422                                              const char *name, int name_len,
2423                                              int mod);
2424 struct btrfs_dir_item *
2425 btrfs_lookup_dir_index_item(struct btrfs_trans_handle *trans,
2426                             struct btrfs_root *root,
2427                             struct btrfs_path *path, u64 dir,
2428                             u64 objectid, const char *name, int name_len,
2429                             int mod);
2430 struct btrfs_dir_item *
2431 btrfs_search_dir_index_item(struct btrfs_root *root,
2432                             struct btrfs_path *path, u64 dirid,
2433                             const char *name, int name_len);
2434 struct btrfs_dir_item *btrfs_match_dir_item_name(struct btrfs_root *root,
2435                               struct btrfs_path *path,
2436                               const char *name, int name_len);
2437 int btrfs_delete_one_dir_name(struct btrfs_trans_handle *trans,
2438                               struct btrfs_root *root,
2439                               struct btrfs_path *path,
2440                               struct btrfs_dir_item *di);
2441 int btrfs_insert_xattr_item(struct btrfs_trans_handle *trans,
2442                             struct btrfs_root *root,
2443                             struct btrfs_path *path, u64 objectid,
2444                             const char *name, u16 name_len,
2445                             const void *data, u16 data_len);
2446 struct btrfs_dir_item *btrfs_lookup_xattr(struct btrfs_trans_handle *trans,
2447                                           struct btrfs_root *root,
2448                                           struct btrfs_path *path, u64 dir,
2449                                           const char *name, u16 name_len,
2450                                           int mod);
2451 int verify_dir_item(struct btrfs_root *root,
2452                     struct extent_buffer *leaf,
2453                     struct btrfs_dir_item *dir_item);
2454
2455 /* orphan.c */
2456 int btrfs_insert_orphan_item(struct btrfs_trans_handle *trans,
2457                              struct btrfs_root *root, u64 offset);
2458 int btrfs_del_orphan_item(struct btrfs_trans_handle *trans,
2459                           struct btrfs_root *root, u64 offset);
2460 int btrfs_find_orphan_item(struct btrfs_root *root, u64 offset);
2461
2462 /* inode-item.c */
2463 int btrfs_insert_inode_ref(struct btrfs_trans_handle *trans,
2464                            struct btrfs_root *root,
2465                            const char *name, int name_len,
2466                            u64 inode_objectid, u64 ref_objectid, u64 index);
2467 int btrfs_del_inode_ref(struct btrfs_trans_handle *trans,
2468                            struct btrfs_root *root,
2469                            const char *name, int name_len,
2470                            u64 inode_objectid, u64 ref_objectid, u64 *index);
2471 struct btrfs_inode_ref *
2472 btrfs_lookup_inode_ref(struct btrfs_trans_handle *trans,
2473                         struct btrfs_root *root,
2474                         struct btrfs_path *path,
2475                         const char *name, int name_len,
2476                         u64 inode_objectid, u64 ref_objectid, int mod);
2477 int btrfs_insert_empty_inode(struct btrfs_trans_handle *trans,
2478                              struct btrfs_root *root,
2479                              struct btrfs_path *path, u64 objectid);
2480 int btrfs_lookup_inode(struct btrfs_trans_handle *trans, struct btrfs_root
2481                        *root, struct btrfs_path *path,
2482                        struct btrfs_key *location, int mod);
2483
2484 /* file-item.c */
2485 int btrfs_del_csums(struct btrfs_trans_handle *trans,
2486                     struct btrfs_root *root, u64 bytenr, u64 len);
2487 int btrfs_lookup_bio_sums(struct btrfs_root *root, struct inode *inode,
2488                           struct bio *bio, u32 *dst);
2489 int btrfs_lookup_bio_sums_dio(struct btrfs_root *root, struct inode *inode,
2490                               struct bio *bio, u64 logical_offset, u32 *dst);
2491 int btrfs_insert_file_extent(struct btrfs_trans_handle *trans,
2492                              struct btrfs_root *root,
2493                              u64 objectid, u64 pos,
2494                              u64 disk_offset, u64 disk_num_bytes,
2495                              u64 num_bytes, u64 offset, u64 ram_bytes,
2496                              u8 compression, u8 encryption, u16 other_encoding);
2497 int btrfs_lookup_file_extent(struct btrfs_trans_handle *trans,
2498                              struct btrfs_root *root,
2499                              struct btrfs_path *path, u64 objectid,
2500                              u64 bytenr, int mod);
2501 int btrfs_csum_file_blocks(struct btrfs_trans_handle *trans,
2502                            struct btrfs_root *root,
2503                            struct btrfs_ordered_sum *sums);
2504 int btrfs_csum_one_bio(struct btrfs_root *root, struct inode *inode,
2505                        struct bio *bio, u64 file_start, int contig);
2506 struct btrfs_csum_item *btrfs_lookup_csum(struct btrfs_trans_handle *trans,
2507                                           struct btrfs_root *root,
2508                                           struct btrfs_path *path,
2509                                           u64 bytenr, int cow);
2510 int btrfs_csum_truncate(struct btrfs_trans_handle *trans,
2511                         struct btrfs_root *root, struct btrfs_path *path,
2512                         u64 isize);
2513 int btrfs_lookup_csums_range(struct btrfs_root *root, u64 start, u64 end,
2514                              struct list_head *list, int search_commit);
2515 /* inode.c */
2516 struct extent_map *btrfs_get_extent_fiemap(struct inode *inode, struct page *page,
2517                                            size_t pg_offset, u64 start, u64 len,
2518                                            int create);
2519
2520 /* RHEL and EL kernels have a patch that renames PG_checked to FsMisc */
2521 #if defined(ClearPageFsMisc) && !defined(ClearPageChecked)
2522 #define ClearPageChecked ClearPageFsMisc
2523 #define SetPageChecked SetPageFsMisc
2524 #define PageChecked PageFsMisc
2525 #endif
2526
2527 /* This forces readahead on a given range of bytes in an inode */
2528 static inline void btrfs_force_ra(struct address_space *mapping,
2529                                   struct file_ra_state *ra, struct file *file,
2530                                   pgoff_t offset, unsigned long req_size)
2531 {
2532         page_cache_sync_readahead(mapping, ra, file, offset, req_size);
2533 }
2534
2535 struct inode *btrfs_lookup_dentry(struct inode *dir, struct dentry *dentry);
2536 int btrfs_set_inode_index(struct inode *dir, u64 *index);
2537 int btrfs_unlink_inode(struct btrfs_trans_handle *trans,
2538                        struct btrfs_root *root,
2539                        struct inode *dir, struct inode *inode,
2540                        const char *name, int name_len);
2541 int btrfs_add_link(struct btrfs_trans_handle *trans,
2542                    struct inode *parent_inode, struct inode *inode,
2543                    const char *name, int name_len, int add_backref, u64 index);
2544 int btrfs_unlink_subvol(struct btrfs_trans_handle *trans,
2545                         struct btrfs_root *root,
2546                         struct inode *dir, u64 objectid,
2547                         const char *name, int name_len);
2548 int btrfs_truncate_inode_items(struct btrfs_trans_handle *trans,
2549                                struct btrfs_root *root,
2550                                struct inode *inode, u64 new_size,
2551                                u32 min_type);
2552
2553 int btrfs_start_delalloc_inodes(struct btrfs_root *root, int delay_iput);
2554 int btrfs_set_extent_delalloc(struct inode *inode, u64 start, u64 end,
2555                               struct extent_state **cached_state);
2556 int btrfs_writepages(struct address_space *mapping,
2557                      struct writeback_control *wbc);
2558 int btrfs_create_subvol_root(struct btrfs_trans_handle *trans,
2559                              struct btrfs_root *new_root, u64 new_dirid);
2560 int btrfs_merge_bio_hook(struct page *page, unsigned long offset,
2561                          size_t size, struct bio *bio, unsigned long bio_flags);
2562
2563 int btrfs_page_mkwrite(struct vm_area_struct *vma, struct vm_fault *vmf);
2564 int btrfs_readpage(struct file *file, struct page *page);
2565 void btrfs_evict_inode(struct inode *inode);
2566 int btrfs_write_inode(struct inode *inode, struct writeback_control *wbc);
2567 void btrfs_dirty_inode(struct inode *inode, int flags);
2568 struct inode *btrfs_alloc_inode(struct super_block *sb);
2569 void btrfs_destroy_inode(struct inode *inode);
2570 int btrfs_drop_inode(struct inode *inode);
2571 int btrfs_init_cachep(void);
2572 void btrfs_destroy_cachep(void);
2573 long btrfs_ioctl_trans_end(struct file *file);
2574 struct inode *btrfs_iget(struct super_block *s, struct btrfs_key *location,
2575                          struct btrfs_root *root, int *was_new);
2576 struct extent_map *btrfs_get_extent(struct inode *inode, struct page *page,
2577                                     size_t pg_offset, u64 start, u64 end,
2578                                     int create);
2579 int btrfs_update_inode(struct btrfs_trans_handle *trans,
2580                               struct btrfs_root *root,
2581                               struct inode *inode);
2582 int btrfs_orphan_add(struct btrfs_trans_handle *trans, struct inode *inode);
2583 int btrfs_orphan_del(struct btrfs_trans_handle *trans, struct inode *inode);
2584 int btrfs_orphan_cleanup(struct btrfs_root *root);
2585 void btrfs_orphan_commit_root(struct btrfs_trans_handle *trans,
2586                               struct btrfs_root *root);
2587 int btrfs_cont_expand(struct inode *inode, loff_t oldsize, loff_t size);
2588 int btrfs_invalidate_inodes(struct btrfs_root *root);
2589 void btrfs_add_delayed_iput(struct inode *inode);
2590 void btrfs_run_delayed_iputs(struct btrfs_root *root);
2591 int btrfs_prealloc_file_range(struct inode *inode, int mode,
2592                               u64 start, u64 num_bytes, u64 min_size,
2593                               loff_t actual_len, u64 *alloc_hint);
2594 int btrfs_prealloc_file_range_trans(struct inode *inode,
2595                                     struct btrfs_trans_handle *trans, int mode,
2596                                     u64 start, u64 num_bytes, u64 min_size,
2597                                     loff_t actual_len, u64 *alloc_hint);
2598 extern const struct dentry_operations btrfs_dentry_operations;
2599
2600 /* ioctl.c */
2601 long btrfs_ioctl(struct file *file, unsigned int cmd, unsigned long arg);
2602 void btrfs_update_iflags(struct inode *inode);
2603 void btrfs_inherit_iflags(struct inode *inode, struct inode *dir);
2604 int btrfs_defrag_file(struct inode *inode, struct file *file,
2605                       struct btrfs_ioctl_defrag_range_args *range,
2606                       u64 newer_than, unsigned long max_pages);
2607 /* file.c */
2608 int btrfs_add_inode_defrag(struct btrfs_trans_handle *trans,
2609                            struct inode *inode);
2610 int btrfs_run_defrag_inodes(struct btrfs_fs_info *fs_info);
2611 int btrfs_sync_file(struct file *file, loff_t start, loff_t end, int datasync);
2612 int btrfs_drop_extent_cache(struct inode *inode, u64 start, u64 end,
2613                             int skip_pinned);
2614 extern const struct file_operations btrfs_file_operations;
2615 int btrfs_drop_extents(struct btrfs_trans_handle *trans, struct inode *inode,
2616                        u64 start, u64 end, u64 *hint_byte, int drop_cache);
2617 int btrfs_mark_extent_written(struct btrfs_trans_handle *trans,
2618                               struct inode *inode, u64 start, u64 end);
2619 int btrfs_release_file(struct inode *inode, struct file *file);
2620 void btrfs_drop_pages(struct page **pages, size_t num_pages);
2621 int btrfs_dirty_pages(struct btrfs_root *root, struct inode *inode,
2622                       struct page **pages, size_t num_pages,
2623                       loff_t pos, size_t write_bytes,
2624                       struct extent_state **cached);
2625
2626 /* tree-defrag.c */
2627 int btrfs_defrag_leaves(struct btrfs_trans_handle *trans,
2628                         struct btrfs_root *root, int cache_only);
2629
2630 /* sysfs.c */
2631 int btrfs_init_sysfs(void);
2632 void btrfs_exit_sysfs(void);
2633
2634 /* xattr.c */
2635 ssize_t btrfs_listxattr(struct dentry *dentry, char *buffer, size_t size);
2636
2637 /* super.c */
2638 int btrfs_parse_options(struct btrfs_root *root, char *options);
2639 int btrfs_sync_fs(struct super_block *sb, int wait);
2640 void __btrfs_std_error(struct btrfs_fs_info *fs_info, const char *function,
2641                      unsigned int line, int errno);
2642
2643 #define btrfs_std_error(fs_info, errno)                         \
2644 do {                                                            \
2645         if ((errno))                                            \
2646                 __btrfs_std_error((fs_info), __func__, __LINE__, (errno));\
2647 } while (0)
2648
2649 /* acl.c */
2650 #ifdef CONFIG_BTRFS_FS_POSIX_ACL
2651 struct posix_acl *btrfs_get_acl(struct inode *inode, int type);
2652 int btrfs_init_acl(struct btrfs_trans_handle *trans,
2653                    struct inode *inode, struct inode *dir);
2654 int btrfs_acl_chmod(struct inode *inode);
2655 #else
2656 #define btrfs_get_acl NULL
2657 static inline int btrfs_init_acl(struct btrfs_trans_handle *trans,
2658                                  struct inode *inode, struct inode *dir)
2659 {
2660         return 0;
2661 }
2662 static inline int btrfs_acl_chmod(struct inode *inode)
2663 {
2664         return 0;
2665 }
2666 #endif
2667
2668 /* relocation.c */
2669 int btrfs_relocate_block_group(struct btrfs_root *root, u64 group_start);
2670 int btrfs_init_reloc_root(struct btrfs_trans_handle *trans,
2671                           struct btrfs_root *root);
2672 int btrfs_update_reloc_root(struct btrfs_trans_handle *trans,
2673                             struct btrfs_root *root);
2674 int btrfs_recover_relocation(struct btrfs_root *root);
2675 int btrfs_reloc_clone_csums(struct inode *inode, u64 file_pos, u64 len);
2676 void btrfs_reloc_cow_block(struct btrfs_trans_handle *trans,
2677                            struct btrfs_root *root, struct extent_buffer *buf,
2678                            struct extent_buffer *cow);
2679 void btrfs_reloc_pre_snapshot(struct btrfs_trans_handle *trans,
2680                               struct btrfs_pending_snapshot *pending,
2681                               u64 *bytes_to_reserve);
2682 void btrfs_reloc_post_snapshot(struct btrfs_trans_handle *trans,
2683                               struct btrfs_pending_snapshot *pending);
2684
2685 /* scrub.c */
2686 int btrfs_scrub_dev(struct btrfs_root *root, u64 devid, u64 start, u64 end,
2687                     struct btrfs_scrub_progress *progress, int readonly);
2688 int btrfs_scrub_pause(struct btrfs_root *root);
2689 int btrfs_scrub_pause_super(struct btrfs_root *root);
2690 int btrfs_scrub_continue(struct btrfs_root *root);
2691 int btrfs_scrub_continue_super(struct btrfs_root *root);
2692 int btrfs_scrub_cancel(struct btrfs_root *root);
2693 int btrfs_scrub_cancel_dev(struct btrfs_root *root, struct btrfs_device *dev);
2694 int btrfs_scrub_cancel_devid(struct btrfs_root *root, u64 devid);
2695 int btrfs_scrub_progress(struct btrfs_root *root, u64 devid,
2696                          struct btrfs_scrub_progress *progress);
2697
2698 #endif