dax: New fault locking
[sfrench/cifs-2.6.git] / include / linux / dax.h
1 #ifndef _LINUX_DAX_H
2 #define _LINUX_DAX_H
3
4 #include <linux/fs.h>
5 #include <linux/mm.h>
6 #include <linux/radix-tree.h>
7 #include <asm/pgtable.h>
8
9 /* We use lowest available exceptional entry bit for locking */
10 #define RADIX_DAX_ENTRY_LOCK (1 << RADIX_TREE_EXCEPTIONAL_SHIFT)
11
12 ssize_t dax_do_io(struct kiocb *, struct inode *, struct iov_iter *, loff_t,
13                   get_block_t, dio_iodone_t, int flags);
14 int dax_zero_page_range(struct inode *, loff_t from, unsigned len, get_block_t);
15 int dax_truncate_page(struct inode *, loff_t from, get_block_t);
16 int dax_fault(struct vm_area_struct *, struct vm_fault *, get_block_t);
17 int __dax_fault(struct vm_area_struct *, struct vm_fault *, get_block_t);
18 int dax_delete_mapping_entry(struct address_space *mapping, pgoff_t index);
19 void dax_wake_mapping_entry_waiter(struct address_space *mapping,
20                                    pgoff_t index, bool wake_all);
21
22 #ifdef CONFIG_FS_DAX
23 struct page *read_dax_sector(struct block_device *bdev, sector_t n);
24 int __dax_zero_page_range(struct block_device *bdev, sector_t sector,
25                 unsigned int offset, unsigned int length);
26 #else
27 static inline struct page *read_dax_sector(struct block_device *bdev,
28                 sector_t n)
29 {
30         return ERR_PTR(-ENXIO);
31 }
32 static inline int __dax_zero_page_range(struct block_device *bdev,
33                 sector_t sector, unsigned int offset, unsigned int length)
34 {
35         return -ENXIO;
36 }
37 #endif
38
39 #if defined(CONFIG_TRANSPARENT_HUGEPAGE)
40 int dax_pmd_fault(struct vm_area_struct *, unsigned long addr, pmd_t *,
41                                 unsigned int flags, get_block_t);
42 int __dax_pmd_fault(struct vm_area_struct *, unsigned long addr, pmd_t *,
43                                 unsigned int flags, get_block_t);
44 #else
45 static inline int dax_pmd_fault(struct vm_area_struct *vma, unsigned long addr,
46                                 pmd_t *pmd, unsigned int flags, get_block_t gb)
47 {
48         return VM_FAULT_FALLBACK;
49 }
50 #define __dax_pmd_fault dax_pmd_fault
51 #endif
52 int dax_pfn_mkwrite(struct vm_area_struct *, struct vm_fault *);
53 #define dax_mkwrite(vma, vmf, gb)       dax_fault(vma, vmf, gb)
54 #define __dax_mkwrite(vma, vmf, gb)     __dax_fault(vma, vmf, gb)
55
56 static inline bool vma_is_dax(struct vm_area_struct *vma)
57 {
58         return vma->vm_file && IS_DAX(vma->vm_file->f_mapping->host);
59 }
60
61 static inline bool dax_mapping(struct address_space *mapping)
62 {
63         return mapping->host && IS_DAX(mapping->host);
64 }
65
66 struct writeback_control;
67 int dax_writeback_mapping_range(struct address_space *mapping,
68                 struct block_device *bdev, struct writeback_control *wbc);
69 #endif