arch/mips/include/asm/pgalloc.h

   1 /*
   2  * This file is subject to the terms and conditions of the GNU General Public
   3  * License.  See the file "COPYING" in the main directory of this archive
   4  * for more details.
   5  *
   6  * Copyright (C) 1994 - 2001, 2003 by Ralf Baechle
   7  * Copyright (C) 1999, 2000, 2001 Silicon Graphics, Inc.
   8  */
   9 #ifndef _ASM_PGALLOC_H
  10 #define _ASM_PGALLOC_H
  11
  12 #include <linux/highmem.h>
  13 #include <linux/mm.h>
  14 #include <linux/sched.h>
  15
  16 #define __HAVE_ARCH_PMD_ALLOC_ONE
  17 #define __HAVE_ARCH_PUD_ALLOC_ONE
  18 #define __HAVE_ARCH_PGD_FREE
  19 #include <asm-generic/pgalloc.h>
  20
  21 static inline void pmd_populate_kernel(struct mm_struct *mm, pmd_t *pmd,
  22         pte_t *pte)
  23 {
  24         set_pmd(pmd, __pmd((unsigned long)pte));
  25 }
  26
  27 static inline void pmd_populate(struct mm_struct *mm, pmd_t *pmd,
  28         pgtable_t pte)
  29 {
  30         set_pmd(pmd, __pmd((unsigned long)page_address(pte)));
  31 }
  32
  33 /*
  34  * Initialize a new pmd table with invalid pointers.
  35  */
  36 extern void pmd_init(void *addr);
  37
  38 #ifndef __PAGETABLE_PMD_FOLDED
  39
  40 static inline void pud_populate(struct mm_struct *mm, pud_t *pud, pmd_t *pmd)
  41 {
  42         set_pud(pud, __pud((unsigned long)pmd));
  43 }
  44 #endif
  45
  46 /*
  47  * Initialize a new pgd table with invalid pointers.
  48  */
  49 extern void pgd_init(void *addr);
  50 extern pgd_t *pgd_alloc(struct mm_struct *mm);
  51
  52 static inline void pgd_free(struct mm_struct *mm, pgd_t *pgd)
  53 {
  54         pagetable_free(virt_to_ptdesc(pgd));
  55 }
  56
  57 #define __pte_free_tlb(tlb, pte, address)                       \
  58 do {                                                            \
  59         pagetable_pte_dtor(page_ptdesc(pte));                   \
  60         tlb_remove_page_ptdesc((tlb), page_ptdesc(pte));        \
  61 } while (0)
  62
  63 #ifndef __PAGETABLE_PMD_FOLDED
  64
  65 static inline pmd_t *pmd_alloc_one(struct mm_struct *mm, unsigned long address)
  66 {
  67         pmd_t *pmd;
  68         struct ptdesc *ptdesc;
  69
  70         ptdesc = pagetable_alloc(GFP_KERNEL_ACCOUNT, PMD_TABLE_ORDER);
  71         if (!ptdesc)
  72                 return NULL;
  73
  74         if (!pagetable_pmd_ctor(ptdesc)) {
  75                 pagetable_free(ptdesc);
  76                 return NULL;
  77         }
  78
  79         pmd = ptdesc_address(ptdesc);
  80         pmd_init(pmd);
  81         return pmd;
  82 }
  83
  84 #define __pmd_free_tlb(tlb, x, addr)    pmd_free((tlb)->mm, x)
  85
  86 #endif
  87
  88 #ifndef __PAGETABLE_PUD_FOLDED
  89
  90 static inline pud_t *pud_alloc_one(struct mm_struct *mm, unsigned long address)
  91 {
  92         pud_t *pud;
  93         struct ptdesc *ptdesc = pagetable_alloc(GFP_KERNEL & ~__GFP_HIGHMEM,
  94                         PUD_TABLE_ORDER);
  95
  96         if (!ptdesc)
  97                 return NULL;
  98         pagetable_pud_ctor(ptdesc);
  99         pud = ptdesc_address(ptdesc);
 100
 101         pud_init(pud);
 102         return pud;
 103 }
 104
 105 static inline void p4d_populate(struct mm_struct *mm, p4d_t *p4d, pud_t *pud)
 106 {
 107         set_p4d(p4d, __p4d((unsigned long)pud));
 108 }
 109
 110 #define __pud_free_tlb(tlb, x, addr)    pud_free((tlb)->mm, x)
 111
 112 #endif /* __PAGETABLE_PUD_FOLDED */
 113
 114 extern void pagetable_init(void);
 115
 116 #endif /* _ASM_PGALLOC_H */