arch/powerpc/include/asm/kvm_ppc.h

   1 /*
   2  * This program is free software; you can redistribute it and/or modify
   3  * it under the terms of the GNU General Public License, version 2, as
   4  * published by the Free Software Foundation.
   5  *
   6  * This program is distributed in the hope that it will be useful,
   7  * but WITHOUT ANY WARRANTY; without even the implied warranty of
   8  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
   9  * GNU General Public License for more details.
  10  *
  11  * You should have received a copy of the GNU General Public License
  12  * along with this program; if not, write to the Free Software
  13  * Foundation, 51 Franklin Street, Fifth Floor, Boston, MA  02110-1301, USA.
  14  *
  15  * Copyright IBM Corp. 2008
  16  *
  17  * Authors: Hollis Blanchard <hollisb@us.ibm.com>
  18  */
  19
  20 #ifndef __POWERPC_KVM_PPC_H__
  21 #define __POWERPC_KVM_PPC_H__
  22
  23 /* This file exists just so we can dereference kvm_vcpu, avoiding nested header
  24  * dependencies. */
  25
  26 #include <linux/mutex.h>
  27 #include <linux/timer.h>
  28 #include <linux/types.h>
  29 #include <linux/kvm_types.h>
  30 #include <linux/kvm_host.h>
  31 #include <linux/bug.h>
  32 #ifdef CONFIG_PPC_BOOK3S
  33 #include <asm/kvm_book3s.h>
  34 #else
  35 #include <asm/kvm_booke.h>
  36 #endif
  37 #ifdef CONFIG_KVM_BOOK3S_64_HANDLER
  38 #include <asm/paca.h>
  39 #endif
  40
  41 enum emulation_result {
  42         EMULATE_DONE,         /* no further processing */
  43         EMULATE_DO_MMIO,      /* kvm_run filled with MMIO request */
  44         EMULATE_DO_DCR,       /* kvm_run filled with DCR request */
  45         EMULATE_FAIL,         /* can't emulate this instruction */
  46         EMULATE_AGAIN,        /* something went wrong. go again */
  47 };
  48
  49 extern int kvmppc_vcpu_run(struct kvm_run *kvm_run, struct kvm_vcpu *vcpu);
  50 extern int __kvmppc_vcpu_run(struct kvm_run *kvm_run, struct kvm_vcpu *vcpu);
  51 extern char kvmppc_handlers_start[];
  52 extern unsigned long kvmppc_handler_len;
  53 extern void kvmppc_handler_highmem(void);
  54
  55 extern void kvmppc_dump_vcpu(struct kvm_vcpu *vcpu);
  56 extern int kvmppc_handle_load(struct kvm_run *run, struct kvm_vcpu *vcpu,
  57                               unsigned int rt, unsigned int bytes,
  58                               int is_bigendian);
  59 extern int kvmppc_handle_loads(struct kvm_run *run, struct kvm_vcpu *vcpu,
  60                                unsigned int rt, unsigned int bytes,
  61                                int is_bigendian);
  62 extern int kvmppc_handle_store(struct kvm_run *run, struct kvm_vcpu *vcpu,
  63                                u64 val, unsigned int bytes, int is_bigendian);
  64
  65 extern int kvmppc_emulate_instruction(struct kvm_run *run,
  66                                       struct kvm_vcpu *vcpu);
  67 extern int kvmppc_emulate_mmio(struct kvm_run *run, struct kvm_vcpu *vcpu);
  68 extern void kvmppc_emulate_dec(struct kvm_vcpu *vcpu);
  69 extern u32 kvmppc_get_dec(struct kvm_vcpu *vcpu, u64 tb);
  70 extern void kvmppc_decrementer_func(unsigned long data);
  71 extern int kvmppc_sanity_check(struct kvm_vcpu *vcpu);
  72 extern int kvmppc_subarch_vcpu_init(struct kvm_vcpu *vcpu);
  73 extern void kvmppc_subarch_vcpu_uninit(struct kvm_vcpu *vcpu);
  74
  75 /* Core-specific hooks */
  76
  77 extern void kvmppc_mmu_map(struct kvm_vcpu *vcpu, u64 gvaddr, gpa_t gpaddr,
  78                            unsigned int gtlb_idx);
  79 extern void kvmppc_mmu_priv_switch(struct kvm_vcpu *vcpu, int usermode);
  80 extern void kvmppc_mmu_switch_pid(struct kvm_vcpu *vcpu, u32 pid);
  81 extern void kvmppc_mmu_destroy(struct kvm_vcpu *vcpu);
  82 extern int kvmppc_mmu_init(struct kvm_vcpu *vcpu);
  83 extern int kvmppc_mmu_dtlb_index(struct kvm_vcpu *vcpu, gva_t eaddr);
  84 extern int kvmppc_mmu_itlb_index(struct kvm_vcpu *vcpu, gva_t eaddr);
  85 extern gpa_t kvmppc_mmu_xlate(struct kvm_vcpu *vcpu, unsigned int gtlb_index,
  86                               gva_t eaddr);
  87 extern void kvmppc_mmu_dtlb_miss(struct kvm_vcpu *vcpu);
  88 extern void kvmppc_mmu_itlb_miss(struct kvm_vcpu *vcpu);
  89
  90 extern struct kvm_vcpu *kvmppc_core_vcpu_create(struct kvm *kvm,
  91                                                 unsigned int id);
  92 extern void kvmppc_core_vcpu_free(struct kvm_vcpu *vcpu);
  93 extern int kvmppc_core_vcpu_setup(struct kvm_vcpu *vcpu);
  94 extern int kvmppc_core_check_processor_compat(void);
  95 extern int kvmppc_core_vcpu_translate(struct kvm_vcpu *vcpu,
  96                                       struct kvm_translation *tr);
  97
  98 extern void kvmppc_core_vcpu_load(struct kvm_vcpu *vcpu, int cpu);
  99 extern void kvmppc_core_vcpu_put(struct kvm_vcpu *vcpu);
 100
 101 extern int kvmppc_core_prepare_to_enter(struct kvm_vcpu *vcpu);
 102 extern int kvmppc_core_pending_dec(struct kvm_vcpu *vcpu);
 103 extern void kvmppc_core_queue_program(struct kvm_vcpu *vcpu, ulong flags);
 104 extern void kvmppc_core_queue_dec(struct kvm_vcpu *vcpu);
 105 extern void kvmppc_core_dequeue_dec(struct kvm_vcpu *vcpu);
 106 extern void kvmppc_core_queue_external(struct kvm_vcpu *vcpu,
 107                                        struct kvm_interrupt *irq);
 108 extern void kvmppc_core_dequeue_external(struct kvm_vcpu *vcpu,
 109                                          struct kvm_interrupt *irq);
 110 extern void kvmppc_core_flush_tlb(struct kvm_vcpu *vcpu);
 111
 112 extern int kvmppc_core_emulate_op(struct kvm_run *run, struct kvm_vcpu *vcpu,
 113                                   unsigned int op, int *advance);
 114 extern int kvmppc_core_emulate_mtspr(struct kvm_vcpu *vcpu, int sprn,
 115                                      ulong val);
 116 extern int kvmppc_core_emulate_mfspr(struct kvm_vcpu *vcpu, int sprn,
 117                                      ulong *val);
 118 extern int kvmppc_core_check_requests(struct kvm_vcpu *vcpu);
 119
 120 extern int kvmppc_booke_init(void);
 121 extern void kvmppc_booke_exit(void);
 122
 123 extern void kvmppc_core_destroy_mmu(struct kvm_vcpu *vcpu);
 124 extern int kvmppc_kvm_pv(struct kvm_vcpu *vcpu);
 125 extern void kvmppc_map_magic(struct kvm_vcpu *vcpu);
 126
 127 extern long kvmppc_alloc_hpt(struct kvm *kvm, u32 *htab_orderp);
 128 extern long kvmppc_alloc_reset_hpt(struct kvm *kvm, u32 *htab_orderp);
 129 extern void kvmppc_free_hpt(struct kvm *kvm);
 130 extern long kvmppc_prepare_vrma(struct kvm *kvm,
 131                                 struct kvm_userspace_memory_region *mem);
 132 extern void kvmppc_map_vrma(struct kvm_vcpu *vcpu,
 133                         struct kvm_memory_slot *memslot, unsigned long porder);
 134 extern int kvmppc_pseries_do_hcall(struct kvm_vcpu *vcpu);
 135 extern long kvm_vm_ioctl_create_spapr_tce(struct kvm *kvm,
 136                                 struct kvm_create_spapr_tce *args);
 137 extern long kvmppc_h_put_tce(struct kvm_vcpu *vcpu, unsigned long liobn,
 138                              unsigned long ioba, unsigned long tce);
 139 extern long kvm_vm_ioctl_allocate_rma(struct kvm *kvm,
 140                                 struct kvm_allocate_rma *rma);
 141 extern struct kvmppc_linear_info *kvm_alloc_rma(void);
 142 extern void kvm_release_rma(struct kvmppc_linear_info *ri);
 143 extern struct kvmppc_linear_info *kvm_alloc_hpt(void);
 144 extern void kvm_release_hpt(struct kvmppc_linear_info *li);
 145 extern int kvmppc_core_init_vm(struct kvm *kvm);
 146 extern void kvmppc_core_destroy_vm(struct kvm *kvm);
 147 extern void kvmppc_core_free_memslot(struct kvm_memory_slot *free,
 148                                      struct kvm_memory_slot *dont);
 149 extern int kvmppc_core_create_memslot(struct kvm_memory_slot *slot,
 150                                       unsigned long npages);
 151 extern int kvmppc_core_prepare_memory_region(struct kvm *kvm,
 152                                 struct kvm_memory_slot *memslot,
 153                                 struct kvm_userspace_memory_region *mem);
 154 extern void kvmppc_core_commit_memory_region(struct kvm *kvm,
 155                                 struct kvm_userspace_memory_region *mem,
 156                                 struct kvm_memory_slot old);
 157 extern int kvm_vm_ioctl_get_smmu_info(struct kvm *kvm,
 158                                       struct kvm_ppc_smmu_info *info);
 159 extern void kvmppc_core_flush_memslot(struct kvm *kvm,
 160                                       struct kvm_memory_slot *memslot);
 161
 162 extern int kvmppc_bookehv_init(void);
 163 extern void kvmppc_bookehv_exit(void);
 164
 165 extern int kvmppc_prepare_to_enter(struct kvm_vcpu *vcpu);
 166
 167 extern int kvm_vm_ioctl_get_htab_fd(struct kvm *kvm, struct kvm_get_htab_fd *);
 168
 169 /*
 170  * Cuts out inst bits with ordering according to spec.
 171  * That means the leftmost bit is zero. All given bits are included.
 172  */
 173 static inline u32 kvmppc_get_field(u64 inst, int msb, int lsb)
 174 {
 175         u32 r;
 176         u32 mask;
 177
 178         BUG_ON(msb > lsb);
 179
 180         mask = (1 << (lsb - msb + 1)) - 1;
 181         r = (inst >> (63 - lsb)) & mask;
 182
 183         return r;
 184 }
 185
 186 /*
 187  * Replaces inst bits with ordering according to spec.
 188  */
 189 static inline u32 kvmppc_set_field(u64 inst, int msb, int lsb, int value)
 190 {
 191         u32 r;
 192         u32 mask;
 193
 194         BUG_ON(msb > lsb);
 195
 196         mask = ((1 << (lsb - msb + 1)) - 1) << (63 - lsb);
 197         r = (inst & ~mask) | ((value << (63 - lsb)) & mask);
 198
 199         return r;
 200 }
 201
 202 union kvmppc_one_reg {
 203         u32     wval;
 204         u64     dval;
 205         vector128 vval;
 206         u64     vsxval[2];
 207         struct {
 208                 u64     addr;
 209                 u64     length;
 210         }       vpaval;
 211 };
 212
 213 #define one_reg_size(id)        \
 214         (1ul << (((id) & KVM_REG_SIZE_MASK) >> KVM_REG_SIZE_SHIFT))
 215
 216 #define get_reg_val(id, reg)    ({              \
 217         union kvmppc_one_reg __u;               \
 218         switch (one_reg_size(id)) {             \
 219         case 4: __u.wval = (reg); break;        \
 220         case 8: __u.dval = (reg); break;        \
 221         default: BUG();                         \
 222         }                                       \
 223         __u;                                    \
 224 })
 225
 226
 227 #define set_reg_val(id, val)    ({              \
 228         u64 __v;                                \
 229         switch (one_reg_size(id)) {             \
 230         case 4: __v = (val).wval; break;        \
 231         case 8: __v = (val).dval; break;        \
 232         default: BUG();                         \
 233         }                                       \
 234         __v;                                    \
 235 })
 236
 237 void kvmppc_core_get_sregs(struct kvm_vcpu *vcpu, struct kvm_sregs *sregs);
 238 int kvmppc_core_set_sregs(struct kvm_vcpu *vcpu, struct kvm_sregs *sregs);
 239
 240 void kvmppc_get_sregs_ivor(struct kvm_vcpu *vcpu, struct kvm_sregs *sregs);
 241 int kvmppc_set_sregs_ivor(struct kvm_vcpu *vcpu, struct kvm_sregs *sregs);
 242
 243 int kvm_vcpu_ioctl_get_one_reg(struct kvm_vcpu *vcpu, struct kvm_one_reg *reg);
 244 int kvm_vcpu_ioctl_set_one_reg(struct kvm_vcpu *vcpu, struct kvm_one_reg *reg);
 245 int kvmppc_get_one_reg(struct kvm_vcpu *vcpu, u64 id, union kvmppc_one_reg *);
 246 int kvmppc_set_one_reg(struct kvm_vcpu *vcpu, u64 id, union kvmppc_one_reg *);
 247
 248 void kvmppc_set_pid(struct kvm_vcpu *vcpu, u32 pid);
 249
 250 #ifdef CONFIG_KVM_BOOK3S_64_HV
 251 static inline void kvmppc_set_xics_phys(int cpu, unsigned long addr)
 252 {
 253         paca[cpu].kvm_hstate.xics_phys = addr;
 254 }
 255
 256 extern void kvm_linear_init(void);
 257
 258 #else
 259 static inline void kvmppc_set_xics_phys(int cpu, unsigned long addr)
 260 {}
 261
 262 static inline void kvm_linear_init(void)
 263 {}
 264 #endif
 265
 266 int kvm_vcpu_ioctl_config_tlb(struct kvm_vcpu *vcpu,
 267                               struct kvm_config_tlb *cfg);
 268 int kvm_vcpu_ioctl_dirty_tlb(struct kvm_vcpu *vcpu,
 269                              struct kvm_dirty_tlb *cfg);
 270
 271 long kvmppc_alloc_lpid(void);
 272 void kvmppc_claim_lpid(long lpid);
 273 void kvmppc_free_lpid(long lpid);
 274 void kvmppc_init_lpid(unsigned long nr_lpids);
 275
 276 static inline void kvmppc_mmu_flush_icache(pfn_t pfn)
 277 {
 278         /* Clear i-cache for new pages */
 279         struct page *page;
 280         page = pfn_to_page(pfn);
 281         if (!test_bit(PG_arch_1, &page->flags)) {
 282                 flush_dcache_icache_page(page);
 283                 set_bit(PG_arch_1, &page->flags);
 284         }
 285 }
 286
 287 /* Please call after prepare_to_enter. This function puts the lazy ee state
 288    back to normal mode, without actually enabling interrupts. */
 289 static inline void kvmppc_lazy_ee_enable(void)
 290 {
 291 #ifdef CONFIG_PPC64
 292         /* Only need to enable IRQs by hard enabling them after this */
 293         local_paca->irq_happened = 0;
 294         local_paca->soft_enabled = 1;
 295 #endif
 296 }
 297
 298 static inline ulong kvmppc_get_ea_indexed(struct kvm_vcpu *vcpu, int ra, int rb)
 299 {
 300         ulong ea;
 301         ulong msr_64bit = 0;
 302
 303         ea = kvmppc_get_gpr(vcpu, rb);
 304         if (ra)
 305                 ea += kvmppc_get_gpr(vcpu, ra);
 306
 307 #if defined(CONFIG_PPC_BOOK3E_64)
 308         msr_64bit = MSR_CM;
 309 #elif defined(CONFIG_PPC_BOOK3S_64)
 310         msr_64bit = MSR_SF;
 311 #endif
 312
 313         if (!(vcpu->arch.shared->msr & msr_64bit))
 314                 ea = (uint32_t)ea;
 315
 316         return ea;
 317 }
 318
 319 #endif /* __POWERPC_KVM_PPC_H__ */