arch/x86/kernel/summit_32.c

   1 /*
   2  * IBM Summit-Specific Code
   3  *
   4  * Written By: Matthew Dobson, IBM Corporation
   5  *
   6  * Copyright (c) 2003 IBM Corp.
   7  *
   8  * All rights reserved.
   9  *
  10  * This program is free software; you can redistribute it and/or modify
  11  * it under the terms of the GNU General Public License as published by
  12  * the Free Software Foundation; either version 2 of the License, or (at
  13  * your option) any later version.
  14  *
  15  * This program is distributed in the hope that it will be useful, but
  16  * WITHOUT ANY WARRANTY; without even the implied warranty of
  17  * MERCHANTABILITY OR FITNESS FOR A PARTICULAR PURPOSE, GOOD TITLE or
  18  * NON INFRINGEMENT.  See the GNU General Public License for more
  19  * details.
  20  *
  21  * You should have received a copy of the GNU General Public License
  22  * along with this program; if not, write to the Free Software
  23  * Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  24  *
  25  * Send feedback to <colpatch@us.ibm.com>
  26  *
  27  */
  28
  29 #include <linux/mm.h>
  30 #include <linux/init.h>
  31 #include <asm/io.h>
  32 #include <asm/bios_ebda.h>
  33
  34 /*
  35  * APIC driver for the IBM "Summit" chipset.
  36  */
  37 #include <linux/threads.h>
  38 #include <linux/cpumask.h>
  39 #include <asm/mpspec.h>
  40 #include <asm/apic.h>
  41 #include <asm/smp.h>
  42 #include <asm/fixmap.h>
  43 #include <asm/apicdef.h>
  44 #include <asm/ipi.h>
  45 #include <linux/kernel.h>
  46 #include <linux/string.h>
  47 #include <linux/init.h>
  48 #include <linux/gfp.h>
  49 #include <linux/smp.h>
  50
  51 static inline unsigned summit_get_apic_id(unsigned long x)
  52 {
  53         return (x >> 24) & 0xFF;
  54 }
  55
  56 static inline void summit_send_IPI_mask(const cpumask_t *mask, int vector)
  57 {
  58         default_send_IPI_mask_sequence_logical(mask, vector);
  59 }
  60
  61 static inline void summit_send_IPI_allbutself(int vector)
  62 {
  63         cpumask_t mask = cpu_online_map;
  64         cpu_clear(smp_processor_id(), mask);
  65
  66         if (!cpus_empty(mask))
  67                 summit_send_IPI_mask(&mask, vector);
  68 }
  69
  70 static inline void summit_send_IPI_all(int vector)
  71 {
  72         summit_send_IPI_mask(&cpu_online_map, vector);
  73 }
  74
  75 #include <asm/tsc.h>
  76
  77 extern int use_cyclone;
  78
  79 #ifdef CONFIG_X86_SUMMIT_NUMA
  80 extern void setup_summit(void);
  81 #else
  82 #define setup_summit()  {}
  83 #endif
  84
  85 static inline int
  86 summit_mps_oem_check(struct mpc_table *mpc, char *oem, char *productid)
  87 {
  88         if (!strncmp(oem, "IBM ENSW", 8) &&
  89                         (!strncmp(productid, "VIGIL SMP", 9)
  90                          || !strncmp(productid, "EXA", 3)
  91                          || !strncmp(productid, "RUTHLESS SMP", 12))){
  92                 mark_tsc_unstable("Summit based system");
  93                 use_cyclone = 1; /*enable cyclone-timer*/
  94                 setup_summit();
  95                 return 1;
  96         }
  97         return 0;
  98 }
  99
 100 /* Hook from generic ACPI tables.c */
 101 static inline int summit_acpi_madt_oem_check(char *oem_id, char *oem_table_id)
 102 {
 103         if (!strncmp(oem_id, "IBM", 3) &&
 104             (!strncmp(oem_table_id, "SERVIGIL", 8)
 105              || !strncmp(oem_table_id, "EXA", 3))){
 106                 mark_tsc_unstable("Summit based system");
 107                 use_cyclone = 1; /*enable cyclone-timer*/
 108                 setup_summit();
 109                 return 1;
 110         }
 111         return 0;
 112 }
 113
 114 struct rio_table_hdr {
 115         unsigned char version;      /* Version number of this data structure           */
 116                                     /* Version 3 adds chassis_num & WP_index           */
 117         unsigned char num_scal_dev; /* # of Scalability devices (Twisters for Vigil)   */
 118         unsigned char num_rio_dev;  /* # of RIO I/O devices (Cyclones and Winnipegs)   */
 119 } __attribute__((packed));
 120
 121 struct scal_detail {
 122         unsigned char node_id;      /* Scalability Node ID                             */
 123         unsigned long CBAR;         /* Address of 1MB register space                   */
 124         unsigned char port0node;    /* Node ID port connected to: 0xFF=None            */
 125         unsigned char port0port;    /* Port num port connected to: 0,1,2, or 0xFF=None */
 126         unsigned char port1node;    /* Node ID port connected to: 0xFF = None          */
 127         unsigned char port1port;    /* Port num port connected to: 0,1,2, or 0xFF=None */
 128         unsigned char port2node;    /* Node ID port connected to: 0xFF = None          */
 129         unsigned char port2port;    /* Port num port connected to: 0,1,2, or 0xFF=None */
 130         unsigned char chassis_num;  /* 1 based Chassis number (1 = boot node)          */
 131 } __attribute__((packed));
 132
 133 struct rio_detail {
 134         unsigned char node_id;      /* RIO Node ID                                     */
 135         unsigned long BBAR;         /* Address of 1MB register space                   */
 136         unsigned char type;         /* Type of device                                  */
 137         unsigned char owner_id;     /* For WPEG: Node ID of Cyclone that owns this WPEG*/
 138                                     /* For CYC:  Node ID of Twister that owns this CYC */
 139         unsigned char port0node;    /* Node ID port connected to: 0xFF=None            */
 140         unsigned char port0port;    /* Port num port connected to: 0,1,2, or 0xFF=None */
 141         unsigned char port1node;    /* Node ID port connected to: 0xFF=None            */
 142         unsigned char port1port;    /* Port num port connected to: 0,1,2, or 0xFF=None */
 143         unsigned char first_slot;   /* For WPEG: Lowest slot number below this WPEG    */
 144                                     /* For CYC:  0                                     */
 145         unsigned char status;       /* For WPEG: Bit 0 = 1 : the XAPIC is used         */
 146                                     /*                 = 0 : the XAPIC is not used, ie:*/
 147                                     /*                     ints fwded to another XAPIC */
 148                                     /*           Bits1:7 Reserved                      */
 149                                     /* For CYC:  Bits0:7 Reserved                      */
 150         unsigned char WP_index;     /* For WPEG: WPEG instance index - lower ones have */
 151                                     /*           lower slot numbers/PCI bus numbers    */
 152                                     /* For CYC:  No meaning                            */
 153         unsigned char chassis_num;  /* 1 based Chassis number                          */
 154                                     /* For LookOut WPEGs this field indicates the      */
 155                                     /* Expansion Chassis #, enumerated from Boot       */
 156                                     /* Node WPEG external port, then Boot Node CYC     */
 157                                     /* external port, then Next Vigil chassis WPEG     */
 158                                     /* external port, etc.                             */
 159                                     /* Shared Lookouts have only 1 chassis number (the */
 160                                     /* first one assigned)                             */
 161 } __attribute__((packed));
 162
 163
 164 typedef enum {
 165         CompatTwister = 0,  /* Compatibility Twister               */
 166         AltTwister    = 1,  /* Alternate Twister of internal 8-way */
 167         CompatCyclone = 2,  /* Compatibility Cyclone               */
 168         AltCyclone    = 3,  /* Alternate Cyclone of internal 8-way */
 169         CompatWPEG    = 4,  /* Compatibility WPEG                  */
 170         AltWPEG       = 5,  /* Second Planar WPEG                  */
 171         LookOutAWPEG  = 6,  /* LookOut WPEG                        */
 172         LookOutBWPEG  = 7,  /* LookOut WPEG                        */
 173 } node_type;
 174
 175 static inline int is_WPEG(struct rio_detail *rio){
 176         return (rio->type == CompatWPEG || rio->type == AltWPEG ||
 177                 rio->type == LookOutAWPEG || rio->type == LookOutBWPEG);
 178 }
 179
 180
 181 /* In clustered mode, the high nibble of APIC ID is a cluster number.
 182  * The low nibble is a 4-bit bitmap. */
 183 #define XAPIC_DEST_CPUS_SHIFT   4
 184 #define XAPIC_DEST_CPUS_MASK    ((1u << XAPIC_DEST_CPUS_SHIFT) - 1)
 185 #define XAPIC_DEST_CLUSTER_MASK (XAPIC_DEST_CPUS_MASK << XAPIC_DEST_CPUS_SHIFT)
 186
 187 #define SUMMIT_APIC_DFR_VALUE   (APIC_DFR_CLUSTER)
 188
 189 static inline const cpumask_t *summit_target_cpus(void)
 190 {
 191         /* CPU_MASK_ALL (0xff) has undefined behaviour with
 192          * dest_LowestPrio mode logical clustered apic interrupt routing
 193          * Just start on cpu 0.  IRQ balancing will spread load
 194          */
 195         return &cpumask_of_cpu(0);
 196 }
 197
 198 static inline unsigned long
 199 summit_check_apicid_used(physid_mask_t bitmap, int apicid)
 200 {
 201         return 0;
 202 }
 203
 204 /* we don't use the phys_cpu_present_map to indicate apicid presence */
 205 static inline unsigned long summit_check_apicid_present(int bit)
 206 {
 207         return 1;
 208 }
 209
 210 #define apicid_cluster(apicid) ((apicid) & XAPIC_DEST_CLUSTER_MASK)
 211
 212 static inline void summit_init_apic_ldr(void)
 213 {
 214         unsigned long val, id;
 215         int count = 0;
 216         u8 my_id = (u8)hard_smp_processor_id();
 217         u8 my_cluster = (u8)apicid_cluster(my_id);
 218 #ifdef CONFIG_SMP
 219         u8 lid;
 220         int i;
 221
 222         /* Create logical APIC IDs by counting CPUs already in cluster. */
 223         for (count = 0, i = nr_cpu_ids; --i >= 0; ) {
 224                 lid = cpu_2_logical_apicid[i];
 225                 if (lid != BAD_APICID && apicid_cluster(lid) == my_cluster)
 226                         ++count;
 227         }
 228 #endif
 229         /* We only have a 4 wide bitmap in cluster mode.  If a deranged
 230          * BIOS puts 5 CPUs in one APIC cluster, we're hosed. */
 231         BUG_ON(count >= XAPIC_DEST_CPUS_SHIFT);
 232         id = my_cluster | (1UL << count);
 233         apic_write(APIC_DFR, SUMMIT_APIC_DFR_VALUE);
 234         val = apic_read(APIC_LDR) & ~APIC_LDR_MASK;
 235         val |= SET_APIC_LOGICAL_ID(id);
 236         apic_write(APIC_LDR, val);
 237 }
 238
 239 static inline int summit_apic_id_registered(void)
 240 {
 241         return 1;
 242 }
 243
 244 static inline void summit_setup_apic_routing(void)
 245 {
 246         printk("Enabling APIC mode:  Summit.  Using %d I/O APICs\n",
 247                                                 nr_ioapics);
 248 }
 249
 250 static inline int summit_apicid_to_node(int logical_apicid)
 251 {
 252 #ifdef CONFIG_SMP
 253         return apicid_2_node[hard_smp_processor_id()];
 254 #else
 255         return 0;
 256 #endif
 257 }
 258
 259 /* Mapping from cpu number to logical apicid */
 260 static inline int summit_cpu_to_logical_apicid(int cpu)
 261 {
 262 #ifdef CONFIG_SMP
 263         if (cpu >= nr_cpu_ids)
 264                 return BAD_APICID;
 265         return cpu_2_logical_apicid[cpu];
 266 #else
 267         return logical_smp_processor_id();
 268 #endif
 269 }
 270
 271 static inline int summit_cpu_present_to_apicid(int mps_cpu)
 272 {
 273         if (mps_cpu < nr_cpu_ids)
 274                 return (int)per_cpu(x86_bios_cpu_apicid, mps_cpu);
 275         else
 276                 return BAD_APICID;
 277 }
 278
 279 static inline physid_mask_t
 280 summit_ioapic_phys_id_map(physid_mask_t phys_id_map)
 281 {
 282         /* For clustered we don't have a good way to do this yet - hack */
 283         return physids_promote(0x0F);
 284 }
 285
 286 static inline physid_mask_t summit_apicid_to_cpu_present(int apicid)
 287 {
 288         return physid_mask_of_physid(0);
 289 }
 290
 291 static inline void summit_setup_portio_remap(void)
 292 {
 293 }
 294
 295 static inline int summit_check_phys_apicid_present(int boot_cpu_physical_apicid)
 296 {
 297         return 1;
 298 }
 299
 300 static inline unsigned int summit_cpu_mask_to_apicid(const cpumask_t *cpumask)
 301 {
 302         int cpus_found = 0;
 303         int num_bits_set;
 304         int apicid;
 305         int cpu;
 306
 307         num_bits_set = cpus_weight(*cpumask);
 308         /* Return id to all */
 309         if (num_bits_set >= nr_cpu_ids)
 310                 return 0xFF;
 311         /*
 312          * The cpus in the mask must all be on the apic cluster.  If are not
 313          * on the same apicid cluster return default value of target_cpus():
 314          */
 315         cpu = first_cpu(*cpumask);
 316         apicid = summit_cpu_to_logical_apicid(cpu);
 317
 318         while (cpus_found < num_bits_set) {
 319                 if (cpu_isset(cpu, *cpumask)) {
 320                         int new_apicid = summit_cpu_to_logical_apicid(cpu);
 321
 322                         if (apicid_cluster(apicid) !=
 323                                         apicid_cluster(new_apicid)) {
 324                                 printk ("%s: Not a valid mask!\n", __func__);
 325
 326                                 return 0xFF;
 327                         }
 328                         apicid = apicid | new_apicid;
 329                         cpus_found++;
 330                 }
 331                 cpu++;
 332         }
 333         return apicid;
 334 }
 335
 336 static inline unsigned int
 337 summit_cpu_mask_to_apicid_and(const struct cpumask *inmask,
 338                               const struct cpumask *andmask)
 339 {
 340         int apicid = summit_cpu_to_logical_apicid(0);
 341         cpumask_var_t cpumask;
 342
 343         if (!alloc_cpumask_var(&cpumask, GFP_ATOMIC))
 344                 return apicid;
 345
 346         cpumask_and(cpumask, inmask, andmask);
 347         cpumask_and(cpumask, cpumask, cpu_online_mask);
 348         apicid = summit_cpu_mask_to_apicid(cpumask);
 349
 350         free_cpumask_var(cpumask);
 351
 352         return apicid;
 353 }
 354
 355 /*
 356  * cpuid returns the value latched in the HW at reset, not the APIC ID
 357  * register's value.  For any box whose BIOS changes APIC IDs, like
 358  * clustered APIC systems, we must use hard_smp_processor_id.
 359  *
 360  * See Intel's IA-32 SW Dev's Manual Vol2 under CPUID.
 361  */
 362 static inline int summit_phys_pkg_id(int cpuid_apic, int index_msb)
 363 {
 364         return hard_smp_processor_id() >> index_msb;
 365 }
 366
 367 static int probe_summit(void)
 368 {
 369         /* probed later in mptable/ACPI hooks */
 370         return 0;
 371 }
 372
 373 static void summit_vector_allocation_domain(int cpu, cpumask_t *retmask)
 374 {
 375         /* Careful. Some cpus do not strictly honor the set of cpus
 376          * specified in the interrupt destination when using lowest
 377          * priority interrupt delivery mode.
 378          *
 379          * In particular there was a hyperthreading cpu observed to
 380          * deliver interrupts to the wrong hyperthread when only one
 381          * hyperthread was specified in the interrupt desitination.
 382          */
 383         *retmask = (cpumask_t){ { [0] = APIC_ALL_CPUS, } };
 384 }
 385
 386 #ifdef CONFIG_X86_SUMMIT_NUMA
 387 static struct rio_table_hdr *rio_table_hdr __initdata;
 388 static struct scal_detail   *scal_devs[MAX_NUMNODES] __initdata;
 389 static struct rio_detail    *rio_devs[MAX_NUMNODES*4] __initdata;
 390
 391 #ifndef CONFIG_X86_NUMAQ
 392 static int mp_bus_id_to_node[MAX_MP_BUSSES] __initdata;
 393 #endif
 394
 395 static int __init setup_pci_node_map_for_wpeg(int wpeg_num, int last_bus)
 396 {
 397         int twister = 0, node = 0;
 398         int i, bus, num_buses;
 399
 400         for (i = 0; i < rio_table_hdr->num_rio_dev; i++) {
 401                 if (rio_devs[i]->node_id == rio_devs[wpeg_num]->owner_id) {
 402                         twister = rio_devs[i]->owner_id;
 403                         break;
 404                 }
 405         }
 406         if (i == rio_table_hdr->num_rio_dev) {
 407                 printk(KERN_ERR "%s: Couldn't find owner Cyclone for Winnipeg!\n", __func__);
 408                 return last_bus;
 409         }
 410
 411         for (i = 0; i < rio_table_hdr->num_scal_dev; i++) {
 412                 if (scal_devs[i]->node_id == twister) {
 413                         node = scal_devs[i]->node_id;
 414                         break;
 415                 }
 416         }
 417         if (i == rio_table_hdr->num_scal_dev) {
 418                 printk(KERN_ERR "%s: Couldn't find owner Twister for Cyclone!\n", __func__);
 419                 return last_bus;
 420         }
 421
 422         switch (rio_devs[wpeg_num]->type) {
 423         case CompatWPEG:
 424                 /*
 425                  * The Compatibility Winnipeg controls the 2 legacy buses,
 426                  * the 66MHz PCI bus [2 slots] and the 2 "extra" buses in case
 427                  * a PCI-PCI bridge card is used in either slot: total 5 buses.
 428                  */
 429                 num_buses = 5;
 430                 break;
 431         case AltWPEG:
 432                 /*
 433                  * The Alternate Winnipeg controls the 2 133MHz buses [1 slot
 434                  * each], their 2 "extra" buses, the 100MHz bus [2 slots] and
 435                  * the "extra" buses for each of those slots: total 7 buses.
 436                  */
 437                 num_buses = 7;
 438                 break;
 439         case LookOutAWPEG:
 440         case LookOutBWPEG:
 441                 /*
 442                  * A Lookout Winnipeg controls 3 100MHz buses [2 slots each]
 443                  * & the "extra" buses for each of those slots: total 9 buses.
 444                  */
 445                 num_buses = 9;
 446                 break;
 447         default:
 448                 printk(KERN_INFO "%s: Unsupported Winnipeg type!\n", __func__);
 449                 return last_bus;
 450         }
 451
 452         for (bus = last_bus; bus < last_bus + num_buses; bus++)
 453                 mp_bus_id_to_node[bus] = node;
 454         return bus;
 455 }
 456
 457 static int __init build_detail_arrays(void)
 458 {
 459         unsigned long ptr;
 460         int i, scal_detail_size, rio_detail_size;
 461
 462         if (rio_table_hdr->num_scal_dev > MAX_NUMNODES) {
 463                 printk(KERN_WARNING "%s: MAX_NUMNODES too low!  Defined as %d, but system has %d nodes.\n", __func__, MAX_NUMNODES, rio_table_hdr->num_scal_dev);
 464                 return 0;
 465         }
 466
 467         switch (rio_table_hdr->version) {
 468         default:
 469                 printk(KERN_WARNING "%s: Invalid Rio Grande Table Version: %d\n", __func__, rio_table_hdr->version);
 470                 return 0;
 471         case 2:
 472                 scal_detail_size = 11;
 473                 rio_detail_size = 13;
 474                 break;
 475         case 3:
 476                 scal_detail_size = 12;
 477                 rio_detail_size = 15;
 478                 break;
 479         }
 480
 481         ptr = (unsigned long)rio_table_hdr + 3;
 482         for (i = 0; i < rio_table_hdr->num_scal_dev; i++, ptr += scal_detail_size)
 483                 scal_devs[i] = (struct scal_detail *)ptr;
 484
 485         for (i = 0; i < rio_table_hdr->num_rio_dev; i++, ptr += rio_detail_size)
 486                 rio_devs[i] = (struct rio_detail *)ptr;
 487
 488         return 1;
 489 }
 490
 491 void __init setup_summit(void)
 492 {
 493         unsigned long           ptr;
 494         unsigned short          offset;
 495         int                     i, next_wpeg, next_bus = 0;
 496
 497         /* The pointer to the EBDA is stored in the word @ phys 0x40E(40:0E) */
 498         ptr = get_bios_ebda();
 499         ptr = (unsigned long)phys_to_virt(ptr);
 500
 501         rio_table_hdr = NULL;
 502         offset = 0x180;
 503         while (offset) {
 504                 /* The block id is stored in the 2nd word */
 505                 if (*((unsigned short *)(ptr + offset + 2)) == 0x4752) {
 506                         /* set the pointer past the offset & block id */
 507                         rio_table_hdr = (struct rio_table_hdr *)(ptr + offset + 4);
 508                         break;
 509                 }
 510                 /* The next offset is stored in the 1st word.  0 means no more */
 511                 offset = *((unsigned short *)(ptr + offset));
 512         }
 513         if (!rio_table_hdr) {
 514                 printk(KERN_ERR "%s: Unable to locate Rio Grande Table in EBDA - bailing!\n", __func__);
 515                 return;
 516         }
 517
 518         if (!build_detail_arrays())
 519                 return;
 520
 521         /* The first Winnipeg we're looking for has an index of 0 */
 522         next_wpeg = 0;
 523         do {
 524                 for (i = 0; i < rio_table_hdr->num_rio_dev; i++) {
 525                         if (is_WPEG(rio_devs[i]) && rio_devs[i]->WP_index == next_wpeg) {
 526                                 /* It's the Winnipeg we're looking for! */
 527                                 next_bus = setup_pci_node_map_for_wpeg(i, next_bus);
 528                                 next_wpeg++;
 529                                 break;
 530                         }
 531                 }
 532                 /*
 533                  * If we go through all Rio devices and don't find one with
 534                  * the next index, it means we've found all the Winnipegs,
 535                  * and thus all the PCI buses.
 536                  */
 537                 if (i == rio_table_hdr->num_rio_dev)
 538                         next_wpeg = 0;
 539         } while (next_wpeg != 0);
 540 }
 541 #endif
 542
 543 struct genapic apic_summit = {
 544
 545         .name                           = "summit",
 546         .probe                          = probe_summit,
 547         .acpi_madt_oem_check            = summit_acpi_madt_oem_check,
 548         .apic_id_registered             = summit_apic_id_registered,
 549
 550         .irq_delivery_mode              = dest_LowestPrio,
 551         /* logical delivery broadcast to all CPUs: */
 552         .irq_dest_mode                  = 1,
 553
 554         .target_cpus                    = summit_target_cpus,
 555         .disable_esr                    = 1,
 556         .dest_logical                   = APIC_DEST_LOGICAL,
 557         .check_apicid_used              = summit_check_apicid_used,
 558         .check_apicid_present           = summit_check_apicid_present,
 559
 560         .vector_allocation_domain       = summit_vector_allocation_domain,
 561         .init_apic_ldr                  = summit_init_apic_ldr,
 562
 563         .ioapic_phys_id_map             = summit_ioapic_phys_id_map,
 564         .setup_apic_routing             = summit_setup_apic_routing,
 565         .multi_timer_check              = NULL,
 566         .apicid_to_node                 = summit_apicid_to_node,
 567         .cpu_to_logical_apicid          = summit_cpu_to_logical_apicid,
 568         .cpu_present_to_apicid          = summit_cpu_present_to_apicid,
 569         .apicid_to_cpu_present          = summit_apicid_to_cpu_present,
 570         .setup_portio_remap             = NULL,
 571         .check_phys_apicid_present      = summit_check_phys_apicid_present,
 572         .enable_apic_mode               = NULL,
 573         .phys_pkg_id                    = summit_phys_pkg_id,
 574         .mps_oem_check                  = summit_mps_oem_check,
 575
 576         .get_apic_id                    = summit_get_apic_id,
 577         .set_apic_id                    = NULL,
 578         .apic_id_mask                   = 0xFF << 24,
 579
 580         .cpu_mask_to_apicid             = summit_cpu_mask_to_apicid,
 581         .cpu_mask_to_apicid_and         = summit_cpu_mask_to_apicid_and,
 582
 583         .send_IPI_mask                  = summit_send_IPI_mask,
 584         .send_IPI_mask_allbutself       = NULL,
 585         .send_IPI_allbutself            = summit_send_IPI_allbutself,
 586         .send_IPI_all                   = summit_send_IPI_all,
 587         .send_IPI_self                  = default_send_IPI_self,
 588
 589         .wakeup_cpu                     = NULL,
 590         .trampoline_phys_low            = DEFAULT_TRAMPOLINE_PHYS_LOW,
 591         .trampoline_phys_high           = DEFAULT_TRAMPOLINE_PHYS_HIGH,
 592
 593         .wait_for_init_deassert         = default_wait_for_init_deassert,
 594
 595         .smp_callin_clear_local_apic    = NULL,
 596         .store_NMI_vector               = NULL,
 597         .inquire_remote_apic            = default_inquire_remote_apic,
 598
 599         .read                           = native_apic_mem_read,
 600         .write                          = native_apic_mem_write,
 601         .icr_read                       = native_apic_icr_read,
 602         .icr_write                      = native_apic_icr_write,
 603         .wait_icr_idle                  = native_apic_wait_icr_idle,
 604         .safe_wait_icr_idle             = native_safe_apic_wait_icr_idle,
 605 };