x86: cleanup early per cpu variables/accesses v4
[pandora-kernel.git] / include / asm-x86 / topology.h
1 /*
2  * Written by: Matthew Dobson, IBM Corporation
3  *
4  * Copyright (C) 2002, IBM Corp.
5  *
6  * All rights reserved.
7  *
8  * This program is free software; you can redistribute it and/or modify
9  * it under the terms of the GNU General Public License as published by
10  * the Free Software Foundation; either version 2 of the License, or
11  * (at your option) any later version.
12  *
13  * This program is distributed in the hope that it will be useful, but
14  * WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY OR FITNESS FOR A PARTICULAR PURPOSE, GOOD TITLE or
16  * NON INFRINGEMENT.  See the GNU General Public License for more
17  * details.
18  *
19  * You should have received a copy of the GNU General Public License
20  * along with this program; if not, write to the Free Software
21  * Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
22  *
23  * Send feedback to <colpatch@us.ibm.com>
24  */
25 #ifndef _ASM_X86_TOPOLOGY_H
26 #define _ASM_X86_TOPOLOGY_H
27
28 #ifdef CONFIG_X86_32
29 # ifdef CONFIG_X86_HT
30 #  define ENABLE_TOPO_DEFINES
31 # endif
32 #else
33 # ifdef CONFIG_SMP
34 #  define ENABLE_TOPO_DEFINES
35 # endif
36 #endif
37
38 /* Node not present */
39 #define NUMA_NO_NODE    (-1)
40
41 #ifdef CONFIG_NUMA
42 #include <linux/cpumask.h>
43 #include <asm/mpspec.h>
44
45 #ifdef CONFIG_X86_32
46
47 /* Mappings between node number and cpus on that node. */
48 extern cpumask_t node_to_cpumask_map[];
49
50 /* Mappings between logical cpu number and node number */
51 extern int cpu_to_node_map[];
52
53 /* Returns the number of the node containing CPU 'cpu' */
54 static inline int cpu_to_node(int cpu)
55 {
56         return cpu_to_node_map[cpu];
57 }
58 #define early_cpu_to_node(cpu)  cpu_to_node(cpu)
59
60 #else /* CONFIG_X86_64 */
61
62 /* Mappings between node number and cpus on that node. */
63 extern cpumask_t node_to_cpumask_map[];
64
65 /* Mappings between logical cpu number and node number */
66 DECLARE_EARLY_PER_CPU(int, x86_cpu_to_node_map);
67
68 /* Returns the number of the current Node. */
69 #define numa_node_id()  (per_cpu(x86_cpu_to_node_map, raw_smp_processor_id()))
70
71 #ifdef CONFIG_DEBUG_PER_CPU_MAPS
72 extern int cpu_to_node(int cpu);
73 extern int early_cpu_to_node(int cpu);
74 extern cpumask_t *_node_to_cpumask_ptr(int node);
75 extern cpumask_t node_to_cpumask(int node);
76
77 #else   /* !CONFIG_DEBUG_PER_CPU_MAPS */
78
79 /* Returns the number of the node containing CPU 'cpu' */
80 static inline int cpu_to_node(int cpu)
81 {
82         return per_cpu(x86_cpu_to_node_map, cpu);
83 }
84
85 /* Same function but used if called before per_cpu areas are setup */
86 static inline int early_cpu_to_node(int cpu)
87 {
88         if (early_per_cpu_ptr(x86_cpu_to_node_map))
89                 return early_per_cpu_ptr(x86_cpu_to_node_map)[cpu];
90
91         return per_cpu(x86_cpu_to_node_map, cpu);
92 }
93
94 /* Returns a pointer to the cpumask of CPUs on Node 'node'. */
95 static inline cpumask_t *_node_to_cpumask_ptr(int node)
96 {
97         return &node_to_cpumask_map[node];
98 }
99
100 /* Returns a bitmask of CPUs on Node 'node'. */
101 static inline cpumask_t node_to_cpumask(int node)
102 {
103         return node_to_cpumask_map[node];
104 }
105
106 #endif /* !CONFIG_DEBUG_PER_CPU_MAPS */
107 #endif /* CONFIG_X86_64 */
108
109 /* Replace default node_to_cpumask_ptr with optimized version */
110 #define node_to_cpumask_ptr(v, node)            \
111                 cpumask_t *v = _node_to_cpumask_ptr(node)
112
113 #define node_to_cpumask_ptr_next(v, node)       \
114                            v = _node_to_cpumask_ptr(node)
115
116 /* Returns the number of the first CPU on Node 'node'. */
117 static inline int node_to_first_cpu(int node)
118 {
119         node_to_cpumask_ptr(mask, node);
120         return first_cpu(*mask);
121 }
122
123 /*
124  * Returns the number of the node containing Node 'node'. This
125  * architecture is flat, so it is a pretty simple function!
126  */
127 #define parent_node(node) (node)
128
129 #define pcibus_to_node(bus) __pcibus_to_node(bus)
130 #define pcibus_to_cpumask(bus) __pcibus_to_cpumask(bus)
131
132 #ifdef CONFIG_X86_32
133 extern unsigned long node_start_pfn[];
134 extern unsigned long node_end_pfn[];
135 extern unsigned long node_remap_size[];
136 #define node_has_online_mem(nid) (node_start_pfn[nid] != node_end_pfn[nid])
137
138 # define SD_CACHE_NICE_TRIES    1
139 # define SD_IDLE_IDX            1
140 # define SD_NEWIDLE_IDX         2
141 # define SD_FORKEXEC_IDX        0
142
143 #else
144
145 # define SD_CACHE_NICE_TRIES    2
146 # define SD_IDLE_IDX            2
147 # define SD_NEWIDLE_IDX         2
148 # define SD_FORKEXEC_IDX        1
149
150 #endif
151
152 /* sched_domains SD_NODE_INIT for NUMAQ machines */
153 #define SD_NODE_INIT (struct sched_domain) {            \
154         .min_interval           = 8,                    \
155         .max_interval           = 32,                   \
156         .busy_factor            = 32,                   \
157         .imbalance_pct          = 125,                  \
158         .cache_nice_tries       = SD_CACHE_NICE_TRIES,  \
159         .busy_idx               = 3,                    \
160         .idle_idx               = SD_IDLE_IDX,          \
161         .newidle_idx            = SD_NEWIDLE_IDX,       \
162         .wake_idx               = 1,                    \
163         .forkexec_idx           = SD_FORKEXEC_IDX,      \
164         .flags                  = SD_LOAD_BALANCE       \
165                                 | SD_BALANCE_EXEC       \
166                                 | SD_BALANCE_FORK       \
167                                 | SD_SERIALIZE          \
168                                 | SD_WAKE_BALANCE,      \
169         .last_balance           = jiffies,              \
170         .balance_interval       = 1,                    \
171 }
172
173 #ifdef CONFIG_X86_64_ACPI_NUMA
174 extern int __node_distance(int, int);
175 #define node_distance(a, b) __node_distance(a, b)
176 #endif
177
178 #else /* !CONFIG_NUMA */
179
180 #define numa_node_id()          0
181 #define cpu_to_node(cpu)        0
182 #define early_cpu_to_node(cpu)  0
183
184 static inline cpumask_t *_node_to_cpumask_ptr(int node)
185 {
186         return &cpu_online_map;
187 }
188 static inline cpumask_t node_to_cpumask(int node)
189 {
190         return cpu_online_map;
191 }
192 static inline int node_to_first_cpu(int node)
193 {
194         return first_cpu(cpu_online_map);
195 }
196
197 /* Replace default node_to_cpumask_ptr with optimized version */
198 #define node_to_cpumask_ptr(v, node)            \
199                 cpumask_t *v = _node_to_cpumask_ptr(node)
200
201 #define node_to_cpumask_ptr_next(v, node)       \
202                            v = _node_to_cpumask_ptr(node)
203 #endif
204
205 #include <asm-generic/topology.h>
206
207 extern cpumask_t cpu_coregroup_map(int cpu);
208
209 #ifdef ENABLE_TOPO_DEFINES
210 #define topology_physical_package_id(cpu)       (cpu_data(cpu).phys_proc_id)
211 #define topology_core_id(cpu)                   (cpu_data(cpu).cpu_core_id)
212 #define topology_core_siblings(cpu)             (per_cpu(cpu_core_map, cpu))
213 #define topology_thread_siblings(cpu)           (per_cpu(cpu_sibling_map, cpu))
214
215 /* indicates that pointers to the topology cpumask_t maps are valid */
216 #define arch_provides_topology_pointers         yes
217 #endif
218
219 static inline void arch_fix_phys_package_id(int num, u32 slot)
220 {
221 }
222
223 struct pci_bus;
224 void set_pci_bus_resources_arch_default(struct pci_bus *b);
225
226 #ifdef CONFIG_SMP
227 #define mc_capable()                    (boot_cpu_data.x86_max_cores > 1)
228 #define smt_capable()                   (smp_num_siblings > 1)
229 #endif
230
231 #ifdef CONFIG_NUMA
232 extern int get_mp_bus_to_node(int busnum);
233 extern void set_mp_bus_to_node(int busnum, int node);
234 #else
235 static inline int get_mp_bus_to_node(int busnum)
236 {
237         return 0;
238 }
239 static inline void set_mp_bus_to_node(int busnum, int node)
240 {
241 }
242 #endif
243
244 #endif /* _ASM_X86_TOPOLOGY_H */