sched, cpuacct: Fix niced guest time accounting
[linux-2.6.git] / include / linux / kernel_stat.h
1 #ifndef _LINUX_KERNEL_STAT_H
2 #define _LINUX_KERNEL_STAT_H
3
4 #include <linux/smp.h>
5 #include <linux/threads.h>
6 #include <linux/percpu.h>
7 #include <linux/cpumask.h>
8 #include <linux/interrupt.h>
9 #include <asm/irq.h>
10 #include <asm/cputime.h>
11
12 /*
13  * 'kernel_stat.h' contains the definitions needed for doing
14  * some kernel statistics (CPU usage, context switches ...),
15  * used by rstatd/perfmeter
16  */
17
18 struct cpu_usage_stat {
19         cputime64_t user;
20         cputime64_t nice;
21         cputime64_t system;
22         cputime64_t softirq;
23         cputime64_t irq;
24         cputime64_t idle;
25         cputime64_t iowait;
26         cputime64_t steal;
27         cputime64_t guest;
28         cputime64_t guest_nice;
29 };
30
31 struct kernel_stat {
32         struct cpu_usage_stat   cpustat;
33 #ifndef CONFIG_GENERIC_HARDIRQS
34        unsigned int irqs[NR_IRQS];
35 #endif
36         unsigned int softirqs[NR_SOFTIRQS];
37 };
38
39 DECLARE_PER_CPU(struct kernel_stat, kstat);
40
41 #define kstat_cpu(cpu)  per_cpu(kstat, cpu)
42 /* Must have preemption disabled for this to be meaningful. */
43 #define kstat_this_cpu  __get_cpu_var(kstat)
44
45 extern unsigned long long nr_context_switches(void);
46
47 #ifndef CONFIG_GENERIC_HARDIRQS
48 #define kstat_irqs_this_cpu(irq) \
49         (kstat_this_cpu.irqs[irq])
50
51 struct irq_desc;
52
53 static inline void kstat_incr_irqs_this_cpu(unsigned int irq,
54                                             struct irq_desc *desc)
55 {
56         kstat_this_cpu.irqs[irq]++;
57 }
58
59 static inline unsigned int kstat_irqs_cpu(unsigned int irq, int cpu)
60 {
61        return kstat_cpu(cpu).irqs[irq];
62 }
63 #else
64 #include <linux/irq.h>
65 extern unsigned int kstat_irqs_cpu(unsigned int irq, int cpu);
66 #define kstat_irqs_this_cpu(DESC) \
67         ((DESC)->kstat_irqs[smp_processor_id()])
68 #define kstat_incr_irqs_this_cpu(irqno, DESC) \
69         ((DESC)->kstat_irqs[smp_processor_id()]++)
70
71 #endif
72
73 static inline void kstat_incr_softirqs_this_cpu(unsigned int irq)
74 {
75         kstat_this_cpu.softirqs[irq]++;
76 }
77
78 static inline unsigned int kstat_softirqs_cpu(unsigned int irq, int cpu)
79 {
80        return kstat_cpu(cpu).softirqs[irq];
81 }
82
83 /*
84  * Number of interrupts per specific IRQ source, since bootup
85  */
86 static inline unsigned int kstat_irqs(unsigned int irq)
87 {
88         unsigned int sum = 0;
89         int cpu;
90
91         for_each_possible_cpu(cpu)
92                 sum += kstat_irqs_cpu(irq, cpu);
93
94         return sum;
95 }
96
97
98 /*
99  * Lock/unlock the current runqueue - to extract task statistics:
100  */
101 extern unsigned long long task_delta_exec(struct task_struct *);
102
103 extern void account_user_time(struct task_struct *, cputime_t, cputime_t);
104 extern void account_system_time(struct task_struct *, int, cputime_t, cputime_t);
105 extern void account_steal_time(cputime_t);
106 extern void account_idle_time(cputime_t);
107
108 extern void account_process_tick(struct task_struct *, int user);
109 extern void account_steal_ticks(unsigned long ticks);
110 extern void account_idle_ticks(unsigned long ticks);
111
112 #endif /* _LINUX_KERNEL_STAT_H */