[POWERPC] spu sched: forced preemption at execution
[platform/adaptation/renesas_rcar/renesas_kernel.git] / arch / powerpc / platforms / cell / spufs / context.c
1 /*
2  * SPU file system -- SPU context management
3  *
4  * (C) Copyright IBM Deutschland Entwicklung GmbH 2005
5  *
6  * Author: Arnd Bergmann <arndb@de.ibm.com>
7  *
8  * This program is free software; you can redistribute it and/or modify
9  * it under the terms of the GNU General Public License as published by
10  * the Free Software Foundation; either version 2, or (at your option)
11  * any later version.
12  *
13  * This program is distributed in the hope that it will be useful,
14  * but WITHOUT ANY WARRANTY; without even the implied warranty of
15  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
16  * GNU General Public License for more details.
17  *
18  * You should have received a copy of the GNU General Public License
19  * along with this program; if not, write to the Free Software
20  * Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
21  */
22
23 #include <linux/fs.h>
24 #include <linux/mm.h>
25 #include <linux/slab.h>
26 #include <asm/spu.h>
27 #include <asm/spu_csa.h>
28 #include "spufs.h"
29
30 struct spu_context *alloc_spu_context(struct spu_gang *gang)
31 {
32         struct spu_context *ctx;
33         ctx = kzalloc(sizeof *ctx, GFP_KERNEL);
34         if (!ctx)
35                 goto out;
36         /* Binding to physical processor deferred
37          * until spu_activate().
38          */
39         spu_init_csa(&ctx->csa);
40         if (!ctx->csa.lscsa) {
41                 goto out_free;
42         }
43         spin_lock_init(&ctx->mmio_lock);
44         kref_init(&ctx->kref);
45         mutex_init(&ctx->state_mutex);
46         init_MUTEX(&ctx->run_sema);
47         init_waitqueue_head(&ctx->ibox_wq);
48         init_waitqueue_head(&ctx->wbox_wq);
49         init_waitqueue_head(&ctx->stop_wq);
50         init_waitqueue_head(&ctx->mfc_wq);
51         ctx->state = SPU_STATE_SAVED;
52         ctx->ops = &spu_backing_ops;
53         ctx->owner = get_task_mm(current);
54         if (gang)
55                 spu_gang_add_ctx(gang, ctx);
56         ctx->rt_priority = current->rt_priority;
57         ctx->prio = current->prio;
58         goto out;
59 out_free:
60         kfree(ctx);
61         ctx = NULL;
62 out:
63         return ctx;
64 }
65
66 void destroy_spu_context(struct kref *kref)
67 {
68         struct spu_context *ctx;
69         ctx = container_of(kref, struct spu_context, kref);
70         mutex_lock(&ctx->state_mutex);
71         spu_deactivate(ctx);
72         mutex_unlock(&ctx->state_mutex);
73         spu_fini_csa(&ctx->csa);
74         if (ctx->gang)
75                 spu_gang_remove_ctx(ctx->gang, ctx);
76         kfree(ctx);
77 }
78
79 struct spu_context * get_spu_context(struct spu_context *ctx)
80 {
81         kref_get(&ctx->kref);
82         return ctx;
83 }
84
85 int put_spu_context(struct spu_context *ctx)
86 {
87         return kref_put(&ctx->kref, &destroy_spu_context);
88 }
89
90 /* give up the mm reference when the context is about to be destroyed */
91 void spu_forget(struct spu_context *ctx)
92 {
93         struct mm_struct *mm;
94         spu_acquire_saved(ctx);
95         mm = ctx->owner;
96         ctx->owner = NULL;
97         mmput(mm);
98         spu_release(ctx);
99 }
100
101 void spu_unmap_mappings(struct spu_context *ctx)
102 {
103         if (ctx->local_store)
104                 unmap_mapping_range(ctx->local_store, 0, LS_SIZE, 1);
105         if (ctx->mfc)
106                 unmap_mapping_range(ctx->mfc, 0, 0x1000, 1);
107         if (ctx->cntl)
108                 unmap_mapping_range(ctx->cntl, 0, 0x1000, 1);
109         if (ctx->signal1)
110                 unmap_mapping_range(ctx->signal1, 0, PAGE_SIZE, 1);
111         if (ctx->signal2)
112                 unmap_mapping_range(ctx->signal2, 0, PAGE_SIZE, 1);
113         if (ctx->mss)
114                 unmap_mapping_range(ctx->mss, 0, 0x1000, 1);
115         if (ctx->psmap)
116                 unmap_mapping_range(ctx->psmap, 0, 0x20000, 1);
117 }
118
119 /**
120  * spu_acquire_exclusive - lock spu contex and protect against userspace access
121  * @ctx:        spu contex to lock
122  *
123  * Note:
124  *      Returns 0 and with the context locked on success
125  *      Returns negative error and with the context _unlocked_ on failure.
126  */
127 int spu_acquire_exclusive(struct spu_context *ctx)
128 {
129         int ret = -EINVAL;
130
131         spu_acquire(ctx);
132         /*
133          * Context is about to be freed, so we can't acquire it anymore.
134          */
135         if (!ctx->owner)
136                 goto out_unlock;
137
138         if (ctx->state == SPU_STATE_SAVED) {
139                 ret = spu_activate(ctx, 0);
140                 if (ret)
141                         goto out_unlock;
142         } else {
143                 /*
144                  * We need to exclude userspace access to the context.
145                  *
146                  * To protect against memory access we invalidate all ptes
147                  * and make sure the pagefault handlers block on the mutex.
148                  */
149                 spu_unmap_mappings(ctx);
150         }
151
152         return 0;
153
154  out_unlock:
155         spu_release(ctx);
156         return ret;
157 }
158
159 /**
160  * spu_acquire_runnable - lock spu contex and make sure it is in runnable state
161  * @ctx:        spu contex to lock
162  *
163  * Note:
164  *      Returns 0 and with the context locked on success
165  *      Returns negative error and with the context _unlocked_ on failure.
166  */
167 int spu_acquire_runnable(struct spu_context *ctx, unsigned long flags)
168 {
169         int ret = -EINVAL;
170
171         spu_acquire(ctx);
172         if (ctx->state == SPU_STATE_SAVED) {
173                 /*
174                  * Context is about to be freed, so we can't acquire it anymore.
175                  */
176                 if (!ctx->owner)
177                         goto out_unlock;
178                 ret = spu_activate(ctx, flags);
179                 if (ret)
180                         goto out_unlock;
181         }
182
183         return 0;
184
185  out_unlock:
186         spu_release(ctx);
187         return ret;
188 }
189
190 /**
191  * spu_acquire_saved - lock spu contex and make sure it is in saved state
192  * @ctx:        spu contex to lock
193  */
194 void spu_acquire_saved(struct spu_context *ctx)
195 {
196         spu_acquire(ctx);
197         if (ctx->state != SPU_STATE_SAVED)
198                 spu_deactivate(ctx);
199 }