kernel/ptrace.c

   1 /*
   2  * linux/kernel/ptrace.c
   3  *
   4  * (C) Copyright 1999 Linus Torvalds
   5  *
   6  * Common interfaces for "ptrace()" which we do not want
   7  * to continually duplicate across every architecture.
   8  */
   9
  10 #include <linux/capability.h>
  11 #include <linux/export.h>
  12 #include <linux/sched.h>
  13 #include <linux/errno.h>
  14 #include <linux/mm.h>
  15 #include <linux/highmem.h>
  16 #include <linux/pagemap.h>
  17 #include <linux/ptrace.h>
  18 #include <linux/security.h>
  19 #include <linux/signal.h>
  20 #include <linux/audit.h>
  21 #include <linux/pid_namespace.h>
  22 #include <linux/syscalls.h>
  23 #include <linux/uaccess.h>
  24 #include <linux/regset.h>
  25 #include <linux/hw_breakpoint.h>
  26 #include <linux/cn_proc.h>
  27
  28
  29 static int ptrace_trapping_sleep_fn(void *flags)
  30 {
  31         schedule();
  32         return 0;
  33 }
  34
  35 /*
  36  * ptrace a task: make the debugger its new parent and
  37  * move it to the ptrace list.
  38  *
  39  * Must be called with the tasklist lock write-held.
  40  */
  41 void __ptrace_link(struct task_struct *child, struct task_struct *new_parent)
  42 {
  43         BUG_ON(!list_empty(&child->ptrace_entry));
  44         list_add(&child->ptrace_entry, &new_parent->ptraced);
  45         child->parent = new_parent;
  46 }
  47
  48 /**
  49  * __ptrace_unlink - unlink ptracee and restore its execution state
  50  * @child: ptracee to be unlinked
  51  *
  52  * Remove @child from the ptrace list, move it back to the original parent,
  53  * and restore the execution state so that it conforms to the group stop
  54  * state.
  55  *
  56  * Unlinking can happen via two paths - explicit PTRACE_DETACH or ptracer
  57  * exiting.  For PTRACE_DETACH, unless the ptracee has been killed between
  58  * ptrace_check_attach() and here, it's guaranteed to be in TASK_TRACED.
  59  * If the ptracer is exiting, the ptracee can be in any state.
  60  *
  61  * After detach, the ptracee should be in a state which conforms to the
  62  * group stop.  If the group is stopped or in the process of stopping, the
  63  * ptracee should be put into TASK_STOPPED; otherwise, it should be woken
  64  * up from TASK_TRACED.
  65  *
  66  * If the ptracee is in TASK_TRACED and needs to be moved to TASK_STOPPED,
  67  * it goes through TRACED -> RUNNING -> STOPPED transition which is similar
  68  * to but in the opposite direction of what happens while attaching to a
  69  * stopped task.  However, in this direction, the intermediate RUNNING
  70  * state is not hidden even from the current ptracer and if it immediately
  71  * re-attaches and performs a WNOHANG wait(2), it may fail.
  72  *
  73  * CONTEXT:
  74  * write_lock_irq(tasklist_lock)
  75  */
  76 void __ptrace_unlink(struct task_struct *child)
  77 {
  78         BUG_ON(!child->ptrace);
  79
  80         child->ptrace = 0;
  81         child->parent = child->real_parent;
  82         list_del_init(&child->ptrace_entry);
  83
  84         spin_lock(&child->sighand->siglock);
  85
  86         /*
  87          * Clear all pending traps and TRAPPING.  TRAPPING should be
  88          * cleared regardless of JOBCTL_STOP_PENDING.  Do it explicitly.
  89          */
  90         task_clear_jobctl_pending(child, JOBCTL_TRAP_MASK);
  91         task_clear_jobctl_trapping(child);
  92
  93         /*
  94          * Reinstate JOBCTL_STOP_PENDING if group stop is in effect and
  95          * @child isn't dead.
  96          */
  97         if (!(child->flags & PF_EXITING) &&
  98             (child->signal->flags & SIGNAL_STOP_STOPPED ||
  99              child->signal->group_stop_count)) {
 100                 child->jobctl |= JOBCTL_STOP_PENDING;
 101
 102                 /*
 103                  * This is only possible if this thread was cloned by the
 104                  * traced task running in the stopped group, set the signal
 105                  * for the future reports.
 106                  * FIXME: we should change ptrace_init_task() to handle this
 107                  * case.
 108                  */
 109                 if (!(child->jobctl & JOBCTL_STOP_SIGMASK))
 110                         child->jobctl |= SIGSTOP;
 111         }
 112
 113         /*
 114          * If transition to TASK_STOPPED is pending or in TASK_TRACED, kick
 115          * @child in the butt.  Note that @resume should be used iff @child
 116          * is in TASK_TRACED; otherwise, we might unduly disrupt
 117          * TASK_KILLABLE sleeps.
 118          */
 119         if (child->jobctl & JOBCTL_STOP_PENDING || task_is_traced(child))
 120                 ptrace_signal_wake_up(child, true);
 121
 122         spin_unlock(&child->sighand->siglock);
 123 }
 124
 125 /* Ensure that nothing can wake it up, even SIGKILL */
 126 static bool ptrace_freeze_traced(struct task_struct *task)
 127 {
 128         bool ret = false;
 129
 130         /* Lockless, nobody but us can set this flag */
 131         if (task->jobctl & JOBCTL_LISTENING)
 132                 return ret;
 133
 134         spin_lock_irq(&task->sighand->siglock);
 135         if (task_is_traced(task) && !__fatal_signal_pending(task)) {
 136                 task->state = __TASK_TRACED;
 137                 ret = true;
 138         }
 139         spin_unlock_irq(&task->sighand->siglock);
 140
 141         return ret;
 142 }
 143
 144 static void ptrace_unfreeze_traced(struct task_struct *task)
 145 {
 146         if (task->state != __TASK_TRACED)
 147                 return;
 148
 149         WARN_ON(!task->ptrace || task->parent != current);
 150
 151         /*
 152          * PTRACE_LISTEN can allow ptrace_trap_notify to wake us up remotely.
 153          * Recheck state under the lock to close this race.
 154          */
 155         spin_lock_irq(&task->sighand->siglock);
 156         if (task->state == __TASK_TRACED) {
 157                 if (__fatal_signal_pending(task))
 158                         wake_up_state(task, __TASK_TRACED);
 159                 else
 160                         task->state = TASK_TRACED;
 161         }
 162         spin_unlock_irq(&task->sighand->siglock);
 163 }
 164
 165 /**
 166  * ptrace_check_attach - check whether ptracee is ready for ptrace operation
 167  * @child: ptracee to check for
 168  * @ignore_state: don't check whether @child is currently %TASK_TRACED
 169  *
 170  * Check whether @child is being ptraced by %current and ready for further
 171  * ptrace operations.  If @ignore_state is %false, @child also should be in
 172  * %TASK_TRACED state and on return the child is guaranteed to be traced
 173  * and not executing.  If @ignore_state is %true, @child can be in any
 174  * state.
 175  *
 176  * CONTEXT:
 177  * Grabs and releases tasklist_lock and @child->sighand->siglock.
 178  *
 179  * RETURNS:
 180  * 0 on success, -ESRCH if %child is not ready.
 181  */
 182 int ptrace_check_attach(struct task_struct *child, bool ignore_state)
 183 {
 184         int ret = -ESRCH;
 185
 186         /*
 187          * We take the read lock around doing both checks to close a
 188          * possible race where someone else was tracing our child and
 189          * detached between these two checks.  After this locked check,
 190          * we are sure that this is our traced child and that can only
 191          * be changed by us so it's not changing right after this.
 192          */
 193         read_lock(&tasklist_lock);
 194         if (child->ptrace && child->parent == current) {
 195                 WARN_ON(child->state == __TASK_TRACED);
 196                 /*
 197                  * child->sighand can't be NULL, release_task()
 198                  * does ptrace_unlink() before __exit_signal().
 199                  */
 200                 if (ignore_state || ptrace_freeze_traced(child))
 201                         ret = 0;
 202         }
 203         read_unlock(&tasklist_lock);
 204
 205         if (!ret && !ignore_state) {
 206                 if (!wait_task_inactive(child, __TASK_TRACED)) {
 207                         /*
 208                          * This can only happen if may_ptrace_stop() fails and
 209                          * ptrace_stop() changes ->state back to TASK_RUNNING,
 210                          * so we should not worry about leaking __TASK_TRACED.
 211                          */
 212                         WARN_ON(child->state == __TASK_TRACED);
 213                         ret = -ESRCH;
 214                 }
 215         }
 216
 217         return ret;
 218 }
 219
 220 int __ptrace_may_access(struct task_struct *task, unsigned int mode)
 221 {
 222         const struct cred *cred = current_cred(), *tcred;
 223
 224         /* May we inspect the given task?
 225          * This check is used both for attaching with ptrace
 226          * and for allowing access to sensitive information in /proc.
 227          *
 228          * ptrace_attach denies several cases that /proc allows
 229          * because setting up the necessary parent/child relationship
 230          * or halting the specified task is impossible.
 231          */
 232         int dumpable = 0;
 233         /* Don't let security modules deny introspection */
 234         if (same_thread_group(task, current))
 235                 return 0;
 236         rcu_read_lock();
 237         tcred = __task_cred(task);
 238         if (cred->user->user_ns == tcred->user->user_ns &&
 239             (cred->uid == tcred->euid &&
 240              cred->uid == tcred->suid &&
 241              cred->uid == tcred->uid  &&
 242              cred->gid == tcred->egid &&
 243              cred->gid == tcred->sgid &&
 244              cred->gid == tcred->gid))
 245                 goto ok;
 246         if (ns_capable(tcred->user->user_ns, CAP_SYS_PTRACE))
 247                 goto ok;
 248         rcu_read_unlock();
 249         return -EPERM;
 250 ok:
 251         rcu_read_unlock();
 252         smp_rmb();
 253         if (task->mm)
 254                 dumpable = get_dumpable(task->mm);
 255         if (dumpable != SUID_DUMP_USER &&
 256             !task_ns_capable(task, CAP_SYS_PTRACE))
 257                 return -EPERM;
 258
 259         return security_ptrace_access_check(task, mode);
 260 }
 261
 262 bool ptrace_may_access(struct task_struct *task, unsigned int mode)
 263 {
 264         int err;
 265         task_lock(task);
 266         err = __ptrace_may_access(task, mode);
 267         task_unlock(task);
 268         return !err;
 269 }
 270
 271 static int ptrace_attach(struct task_struct *task, long request,
 272                          unsigned long flags)
 273 {
 274         bool seize = (request == PTRACE_SEIZE);
 275         int retval;
 276
 277         /*
 278          * SEIZE will enable new ptrace behaviors which will be implemented
 279          * gradually.  SEIZE_DEVEL is used to prevent applications
 280          * expecting full SEIZE behaviors trapping on kernel commits which
 281          * are still in the process of implementing them.
 282          *
 283          * Only test programs for new ptrace behaviors being implemented
 284          * should set SEIZE_DEVEL.  If unset, SEIZE will fail with -EIO.
 285          *
 286          * Once SEIZE behaviors are completely implemented, this flag and
 287          * the following test will be removed.
 288          */
 289         retval = -EIO;
 290         if (seize && !(flags & PTRACE_SEIZE_DEVEL))
 291                 goto out;
 292
 293         audit_ptrace(task);
 294
 295         retval = -EPERM;
 296         if (unlikely(task->flags & PF_KTHREAD))
 297                 goto out;
 298         if (same_thread_group(task, current))
 299                 goto out;
 300
 301         /*
 302          * Protect exec's credential calculations against our interference;
 303          * interference; SUID, SGID and LSM creds get determined differently
 304          * under ptrace.
 305          */
 306         retval = -ERESTARTNOINTR;
 307         if (mutex_lock_interruptible(&task->signal->cred_guard_mutex))
 308                 goto out;
 309
 310         task_lock(task);
 311         retval = __ptrace_may_access(task, PTRACE_MODE_ATTACH);
 312         task_unlock(task);
 313         if (retval)
 314                 goto unlock_creds;
 315
 316         write_lock_irq(&tasklist_lock);
 317         retval = -EPERM;
 318         if (unlikely(task->exit_state))
 319                 goto unlock_tasklist;
 320         if (task->ptrace)
 321                 goto unlock_tasklist;
 322
 323         task->ptrace = PT_PTRACED;
 324         if (seize)
 325                 task->ptrace |= PT_SEIZED;
 326         if (task_ns_capable(task, CAP_SYS_PTRACE))
 327                 task->ptrace |= PT_PTRACE_CAP;
 328
 329         __ptrace_link(task, current);
 330
 331         /* SEIZE doesn't trap tracee on attach */
 332         if (!seize)
 333                 send_sig_info(SIGSTOP, SEND_SIG_FORCED, task);
 334
 335         spin_lock(&task->sighand->siglock);
 336
 337         /*
 338          * If the task is already STOPPED, set JOBCTL_TRAP_STOP and
 339          * TRAPPING, and kick it so that it transits to TRACED.  TRAPPING
 340          * will be cleared if the child completes the transition or any
 341          * event which clears the group stop states happens.  We'll wait
 342          * for the transition to complete before returning from this
 343          * function.
 344          *
 345          * This hides STOPPED -> RUNNING -> TRACED transition from the
 346          * attaching thread but a different thread in the same group can
 347          * still observe the transient RUNNING state.  IOW, if another
 348          * thread's WNOHANG wait(2) on the stopped tracee races against
 349          * ATTACH, the wait(2) may fail due to the transient RUNNING.
 350          *
 351          * The following task_is_stopped() test is safe as both transitions
 352          * in and out of STOPPED are protected by siglock.
 353          */
 354         if (task_is_stopped(task) &&
 355             task_set_jobctl_pending(task, JOBCTL_TRAP_STOP | JOBCTL_TRAPPING))
 356                 signal_wake_up_state(task, __TASK_STOPPED);
 357
 358         spin_unlock(&task->sighand->siglock);
 359
 360         retval = 0;
 361 unlock_tasklist:
 362         write_unlock_irq(&tasklist_lock);
 363 unlock_creds:
 364         mutex_unlock(&task->signal->cred_guard_mutex);
 365 out:
 366         if (!retval) {
 367                 wait_on_bit(&task->jobctl, JOBCTL_TRAPPING_BIT,
 368                             ptrace_trapping_sleep_fn, TASK_UNINTERRUPTIBLE);
 369                 proc_ptrace_connector(task, PTRACE_ATTACH);
 370         }
 371
 372         return retval;
 373 }
 374
 375 /**
 376  * ptrace_traceme  --  helper for PTRACE_TRACEME
 377  *
 378  * Performs checks and sets PT_PTRACED.
 379  * Should be used by all ptrace implementations for PTRACE_TRACEME.
 380  */
 381 static int ptrace_traceme(void)
 382 {
 383         int ret = -EPERM;
 384
 385         write_lock_irq(&tasklist_lock);
 386         /* Are we already being traced? */
 387         if (!current->ptrace) {
 388                 ret = security_ptrace_traceme(current->parent);
 389                 /*
 390                  * Check PF_EXITING to ensure ->real_parent has not passed
 391                  * exit_ptrace(). Otherwise we don't report the error but
 392                  * pretend ->real_parent untraces us right after return.
 393                  */
 394                 if (!ret && !(current->real_parent->flags & PF_EXITING)) {
 395                         current->ptrace = PT_PTRACED;
 396                         __ptrace_link(current, current->real_parent);
 397                 }
 398         }
 399         write_unlock_irq(&tasklist_lock);
 400
 401         return ret;
 402 }
 403
 404 /*
 405  * Called with irqs disabled, returns true if childs should reap themselves.
 406  */
 407 static int ignoring_children(struct sighand_struct *sigh)
 408 {
 409         int ret;
 410         spin_lock(&sigh->siglock);
 411         ret = (sigh->action[SIGCHLD-1].sa.sa_handler == SIG_IGN) ||
 412               (sigh->action[SIGCHLD-1].sa.sa_flags & SA_NOCLDWAIT);
 413         spin_unlock(&sigh->siglock);
 414         return ret;
 415 }
 416
 417 /*
 418  * Called with tasklist_lock held for writing.
 419  * Unlink a traced task, and clean it up if it was a traced zombie.
 420  * Return true if it needs to be reaped with release_task().
 421  * (We can't call release_task() here because we already hold tasklist_lock.)
 422  *
 423  * If it's a zombie, our attachedness prevented normal parent notification
 424  * or self-reaping.  Do notification now if it would have happened earlier.
 425  * If it should reap itself, return true.
 426  *
 427  * If it's our own child, there is no notification to do. But if our normal
 428  * children self-reap, then this child was prevented by ptrace and we must
 429  * reap it now, in that case we must also wake up sub-threads sleeping in
 430  * do_wait().
 431  */
 432 static bool __ptrace_detach(struct task_struct *tracer, struct task_struct *p)
 433 {
 434         bool dead;
 435
 436         __ptrace_unlink(p);
 437
 438         if (p->exit_state != EXIT_ZOMBIE)
 439                 return false;
 440
 441         dead = !thread_group_leader(p);
 442
 443         if (!dead && thread_group_empty(p)) {
 444                 if (!same_thread_group(p->real_parent, tracer))
 445                         dead = do_notify_parent(p, p->exit_signal);
 446                 else if (ignoring_children(tracer->sighand)) {
 447                         __wake_up_parent(p, tracer);
 448                         dead = true;
 449                 }
 450         }
 451         /* Mark it as in the process of being reaped. */
 452         if (dead)
 453                 p->exit_state = EXIT_DEAD;
 454         return dead;
 455 }
 456
 457 static int ptrace_detach(struct task_struct *child, unsigned int data)
 458 {
 459         bool dead = false;
 460
 461         if (!valid_signal(data))
 462                 return -EIO;
 463
 464         /* Architecture-specific hardware disable .. */
 465         ptrace_disable(child);
 466         clear_tsk_thread_flag(child, TIF_SYSCALL_TRACE);
 467
 468         write_lock_irq(&tasklist_lock);
 469         /*
 470          * This child can be already killed. Make sure de_thread() or
 471          * our sub-thread doing do_wait() didn't do release_task() yet.
 472          */
 473         if (child->ptrace) {
 474                 child->exit_code = data;
 475                 dead = __ptrace_detach(current, child);
 476         }
 477         write_unlock_irq(&tasklist_lock);
 478
 479         proc_ptrace_connector(child, PTRACE_DETACH);
 480         if (unlikely(dead))
 481                 release_task(child);
 482
 483         return 0;
 484 }
 485
 486 /*
 487  * Detach all tasks we were using ptrace on. Called with tasklist held
 488  * for writing, and returns with it held too. But note it can release
 489  * and reacquire the lock.
 490  */
 491 void exit_ptrace(struct task_struct *tracer)
 492         __releases(&tasklist_lock)
 493         __acquires(&tasklist_lock)
 494 {
 495         struct task_struct *p, *n;
 496         LIST_HEAD(ptrace_dead);
 497
 498         if (likely(list_empty(&tracer->ptraced)))
 499                 return;
 500
 501         list_for_each_entry_safe(p, n, &tracer->ptraced, ptrace_entry) {
 502                 if (__ptrace_detach(tracer, p))
 503                         list_add(&p->ptrace_entry, &ptrace_dead);
 504         }
 505
 506         write_unlock_irq(&tasklist_lock);
 507         BUG_ON(!list_empty(&tracer->ptraced));
 508
 509         list_for_each_entry_safe(p, n, &ptrace_dead, ptrace_entry) {
 510                 list_del_init(&p->ptrace_entry);
 511                 release_task(p);
 512         }
 513
 514         write_lock_irq(&tasklist_lock);
 515 }
 516
 517 int ptrace_readdata(struct task_struct *tsk, unsigned long src, char __user *dst, int len)
 518 {
 519         int copied = 0;
 520
 521         while (len > 0) {
 522                 char buf[128];
 523                 int this_len, retval;
 524
 525                 this_len = (len > sizeof(buf)) ? sizeof(buf) : len;
 526                 retval = access_process_vm(tsk, src, buf, this_len, 0);
 527                 if (!retval) {
 528                         if (copied)
 529                                 break;
 530                         return -EIO;
 531                 }
 532                 if (copy_to_user(dst, buf, retval))
 533                         return -EFAULT;
 534                 copied += retval;
 535                 src += retval;
 536                 dst += retval;
 537                 len -= retval;
 538         }
 539         return copied;
 540 }
 541
 542 int ptrace_writedata(struct task_struct *tsk, char __user *src, unsigned long dst, int len)
 543 {
 544         int copied = 0;
 545
 546         while (len > 0) {
 547                 char buf[128];
 548                 int this_len, retval;
 549
 550                 this_len = (len > sizeof(buf)) ? sizeof(buf) : len;
 551                 if (copy_from_user(buf, src, this_len))
 552                         return -EFAULT;
 553                 retval = access_process_vm(tsk, dst, buf, this_len, 1);
 554                 if (!retval) {
 555                         if (copied)
 556                                 break;
 557                         return -EIO;
 558                 }
 559                 copied += retval;
 560                 src += retval;
 561                 dst += retval;
 562                 len -= retval;
 563         }
 564         return copied;
 565 }
 566
 567 static int ptrace_setoptions(struct task_struct *child, unsigned long data)
 568 {
 569         child->ptrace &= ~PT_TRACE_MASK;
 570
 571         if (data & PTRACE_O_TRACESYSGOOD)
 572                 child->ptrace |= PT_TRACESYSGOOD;
 573
 574         if (data & PTRACE_O_TRACEFORK)
 575                 child->ptrace |= PT_TRACE_FORK;
 576
 577         if (data & PTRACE_O_TRACEVFORK)
 578                 child->ptrace |= PT_TRACE_VFORK;
 579
 580         if (data & PTRACE_O_TRACECLONE)
 581                 child->ptrace |= PT_TRACE_CLONE;
 582
 583         if (data & PTRACE_O_TRACEEXEC)
 584                 child->ptrace |= PT_TRACE_EXEC;
 585
 586         if (data & PTRACE_O_TRACEVFORKDONE)
 587                 child->ptrace |= PT_TRACE_VFORK_DONE;
 588
 589         if (data & PTRACE_O_TRACEEXIT)
 590                 child->ptrace |= PT_TRACE_EXIT;
 591
 592         return (data & ~PTRACE_O_MASK) ? -EINVAL : 0;
 593 }
 594
 595 static int ptrace_getsiginfo(struct task_struct *child, siginfo_t *info)
 596 {
 597         unsigned long flags;
 598         int error = -ESRCH;
 599
 600         if (lock_task_sighand(child, &flags)) {
 601                 error = -EINVAL;
 602                 if (likely(child->last_siginfo != NULL)) {
 603                         *info = *child->last_siginfo;
 604                         error = 0;
 605                 }
 606                 unlock_task_sighand(child, &flags);
 607         }
 608         return error;
 609 }
 610
 611 static int ptrace_setsiginfo(struct task_struct *child, const siginfo_t *info)
 612 {
 613         unsigned long flags;
 614         int error = -ESRCH;
 615
 616         if (lock_task_sighand(child, &flags)) {
 617                 error = -EINVAL;
 618                 if (likely(child->last_siginfo != NULL)) {
 619                         *child->last_siginfo = *info;
 620                         error = 0;
 621                 }
 622                 unlock_task_sighand(child, &flags);
 623         }
 624         return error;
 625 }
 626
 627
 628 #ifdef PTRACE_SINGLESTEP
 629 #define is_singlestep(request)          ((request) == PTRACE_SINGLESTEP)
 630 #else
 631 #define is_singlestep(request)          0
 632 #endif
 633
 634 #ifdef PTRACE_SINGLEBLOCK
 635 #define is_singleblock(request)         ((request) == PTRACE_SINGLEBLOCK)
 636 #else
 637 #define is_singleblock(request)         0
 638 #endif
 639
 640 #ifdef PTRACE_SYSEMU
 641 #define is_sysemu_singlestep(request)   ((request) == PTRACE_SYSEMU_SINGLESTEP)
 642 #else
 643 #define is_sysemu_singlestep(request)   0
 644 #endif
 645
 646 static int ptrace_resume(struct task_struct *child, long request,
 647                          unsigned long data)
 648 {
 649         bool need_siglock;
 650
 651         if (!valid_signal(data))
 652                 return -EIO;
 653
 654         if (request == PTRACE_SYSCALL)
 655                 set_tsk_thread_flag(child, TIF_SYSCALL_TRACE);
 656         else
 657                 clear_tsk_thread_flag(child, TIF_SYSCALL_TRACE);
 658
 659 #ifdef TIF_SYSCALL_EMU
 660         if (request == PTRACE_SYSEMU || request == PTRACE_SYSEMU_SINGLESTEP)
 661                 set_tsk_thread_flag(child, TIF_SYSCALL_EMU);
 662         else
 663                 clear_tsk_thread_flag(child, TIF_SYSCALL_EMU);
 664 #endif
 665
 666         if (is_singleblock(request)) {
 667                 if (unlikely(!arch_has_block_step()))
 668                         return -EIO;
 669                 user_enable_block_step(child);
 670         } else if (is_singlestep(request) || is_sysemu_singlestep(request)) {
 671                 if (unlikely(!arch_has_single_step()))
 672                         return -EIO;
 673                 user_enable_single_step(child);
 674         } else {
 675                 user_disable_single_step(child);
 676         }
 677
 678         /*
 679          * Change ->exit_code and ->state under siglock to avoid the race
 680          * with wait_task_stopped() in between; a non-zero ->exit_code will
 681          * wrongly look like another report from tracee.
 682          *
 683          * Note that we need siglock even if ->exit_code == data and/or this
 684          * status was not reported yet, the new status must not be cleared by
 685          * wait_task_stopped() after resume.
 686          *
 687          * If data == 0 we do not care if wait_task_stopped() reports the old
 688          * status and clears the code too; this can't race with the tracee, it
 689          * takes siglock after resume.
 690          */
 691         need_siglock = data && !thread_group_empty(current);
 692         if (need_siglock)
 693                 spin_lock_irq(&child->sighand->siglock);
 694         child->exit_code = data;
 695         wake_up_state(child, __TASK_TRACED);
 696         if (need_siglock)
 697                 spin_unlock_irq(&child->sighand->siglock);
 698
 699         return 0;
 700 }
 701
 702 #ifdef CONFIG_HAVE_ARCH_TRACEHOOK
 703
 704 static const struct user_regset *
 705 find_regset(const struct user_regset_view *view, unsigned int type)
 706 {
 707         const struct user_regset *regset;
 708         int n;
 709
 710         for (n = 0; n < view->n; ++n) {
 711                 regset = view->regsets + n;
 712                 if (regset->core_note_type == type)
 713                         return regset;
 714         }
 715
 716         return NULL;
 717 }
 718
 719 static int ptrace_regset(struct task_struct *task, int req, unsigned int type,
 720                          struct iovec *kiov)
 721 {
 722         const struct user_regset_view *view = task_user_regset_view(task);
 723         const struct user_regset *regset = find_regset(view, type);
 724         int regset_no;
 725
 726         if (!regset || (kiov->iov_len % regset->size) != 0)
 727                 return -EINVAL;
 728
 729         regset_no = regset - view->regsets;
 730         kiov->iov_len = min(kiov->iov_len,
 731                             (__kernel_size_t) (regset->n * regset->size));
 732
 733         if (req == PTRACE_GETREGSET)
 734                 return copy_regset_to_user(task, view, regset_no, 0,
 735                                            kiov->iov_len, kiov->iov_base);
 736         else
 737                 return copy_regset_from_user(task, view, regset_no, 0,
 738                                              kiov->iov_len, kiov->iov_base);
 739 }
 740
 741 #endif
 742
 743 int ptrace_request(struct task_struct *child, long request,
 744                    unsigned long addr, unsigned long data)
 745 {
 746         bool seized = child->ptrace & PT_SEIZED;
 747         int ret = -EIO;
 748         siginfo_t siginfo, *si;
 749         void __user *datavp = (void __user *) data;
 750         unsigned long __user *datalp = datavp;
 751         unsigned long flags;
 752
 753         switch (request) {
 754         case PTRACE_PEEKTEXT:
 755         case PTRACE_PEEKDATA:
 756                 return generic_ptrace_peekdata(child, addr, data);
 757         case PTRACE_POKETEXT:
 758         case PTRACE_POKEDATA:
 759                 return generic_ptrace_pokedata(child, addr, data);
 760
 761 #ifdef PTRACE_OLDSETOPTIONS
 762         case PTRACE_OLDSETOPTIONS:
 763 #endif
 764         case PTRACE_SETOPTIONS:
 765                 ret = ptrace_setoptions(child, data);
 766                 break;
 767         case PTRACE_GETEVENTMSG:
 768                 ret = put_user(child->ptrace_message, datalp);
 769                 break;
 770
 771         case PTRACE_GETSIGINFO:
 772                 ret = ptrace_getsiginfo(child, &siginfo);
 773                 if (!ret)
 774                         ret = copy_siginfo_to_user(datavp, &siginfo);
 775                 break;
 776
 777         case PTRACE_SETSIGINFO:
 778                 if (copy_from_user(&siginfo, datavp, sizeof siginfo))
 779                         ret = -EFAULT;
 780                 else
 781                         ret = ptrace_setsiginfo(child, &siginfo);
 782                 break;
 783
 784         case PTRACE_INTERRUPT:
 785                 /*
 786                  * Stop tracee without any side-effect on signal or job
 787                  * control.  At least one trap is guaranteed to happen
 788                  * after this request.  If @child is already trapped, the
 789                  * current trap is not disturbed and another trap will
 790                  * happen after the current trap is ended with PTRACE_CONT.
 791                  *
 792                  * The actual trap might not be PTRACE_EVENT_STOP trap but
 793                  * the pending condition is cleared regardless.
 794                  */
 795                 if (unlikely(!seized || !lock_task_sighand(child, &flags)))
 796                         break;
 797
 798                 /*
 799                  * INTERRUPT doesn't disturb existing trap sans one
 800                  * exception.  If ptracer issued LISTEN for the current
 801                  * STOP, this INTERRUPT should clear LISTEN and re-trap
 802                  * tracee into STOP.
 803                  */
 804                 if (likely(task_set_jobctl_pending(child, JOBCTL_TRAP_STOP)))
 805                         ptrace_signal_wake_up(child, child->jobctl & JOBCTL_LISTENING);
 806
 807                 unlock_task_sighand(child, &flags);
 808                 ret = 0;
 809                 break;
 810
 811         case PTRACE_LISTEN:
 812                 /*
 813                  * Listen for events.  Tracee must be in STOP.  It's not
 814                  * resumed per-se but is not considered to be in TRACED by
 815                  * wait(2) or ptrace(2).  If an async event (e.g. group
 816                  * stop state change) happens, tracee will enter STOP trap
 817                  * again.  Alternatively, ptracer can issue INTERRUPT to
 818                  * finish listening and re-trap tracee into STOP.
 819                  */
 820                 if (unlikely(!seized || !lock_task_sighand(child, &flags)))
 821                         break;
 822
 823                 si = child->last_siginfo;
 824                 if (likely(si && (si->si_code >> 8) == PTRACE_EVENT_STOP)) {
 825                         child->jobctl |= JOBCTL_LISTENING;
 826                         /*
 827                          * If NOTIFY is set, it means event happened between
 828                          * start of this trap and now.  Trigger re-trap.
 829                          */
 830                         if (child->jobctl & JOBCTL_TRAP_NOTIFY)
 831                                 ptrace_signal_wake_up(child, true);
 832                         ret = 0;
 833                 }
 834                 unlock_task_sighand(child, &flags);
 835                 break;
 836
 837         case PTRACE_DETACH:      /* detach a process that was attached. */
 838                 ret = ptrace_detach(child, data);
 839                 break;
 840
 841 #ifdef CONFIG_BINFMT_ELF_FDPIC
 842         case PTRACE_GETFDPIC: {
 843                 struct mm_struct *mm = get_task_mm(child);
 844                 unsigned long tmp = 0;
 845
 846                 ret = -ESRCH;
 847                 if (!mm)
 848                         break;
 849
 850                 switch (addr) {
 851                 case PTRACE_GETFDPIC_EXEC:
 852                         tmp = mm->context.exec_fdpic_loadmap;
 853                         break;
 854                 case PTRACE_GETFDPIC_INTERP:
 855                         tmp = mm->context.interp_fdpic_loadmap;
 856                         break;
 857                 default:
 858                         break;
 859                 }
 860                 mmput(mm);
 861
 862                 ret = put_user(tmp, datalp);
 863                 break;
 864         }
 865 #endif
 866
 867 #ifdef PTRACE_SINGLESTEP
 868         case PTRACE_SINGLESTEP:
 869 #endif
 870 #ifdef PTRACE_SINGLEBLOCK
 871         case PTRACE_SINGLEBLOCK:
 872 #endif
 873 #ifdef PTRACE_SYSEMU
 874         case PTRACE_SYSEMU:
 875         case PTRACE_SYSEMU_SINGLESTEP:
 876 #endif
 877         case PTRACE_SYSCALL:
 878         case PTRACE_CONT:
 879                 return ptrace_resume(child, request, data);
 880
 881         case PTRACE_KILL:
 882                 if (child->exit_state)  /* already dead */
 883                         return 0;
 884                 return ptrace_resume(child, request, SIGKILL);
 885
 886 #ifdef CONFIG_HAVE_ARCH_TRACEHOOK
 887         case PTRACE_GETREGSET:
 888         case PTRACE_SETREGSET:
 889         {
 890                 struct iovec kiov;
 891                 struct iovec __user *uiov = datavp;
 892
 893                 if (!access_ok(VERIFY_WRITE, uiov, sizeof(*uiov)))
 894                         return -EFAULT;
 895
 896                 if (__get_user(kiov.iov_base, &uiov->iov_base) ||
 897                     __get_user(kiov.iov_len, &uiov->iov_len))
 898                         return -EFAULT;
 899
 900                 ret = ptrace_regset(child, request, addr, &kiov);
 901                 if (!ret)
 902                         ret = __put_user(kiov.iov_len, &uiov->iov_len);
 903                 break;
 904         }
 905 #endif
 906         default:
 907                 break;
 908         }
 909
 910         return ret;
 911 }
 912
 913 static struct task_struct *ptrace_get_task_struct(pid_t pid)
 914 {
 915         struct task_struct *child;
 916
 917         rcu_read_lock();
 918         child = find_task_by_vpid(pid);
 919         if (child)
 920                 get_task_struct(child);
 921         rcu_read_unlock();
 922
 923         if (!child)
 924                 return ERR_PTR(-ESRCH);
 925         return child;
 926 }
 927
 928 #ifndef arch_ptrace_attach
 929 #define arch_ptrace_attach(child)       do { } while (0)
 930 #endif
 931
 932 SYSCALL_DEFINE4(ptrace, long, request, long, pid, unsigned long, addr,
 933                 unsigned long, data)
 934 {
 935         struct task_struct *child;
 936         long ret;
 937
 938         if (request == PTRACE_TRACEME) {
 939                 ret = ptrace_traceme();
 940                 if (!ret)
 941                         arch_ptrace_attach(current);
 942                 goto out;
 943         }
 944
 945         child = ptrace_get_task_struct(pid);
 946         if (IS_ERR(child)) {
 947                 ret = PTR_ERR(child);
 948                 goto out;
 949         }
 950
 951         if (request == PTRACE_ATTACH || request == PTRACE_SEIZE) {
 952                 ret = ptrace_attach(child, request, data);
 953                 /*
 954                  * Some architectures need to do book-keeping after
 955                  * a ptrace attach.
 956                  */
 957                 if (!ret)
 958                         arch_ptrace_attach(child);
 959                 goto out_put_task_struct;
 960         }
 961
 962         ret = ptrace_check_attach(child, request == PTRACE_KILL ||
 963                                   request == PTRACE_INTERRUPT);
 964         if (ret < 0)
 965                 goto out_put_task_struct;
 966
 967         ret = arch_ptrace(child, request, addr, data);
 968         if (ret || request != PTRACE_DETACH)
 969                 ptrace_unfreeze_traced(child);
 970
 971  out_put_task_struct:
 972         put_task_struct(child);
 973  out:
 974         return ret;
 975 }
 976
 977 int generic_ptrace_peekdata(struct task_struct *tsk, unsigned long addr,
 978                             unsigned long data)
 979 {
 980         unsigned long tmp;
 981         int copied;
 982
 983         copied = access_process_vm(tsk, addr, &tmp, sizeof(tmp), 0);
 984         if (copied != sizeof(tmp))
 985                 return -EIO;
 986         return put_user(tmp, (unsigned long __user *)data);
 987 }
 988
 989 int generic_ptrace_pokedata(struct task_struct *tsk, unsigned long addr,
 990                             unsigned long data)
 991 {
 992         int copied;
 993
 994         copied = access_process_vm(tsk, addr, &data, sizeof(data), 1);
 995         return (copied == sizeof(data)) ? 0 : -EIO;
 996 }
 997
 998 #if defined CONFIG_COMPAT
 999 #include <linux/compat.h>
1000
1001 int compat_ptrace_request(struct task_struct *child, compat_long_t request,
1002                           compat_ulong_t addr, compat_ulong_t data)
1003 {
1004         compat_ulong_t __user *datap = compat_ptr(data);
1005         compat_ulong_t word;
1006         siginfo_t siginfo;
1007         int ret;
1008
1009         switch (request) {
1010         case PTRACE_PEEKTEXT:
1011         case PTRACE_PEEKDATA:
1012                 ret = access_process_vm(child, addr, &word, sizeof(word), 0);
1013                 if (ret != sizeof(word))
1014                         ret = -EIO;
1015                 else
1016                         ret = put_user(word, datap);
1017                 break;
1018
1019         case PTRACE_POKETEXT:
1020         case PTRACE_POKEDATA:
1021                 ret = access_process_vm(child, addr, &data, sizeof(data), 1);
1022                 ret = (ret != sizeof(data) ? -EIO : 0);
1023                 break;
1024
1025         case PTRACE_GETEVENTMSG:
1026                 ret = put_user((compat_ulong_t) child->ptrace_message, datap);
1027                 break;
1028
1029         case PTRACE_GETSIGINFO:
1030                 ret = ptrace_getsiginfo(child, &siginfo);
1031                 if (!ret)
1032                         ret = copy_siginfo_to_user32(
1033                                 (struct compat_siginfo __user *) datap,
1034                                 &siginfo);
1035                 break;
1036
1037         case PTRACE_SETSIGINFO:
1038                 memset(&siginfo, 0, sizeof siginfo);
1039                 if (copy_siginfo_from_user32(
1040                             &siginfo, (struct compat_siginfo __user *) datap))
1041                         ret = -EFAULT;
1042                 else
1043                         ret = ptrace_setsiginfo(child, &siginfo);
1044                 break;
1045 #ifdef CONFIG_HAVE_ARCH_TRACEHOOK
1046         case PTRACE_GETREGSET:
1047         case PTRACE_SETREGSET:
1048         {
1049                 struct iovec kiov;
1050                 struct compat_iovec __user *uiov =
1051                         (struct compat_iovec __user *) datap;
1052                 compat_uptr_t ptr;
1053                 compat_size_t len;
1054
1055                 if (!access_ok(VERIFY_WRITE, uiov, sizeof(*uiov)))
1056                         return -EFAULT;
1057
1058                 if (__get_user(ptr, &uiov->iov_base) ||
1059                     __get_user(len, &uiov->iov_len))
1060                         return -EFAULT;
1061
1062                 kiov.iov_base = compat_ptr(ptr);
1063                 kiov.iov_len = len;
1064
1065                 ret = ptrace_regset(child, request, addr, &kiov);
1066                 if (!ret)
1067                         ret = __put_user(kiov.iov_len, &uiov->iov_len);
1068                 break;
1069         }
1070 #endif
1071
1072         default:
1073                 ret = ptrace_request(child, request, addr, data);
1074         }
1075
1076         return ret;
1077 }
1078
1079 asmlinkage long compat_sys_ptrace(compat_long_t request, compat_long_t pid,
1080                                   compat_long_t addr, compat_long_t data)
1081 {
1082         struct task_struct *child;
1083         long ret;
1084
1085         if (request == PTRACE_TRACEME) {
1086                 ret = ptrace_traceme();
1087                 goto out;
1088         }
1089
1090         child = ptrace_get_task_struct(pid);
1091         if (IS_ERR(child)) {
1092                 ret = PTR_ERR(child);
1093                 goto out;
1094         }
1095
1096         if (request == PTRACE_ATTACH || request == PTRACE_SEIZE) {
1097                 ret = ptrace_attach(child, request, data);
1098                 /*
1099                  * Some architectures need to do book-keeping after
1100                  * a ptrace attach.
1101                  */
1102                 if (!ret)
1103                         arch_ptrace_attach(child);
1104                 goto out_put_task_struct;
1105         }
1106
1107         ret = ptrace_check_attach(child, request == PTRACE_KILL ||
1108                                   request == PTRACE_INTERRUPT);
1109         if (!ret) {
1110                 ret = compat_arch_ptrace(child, request, addr, data);
1111                 if (ret || request != PTRACE_DETACH)
1112                         ptrace_unfreeze_traced(child);
1113         }
1114
1115  out_put_task_struct:
1116         put_task_struct(child);
1117  out:
1118         return ret;
1119 }
1120 #endif  /* CONFIG_COMPAT */
1121
1122 #ifdef CONFIG_HAVE_HW_BREAKPOINT
1123 int ptrace_get_breakpoints(struct task_struct *tsk)
1124 {
1125         if (atomic_inc_not_zero(&tsk->ptrace_bp_refcnt))
1126                 return 0;
1127
1128         return -1;
1129 }
1130
1131 void ptrace_put_breakpoints(struct task_struct *tsk)
1132 {
1133         if (atomic_dec_and_test(&tsk->ptrace_bp_refcnt))
1134                 flush_ptrace_hw_breakpoint(tsk);
1135 }
1136 #endif /* CONFIG_HAVE_HW_BREAKPOINT */