net/ipv4/ping.c

   1 /*
   2  * INET         An implementation of the TCP/IP protocol suite for the LINUX
   3  *              operating system.  INET is implemented using the  BSD Socket
   4  *              interface as the means of communication with the user level.
   5  *
   6  *              "Ping" sockets
   7  *
   8  *              This program is free software; you can redistribute it and/or
   9  *              modify it under the terms of the GNU General Public License
  10  *              as published by the Free Software Foundation; either version
  11  *              2 of the License, or (at your option) any later version.
  12  *
  13  * Based on ipv4/udp.c code.
  14  *
  15  * Authors:     Vasiliy Kulikov / Openwall (for Linux 2.6),
  16  *              Pavel Kankovsky (for Linux 2.4.32)
  17  *
  18  * Pavel gave all rights to bugs to Vasiliy,
  19  * none of the bugs are Pavel's now.
  20  *
  21  */
  22
  23 #include <asm/system.h>
  24 #include <linux/uaccess.h>
  25 #include <linux/types.h>
  26 #include <linux/fcntl.h>
  27 #include <linux/socket.h>
  28 #include <linux/sockios.h>
  29 #include <linux/in.h>
  30 #include <linux/errno.h>
  31 #include <linux/timer.h>
  32 #include <linux/mm.h>
  33 #include <linux/inet.h>
  34 #include <linux/netdevice.h>
  35 #include <net/snmp.h>
  36 #include <net/ip.h>
  37 #include <net/ipv6.h>
  38 #include <net/icmp.h>
  39 #include <net/protocol.h>
  40 #include <linux/skbuff.h>
  41 #include <linux/proc_fs.h>
  42 #include <linux/export.h>
  43 #include <net/sock.h>
  44 #include <net/ping.h>
  45 #include <net/udp.h>
  46 #include <net/route.h>
  47 #include <net/inet_common.h>
  48 #include <net/checksum.h>
  49
  50
  51 static struct ping_table ping_table;
  52
  53 static u16 ping_port_rover;
  54
  55 static inline int ping_hashfn(struct net *net, unsigned num, unsigned mask)
  56 {
  57         int res = (num + net_hash_mix(net)) & mask;
  58         pr_debug("hash(%d) = %d\n", num, res);
  59         return res;
  60 }
  61
  62 static inline struct hlist_nulls_head *ping_hashslot(struct ping_table *table,
  63                                              struct net *net, unsigned num)
  64 {
  65         return &table->hash[ping_hashfn(net, num, PING_HTABLE_MASK)];
  66 }
  67
  68 static int ping_v4_get_port(struct sock *sk, unsigned short ident)
  69 {
  70         struct hlist_nulls_node *node;
  71         struct hlist_nulls_head *hlist;
  72         struct inet_sock *isk, *isk2;
  73         struct sock *sk2 = NULL;
  74
  75         isk = inet_sk(sk);
  76         write_lock_bh(&ping_table.lock);
  77         if (ident == 0) {
  78                 u32 i;
  79                 u16 result = ping_port_rover + 1;
  80
  81                 for (i = 0; i < (1L << 16); i++, result++) {
  82                         if (!result)
  83                                 result++; /* avoid zero */
  84                         hlist = ping_hashslot(&ping_table, sock_net(sk),
  85                                             result);
  86                         ping_portaddr_for_each_entry(sk2, node, hlist) {
  87                                 isk2 = inet_sk(sk2);
  88
  89                                 if (isk2->inet_num == result)
  90                                         goto next_port;
  91                         }
  92
  93                         /* found */
  94                         ping_port_rover = ident = result;
  95                         break;
  96 next_port:
  97                         ;
  98                 }
  99                 if (i >= (1L << 16))
 100                         goto fail;
 101         } else {
 102                 hlist = ping_hashslot(&ping_table, sock_net(sk), ident);
 103                 ping_portaddr_for_each_entry(sk2, node, hlist) {
 104                         isk2 = inet_sk(sk2);
 105
 106                         if ((isk2->inet_num == ident) &&
 107                             (sk2 != sk) &&
 108                             (!sk2->sk_reuse || !sk->sk_reuse))
 109                                 goto fail;
 110                 }
 111         }
 112
 113         pr_debug("found port/ident = %d\n", ident);
 114         isk->inet_num = ident;
 115         if (sk_unhashed(sk)) {
 116                 pr_debug("was not hashed\n");
 117                 sock_hold(sk);
 118                 hlist_nulls_add_head(&sk->sk_nulls_node, hlist);
 119                 sock_prot_inuse_add(sock_net(sk), sk->sk_prot, 1);
 120         }
 121         write_unlock_bh(&ping_table.lock);
 122         return 0;
 123
 124 fail:
 125         write_unlock_bh(&ping_table.lock);
 126         return 1;
 127 }
 128
 129 static void ping_v4_hash(struct sock *sk)
 130 {
 131         pr_debug("ping_v4_hash(sk->port=%u)\n", inet_sk(sk)->inet_num);
 132         BUG(); /* "Please do not press this button again." */
 133 }
 134
 135 static void ping_v4_unhash(struct sock *sk)
 136 {
 137         struct inet_sock *isk = inet_sk(sk);
 138         pr_debug("ping_v4_unhash(isk=%p,isk->num=%u)\n", isk, isk->inet_num);
 139         if (sk_hashed(sk)) {
 140                 write_lock_bh(&ping_table.lock);
 141                 hlist_nulls_del(&sk->sk_nulls_node);
 142                 sk_nulls_node_init(&sk->sk_nulls_node);
 143                 sock_put(sk);
 144                 isk->inet_num = isk->inet_sport = 0;
 145                 sock_prot_inuse_add(sock_net(sk), sk->sk_prot, -1);
 146                 write_unlock_bh(&ping_table.lock);
 147         }
 148 }
 149
 150 static struct sock *ping_v4_lookup(struct net *net, u32 saddr, u32 daddr,
 151                                    u16 ident, int dif)
 152 {
 153         struct hlist_nulls_head *hslot = ping_hashslot(&ping_table, net, ident);
 154         struct sock *sk = NULL;
 155         struct inet_sock *isk;
 156         struct hlist_nulls_node *hnode;
 157
 158         pr_debug("try to find: num = %d, daddr = %ld, dif = %d\n",
 159                          (int)ident, (unsigned long)daddr, dif);
 160         read_lock_bh(&ping_table.lock);
 161
 162         ping_portaddr_for_each_entry(sk, hnode, hslot) {
 163                 isk = inet_sk(sk);
 164
 165                 pr_debug("found: %p: num = %d, daddr = %ld, dif = %d\n", sk,
 166                          (int)isk->inet_num, (unsigned long)isk->inet_rcv_saddr,
 167                          sk->sk_bound_dev_if);
 168
 169                 pr_debug("iterate\n");
 170                 if (isk->inet_num != ident)
 171                         continue;
 172                 if (isk->inet_rcv_saddr && isk->inet_rcv_saddr != daddr)
 173                         continue;
 174                 if (sk->sk_bound_dev_if && sk->sk_bound_dev_if != dif)
 175                         continue;
 176
 177                 sock_hold(sk);
 178                 goto exit;
 179         }
 180
 181         sk = NULL;
 182 exit:
 183         read_unlock_bh(&ping_table.lock);
 184
 185         return sk;
 186 }
 187
 188 static void inet_get_ping_group_range_net(struct net *net, gid_t *low,
 189                                           gid_t *high)
 190 {
 191         gid_t *data = net->ipv4.sysctl_ping_group_range;
 192         unsigned seq;
 193         do {
 194                 seq = read_seqbegin(&sysctl_local_ports.lock);
 195
 196                 *low = data[0];
 197                 *high = data[1];
 198         } while (read_seqretry(&sysctl_local_ports.lock, seq));
 199 }
 200
 201
 202 static int ping_init_sock(struct sock *sk)
 203 {
 204         struct net *net = sock_net(sk);
 205         gid_t group = current_egid();
 206         gid_t range[2];
 207         struct group_info *group_info;
 208         int i, j, count;
 209         int ret = 0;
 210
 211         inet_get_ping_group_range_net(net, range, range+1);
 212         if (range[0] <= group && group <= range[1])
 213                 return 0;
 214
 215         group_info = get_current_groups();
 216         count = group_info->ngroups;
 217         for (i = 0; i < group_info->nblocks; i++) {
 218                 int cp_count = min_t(int, NGROUPS_PER_BLOCK, count);
 219
 220                 for (j = 0; j < cp_count; j++) {
 221                         group = group_info->blocks[i][j];
 222                         if (range[0] <= group && group <= range[1])
 223                                 goto out_release_group;
 224                 }
 225
 226                 count -= cp_count;
 227         }
 228
 229         ret = -EACCES;
 230
 231 out_release_group:
 232         put_group_info(group_info);
 233         return ret;
 234 }
 235
 236 static void ping_close(struct sock *sk, long timeout)
 237 {
 238         pr_debug("ping_close(sk=%p,sk->num=%u)\n",
 239                 inet_sk(sk), inet_sk(sk)->inet_num);
 240         pr_debug("isk->refcnt = %d\n", sk->sk_refcnt.counter);
 241
 242         sk_common_release(sk);
 243 }
 244
 245 /*
 246  * We need our own bind because there are no privileged id's == local ports.
 247  * Moreover, we don't allow binding to multi- and broadcast addresses.
 248  */
 249
 250 static int ping_bind(struct sock *sk, struct sockaddr *uaddr, int addr_len)
 251 {
 252         struct sockaddr_in *addr = (struct sockaddr_in *)uaddr;
 253         struct inet_sock *isk = inet_sk(sk);
 254         unsigned short snum;
 255         int chk_addr_ret;
 256         int err;
 257
 258         if (addr_len < sizeof(struct sockaddr_in))
 259                 return -EINVAL;
 260
 261         if (addr->sin_family != AF_INET &&
 262             !(addr->sin_family == AF_UNSPEC &&
 263               addr->sin_addr.s_addr == htonl(INADDR_ANY)))
 264                 return -EAFNOSUPPORT;
 265
 266         pr_debug("ping_v4_bind(sk=%p,sa_addr=%08x,sa_port=%d)\n",
 267                 sk, addr->sin_addr.s_addr, ntohs(addr->sin_port));
 268
 269         chk_addr_ret = inet_addr_type(sock_net(sk), addr->sin_addr.s_addr);
 270         if (addr->sin_addr.s_addr == INADDR_ANY)
 271                 chk_addr_ret = RTN_LOCAL;
 272
 273         if ((sysctl_ip_nonlocal_bind == 0 &&
 274             isk->freebind == 0 && isk->transparent == 0 &&
 275              chk_addr_ret != RTN_LOCAL) ||
 276             chk_addr_ret == RTN_MULTICAST ||
 277             chk_addr_ret == RTN_BROADCAST)
 278                 return -EADDRNOTAVAIL;
 279
 280         lock_sock(sk);
 281
 282         err = -EINVAL;
 283         if (isk->inet_num != 0)
 284                 goto out;
 285
 286         err = -EADDRINUSE;
 287         isk->inet_rcv_saddr = isk->inet_saddr = addr->sin_addr.s_addr;
 288         snum = ntohs(addr->sin_port);
 289         if (ping_v4_get_port(sk, snum) != 0) {
 290                 isk->inet_saddr = isk->inet_rcv_saddr = 0;
 291                 goto out;
 292         }
 293
 294         pr_debug("after bind(): num = %d, daddr = %ld, dif = %d\n",
 295                 (int)isk->inet_num,
 296                 (unsigned long) isk->inet_rcv_saddr,
 297                 (int)sk->sk_bound_dev_if);
 298
 299         err = 0;
 300         if (isk->inet_rcv_saddr)
 301                 sk->sk_userlocks |= SOCK_BINDADDR_LOCK;
 302         if (snum)
 303                 sk->sk_userlocks |= SOCK_BINDPORT_LOCK;
 304         isk->inet_sport = htons(isk->inet_num);
 305         isk->inet_daddr = 0;
 306         isk->inet_dport = 0;
 307         sk_dst_reset(sk);
 308 out:
 309         release_sock(sk);
 310         pr_debug("ping_v4_bind -> %d\n", err);
 311         return err;
 312 }
 313
 314 /*
 315  * Is this a supported type of ICMP message?
 316  */
 317
 318 static inline int ping_supported(int type, int code)
 319 {
 320         if (type == ICMP_ECHO && code == 0)
 321                 return 1;
 322         return 0;
 323 }
 324
 325 /*
 326  * This routine is called by the ICMP module when it gets some
 327  * sort of error condition.
 328  */
 329
 330 static int ping_queue_rcv_skb(struct sock *sk, struct sk_buff *skb);
 331
 332 void ping_err(struct sk_buff *skb, u32 info)
 333 {
 334         struct iphdr *iph = (struct iphdr *)skb->data;
 335         struct icmphdr *icmph = (struct icmphdr *)(skb->data+(iph->ihl<<2));
 336         struct inet_sock *inet_sock;
 337         int type = icmp_hdr(skb)->type;
 338         int code = icmp_hdr(skb)->code;
 339         struct net *net = dev_net(skb->dev);
 340         struct sock *sk;
 341         int harderr;
 342         int err;
 343
 344         /* We assume the packet has already been checked by icmp_unreach */
 345
 346         if (!ping_supported(icmph->type, icmph->code))
 347                 return;
 348
 349         pr_debug("ping_err(type=%04x,code=%04x,id=%04x,seq=%04x)\n", type,
 350                 code, ntohs(icmph->un.echo.id), ntohs(icmph->un.echo.sequence));
 351
 352         sk = ping_v4_lookup(net, iph->daddr, iph->saddr,
 353                             ntohs(icmph->un.echo.id), skb->dev->ifindex);
 354         if (sk == NULL) {
 355                 pr_debug("no socket, dropping\n");
 356                 return; /* No socket for error */
 357         }
 358         pr_debug("err on socket %p\n", sk);
 359
 360         err = 0;
 361         harderr = 0;
 362         inet_sock = inet_sk(sk);
 363
 364         switch (type) {
 365         default:
 366         case ICMP_TIME_EXCEEDED:
 367                 err = EHOSTUNREACH;
 368                 break;
 369         case ICMP_SOURCE_QUENCH:
 370                 /* This is not a real error but ping wants to see it.
 371                  * Report it with some fake errno. */
 372                 err = EREMOTEIO;
 373                 break;
 374         case ICMP_PARAMETERPROB:
 375                 err = EPROTO;
 376                 harderr = 1;
 377                 break;
 378         case ICMP_DEST_UNREACH:
 379                 if (code == ICMP_FRAG_NEEDED) { /* Path MTU discovery */
 380                         if (inet_sock->pmtudisc != IP_PMTUDISC_DONT) {
 381                                 err = EMSGSIZE;
 382                                 harderr = 1;
 383                                 break;
 384                         }
 385                         goto out;
 386                 }
 387                 err = EHOSTUNREACH;
 388                 if (code <= NR_ICMP_UNREACH) {
 389                         harderr = icmp_err_convert[code].fatal;
 390                         err = icmp_err_convert[code].errno;
 391                 }
 392                 break;
 393         case ICMP_REDIRECT:
 394                 /* See ICMP_SOURCE_QUENCH */
 395                 err = EREMOTEIO;
 396                 break;
 397         }
 398
 399         /*
 400          *      RFC1122: OK.  Passes ICMP errors back to application, as per
 401          *      4.1.3.3.
 402          */
 403         if (!inet_sock->recverr) {
 404                 if (!harderr || sk->sk_state != TCP_ESTABLISHED)
 405                         goto out;
 406         } else {
 407                 ip_icmp_error(sk, skb, err, 0 /* no remote port */,
 408                          info, (u8 *)icmph);
 409         }
 410         sk->sk_err = err;
 411         sk->sk_error_report(sk);
 412 out:
 413         sock_put(sk);
 414 }
 415
 416 /*
 417  *      Copy and checksum an ICMP Echo packet from user space into a buffer.
 418  */
 419
 420 struct pingfakehdr {
 421         struct icmphdr icmph;
 422         struct iovec *iov;
 423         u32 wcheck;
 424 };
 425
 426 static int ping_getfrag(void *from, char * to,
 427                         int offset, int fraglen, int odd, struct sk_buff *skb)
 428 {
 429         struct pingfakehdr *pfh = (struct pingfakehdr *)from;
 430
 431         if (offset == 0) {
 432                 if (fraglen < sizeof(struct icmphdr))
 433                         BUG();
 434                 if (csum_partial_copy_fromiovecend(to + sizeof(struct icmphdr),
 435                             pfh->iov, 0, fraglen - sizeof(struct icmphdr),
 436                             &pfh->wcheck))
 437                         return -EFAULT;
 438
 439                 return 0;
 440         }
 441         if (offset < sizeof(struct icmphdr))
 442                 BUG();
 443         if (csum_partial_copy_fromiovecend
 444                         (to, pfh->iov, offset - sizeof(struct icmphdr),
 445                          fraglen, &pfh->wcheck))
 446                 return -EFAULT;
 447         return 0;
 448 }
 449
 450 static int ping_push_pending_frames(struct sock *sk, struct pingfakehdr *pfh,
 451                                     struct flowi4 *fl4)
 452 {
 453         struct sk_buff *skb = skb_peek(&sk->sk_write_queue);
 454
 455         if (!skb)
 456                 return 0;
 457         pfh->wcheck = csum_partial((char *)&pfh->icmph,
 458                 sizeof(struct icmphdr), pfh->wcheck);
 459         pfh->icmph.checksum = csum_fold(pfh->wcheck);
 460         memcpy(icmp_hdr(skb), &pfh->icmph, sizeof(struct icmphdr));
 461         skb->ip_summed = CHECKSUM_NONE;
 462         return ip_push_pending_frames(sk, fl4);
 463 }
 464
 465 static int ping_sendmsg(struct kiocb *iocb, struct sock *sk, struct msghdr *msg,
 466                         size_t len)
 467 {
 468         struct net *net = sock_net(sk);
 469         struct flowi4 fl4;
 470         struct inet_sock *inet = inet_sk(sk);
 471         struct ipcm_cookie ipc;
 472         struct icmphdr user_icmph;
 473         struct pingfakehdr pfh;
 474         struct rtable *rt = NULL;
 475         struct ip_options_data opt_copy;
 476         int free = 0;
 477         u32 saddr, daddr, faddr;
 478         u8  tos;
 479         int err;
 480
 481         pr_debug("ping_sendmsg(sk=%p,sk->num=%u)\n", inet, inet->inet_num);
 482
 483
 484         if (len > 0xFFFF)
 485                 return -EMSGSIZE;
 486
 487         /* Must have at least a full ICMP header. */
 488         if (len < sizeof(struct icmphdr))
 489                 return -EINVAL;
 490
 491         /*
 492          *      Check the flags.
 493          */
 494
 495         /* Mirror BSD error message compatibility */
 496         if (msg->msg_flags & MSG_OOB)
 497                 return -EOPNOTSUPP;
 498
 499         /*
 500          *      Fetch the ICMP header provided by the userland.
 501          *      iovec is modified!
 502          */
 503
 504         if (memcpy_fromiovec((u8 *)&user_icmph, msg->msg_iov,
 505                              sizeof(struct icmphdr)))
 506                 return -EFAULT;
 507         if (!ping_supported(user_icmph.type, user_icmph.code))
 508                 return -EINVAL;
 509
 510         /*
 511          *      Get and verify the address.
 512          */
 513
 514         if (msg->msg_name) {
 515                 struct sockaddr_in *usin = (struct sockaddr_in *)msg->msg_name;
 516                 if (msg->msg_namelen < sizeof(*usin))
 517                         return -EINVAL;
 518                 if (usin->sin_family != AF_INET)
 519                         return -EAFNOSUPPORT;
 520                 daddr = usin->sin_addr.s_addr;
 521                 /* no remote port */
 522         } else {
 523                 if (sk->sk_state != TCP_ESTABLISHED)
 524                         return -EDESTADDRREQ;
 525                 daddr = inet->inet_daddr;
 526                 /* no remote port */
 527         }
 528
 529         ipc.addr = inet->inet_saddr;
 530         ipc.opt = NULL;
 531         ipc.oif = sk->sk_bound_dev_if;
 532         ipc.tx_flags = 0;
 533         err = sock_tx_timestamp(sk, &ipc.tx_flags);
 534         if (err)
 535                 return err;
 536
 537         if (msg->msg_controllen) {
 538                 err = ip_cmsg_send(sock_net(sk), msg, &ipc);
 539                 if (unlikely(err)) {
 540                         kfree(ipc.opt);
 541                         return err;
 542                 }
 543                 if (ipc.opt)
 544                         free = 1;
 545         }
 546         if (!ipc.opt) {
 547                 struct ip_options_rcu *inet_opt;
 548
 549                 rcu_read_lock();
 550                 inet_opt = rcu_dereference(inet->inet_opt);
 551                 if (inet_opt) {
 552                         memcpy(&opt_copy, inet_opt,
 553                                sizeof(*inet_opt) + inet_opt->opt.optlen);
 554                         ipc.opt = &opt_copy.opt;
 555                 }
 556                 rcu_read_unlock();
 557         }
 558
 559         saddr = ipc.addr;
 560         ipc.addr = faddr = daddr;
 561
 562         if (ipc.opt && ipc.opt->opt.srr) {
 563                 if (!daddr)
 564                         return -EINVAL;
 565                 faddr = ipc.opt->opt.faddr;
 566         }
 567         tos = RT_TOS(inet->tos);
 568         if (sock_flag(sk, SOCK_LOCALROUTE) ||
 569             (msg->msg_flags & MSG_DONTROUTE) ||
 570             (ipc.opt && ipc.opt->opt.is_strictroute)) {
 571                 tos |= RTO_ONLINK;
 572         }
 573
 574         if (ipv4_is_multicast(daddr)) {
 575                 if (!ipc.oif)
 576                         ipc.oif = inet->mc_index;
 577                 if (!saddr)
 578                         saddr = inet->mc_addr;
 579         }
 580
 581         flowi4_init_output(&fl4, ipc.oif, sk->sk_mark, tos,
 582                            RT_SCOPE_UNIVERSE, sk->sk_protocol,
 583                            inet_sk_flowi_flags(sk), faddr, saddr, 0, 0);
 584
 585         security_sk_classify_flow(sk, flowi4_to_flowi(&fl4));
 586         rt = ip_route_output_flow(net, &fl4, sk);
 587         if (IS_ERR(rt)) {
 588                 err = PTR_ERR(rt);
 589                 rt = NULL;
 590                 if (err == -ENETUNREACH)
 591                         IP_INC_STATS(net, IPSTATS_MIB_OUTNOROUTES);
 592                 goto out;
 593         }
 594
 595         err = -EACCES;
 596         if ((rt->rt_flags & RTCF_BROADCAST) &&
 597             !sock_flag(sk, SOCK_BROADCAST))
 598                 goto out;
 599
 600         if (msg->msg_flags & MSG_CONFIRM)
 601                 goto do_confirm;
 602 back_from_confirm:
 603
 604         if (!ipc.addr)
 605                 ipc.addr = fl4.daddr;
 606
 607         lock_sock(sk);
 608
 609         pfh.icmph.type = user_icmph.type; /* already checked */
 610         pfh.icmph.code = user_icmph.code; /* ditto */
 611         pfh.icmph.checksum = 0;
 612         pfh.icmph.un.echo.id = inet->inet_sport;
 613         pfh.icmph.un.echo.sequence = user_icmph.un.echo.sequence;
 614         pfh.iov = msg->msg_iov;
 615         pfh.wcheck = 0;
 616
 617         err = ip_append_data(sk, &fl4, ping_getfrag, &pfh, len,
 618                         0, &ipc, &rt, msg->msg_flags);
 619         if (err)
 620                 ip_flush_pending_frames(sk);
 621         else
 622                 err = ping_push_pending_frames(sk, &pfh, &fl4);
 623         release_sock(sk);
 624
 625 out:
 626         ip_rt_put(rt);
 627         if (free)
 628                 kfree(ipc.opt);
 629         if (!err) {
 630                 icmp_out_count(sock_net(sk), user_icmph.type);
 631                 return len;
 632         }
 633         return err;
 634
 635 do_confirm:
 636         dst_confirm(&rt->dst);
 637         if (!(msg->msg_flags & MSG_PROBE) || len)
 638                 goto back_from_confirm;
 639         err = 0;
 640         goto out;
 641 }
 642
 643 static int ping_recvmsg(struct kiocb *iocb, struct sock *sk, struct msghdr *msg,
 644                         size_t len, int noblock, int flags, int *addr_len)
 645 {
 646         struct inet_sock *isk = inet_sk(sk);
 647         struct sk_buff *skb;
 648         int copied, err;
 649
 650         pr_debug("ping_recvmsg(sk=%p,sk->num=%u)\n", isk, isk->inet_num);
 651
 652         if (flags & MSG_OOB)
 653                 goto out;
 654
 655         if (flags & MSG_ERRQUEUE)
 656                 return ip_recv_error(sk, msg, len, addr_len);
 657
 658         skb = skb_recv_datagram(sk, flags, noblock, &err);
 659         if (!skb)
 660                 goto out;
 661
 662         copied = skb->len;
 663         if (copied > len) {
 664                 msg->msg_flags |= MSG_TRUNC;
 665                 copied = len;
 666         }
 667
 668         /* Don't bother checking the checksum */
 669         err = skb_copy_datagram_iovec(skb, 0, msg->msg_iov, copied);
 670         if (err)
 671                 goto done;
 672
 673         sock_recv_timestamp(msg, sk, skb);
 674
 675         /* Copy the address. */
 676         if (msg->msg_name) {
 677                 struct sockaddr_in *sin = (struct sockaddr_in *)msg->msg_name;
 678
 679                 sin->sin_family = AF_INET;
 680                 sin->sin_port = 0 /* skb->h.uh->source */;
 681                 sin->sin_addr.s_addr = ip_hdr(skb)->saddr;
 682                 memset(sin->sin_zero, 0, sizeof(sin->sin_zero));
 683                 *addr_len = sizeof(*sin);
 684         }
 685         if (isk->cmsg_flags)
 686                 ip_cmsg_recv(msg, skb);
 687         err = copied;
 688
 689 done:
 690         skb_free_datagram(sk, skb);
 691 out:
 692         pr_debug("ping_recvmsg -> %d\n", err);
 693         return err;
 694 }
 695
 696 static int ping_queue_rcv_skb(struct sock *sk, struct sk_buff *skb)
 697 {
 698         pr_debug("ping_queue_rcv_skb(sk=%p,sk->num=%d,skb=%p)\n",
 699                 inet_sk(sk), inet_sk(sk)->inet_num, skb);
 700         if (sock_queue_rcv_skb(sk, skb) < 0) {
 701                 kfree_skb(skb);
 702                 pr_debug("ping_queue_rcv_skb -> failed\n");
 703                 return -1;
 704         }
 705         return 0;
 706 }
 707
 708
 709 /*
 710  *      All we need to do is get the socket.
 711  */
 712
 713 void ping_rcv(struct sk_buff *skb)
 714 {
 715         struct sock *sk;
 716         struct net *net = dev_net(skb->dev);
 717         struct iphdr *iph = ip_hdr(skb);
 718         struct icmphdr *icmph = icmp_hdr(skb);
 719         u32 saddr = iph->saddr;
 720         u32 daddr = iph->daddr;
 721
 722         /* We assume the packet has already been checked by icmp_rcv */
 723
 724         pr_debug("ping_rcv(skb=%p,id=%04x,seq=%04x)\n",
 725                 skb, ntohs(icmph->un.echo.id), ntohs(icmph->un.echo.sequence));
 726
 727         /* Push ICMP header back */
 728         skb_push(skb, skb->data - (u8 *)icmph);
 729
 730         sk = ping_v4_lookup(net, saddr, daddr, ntohs(icmph->un.echo.id),
 731                             skb->dev->ifindex);
 732         if (sk != NULL) {
 733                 struct sk_buff *skb2 = skb_clone(skb, GFP_ATOMIC);
 734
 735                 pr_debug("rcv on socket %p\n", sk);
 736                 if (skb2)
 737                         ping_queue_rcv_skb(sk, skb2);
 738                 sock_put(sk);
 739                 return;
 740         }
 741         pr_debug("no socket, dropping\n");
 742
 743         /* We're called from icmp_rcv(). kfree_skb() is done there. */
 744 }
 745
 746 struct proto ping_prot = {
 747         .name =         "PING",
 748         .owner =        THIS_MODULE,
 749         .init =         ping_init_sock,
 750         .close =        ping_close,
 751         .connect =      ip4_datagram_connect,
 752         .disconnect =   udp_disconnect,
 753         .setsockopt =   ip_setsockopt,
 754         .getsockopt =   ip_getsockopt,
 755         .sendmsg =      ping_sendmsg,
 756         .recvmsg =      ping_recvmsg,
 757         .bind =         ping_bind,
 758         .backlog_rcv =  ping_queue_rcv_skb,
 759         .hash =         ping_v4_hash,
 760         .unhash =       ping_v4_unhash,
 761         .get_port =     ping_v4_get_port,
 762         .obj_size =     sizeof(struct inet_sock),
 763 };
 764 EXPORT_SYMBOL(ping_prot);
 765
 766 #ifdef CONFIG_PROC_FS
 767
 768 static struct sock *ping_get_first(struct seq_file *seq, int start)
 769 {
 770         struct sock *sk;
 771         struct ping_iter_state *state = seq->private;
 772         struct net *net = seq_file_net(seq);
 773
 774         for (state->bucket = start; state->bucket < PING_HTABLE_SIZE;
 775              ++state->bucket) {
 776                 struct hlist_nulls_node *node;
 777                 struct hlist_nulls_head *hslot;
 778
 779                 hslot = &ping_table.hash[state->bucket];
 780
 781                 if (hlist_nulls_empty(hslot))
 782                         continue;
 783
 784                 sk_nulls_for_each(sk, node, hslot) {
 785                         if (net_eq(sock_net(sk), net))
 786                                 goto found;
 787                 }
 788         }
 789         sk = NULL;
 790 found:
 791         return sk;
 792 }
 793
 794 static struct sock *ping_get_next(struct seq_file *seq, struct sock *sk)
 795 {
 796         struct ping_iter_state *state = seq->private;
 797         struct net *net = seq_file_net(seq);
 798
 799         do {
 800                 sk = sk_nulls_next(sk);
 801         } while (sk && (!net_eq(sock_net(sk), net)));
 802
 803         if (!sk)
 804                 return ping_get_first(seq, state->bucket + 1);
 805         return sk;
 806 }
 807
 808 static struct sock *ping_get_idx(struct seq_file *seq, loff_t pos)
 809 {
 810         struct sock *sk = ping_get_first(seq, 0);
 811
 812         if (sk)
 813                 while (pos && (sk = ping_get_next(seq, sk)) != NULL)
 814                         --pos;
 815         return pos ? NULL : sk;
 816 }
 817
 818 static void *ping_seq_start(struct seq_file *seq, loff_t *pos)
 819 {
 820         struct ping_iter_state *state = seq->private;
 821         state->bucket = 0;
 822
 823         read_lock_bh(&ping_table.lock);
 824
 825         return *pos ? ping_get_idx(seq, *pos-1) : SEQ_START_TOKEN;
 826 }
 827
 828 static void *ping_seq_next(struct seq_file *seq, void *v, loff_t *pos)
 829 {
 830         struct sock *sk;
 831
 832         if (v == SEQ_START_TOKEN)
 833                 sk = ping_get_idx(seq, 0);
 834         else
 835                 sk = ping_get_next(seq, v);
 836
 837         ++*pos;
 838         return sk;
 839 }
 840
 841 static void ping_seq_stop(struct seq_file *seq, void *v)
 842 {
 843         read_unlock_bh(&ping_table.lock);
 844 }
 845
 846 static void ping_format_sock(struct sock *sp, struct seq_file *f,
 847                 int bucket, int *len)
 848 {
 849         struct inet_sock *inet = inet_sk(sp);
 850         __be32 dest = inet->inet_daddr;
 851         __be32 src = inet->inet_rcv_saddr;
 852         __u16 destp = ntohs(inet->inet_dport);
 853         __u16 srcp = ntohs(inet->inet_sport);
 854
 855         seq_printf(f, "%5d: %08X:%04X %08X:%04X"
 856                 " %02X %08X:%08X %02X:%08lX %08X %5d %8d %lu %d %pK %d%n",
 857                 bucket, src, srcp, dest, destp, sp->sk_state,
 858                 sk_wmem_alloc_get(sp),
 859                 sk_rmem_alloc_get(sp),
 860                 0, 0L, 0, sock_i_uid(sp), 0, sock_i_ino(sp),
 861                 atomic_read(&sp->sk_refcnt), sp,
 862                 atomic_read(&sp->sk_drops), len);
 863 }
 864
 865 static int ping_seq_show(struct seq_file *seq, void *v)
 866 {
 867         if (v == SEQ_START_TOKEN)
 868                 seq_printf(seq, "%-127s\n",
 869                            "  sl  local_address rem_address   st tx_queue "
 870                            "rx_queue tr tm->when retrnsmt   uid  timeout "
 871                            "inode ref pointer drops");
 872         else {
 873                 struct ping_iter_state *state = seq->private;
 874                 int len;
 875
 876                 ping_format_sock(v, seq, state->bucket, &len);
 877                 seq_printf(seq, "%*s\n", 127 - len, "");
 878         }
 879         return 0;
 880 }
 881
 882 static const struct seq_operations ping_seq_ops = {
 883         .show           = ping_seq_show,
 884         .start          = ping_seq_start,
 885         .next           = ping_seq_next,
 886         .stop           = ping_seq_stop,
 887 };
 888
 889 static int ping_seq_open(struct inode *inode, struct file *file)
 890 {
 891         return seq_open_net(inode, file, &ping_seq_ops,
 892                            sizeof(struct ping_iter_state));
 893 }
 894
 895 static const struct file_operations ping_seq_fops = {
 896         .open           = ping_seq_open,
 897         .read           = seq_read,
 898         .llseek         = seq_lseek,
 899         .release        = seq_release_net,
 900 };
 901
 902 static int ping_proc_register(struct net *net)
 903 {
 904         struct proc_dir_entry *p;
 905         int rc = 0;
 906
 907         p = proc_net_fops_create(net, "icmp", S_IRUGO, &ping_seq_fops);
 908         if (!p)
 909                 rc = -ENOMEM;
 910         return rc;
 911 }
 912
 913 static void ping_proc_unregister(struct net *net)
 914 {
 915         proc_net_remove(net, "icmp");
 916 }
 917
 918
 919 static int __net_init ping_proc_init_net(struct net *net)
 920 {
 921         return ping_proc_register(net);
 922 }
 923
 924 static void __net_exit ping_proc_exit_net(struct net *net)
 925 {
 926         ping_proc_unregister(net);
 927 }
 928
 929 static struct pernet_operations ping_net_ops = {
 930         .init = ping_proc_init_net,
 931         .exit = ping_proc_exit_net,
 932 };
 933
 934 int __init ping_proc_init(void)
 935 {
 936         return register_pernet_subsys(&ping_net_ops);
 937 }
 938
 939 void ping_proc_exit(void)
 940 {
 941         unregister_pernet_subsys(&ping_net_ops);
 942 }
 943
 944 #endif
 945
 946 void __init ping_init(void)
 947 {
 948         int i;
 949
 950         for (i = 0; i < PING_HTABLE_SIZE; i++)
 951                 INIT_HLIST_NULLS_HEAD(&ping_table.hash[i], i);
 952         rwlock_init(&ping_table.lock);
 953 }