net: add a noref bit on skb dst
authorEric Dumazet <eric.dumazet@gmail.com>
Tue, 11 May 2010 23:19:48 +0000 (23:19 +0000)
committerDavid S. Miller <davem@davemloft.net>
Tue, 18 May 2010 00:18:50 +0000 (17:18 -0700)
commit7fee226ad2397b635e2fd565a59ca3ae08a164cd
tree0bcd26150ad74ec1a237109de87a3d214a07fc22
parentebda37c27d0c768947e9b058332d7ea798210cf8
net: add a noref bit on skb dst

Use low order bit of skb->_skb_dst to tell dst is not refcounted.

Change _skb_dst to _skb_refdst to make sure all uses are catched.

skb_dst() returns the dst, regardless of noref bit set or not, but
with a lockdep check to make sure a noref dst is not given if current
user is not rcu protected.

New skb_dst_set_noref() helper to set an notrefcounted dst on a skb.
(with lockdep check)

skb_dst_drop() drops a reference only if skb dst was refcounted.

skb_dst_force() helper is used to force a refcount on dst, when skb
is queued and not anymore RCU protected.

Use skb_dst_force() in __sk_add_backlog(), __dev_xmit_skb() if
!IFF_XMIT_DST_RELEASE or skb enqueued on qdisc queue, in
sock_queue_rcv_skb(), in __nf_queue().

Use skb_dst_force() in dev_requeue_skb().

Note: dst_use_noref() still dirties dst, we might transform it
later to do one dirtying per jiffies.

Signed-off-by: Eric Dumazet <eric.dumazet@gmail.com>
Signed-off-by: David S. Miller <davem@davemloft.net>
12 files changed:
include/linux/skbuff.h
include/net/dst.h
include/net/sock.h
net/core/dev.c
net/core/skbuff.c
net/core/sock.c
net/ipv4/icmp.c
net/ipv4/ip_options.c
net/ipv4/netfilter.c
net/ipv4/route.c
net/netfilter/nf_queue.c
net/sched/sch_generic.c