tcp: splice as many packets as possible at once
authorWilly Tarreau <w@1wt.eu>
Wed, 14 Jan 2009 00:04:36 +0000 (16:04 -0800)
committerDavid S. Miller <davem@davemloft.net>
Wed, 14 Jan 2009 00:04:36 +0000 (16:04 -0800)
commit33966dd0e2f68f26943cd9ee93ec6abbc6547a8e
tree75502831bb2868e016ed4f55d3ea3238b50f609b
parent9a0811ca4e9cf7be320ae8a5a43a259feb70074f
tcp: splice as many packets as possible at once

As spotted by Willy Tarreau, current splice() from tcp socket to pipe is not
optimal. It processes at most one segment per call.
This results in low performance and very high overhead due to syscall rate
when splicing from interfaces which do not support LRO.

Willy provided a patch inside tcp_splice_read(), but a better fix
is to let tcp_read_sock() process as many segments as possible, so
that tcp_rcv_space_adjust() and tcp_cleanup_rbuf() are called less
often.

With this change, splice() behaves like tcp_recvmsg(), being able
to consume many skbs in one system call. With typical 1460 bytes
of payload per frame, that means splice(SPLICE_F_NONBLOCK) can return
16*1460 = 23360 bytes.

Signed-off-by: Willy Tarreau <w@1wt.eu>
Signed-off-by: Eric Dumazet <dada1@cosmosbay.com>
Signed-off-by: David S. Miller <davem@davemloft.net>
net/ipv4/tcp.c