Skip to content

Commit ff6dfbf

Browse files
Wang YaxinAlex Shi
authored andcommitted
Docs/zh_CN: Translate msg_zerocopy.rst to Simplified Chinese
translate the "msg_zerocopy.rst" into Simplified Chinese. Update to commit bac2cac("docs: net: description of MSG_ZEROCOPY for AF_VSOCK") Fix embedded code type issue by Alex Shi. Signed-off-by: Wang Yaxin <[email protected]> Signed-off-by: Jiang Kun <[email protected]> Signed-off-by: xu xin <[email protected]> Signed-off-by: He Peilin <[email protected]> Reviewed-by: Yanteng Si <[email protected]> Link: https://lore.kernel.org/r/[email protected] Signed-off-by: Alex Shi <[email protected]>
1 parent 19f72d9 commit ff6dfbf

File tree

2 files changed

+226
-2
lines changed

2 files changed

+226
-2
lines changed

Documentation/translations/zh_CN/networking/index.rst

Lines changed: 3 additions & 2 deletions
Original file line numberDiff line numberDiff line change
@@ -18,7 +18,9 @@
1818
目录:
1919

2020
.. toctree::
21-
:maxdepth: 2
21+
:maxdepth: 1
22+
23+
msg_zerocopy
2224

2325
Todolist:
2426

@@ -37,7 +39,6 @@ Todolist:
3739
* iso15765-2
3840
* j1939
3941
* kapi
40-
* msg_zerocopy
4142
* failover
4243
* net_dim
4344
* net_failover
Lines changed: 223 additions & 0 deletions
Original file line numberDiff line numberDiff line change
@@ -0,0 +1,223 @@
1+
.. SPDX-License-Identifier: GPL-2.0
2+
3+
.. include:: ../disclaimer-zh_CN.rst
4+
5+
:Original: Documentation/networking/msg_zerocopy.rst
6+
7+
:翻译:
8+
9+
王亚鑫 Wang Yaxin <[email protected]>
10+
11+
:校译:
12+
13+
- 徐鑫 xu xin <[email protected]>
14+
- 何配林 He Peilin <[email protected]>
15+
16+
============
17+
MSG_ZEROCOPY
18+
============
19+
20+
简介
21+
====
22+
23+
MSG_ZEROCOPY 标志用于启用套接字发送调用的免拷贝功能。该功能目前适用于 TCP、UDP 和 VSOCK
24+
(使用 virtio 传输)套接字。
25+
26+
机遇与注意事项
27+
--------------
28+
29+
在用户进程与内核之间拷贝大型缓冲区可能会消耗大量资源。Linux 支持多种免拷贝的接口,如sendfile
30+
和 splice。MSG_ZEROCOPY 标志将底层的拷贝避免机制扩展到了常见的套接字发送调用中。
31+
32+
免拷贝并非毫无代价。在实现上,它通过页面固定(page pinning)将按字节拷贝的成本替换为页面统计
33+
(page accounting)和完成通知的开销。因此,MSG_ZEROCOPY 通常仅在写入量超过大约 10 KB 时
34+
才有效。
35+
36+
页面固定还会改变系统调用的语义。它会暂时在进程和网络堆栈之间共享缓冲区。与拷贝不同,进程在系统
37+
调用返回后不能立即覆盖缓冲区,否则可能会修改正在传输中的数据。内核的完整性不会受到影响,但有缺
38+
陷的程序可能会破坏自己的数据流。
39+
40+
当内核返回数据可以安全修改的通知时,进程才可以修改数据。因此,将现有应用程序转换为使用
41+
MSG_ZEROCOPY 并非总是像简单地传递该标志那样容易。
42+
43+
更多信息
44+
--------
45+
46+
本文档的大部分内容是来自于 netdev 2.1 上发表的一篇长篇论文。如需更深入的信息,请参阅该论文和
47+
演讲,或者浏览 LWN.net 上的精彩报道,也可以直接阅读源码。
48+
49+
论文、幻灯片、视频:
50+
https://netdevconf.org/2.1/session.html?debruijn
51+
52+
LWN 文章:
53+
https://lwn.net/Articles/726917/
54+
55+
补丁集:
56+
[PATCH net-next v4 0/9] socket sendmsg MSG_ZEROCOPY
57+
https://lore.kernel.org/netdev/[email protected]
58+
59+
接口
60+
====
61+
62+
传递 MSG_ZEROCOPY 标志是启用免拷贝功能的最明显步骤,但并非唯一的步骤。
63+
64+
套接字设置
65+
----------
66+
67+
当应用程序向 send 系统调用传递未定义的标志时,内核通常会宽容对待。默认情况下,它会简单地忽略
68+
这些标志。为了避免为那些偶然传递此标志的遗留进程启用免拷贝模式,进程必须首先通过设置套接字选项
69+
来表明意图:
70+
71+
::
72+
73+
if (setsockopt(fd, SOL_SOCKET, SO_ZEROCOPY, &one, sizeof(one)))
74+
error(1, errno, "setsockopt zerocopy");
75+
76+
传输
77+
----
78+
79+
对 send(或 sendto、sendmsg、sendmmsg)本身的改动非常简单。只需传递新的标志即可。
80+
81+
::
82+
83+
ret = send(fd, buf, sizeof(buf), MSG_ZEROCOPY);
84+
85+
如果零拷贝操作失败,将返回 -1,并设置 errno 为 ENOBUFS。这种情况可能发生在套接字超出其
86+
optmem 限制,或者用户超出其锁定页面的 ulimit 时。
87+
88+
混合使用免拷贝和拷贝
89+
~~~~~~~~~~~~~~~~~~~~
90+
91+
许多工作负载同时包含大型和小型缓冲区。由于对于小数据包来说,免拷贝的成本高于拷贝,因此该
92+
功能是通过标志实现的。带有标志的调用和没有标志的调用可以安全地混合使用。
93+
94+
通知
95+
----
96+
97+
当内核认为可以安全地重用之前传递的缓冲区时,它必须通知进程。完成通知在套接字的错误队列上
98+
排队,类似于传输时间戳接口。
99+
100+
通知本身是一个简单的标量值。每个套接字都维护一个内部的无符号 32 位计数器。每次带有
101+
MSG_ZEROCOPY 标志的 send 调用成功发送数据时,计数器都会增加。如果调用失败或长度为零,
102+
则计数器不会增加。该计数器统计系统调用的调用次数,而不是字节数。在 UINT_MAX 次调用后,
103+
计数器会循环。
104+
105+
通知接收
106+
~~~~~~~~
107+
108+
下面的代码片段展示了 API 的使用。在最简单的情况下,每次 send 系统调用后,都会对错误队列
109+
进行轮询和 recvmsg 调用。
110+
111+
从错误队列读取始终是一个非阻塞操作。poll 调用用于阻塞,直到出现错误。它会在其输出标志中
112+
设置 POLLERR。该标志不需要在 events 字段中设置。错误会无条件地发出信号。
113+
114+
::
115+
116+
pfd.fd = fd;
117+
pfd.events = 0;
118+
if (poll(&pfd, 1, -1) != 1 || pfd.revents & POLLERR == 0)
119+
error(1, errno, "poll");
120+
121+
ret = recvmsg(fd, &msg, MSG_ERRQUEUE);
122+
if (ret == -1)
123+
error(1, errno, "recvmsg");
124+
125+
read_notification(msg);
126+
127+
128+
这个示例仅用于演示目的。在实际应用中,不等待通知,而是每隔几次 send 调用就进行一次非阻塞
129+
读取会更高效。
130+
131+
零拷贝通知可以与其他套接字操作乱序处理。通常,拥有错误队列套接字会阻塞其他操作,直到错误
132+
被读取。然而,零拷贝通知具有零错误代码,因此不会阻塞 send 和 recv 调用。
133+
134+
通知批处理
135+
~~~~~~~~~~~~
136+
137+
可以使用 recvmmsg 调用来一次性读取多个未决的数据包。这通常不是必需的。在每条消息中,内核
138+
返回的不是一个单一的值,而是一个范围。当错误队列上有一个通知正在等待接收时,它会将连续的通
139+
知合并起来。
140+
141+
当一个新的通知即将被排队时,它会检查队列尾部的通知的范围是否可以扩展以包含新的值。如果是这
142+
样,它会丢弃新的通知数据包,并增大未处理通知的范围上限值。
143+
144+
对于按顺序确认数据的协议(如 TCP),每个通知都可以合并到前一个通知中,因此在任何时候在等待
145+
的通知都不会超过一个。
146+
147+
有序交付是常见的情况,但不能保证。在重传和套接字拆除时,通知可能会乱序到达。
148+
149+
通知解析
150+
~~~~~~~~
151+
152+
下面的代码片段演示了如何解析控制消息:前面代码片段中的 read_notification() 调用。通知
153+
以标准错误格式 sock_extended_err 编码。
154+
155+
控制数据中的级别和类型字段是协议族特定的,对于 TCP 或 UDP 套接字,分别为 IP_RECVERR 或
156+
IPV6_RECVERR。对于 VSOCK 套接字,cmsg_level 为 SOL_VSOCK,cmsg_type 为 VSOCK_RECVERR。
157+
158+
错误来源是新的类型 SO_EE_ORIGIN_ZEROCOPY。如前所述,ee_errno 为零,以避免在套接字上
159+
阻塞地读取和写入系统调用。
160+
161+
32 位通知范围编码为 [ee_info, ee_data]。这个范围是包含边界值的。除了下面讨论的 ee_code
162+
字段外,结构中的其他字段应被视为未定义的。
163+
164+
::
165+
166+
struct sock_extended_err *serr;
167+
struct cmsghdr *cm;
168+
169+
cm = CMSG_FIRSTHDR(msg);
170+
if (cm->cmsg_level != SOL_IP &&
171+
cm->cmsg_type != IP_RECVERR)
172+
error(1, 0, "cmsg");
173+
174+
serr = (void *) CMSG_DATA(cm);
175+
if (serr->ee_errno != 0 ||
176+
serr->ee_origin != SO_EE_ORIGIN_ZEROCOPY)
177+
error(1, 0, "serr");
178+
179+
printf("completed: %u..%u\n", serr->ee_info, serr->ee_data);
180+
181+
182+
延迟拷贝
183+
~~~~~~~~
184+
185+
传递标志 MSG_ZEROCOPY 是向内核发出的一个提示,让内核采用免拷贝的策略,同时也是一种约
186+
定,即内核会对完成通知进行排队处理。但这并不保证拷贝操作一定会被省略。
187+
188+
拷贝避免不总是适用的。不支持分散/聚集 I/O 的设备无法发送由内核生成的协议头加上零拷贝用户
189+
数据组成的数据包。数据包可能需要在协议栈底层转换为一份私有数据副本,例如用于计算校验和。
190+
191+
在所有这些情况下,当内核释放对共享页面的持有权时,它会返回一个完成通知。该通知可能在(已
192+
拷贝)数据完全传输之前到达。因此。零拷贝完成通知并不是传输完成通知。
193+
194+
如果数据不在缓存中,延迟拷贝可能会比立即在系统调用中拷贝开销更大。进程还会因通知处理而产
195+
生成本,但却没有带来任何好处。因此,内核会在返回时通过在 ee_code 字段中设置标志
196+
SO_EE_CODE_ZEROCOPY_COPIED 来指示数据是否以拷贝的方式完成。进程可以利用这个信号,在
197+
同一套接字上后续的请求中停止传递 MSG_ZEROCOPY 标志。
198+
199+
实现
200+
====
201+
202+
环回
203+
----
204+
205+
对于 TCP 和 UDP:
206+
如果接收进程不读取其套接字,发送到本地套接字的数据可能会无限期排队。无限期的通知延迟是不
207+
可接受的。因此,所有使用 MSG_ZEROCOPY 生成并环回到本地套接字的数据包都将产生延迟拷贝。
208+
这包括环回到数据包套接字(例如,tcpdump)和 tun 设备。
209+
210+
对于 VSOCK:
211+
发送到本地套接字的数据路径与非本地套接字相同。
212+
213+
测试
214+
====
215+
216+
更具体的示例代码可以在内核源码的 tools/testing/selftests/net/msg_zerocopy.c 中找到。
217+
218+
要留意环回约束问题。该测试可以在一对主机之间进行。但如果是在本地的一对进程之间运行,例如当使用
219+
msg_zerocopy.sh 脚本在跨命名空间的虚拟以太网(veth)对之间运行时,测试将不会显示出任何性能
220+
提升。为了便于测试,可以通过让 skb_orphan_frags_rx 与 skb_orphan_frags 相同,来暂时放宽
221+
环回限制。
222+
223+
对于 VSOCK 类型套接字的示例可以在 tools/testing/vsock/vsock_test_zerocopy.c 中找到。

0 commit comments

Comments
 (0)