English | 中文
Shmipc 是一个由字节跳动开发的高性能进程间通讯库。它基于 Linux 的共享内存构建，使用 unix/tcp 连接进行进程同步，实现进程间通讯零拷贝。在 IO 密集型场景或大包场景能够获得显著的性能收益。
在工业生产环境中，Unix domain socket 和 Tcp loopback 常用于进程间通讯，读写均涉及通讯数据在用户态 buffer 与内核态 buffer 的来回拷贝。而 Shmipc 使用共享内存存放通讯数据，相对于前者没有数据拷贝。
Shmipc 在共享内存中引入了一个 IO 队列来描述通讯数据的元信息，一个进程可以并发地将多个请求的元信息放入 IO 队列，另外一个进程只要需要一次同步就能批量收割 IO.这在 IO 密集的场景下能够有效减少进程同步带来的 system call。
源码中 bench.rs 进行了 Shmipc 与 Unix domain socket 在 ping-pong 场景下不同数据包大小的性能对比，结果如下所示: 从小包到大包均有性能提升。
benchmark_parallel_ping_pong_by_shmipc_64b
time: [1.0227 µs 1.0662 µs 1.1158 µs]
benchmark_parallel_ping_pong_by_uds_64b
time: [2.4879 µs 2.6609 µs 2.8643 µs]
benchmark_parallel_ping_pong_by_shmipc_512b
time: [973.36 ns 1.0128 µs 1.0572 µs]
benchmark_parallel_ping_pong_by_uds_512b
time: [2.3158 µs 2.4003 µs 2.4921 µs]
benchmark_parallel_ping_pong_by_shmipc_1024b
time: [1.0084 µs 1.0509 µs 1.0996 µs]
benchmark_parallel_ping_pong_by_uds_1024b
time: [2.3272 µs 2.4259 µs 2.5353 µs]
benchmark_parallel_ping_pong_by_shmipc_4096b
time: [988.93 ns 1.0183 µs 1.0495 µs]
benchmark_parallel_ping_pong_by_uds_4096b
time: [3.4969 µs 3.5927 µs 3.6835 µs]
benchmark_parallel_ping_pong_by_shmipc_16384b
time: [1.1775 µs 1.2264 µs 1.2806 µs]
benchmark_parallel_ping_pong_by_uds_16384b
time: [5.3147 µs 5.8754 µs 6.5797 µs]
benchmark_parallel_ping_pong_by_shmipc_32768b
time: [1.1225 µs 1.1844 µs 1.2498 µs]
benchmark_parallel_ping_pong_by_uds_32768b
time: [6.9058 µs 7.0930 µs 7.3091 µs]
benchmark_parallel_ping_pong_by_shmipc_65536b
time: [1.1807 µs 1.2538 µs 1.3238 µs]
benchmark_parallel_ping_pong_by_uds_65536b
time: [15.082 µs 15.419 µs 15.802 µs]
benchmark_parallel_ping_pong_by_shmipc_262144b
time: [1.1137 µs 1.1673 µs 1.2253 µs]
benchmark_parallel_ping_pong_by_uds_262144b
time: [68.750 µs 70.805 µs 73.121 µs]
benchmark_parallel_ping_pong_by_shmipc_524288b
time: [1.1722 µs 1.2599 µs 1.3426 µs]
benchmark_parallel_ping_pong_by_uds_524288b
time: [146.55 µs 150.90 µs 155.72 µs]
benchmark_parallel_ping_pong_by_shmipc_1048576b
time: [2.3027 µs 2.3872 µs 2.4821 µs]
benchmark_parallel_ping_pong_by_uds_1048576b
time: [341.92 µs 354.70 µs 368.29 µs]
benchmark_parallel_ping_pong_by_shmipc_4194304b
time: [4.7158 µs 4.8180 µs 4.9205 µs]
benchmark_parallel_ping_pong_by_uds_4194304b
time: [2.1126 ms 2.3210 ms 2.5974 ms]
- BenchmarkParallelPingPongByUds，基于 Unix Domain Socket 进行 ping-pong 通讯。
- BenchmarkParallelPingPongByShmipc，基于 Shmipc 进行 ping-pong 通讯。
- 后缀为 ping-pong 的数据包大小， 从 64Byte ~ 4MB 不等。