零拷贝摘录

Posted 2022-04-11 hello_读书就是赚钱

在看kafka的时候看到kafka的高效的原因,是因为用了0拷贝技术.这里看了

https://developer.ibm.com/articles/j-zerocopy/这篇文章简单做一下笔记

在web场景中,我们需要将硬盘的数据传输到socket中做网络推送.我们编写的应用程序作为媒介,如果使用传统的文件拷贝技术的话将会出现4次拷贝,非常影响效率.

1、传统的数据拷贝方式,经历了4次拷贝

在上图中,application buffer存在是没有意义的.而且这几个过程需要经历两次内核态切换

数据不需要从内核态出来到用户态,只需要在内核态传输即可.这几次内核态的切换也没有存在的意义.

2、0拷贝技术对上述场景做了优化

这样的话,数据只需要在内核态中完成传输即可,涉及只有一次内核态切换

3、文章也给了性能比较

可见时间可缩短65%.

4、在golang中可以用下面函数发起系统调用使用0拷贝技术

_, werr := syscall.Sendfile(outfd, srcfd, currOffset, int(size))