零拷贝概念 -- linux内核

零拷贝（zero-copy）

备快速网络接口的主要技术。

零拷贝技术通过降低或消除关键通信路径影响速率的操作，降低传输数据的操作系统开销和协议处理开销，从而有效提高通信性能，实现快速传输数据。

零拷贝技术能够降低数据拷贝和共享总线操作的次数，消除通信数据在存储器之间不必要的中间拷贝过程，有效地提高通信效率，是设计快速接口通道、实现快速server和路由器的关键技术之中的一个。

数据拷贝受制于传统的操作系统或通信协议，限制了通信性能。採用零拷贝技术，通过降低数据拷贝次数，简化协议处理的层次，在应用和网络间提供更快的数据通路。能够有效地降低通信延迟，添加网络吞吐率。

零拷贝技术的研究主要针对下面两个方面：

(1) 创建有效的用户级通信接口，即应用程序直接将数据从通信接口发送出去或接收进来，消除系统内核中不必要的拷贝过程。

(2) 路由器的入端到出端的直接传输数据，即接收的报文仅仅经过一次存储器缓冲。而缓冲队列中的报文经过必要的控制信息处理后，直接传送到输出port发送出去，实现报文高速转发。

一般来说, 觉得从网卡到用户空间的系统调用会经历两次或者两次半的copy过程.
zero copy就是要消除这些copy过程.
从网卡的ring-buffer到software packets的copy能够通过直接DMA数据到software packet完毕.
所谓半次copy能够有hardware checksum offload来解决.
最后的内核空间到用户空间的copy还存在问题, 近期提出的比較好的方案是IOAT2技术, 能够直接做Host memeory对Host memroy的DMA.
也看到有人使用把DMA的buffer直接map到用户空间的解决方式, 但这个对用户空间的程序不是透明的, 不具备普遍意义.

转载于:https://www.cnblogs.com/hrhguanli/p/4851993.html

零拷贝概念 -- linux内核相关推荐

零基础学Linux内核之设备驱动篇(8)_设备模型
零基础学Linux内核系列文章目录前置知识篇 1. 进程 2. 线程进程间通信篇 1. IPC概述 2. 信号 3. 消息传递 4. 同步 5. 共享内存区编译相关篇 1. GCC编译 2. 静 ...
Linux网络处理“零拷贝”技术mmap()内核进程间通信设计8086分页管理——摆在一起来谈谈...
Jack:最近听说了网络处理的"零拷贝"技术,觉得非常神奇,在网上查阅了很多资料.不过,并不是太明白--知其然,而不知其所以然.你能通俗地解释一下吗? 我:这是一个相对比较复杂的话 ...
linux 零拷贝goodlen,linux零拷贝技术
简介零复制(英语:Zero-copy:也译零拷贝)技术是指计算机执行操作时,CPU不需要先将数据从某处内存复制到另一个特定区域.这种技术通常用于通过网络传输文件时节省CPU周期和内存带宽. 零拷贝操作 ...
【Netty】零拷贝（zero-copy）
目录 1. 零拷贝技术实现 2. 传统读取IO流的操作 2.1 读操作 2.2 写操作 2.3 MMAP+write 2.4 Sendfile 3. 零拷贝应用场景很多更新的技术在宣传的时候,都会提 ...
linux零拷贝实现程序,浅析零拷贝技术
前言零拷贝(英语:Zero-copy)技术是指计算机执行操作时,CPU不需要先将数据从某处内存复制到另一个特定区域.这种技术通常用于通过网络传输文件时节省CPU周期和内存带宽. 零拷贝操作减少了在用户 ...
Linux 零拷贝技术
文章目录使用标准I/O的痛点零拷贝技术介绍直接I/O操作 mmap内存映射 sendfile 在文件描述符之间传递数据使用标准I/O的痛点在Linux中标准I/O操作都是基于数据拷贝的缓冲 ...
锁 - linux内核锁（零）
经典博客: 术道经纬 - 知乎目录: 一.铺垫知识 1.指令执行流 2.上下文 3.抢占二.内核锁基础知识 1.为什么要用锁?why 2.锁保护什么?what 3.锁是如何保护资源的?How 三. ...
【Linux 内核】调度器 ① ( 调度器概念 | 调度器目的 | 调度器主要工作 | 调度器位置 | 进程优先级 | 抢占式调度器 | Linux 进程状态 | Linux 内核进程状态 )
文章目录一.调度器 0.调度器概念 1.调度器目的 2.调度器主要工作 3.调度器位置 4.进程优先级 5.抢占式调度器二.Linux 内核进程状态 API 简介三.Linux 进程状态一.调 ...
Java NIO零拷贝
1.用户态和内核态基本概念 Linux操作系统的体系架构分为用户态(用户空间)和内核态(内核).内核从本质上是一种软件:控制计算机的硬件资源,并为上层应用程序提供运行环境. 用户态即上层应用程序的活动 ...