Vxlan与网卡offload性能

背景由于数据链路层MTU的限制,发送端TCP/UDP数据在交付到IP层时需要与MTU相匹配,TCP数据不能超过mss,较长的UDP需要分片(Fragmentation)以满足MTU要求:接收端协议栈也是从网卡接收上述不超过MTU的小帧并重组,早期上述数据分片和组合的工作均由CPU完成,导致占用CPU资源且效率不高. offload 是将本来该操作系统进行的一些数据包处理(如分片.重组等)放到网卡硬件中去做,降低系统 CPU 消耗的同时提高处理的性能. 解释发送模式 TSO (tcp-segm…

网络数据包分析网卡Offload

http://blog.nsfocus.net/network-packets-analysis-nic-offload/ 对于网络安全来说,网络传输数据包的捕获和分析是个基础工作,绿盟科技研究员在日常工作中,经常会捕获到一些大小远大于MTU值的数据包,经过分析这些大包的特性,发现和网卡的offload特性有关,本文对网卡Offload技术做简要描述. 文章目录网络分片技术网卡offload机制发送模式接收模式网卡offload模式的设置 Linux windows 网卡Off…

使用iperf测试网卡吞吐性能

原使用iperf测试网卡吞吐性能 2018年12月17日 12:38:41 lancewoo 阅读数:138 首先配置待测试的两个网卡的网络地址到同一网段,保证ping对方的IP地址时可以通.两个网卡用网线连接到同一个交换机上,或者直连,交换机交换最大速率不能低于待测试网卡的标称速率. 在两台机器上分别运行命令,哪台做服务端,哪台做客户端都可以: 服务端命令: iperf -s -P 0 -i 1 -p 5001 -w 2M -f k 客户端命令: iperf -c 192.168.1.3…

[daily][dpdk] 网卡offload识别包类型；如何模拟环境构造一个vlan包

第一部分硬件识别包类型网卡,是可以识别包类型的.在dpdk的API中.识别完之后,存在这个结构里: struct rte_mbuf { ...... union { uint32_t packet_type; /**< L2/L3/L4 and tunnel information. */ struct { uint32_t l2_type:; /**< (Outer) L2 type. */ uint32_t l3_type:; /**< (Outer) L3 type. */ u…

[网络技术][转]网卡的offload概念

网络数据包分析网卡Offload 对于网络安全来说,网络传输数据包的捕获和分析是个基础工作,绿盟科技研究员在日常工作中,经常会捕获到一些大小远大于MTU值的数据包,经过分析这些大包的特性,发现和网卡的offload特性有关,本文对网卡Offload技术做简要描述. 网络分片技术 MTU 最大传输单元,指一种通信协议的某一层上面所能通过的最大数据包大小(以字节为单位). 在以太网通信中,MTU规定了经过网络层封装的数据包的最大长度.例如,若某个接口的MTU值为1500,则通过此接口传送的IP数据…

Neutron 理解（14）：Neutron ML2 + Linux bridge + VxLAN 组网

学习 Neutron 系列文章: (1)Neutron 所实现的虚拟化网络 (2)Neutron OpenvSwitch + VLAN 虚拟网络 (3)Neutron OpenvSwitch + GRE/VxLAN 虚拟网络 (4)Neutron OVS OpenFlow 流表和 L2 Population (5)Neutron DHCP Agent (6)Neutron L3 Agent (7)Neutron LBaas (8)Neutron Security Group (9)Neutro…

VNF网络性能提升解决方案及实践

VNF网络性能提升解决方案及实践 2016年7月作者: 王智民贡献者: 创建时间: 2016-7-20 稳定程度: 初稿修改历史版本日期修订人说明 1.0 2016-7-20 王智民初稿目录 1 引言 1 1.1 编写目的 1 1.2 背景 1 2 SDN 1 2.1 SDN核心思想 1 2.2 网络虚拟化 4 3 NFV 7 3.1 …

x86服务器中网络性能分析与调优转

x86服务器中网络性能分析与调优 2017-04-05 巨枫英特尔精英汇 [OpenStack 易经]是 EasyStack 官微在2017年新推出的技术品牌,将原创技术干货分享给您,本期我们讨论 [x86服务器中网络性能分析与调优] 那些事! >> 网络性能理论极限网络数据包处理的性能指标,一般包括吞吐.延时.丢包率.抖动等. 数据包有大有小,数据包的大小对这些性能指标有很大的影响. 一般认为服务器处理能力很强,不是数据包处理的瓶颈,而通过物理线路能够传送数据包的最大速率,即线速(Wir…

用ethtool 命令解决Linux 网卡丢包【转】

转自:https://blog.csdn.net/chengxuyuanyonghu/article/details/73739516 生产中有一台Linux设备并发比较大,droped包比较多,尤其是在跑游戏数据包的时候,存在严重的丢包现象,怀疑网卡性能不足,在更换设备前想能不有通过软件方法解决,通过网上一些资料显示,出现这种现象,也有可能是网卡buffer size 太小的原因,遂尝试更改buffer 大小解决,下面的设备运行了64天,丢包超过20多亿 . ethtool命令用于获取以太网卡…

性能测试基于Python结合InfluxDB及Grafana图表实时采集Linux多主机性能数据

基于Python结合InfluxDB及Grafana图表实时采集Linux多主机性能数据 by:授客 QQ:1033553122 实现功能测试环境环境搭建使用前提使用方法运行程序效果展示实现功能无需在被监控主机上安装代理,一键对Linux远程服务器不同主机执行性能监控.性能数据采集命令,并实时展示支持跨堡垒机收集实时性能数据(注:定制化开发,非通用) 支持docker容器(因为程序实现是从docker容器内部获取性能数据,所以目前仅支持 CPU,内存,I/O) 使用前提可…

【原创】qlogic网卡软中断不均衡问题分析

引子使用qlogic QL45000网卡测试业务性能,发现cpu软中断分布不均衡,而且很有规律,导致cpu空闲也不是很均衡, 会影响业务稳定性. 设备使用3张网卡Qlogic网卡,配置为4*25G模式,也就是12个25G网口.三张网卡中其中两张接在物理cpu0上, 另一张接在物理cpu1上.笔者以为是由于三张网卡在物理架构上不均衡导致的cpu软中断不均衡,但是屏蔽了物理 cpu0上的其中一张网卡的四个网口后,cpu软中断仍然不均衡.所以,可能是其他原因导致的这个问题. 问题背景我们的设备主要…

性能测试基于Python结合InfluxDB及Grafana图表实时采集Linux多主机或Docker容器性能数据

基于Python结合InfluxDB及Grafana图表实时采集Linux多主机性能数据 by:授客 QQ:1033553122 实现功能 1 测试环境 1 环境搭建 3 使用前提 3 使用方法 3 运行程序 5 效果展示 6 实现功能无需在被监控主机上安装代理,一键对Linux远程服务器不同主机执行性能监控.性能数据采集命令,并实时展示支持跨堡垒机收集实时性能数据(注:定制化开发,非通用) 支持docker容器(因为程序实现是从docker容器内部获取性能数据,所以目前仅支持 CPU,…

KVM总结-KVM性能优化之网络性能优化

前面已经介绍了KVM CPU优化(http://blog.csdn.net/dylloveyou/article/details/71169463).内存优化(http://blog.csdn.net/dylloveyou/article/details/71338378).磁盘IO优化(http://blog.csdn.net/dylloveyou/article/details/71515880),下面继续介绍网络性能调优. 首先,我给大家看一张图,这张图是数据包从虚拟机开始然后最后到物理网…

KVM网络性能调优

首先,我给大家看一张图,这张图是数据包从虚拟机开始然后最后到物理网卡的过程. 我们分析下这张图,虚拟机有数据包肯定是先走虚拟机自身的那张虚拟网卡,然后发到中间的虚拟化层,再然后是传到宿主机里的内核网桥中,最后传到物理网卡,这个过程很好理解. 那么我们要做网络的优化,让虚拟机的网络运行得更加高效,我们要想的就是让虚拟机访问到物理网卡的层次要少.或者说能不能让宿主机的物理网卡直接丢给虚拟机用,这样达到最高的网络性能. 那么目前KVM提高网络性能这块有以下四种方法: 使用virtio半虚拟化网卡使用…

使用wifi网卡笔记2----概念及工具iw(STA模式)

1.认证和加密的概念 (1)概念 (2)阶段划分初级版本:认证不需要密码, 传输不需要加密认证不需要密码, 传输需要加密(用WEP算法) 认证需要密码(用WEP算法), 传输需要加密(用WEP算法,容易破解) 过渡版本:WPA 认证方式(802.1x),加密方式(TKIP,WEP) 认证方式(PSK),加密方式(TKIP,WEP) 终极版本: WPA2 认证方式(802.1x),加密方式CCMP(AES-CCMP),TKIP,WEP 认证方式(PSK),加密方式CCMP(AES-CC…

3.1 wifi网卡RT3070在S3C2440的移植和使用

学习目标:熟悉RT3070在S3C2440的移植和使用,以及其中的相关工具的安装和使用: 一.配置内核选择WIFI驱动 1. 将usb wifi插到电脑,在ubuntu使用命令:# lsusb 查看wifi的PID:0x148f, VID:0x3070 2. 搭建环境 (使用的是arm-linux-gcc 4.3.2,内核为:linux 3.4.2) 1) 内核源码打补丁在终端执行以下命令: # tar xjf linux-3.4.2.tar.bz2 # cd linux-3.4.2 # pa…

freebsd网卡驱动程序详解

freebsd网卡驱动程序详解来源 https://blog.csdn.net/h_cszc/article/details/7776116 /* 注释:xie_minix */ /*此处为BSD申明,略过... 最好是拷贝下来用C的开发工具来看比较好 :) */ /* 当网络上一台计算机准备发送数据时,他的网卡开始工作了,首先网卡的芯片侦听在网络上是否有数据在流动,如果没有,他就把数据发送到网络上,在侦听和发送之间有一段极小的时间延迟,在这段时间内,也有可能在网络上有其他的计算机也准备发…

34、JZ2440上WIFI网卡使用

:http://wireless.kernel.org在这个网站上的document中有下面说有内容的介绍 1. 准备工作(虚拟机,开发板)及配置内核选择WIFI驱动1.1 选型:确定网卡的VID,PID是否在列表里:http://wireless.kernel.org/en/users/Devices/USB选购WIFI:Atheros : VID 0x13D3 PID 0x3327 (成品型号 AR9271)realtek : VID 0x0bda PID 0x8176 (成品型号TP-LI…

vxlan和macvlan操作

vxlan: 192.168.1.112 ———— 192.168.1.108 —— 192.168.1.109192.168.1.112配置:docker run -d -p 8500:8500 -h consul --name consul progrium/consul -server -bootstrap 192.168.1.108配置:vi /usr/lib/systemd/system/docker.serviceExecStart=/usr/bin/dockerd -H tcp:/…

Linux网络管理之多网卡绑定

一.bonding介绍在企业Linux服务器管理里中,服务器的可靠性.可用性以及I/O速度都非常重要,保持服务器的高可用和安全性是生产环境的重要指标,其中最重要的一点是服务器网络连接的高可用性.通常我们会把重要的服务器做主备,其目的在于当主服务器宕机,备份服务器马上接管其主服务器的工作,从而实现服务的连续,不至于服务的停用.还有一种情况,我们会给服务器做负载均衡,当一个服务器对外提供服务,接收到用户请求太多,会导致服务器宕机,这个时候我们用主备显得力不从心,怎么办呢,这个时候我们就需要考虑把原…

异数OS TCP协议栈测试（四）--网卡适配篇

异数OS TCP协议栈测试(四)–网卡适配篇本文来自异数OS社区 github: https://github.com/yds086/HereticOS 异数OS社区QQ群: 652455784 异数OS-织梦师(消息中间件)群: 476260389 为了实际走向应用,异数OS目前适配了netmap平台,DPDK平台,暂时每端口单核单队列的模式,后面各项问题解决后,开始适配RSS FDIR方案,下面是目前适配各个网卡驱动平台的测试结果. 测试说明测试硬件平台 CPU : E5 2670 V1…

理解Docker（6）：若干企业生产环境中的容器网络方案

本系列文章将介绍 Docker的相关知识: (1)Docker 安装及基本用法 (2)Docker 镜像 (3)Docker 容器的隔离性 - 使用 Linux namespace 隔离容器的运行环境 (4)Docker 容器的隔离性 - 使用 cgroups 限制容器使用的资源 (5)Docker 网络 (6)若干企业生产环境中的容器网络方案 Docker 在早期只有单机上的网络解决方案,在 1.19 版本引入了原生的 overlay 网络解决方案,但是它的性能损耗较大,可能无法适应一些生产环…