dpdk/spdk/网络协议栈/存储/网关开发/网络安全/虚拟化/ 0vS/TRex/dpvs技术专家成长体系教程

课程围绕安全,网络,存储,云原生4个维度去讲解核心技术点。

6个专栏组成:dpdk网络专栏、存储技术专栏、安全与网关开发专栏、虚拟化与云原生专栏、测试工具专栏、性能测试专栏

一、dpdk网络

dpdk基础知识

  • 多队列网卡,vmxnet/e1000
  • igb_uio 与 vfio 模块
  • kni 模块
  • hugepage 的理解
  • 零拷贝
  • dpdk 与netmap 区别
  • dpdk 的工作环境

网络协议栈

  • dpdk-arp .
  • netsh 静态 arp 表设置
  • dpdk-icmp
  • dpdk-udp
  • udp 协议格式分析
  • udp 协议 sendto,recvfrom 实现
  • dpdk-ip .
  • dpdk-tcp
  • tcp 协议栈 bind,listen,accept 实 现
  • tcp 协议栈 recv,send, close 的实现
  • tcp 三次握手实现
  • tcp 四次挥手实现
  • tcp acknum 与 seqnum 的确认机制实现
  • tcp 的并发连接设计
  • epoll 并发的实现
  • tcp 协议栈与 epoll 之间的回调实现

dpdk组件项目

  • dpdk-acl
  • dpdk-kni
  • /dev/kni 的原理分析
  • kni_dev 的流程
  • kni 的 tx缓冲区,rx缓冲区
  • kni 的用户空间与内核空间映射
  • mbuf 如何转化为 kernel 的 sk_buff
  • dpdk-timer
  • bpftrace 的使用
  • dpdk-bpf 源码流程

dpdk经典项目

  • dpdk-dns
  • dpdk-gateway
  • dpdk-ddos 熵计算源码
  • ddos-attach 检测精确度调试
  • ddos attach 测试工具 hping3
  • 布谷鸟 hash 原理与使用

二、存储

高效磁盘io读写 spdk ©

  • 存储框架 spdk,为技术栈打开一扇存储的大门
  • spdk 运行环境与 vhost
  • NVMe 与 PCI 的关系
  • 手把手实现spdk_ server
  • nvme 与 pcie 以及手写 nvme 读写操作
  • bdev 与 blob 之间的关系
  • 实现 blob 异步读写
  • blobstore 的读写操作实现与 rpc 的关系
  • fio 性能测试性能对比 libaio,io_uring, psync
  • fio plugin 工作流程
  • fio plugin 开发

spdk文件系统的实现

  • 文件系统功能拆解
  • spdk_env_init 与 spdk_app_init 的差 别
  • spdk_thread_poll 实现 rpc 回调
  • fs_operations 结构体定义
  • file_operat ions 结构体定义
  • dir_operat ions 结构体定义
  • syscall 的 hook 实现
  • io 内存管理
  • 基数树对文件系统内存管理
  • spdk_blob 的 open, read, write, close
  • 测试用例与调试入口函数

spdkkv存储的实现

  • KV 存储拆解 Set, Get, Mod, Del
  • app/. a库/. so库对于kv存储的选择
  • bdev 与 blob 对于kv存储的选择
  • kv service 启动 blob 资源操作
  • kv service 关闭 blob 资源回收
  • kv service 接口 set, get, modify, delete
  • kv遍历与查找实现
  • page 存储 chunk 的管理
  • pagechunk 的 get 与 put
  • page 单查找与多页查找
  • btree,artree, hashmap,radixtree, rbtree之 间的选择
  • slab 的实现
  • slab 分配 slot 与释放 slot
  • 为kv加上 conf 文件
  • 测试用例与性能测试

三、安全与网关开发

可扩展的矢量数据包处理框架vpp (c/c++)

  • vpp 命令详解
  • mac/ip 转发 plugin
  • load_balance plugin
  • flowtable plugin
  • vpp 源码
  • 多网卡数据接收与转发
  • 解决 plugin 编译加载
  • vpp 启动 load so 的流程
  • vpp 的结构体 vlib_main
  • vpp 的结构体 vnet_main
  • vector 的操作实现
  • vpp vcl 库与 LD_PRELOAD
  • vcl 原理讲解
  • vcl tcpserver 实现原理
  • vc| tcpclient 实现原理
  • vcl 与 iperf3 的客户端与服务器
  • vcl 与 nginx 的 wrk 性能测试
  • vcl 与 haproxy 的性能测试
  • vpp 1801版本与vpp 2206版本之间的差异
  • vpp httpserver 的实现源码
  • vpp plugin quic 源码分析
  • vpp plugin hs_app 的源码实现分析
  • vpp plugin rdma 的实现分析
  • vpp plugin loadbalance 实现分析
  • vpp plugin nat 的源码分析
  • vpp host-stack tcp 协议实现
  • vpp plugin 的测试用例实现

golang的网络开发框架nff- go (go lang)

  • nff-go 实现的技术原理
  • nff-go/low.h 实现分析
  • nff-go 数据接收的实现
  • nff-go 数据发送的实现
  • ipsec 协议解析与 strongswan 的 ipsec
  • nff-go 的缺陷与不足

四、虚拟化与云原生

DPDK的虚拟交换机框架OvS

  • ovs编译安装,ovs核心组件内容
  • ovs-vswitchd 的工作原理
  • ovs-vswitchd 与 dpdk 的关系
  • ovs-vsctI 的网桥,网口操作
  • qemu-system-x86_64 构建多子网
  • ovs 与 qemu 数据流分发
  • ovs 搭建 docker 跨主机通信
  • ovsdb-server 与 ovsdb 协议
  • json-rpc 为控制面提供开发
  • ovs-tcpdump/ ovs-l3ping
  • 0vS 4种数据路径
  • VXLAN数据协议
  • ovs流量统计

高性能4层负载均衡器 DPVS

  • dpvs 的技术组件与功能边界
  • Ivs+keepalived 配置高可用 server
  • dpvs 与 Ivs+keepalived 的关系
  • dpvs.conf 的配置文件
  • dpvs 的 FNat/NAT/SNAT模式
  • dpvs 的 DR 模式
  • dpvs 的 tun 模式
  • 通过 quagga 配置 ospf
  • dpvs 的 tc 流控操作与源码实现
  • dpvs 代码架构分析
  • dpvs 测试用例 ipset,tc,mempool

五、测试工具

perf3

  • vpp vcl 的 perf3 接口 hook
  • perf3 测网络带宽
  • tcp 吞吐量测试
  • udp 丢包与延迟测试
  • son 测试结果输出

TRex

  • TRex 的运行原理
  • TRex 与 dpdk
  • 构建 TRex 测试系统
  • t-rex-64-debug-gdb 调试
  • bg-sim-64 模拟单元测试
  • YAML 文件编写
  • 流编排与自动化框架
  • 报文变量设置

dpdk- pktgen

  • pktgen 命令讲解
  • default.cfg 配置文件分析
  • 120M bits/s 的转发速率

fio

  • ioengine 的实现
  • ioengine_ops 的分析
  • iodepth 的分析
  • spdk_nvme 的 fio 分析
  • spdk_bdev 的 fio 分析
  • spdk_blob 的 ioengine 实现
  • psync,io_uring, libaio 性能对比

六、性能测试

性能指标

  • 吞吐量 bps
  • 拆链/建链 pps
  • 并发
  • 最大时延
  • 最小时延
  • 平均时延
  • 负载
  • 包速 fps
  • 丢包率

测试方法

  • 测试用例
  • vpp sandbox
  • perf3 灌包
  • rfc2544

dpdk/spdk/网络协议栈/存储/网关开发/网络安全/虚拟化/0vS/TRex/dpvs技术专家成长体系教程

目标岗位

  • 高级网络开发工程师
  • DPDK开发工程师
  • 云产品研发工程师
  • 云基础开发工程师
  • 高性能优化工程师
  • SDN开发工程师
  • NFV开发工程师

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/104153.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

JavaScript学习笔记(一)

1、JavaScript是什么? 是一种运行在客户端(浏览器)的编程语言 2、JavaScript的组成是什么? ECMAScript(基础语法)、WebAPIS(DOM、BOM) 3、JavaScript书写位置有哪些?…

采集EtherNET/IP转Profinet在西门子plc中的应用

远创智控网关YC-EIPM-PN,让你的设备和云平台实时连接! 远创智控YC-EIPM-PN网关产品支持各种数据接口,无论是工业领域的仪表、PLC、计量设备,还是设备数据,都能实时采集并整合。它将这些设备中的运行数据、状态数据等信…

学习pytorch13 神经网络-搭建小实战Sequential的使用

神经网络-搭建小实战&Sequential的使用 官网模型结构根据模型结构和数据的输入shape,计算用在模型中的超参数coderunning log网络结构可视化 B站小土堆pytorch视频学习 官网 https://pytorch.org/docs/stable/generated/torch.nn.Sequential.html#torch.nn.Se…

布朗大学发现GPT-4存在新问题,可通过非常见语言绕过限制

🦉 AI新闻 🚀 布朗大学发现GPT-4存在新漏洞,可通过非常见语言绕过限制 摘要:布朗大学计算机科学研究人员发现了OpenAI的GPT-4存在新漏洞,利用不太常见的语言如祖鲁语和盖尔语可以绕过各种限制。研究人员测试了GPT-4对…

gitlab docker部署,备份,恢复。附踩坑记录

本次安装在CentOS7下进行 1、安装yum 检查是否已经安装yum yum --version如果未安装 sudo yum install -y yum-utils添加镜像源: 国外镜像源:yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo阿里镜像源&am…

【VIM TMUX】开发工具 Vim 在 bash 中的显示与 tmux 中的显示不同

开发工具 Vim 在 bash 中的显示与 tmux 中的显示不同-CSDN博客 此方法有效 方法如下: 1.在~/.bashrc中添加 alias tmuxtmux -2 ,然后使配置生效 $source ~/.bashrc . 2.在~/.tmux.conf中添加 set -g default-terminal "screen-256color" 完成之后即可…

最新AI创作系统ChatGPT源码+详细搭建部署教程,支持AI绘画/支持OpenAI-GPT全模型+国内AI全模型

一、AI创作系统 SparkAi创作系统是基于OpenAI很火的ChatGPT进行开发的Ai智能问答系统AI绘画系统,支持OpenAI GPT全模型国内AI全模型。本期针对源码系统整体测试下来非常完美,可以说SparkAi是目前国内一款的ChatGPT对接OpenAI软件系统。那么如何搭建部署…

SQL 的优化

SQL 优化是指对数据库查询语句进行优化,以提高查询性能和效率。下面列出了一些常见的 SQL 优化技巧: 1、索引优化 (1)使用适当的索引来加速查询操作。在频繁用于查询的列上创建索引,特别是在 WHERE 条件、JOIN 条件和…

AOMEI PXE Boot Free

两台电脑网线直连,不用设置固定IP,该软件包含DHCP。 名称: 3H3AOMEIPXEBootFree.rar 大小: 13068734 字节 (12 MiB) SHA1: 1e606c8c1ee3badf8af9a87f61fdf2e332b773e6 名称: PXEBoot.exe 大小: 13124928 字节 (12 MiB) SHA1: 95286ac18e9b81c2a68412c40…

[Go]配置国内镜像源

配置 Windows 选一个 go env -w GOPROXYhttps://goproxy.cn,direct go env -w GOPROXYhttps://mirrors.aliyun.com/goproxy,direct查看环境配置 go env

Uniapp路由拦截-自定义路由白名单

步骤一:新建routerIntercept.js文件 步骤二:routerIntercept文件中写入:(根据自己需要修改whiteList白名单中的页面路径和自己的逻辑处理) import Vue from vue // 白名单 const whiteList = [/pages/public/login,/pages/public/privacyAgreement, ]export default asy…

代理IP在保护跨境商家网络安全中的重要作用

在当前全球化的背景下,跨境电商成为一种重要的商业模式,越来越多的商家涌入国际市场,商家们通过互联网平台将商品远销国外,但网络安全风险随之而来。跨境商家因为需要处理大量的在线交易和产品数据,如果未能对这些敏感…

linux更换常用软件的默认缓存路径(.conda, .huggingface等)

在使用linux的过程中,我们往往会使用软件安装很多packages,其中的大多数软件(例如conda)会把当前安装的packages缓存起来,以加速之后的相同package的安装。 而很多软件的默认缓存路径是user自己的home路径。下面罗列几…

SSMS中的SQL sever代理

目录 一、用途: 二、用法 SQL Server代理(SQL Server Agent)是SQL Server Management Studio (SSMS) 2008中的一个功能模块,它用于执行和调度自动化任务、作业和脚本,如作业和警报。SQL Server代理允许在指定的时间间…

day27--AJAX(bootstrap之modal,toast;接口文档的一些用法;AJAX原理)

目录 Bootstrap之Modal: 显示和隐藏方法 通过自定义属性: 使用JS来控制弹框: Bootstrap之Toast: 接口文档一些用法: 删除图书: 图片上传: 图片上传步骤: 修改头像&#xf…

CVE-2017-15715 apache换行解析文件上传漏洞

影响范围 httpd 2.4.0~2.4.29 复现环境 vulhub/httpd/CVE-2017-15715 docker-compose 漏洞原理 在apache2的配置文件: /etc/apache2/conf-available/docker-php.conf 中,php的文件匹配以正则形式表达 ".php$"的正则匹配模式意味着以.ph…

Spring Boot集成kafka的相关配置

引入依赖&#xff1a; 额外依赖只需要这一个&#xff0c;kafka-client 不是springboot 的东西&#xff0c;那是原生的 kafka 客户端&#xff0c; kafka-test也不需要&#xff0c;是用代码控制broker的东西。 <dependency><groupId>org.springframework.kafka</g…

基于Effect的组件设计 | 京东云技术团队

Effect的概念起源 从输入输出的角度理解Effect https://link.excalidraw.com/p/readonly/KXAy7d2DlnkM8X1yps6L 编程中的Effect起源于函数式编程中纯函数的概念 纯函数是指在相同的输入下&#xff0c;总是产生相同的输出&#xff0c;并且没有任何副作用(side effect)的函数。…

flutter 开发中的问题与技巧

一、概述 刚开始上手 flutter 开发的时候&#xff0c;总会遇到这样那样的小问题&#xff0c;而官方文档又没有明确说明不能这样使用&#xff0c;本文总结了一些开发中经常会遇到的一些问题和一些开发小技巧。 二、常见问题 1、Expanded 组件只能在 Row、Column、Flex 中使用 C…

缓存设计的创新之旅:架构的灵魂之一

缓存在架构设计中占有重要地位。缓存在提升性能中也扮演重要的角色。常见的有对资源的缓存&#xff0c;比如数据库连接池、http连接池&#xff0c;还有对数据的缓存等。缓存的设计可复杂也可简单&#xff0c;但是需要考虑的点却很多。 缓存对象 设计缓存的时候一定要考虑的是&…