✨ 前言:
Register Locator DVSEC(Designated Vendor-Specific Extended Capability)是一种PCI Express(PCIe)配置空间的能力,专为CXL(Compute Express Link)技术中的设备设计。这包括CXL根端口、CXL下行交换端口、CXL上行交换端口以及非RCD(即非寄存器配置数据)设备。这项能力的主旨是帮助这些设备实现额外的寄存器块,以便更好地配置和管理CXL技术提供的高级功能。
🌟DVSEC的主要作用包括:
寄存器块定位:DVSEC能力向软件公开了在PCIe配置空间内CXL 2.0根端口、下游交换端口、上游交换端口和CXL 2.0设备相关的寄存器块的位置。这对于软件正确配置和管理这些端口和设备至关重要。
支持多寄存器块条目:一个DVSEC实例可以包含一个或多个寄存器块条目。这意味着DVSEC提供了一种灵活的方式来描述多个相关寄存器块的位置信息,从而支持复杂的硬件功能。
标准化配置空间访问:通过在PCIe配置空间中实现DVSEC能力,CXL硬件组件的配置和管理可以遵循统一的标准。这有助于提高系统的可扩展性和互操作性,同时简化了软件的开发。
促进CXL和PCIe技术的集成:CXL是建立在PCIe基础上的互连技术,DVSEC强化了两者之间的集成。它允许软件利用标准PCIe机制来发现和配置CXL特定的高级功能,这样可以无缝地在系统中融合使用PCIe和CXL技术。
🌟实践中的应用:
一个Register Locator DVSEC实例中包含3个寄存器块:
寄存器块1:
Designated Vendor-specific Header开始于00h。
Register Block 1 - Register Offset Low在0Ch。
Register Block 1 - Register Offset High在10h。
寄存器块2:
Reserved Designated Vendor-specific Header开始于08h。
Register Block 2 - Register Offset Low在14h。
Register Block 2 - Register Offset High在18h。
寄存器块3:
Register Block 3 - Register Offset Low在1Ch。
Register Block 3 - Register Offset High继续往下。
🌟Register Locator DVSEC
如何在pcie的cap中找到Register Locator DVSEC的偏移呢?
要在PCI Express (PCIe) 配置空间中找到 Register Locator DVSEC,您需要寻找具有DVSEC ID为0008h的PCIe设备的扩展能力(capability)。PCIe配置空间包括一系列的标准和供应商特定的能力,这些能力通过链接的列表结构连接。每个能力都有一个头部,其中包含能力的ID和指向下一个能力的指针。
通过Register Locator DVSEC 找到CXL中CPMU Registers,步骤大致如下:
🌟1. 首先找到Register Locator DVSEC 的偏移
lspci -s 你的bdf -vvv
对应cap的base addr为d04。
🌟2.读取Register offset Low寄存器
根据协议BAR寄存器信息(Register BIR)位于Register offset Low的 bit【2:0】,Componet registers的Register Block Identifier(01h)位于Register offset Low的 bit【15:8】,如下图:
Register offset Low位于Register Locator DVSEC Cap + offset (0xc):即 0xd04 + 0xc= 0xd10.
🌟3. 定位CPMU register
读取Register offset Low的寄存器bit 2:0为00,代表是在Bar0上
如上图我们读到的CXL设备的地址中 Register Block 3 0xd04 + 0x1c=0xd20,代表的是CPMU Registers,因为读到的数据中bit2:0为00b代表是在BAR0上,bit15:8为0x4代表CPMU Registers,bit31:16为0x2,并且寄存器块偏移量为 64 KB 对齐,这里需要低位补0为0x20000,至此我们确定了CPMU register是在Register Block 3 上。
读取CXL EP设备的MMIO BAR0地址,可以通过lspci工具查看设备的MMIO的地址,Region0代表BAR0
然后通过这个地址0x183eff000000 + 0x20000
🌟4. 读取 CPMU Capability
从协议里可以看CPMU Capability 是的偏移为00h,读取的地址就是0x183eff020000,后续所有的CPMU的寄存器偏移都是通过这个基地址来加偏移,可以通过devmem工具来读取对应的寄存器