企业官网建设流程全解析

网站设计要注意事项,长沙网站建设建,北京定制网站开发公司浩森宇特,做网站能赚钱吗 知乎前置知识: PCIe信号链路架构及其Linux kernel系统软件完全开发指南 Linux kernel中断系统架构及应用 PCIe 中断系统之MSI 基于PCIe doorbell同步的系统软件实现 DMA 允许 PCIe 设备直接与系统内存之间传输数据#xff0c;而无需 CPU 持续参与#xff0c;从而显著提升性能。 一…前置知识:PCIe信号链路架构及其Linux kernel系统软件完全开发指南Linux kernel中断系统架构及应用PCIe 中断系统之MSI基于PCIe doorbell同步的系统软件实现DMA 允许 PCIe 设备直接与系统内存之间传输数据而无需 CPU 持续参与从而显著提升性能。一、PCIe DMA架构二、核心组件系统组件架构图片DMA Engine· 内置于 PCIe endpoint设备中如 NIC、GPU、存储控制器· 管理PCIe EP与system memory之间的数据移动· 包含address、length和控制寄存器图片地址转换· 设备视角使用 Bus Mastering 访问系统内存· 地址类型· Physical Addresses旧式系统直接访问物理内存· IOVA在 IOMMU/SMMU 支持下设备看到虚拟地址· DMA Address用于transaction的最终地址Descriptor Ringstruct dma_descriptor {dma_addr_t data_addr;u32 length;u32 flags; // 所有权、完成状态、中断};// CPU 和设备之间共享的描述符循环缓冲区图片4. TLP流程图片4. DMA状态机图片三、关键工作流程设置阶段驱动初始化// 驱动设置示例dma_addr_t dma_handle;void *cpu_buffer dma_alloc_coherent(dev, size, dma_handle, GFP_KERNEL);device_registers-dma_source_addr dma_handle;device_registers-dma_dest_addr device_buffer_addr;device_registers-dma_length size;DMA 传输类型A. Memory-to-Device (写入设备)CPU 内存 → PCIe 设备CPU 在系统内存中准备数据驱动编程设备的 DMA 寄存器设备发起读请求来获取数据数据通过 PCIe root complex 流向设备B. Device-to-Memory (从设备读取)图片PCIe 设备 → CPU 内存设备数据就绪驱动编程目标地址设备发起写事务数据被直接写入系统内存Scatter-Gather DMA· 处理非连续的内存缓冲区· 描述符链/列表timelinetitle PCIe DMA Scatter-Gather传输时间线 section 准备阶段 t0: Driver准备scatter list : ┌───────┬───────┬───────┬───────┐ : │ 页 0 │ 页 1 │ 页 2 │ ... │ : ├───────┼───────┼───────┼───────┤ : │ PA0 │ PA1 │ PA2 │ PAn │ : │ 4KB │ 4KB │ 8KB │ ... │ : │ 有效 │ 有效 │ 有效 │ ... │ : └───────┴───────┴───────┴───────┘ : scatterlist初始化完成 section DMA传输阶段 t1: DMA引擎获取第一个描述符 : ┌─────────────────────────────┐ : │ DMA描述符读取 │ : ├─────────────────────────────┤ : │ DMA Addr PA0 (0x1000) │ : │ Length 4KB (0x1000) │ : │ Flags 有效 │ 链式 │ : │ Next 描述符1地址 │ : └─────────────────────────────┘ : 从描述符环读取第一个描述符 t2: 传输第一个页面 : ┌─────────────────────────────┐ : │ PCIe TLP: 传输页0数据 │ : ├─────────────────────────────┤ : │ Type: MWr (内存写) │ : │ Addr: 0x1000 (IOVA) │ : │ Length: 4KB │ : │ Tag: 0x01 │ : │ Data: 页0内容 │ : └─────────────────────────────┘ : 生成TLP包并通过PCIe链路传输 t3: DMA引擎获取下一个描述符 : ┌─────────────────────────────┐ : │ DMA描述符读取 │ : ├─────────────────────────────┤ : │ DMA Addr PA1 (0x2000) │ : │ Length 4KB (0x1000) │ : │ Flags 有效 │ 链式 │ : │ Next 描述符2地址 │ : └─────────────────────────────┘ : 自动获取下一个描述符 t4: 传输第二个页面 : ┌─────────────────────────────┐ : │ PCIe TLP: 传输页1数据 │ : ├─────────────────────────────┤ : │ Type: MWr (内存写) │ : │ Addr: 0x2000 (IOVA) │ : │ Length: 4KB │ : │ Tag: 0x02 │ : │ Data: 页1内容 │ : └─────────────────────────────┘ : 第二个TLP包传输 ...: 继续后续页面传输 : 循环处理所有scatterlist条目 t5: 传输最后一个页面 : ┌─────────────────────────────┐ : │ DMA描述符读取 │ : ├─────────────────────────────┤ : │ DMA Addr PAn │ : │ Length 页n大小 │ : │ Flags 有效 │ 结束位 │ : │ Next NULL │ : └─────────────────────────────┘ : 最后一个描述符结束位被置位 section 完成阶段 t6: 全部传输完成 : ┌─────────────────────────────┐ : │ DMA状态更新 │ : ├─────────────────────────────┤ : │ 所有描述符完成 │ : │ 传输字节数累计完成 │ : │ 错误状态位清零 │ : │ 完成标志位置位 │ : └─────────────────────────────┘ : DMA引擎停止工作 t7: 触发中断 : ┌─────────────────────────────┐ : │ MSI/MSI-X中断产生 │ : ├─────────────────────────────┤ : │ 中断向量: 0x20 │ : │ 消息地址: 0xFEE00000 │ : │ 消息数据: 0x0001 │ : │ 优先级: 高 │ : └─────────────────────────────┘ : 向CPU发送完成中断信号描述符 0: [地址1, 长度1, 下一个]描述符 1: [地址2, 长度2, 下一个]描述符 2: [地址3, 长度3, 结束]· 设备按顺序处理描述符通过 IOMMU 进行地址转换设备请求 → IOMMU 转换 → 物理内存IOVA 页表 实际 RAMIOMMU 优势隔离性设备无法任意访问内存在 32 位系统上使用 64 位地址支持无需连续物理内存的 scatter-gather四、传输过程示例逐步说明设备到主机传输驱动准备· 分配接收缓冲区· 用缓冲区地址编程设备 DMA 寄存器· 启用 DMA 引擎设备动作· 生成 PCIe Memory Write TLP· 数据包包含目标地址和数据· 通过 PCIe 层级结构路由Root Complex 动作· 接受来自设备的 TLP· 需要时执行地址转换· 转发给内存控制器完成· 设备触发中断MSI/MSI-X· 驱动处理已完成的传输· 回收缓冲区以供下次传输使用五、同步机制完成机制· 轮询驱动检查状态寄存器· 中断MSI/MSI-X 用于低延迟通知· Completion Queues独立的ring用于完成状态高级特性· 描述符聚合批量处理多个描述符· Header/Data Splitting分离元数据和有效载荷· SR-IOV具有独立 DMA 引擎的 Virtual Functions同步注意事项缓存一致性DMA 方向 | 所需操作---------------------|-------------------DMA_TO_DEVICE | DMA 前刷新缓存DMA_FROM_DEVICE | DMA 后使缓存失效DMA_BIDIRECTIONAL | DMA 前刷新 DMA 后失效图片3. 内存屏障// 确保设备开始前 DMA 设置完成wmb(); // 写内存屏障device_registers-dma_start 1;六、错误处理PCIe 错误报告· Poisoned TLP 检测· Completer abort/timeout· ECRC 错误DMA 超时· 用于卡住传输的看门狗定时器· 设备复位序列七、示例网卡 RX 路径驱动预分配 RX 缓冲区将 DMA 地址提供给 NICNIC 接收数据包通过 DMA 写入下一个可用缓冲区NIC 更新描述符状态触发中断驱动处理数据包向 NIC 提供新缓冲区循环继续八、总结与扩展降低 CPU 负载 - CPU 仅设置传输不复制数据更高带宽 - 设备可饱和 PCIe 链路更低延迟 - 到内存的直接数据路径并行性 - 多个设备可同时进行 DMA· Peer-to-Peer DMA设备到设备的直接传输· CXL.mem具有缓存一致性的连贯 DMA· ATS设备管理的地址转换缓存这种架构实现了现代高性能 I/OGPU、NVMe SSD 和 NIC 都利用 DMA 来达到最大吞吐量。谢谢关注后续会持续分享关于AI,GPU,Linux开发,操作系统图形学高性能计算芯片行业讯息。欢迎感兴趣的伙伴关注微信公众号参与讨论沟通:请关注公众号获取完整系统资料*********************请关注微信公众号:颇锐克科技共享*********************