rdma

linux install RDMA IB netcard

安装RDMAIB网卡驱动指令sudoapt-getinstallbuild-essentiallibelf-devcmakesudoapt-getinstalllibibverbs1libibverbs-devlibrdmacm1librdmacm-devrdmacm-utilsibverbs-utilssudomodprobeib_coresudomodproberdma_ucm无IB网卡的机器
richer_live·2025-07-22 09:32

配置InfiniBand (IB) 和 RDMA over Converged Ethernet (RoCE) 网络

配置InfiniBand(IB)和RDMAoverConvergedEthernet(RoCE)网络服务器端配置在服务器端，你需要确保安装了必要的驱动程序和软件包，并且正确配置了网络接口。安装OFED首先，安装OpenFabricsEnterpriseDistribution(OFED)，它包含了InfiniBand所需的驱动程序和库。sudoapt-getupdatesudoapt-getins
Funhpc_huachen·2025-07-22 09:27

网络大提速，RDMA，IB，iWrap

本章第一节介绍的存储设备方面的创新解决了CPU访问存储设备的性能问题。但在实际的业务当中，数据的传输除了在节点内部的CPU与存储设备间外，节点之间也存在数据传输的需求。本节我们就介绍在网络传输方面是如何提速的。在介绍新的网络技术之前，我们看看传统网络是如何传输数据的，比如我们常见的以太网。当节点0向节点1发送数据时，其整个数据处理的流程如下图所示，可以看到其过程还是比较复杂的。在节点0，应用程序首
数据存储张·2025-07-22 08:54

大规模图计算引擎的分区与通信优化：负载均衡与网络延迟的解决方案

目录一、系统架构设计与核心流程1.1原创架构图解析1.2双流程对比分析二、分区策略优化实践2.1动态权重分区算法实现（Python）三、通信优化机制实现3.1基于RDMA的通信层实现（TypeScript
LCG元·2025-07-20 05:29

GPU网络运维

多节点数据同步”（如all-reduce、broadcast）的高频、大流量需求，主流技术方案及特点如下：网络技术核心优势适用场景运维重点InfiniBand低延迟（~1us）、高带宽（400Gb/s）、原生RDMA
一行代码通万物·2025-07-19 19:07

CentOS企业级文件服务器终极部署指南

方案对比与选择指南（企业级评估）技术方案详细对比表方案协议版本典型应用场景核心优势主要局限性NFSNFSv3/NFSv4.2高性能计算(HPC)、容器持久化存储、AI训练数据集共享内核级支持、RDMA协议支持
·2025-07-01 19:01

RDMA简介8之AXI 总线协议分析1

AXI总线是一种高速片内互连总线，其定义于由ARM公司推出的AMBA协议中，主要用于高性能、高带宽、低延迟、易集成的片内互连需求。AXI4总线是第四代AXI总线，其定义了三种总线接口，分别为：AXI4、AXI4-Lite和AXI4-Stream接口。其中AXI4也称为AXI4-Full是一种基于地址的高性能传输接口，其支持乱序传输、突发传输等传输方式，同时通过独立的地址总线，实现高性能的数据地址映
tiantianuser·2025-06-29 12:55

InfiniBand架构规范第一卷：深入解析高性能计算的未来

本资源提供InfiniBand架构规范第一卷1.4版本，深入解析RDMA和RoCE核心协议，助您掌握高速网络通信的精髓。无论是高性能计算还是数据中心领域，这份文档都是您不可或缺的指南。
明祯跃·2025-06-28 09:09

DAOS的组网（二层无损网络搭建）

基于盛科E交换机搭建rdma网络配置（不同的交换机的配置操作不一样）一、交换机端配置：1、PFC配置（基于优先级的流量控制机制）配置qos类型的class-mappfc，进行流量分类，匹配dscpcs3
Flying Fish（HHH）·2025-06-28 04:39

DPDK（mtcp）vs RDMA/ROCE

52investing.com/1.简书.DPDK：http://www.jianshu.com/p/dcb6ccc83ea52.mTCP和DPDK构造百万千万并发TCP连接3.基于SoftRoCE了解RDMA4
weixin_34396103·2025-06-27 14:39

什么是RoCE网络技术

RoCE网络技术：高性能计算的网络互联方案一、RoCE的定义与核心定位RoCE（RDMAoverConvergedEthernet）是一种基于以太网的远程直接内存访问（RDMA）技术，旨在通过标准以太网基础设施实现低延迟
·2025-06-24 23:13

虚拟 RDMA 设备驱动实现（一）：环境配置与Linux内核模块初探

1.1什么是RDMA？为什么需要它？RDMA(RemoteDirectMe
·2025-06-08 02:28

RDMA简介1之RDMA开发必要性

为了满足大批量数据的采集、存储与传输需求，越来越多的数据密集型应用如机器学习、雷达、金融风控、航空航天等选择使用现场可编程逻辑门阵列作为数据采集前端硬件来实现高性能的数据采集系统。FPGA凭借其高灵活性、高并行能力及可高度定制化的特点，能够在各种应用场景下实现高带宽的数据采集、存储及传输。然而FPGA并不擅长进行数据存储工作，仅在内部集成少量片上存储。目前常见的解决方法是使用双倍速率存储器来满足高
tiantianuser·2025-06-05 14:13

RDMA简介2之技术优势分析

随着数据中心对于网络带宽和延迟的要求日益增长，传统的TCP/IP网络已无法满足性能要求，RDMA网络则凭借其高带宽、低延时的特性脱颖而出。
tiantianuser·2025-06-05 13:38

GaussDB高性能之道：从架构设计到实战优化

华为云GaussDB通过分布式并行架构、智能资源调度与深度引擎优化，实现了每秒百万级事务处理（100万TPS）、毫秒级响应（OLAP查询延迟10万）+RDMA网络；网络配置：25Gbps网卡+无损以太网
喜酱的探春·2025-06-01 02:12

InfiniBand 架构规范第一卷

本资源提供InfiniBand架构规范第一卷1.4版本，深入解析RDMA和RoCE核心协议，助您掌握高速网络通信的精髓。无论是高性能计算还是数据中心领域，这份文档都是您不可或缺的指南。
岑婵泉Polly·2025-05-24 11:21

RDMA核心组件 的总结表格

以下是关于RDMA核心组件的总结表格，涵盖WQE、WQ、QP、CQ等核心概念：概念组成与作用关键操作关联组件关键特性WQE工作队列元素，包含：-任务类型（SEND/WRITE/READ等）-数据地址、长度
若风的雨·2025-05-13 05:21

RDMA-Using the QP states

ResetstateQP可以通过两种方式获得Reset:1：通过创建它2：通过调用ibv_modify_qp()将其从任何其他状态移动到Reset状态在创建QP时，需要花费一些时间来创建它(有上下文切换、为工作队列缓冲区分配内存、QP编号分配等)。如果需要在快速路径中使用新的QP，较好的替代方法如下:CreateaQPUsetheQP(modifytoRTSandsend/receivedata)
酸菜。·2025-05-11 17:25

【RDMA项目】如何使用rdma-core进行调用开发一个实战项目

RDMA(RemoteDirectMemoryAccess)是一种网络协议，可以在计算节点之间实现高效的内存数据传输，而无需CPU的干预。
qq_904477151·2025-05-11 17:55

Meta 推出 24k GPU AI 基础设施设计

Llama3集群使用融合以太网上的远程直接内存访问(RDMA)(罗CE)而另一个则使用NVIDIA的量子2InfiniBand.存储层基于M
普通的一个普通猿·2025-05-08 09:17

RDMA协议原理与零拷贝高吞吐网络通信实践

1.RDMA协议原理1.1RDMA基本概念RDMA（RemoteDirectMemoryAccess）即远程直接内存访问，是一种允许网络中的计算机直接从另一台计算机的内存中读取或写入数据的技术，而无需经过
学习ing1·2025-05-08 04:16

高性能网络编程新里程：RDMA Tutorial

高性能网络编程新里程：RDMATutorial项目地址:https://gitcode.com/gh_mirrors/rd/RDMA-Tutorial教程是由开发者jcxue创建的一个开源项目，它旨在帮助程序员和系统管理员深入理解并掌握使用
柳旖岭·2025-05-08 04:16

RDMA高性能网络通信实践

RDMA高性能网络通信实践一、背景介绍二、方法设计A.实现方案B.关键技术点三、代码及注释四、注意事项一、背景介绍远程直接内存访问（RDMA）技术通过绕过操作系统内核和CPU直接访问远程内存，实现了超低延迟
Hi20240217·2025-05-08 04:15

【rdam data flow疑惑小结】

rdamdataflow1.bth.psn作用2.tx_psn_manager在rdma中的一个流程：3rq_doorbell机制是什么？以及如何产生的？
中古传奇·2025-04-20 09:25

【rdma通信名词概念】

rdma通信名词概念1.在rdma网卡中，QP(SQ和RQ)、CQ、EQ和SQR的含义是什么以及功能是什么？2PCIe中的MSI-X中断机制？
中古传奇·2025-04-20 09:25

CentOS 7下CX5-RDMA网络测试

RDMA(RemoteDirectMemoryAccess)全称远程直接数据存取，就是为了解决网络传输中服务器端数据处理的延迟而产生的。
robin5911·2025-04-16 23:26

InfiniBand包头与ibverbs接口实现（一）—— RDMA WRITE分析

InfiniBand是一种高性能网络技术，其数据包格式设计对实现高效可靠的网络传输至关重要。本文将详细介绍InfiniBand数据包的头部结构，分析它们在实际应用中的作用和实现机制。并且我们会讨论可靠连接(RC)服务类型下的传输头格式，以及RDMAWRITE等典型操作场景，以及它们在ibverbs接口中的对应关系。TableofContents:两类包头格式RoutingHeaders2.1.源码
·2025-04-14 20:16

RDMA相关

1.spec:InfiniBandTMArchitectureSpecificationVolume1必须先看这个，理解一些基础的概念2.linux库:librdmacm,libibverbs.这两个库源码里都有相应的sample.https://github.com/ofiwg/librdmacm
v2nero·2025-04-11 07:05

RDMA介绍

RDMA全称是RemoteDirectMemoryAccess，即远程直接内存访问，是一种高性能网络通信技术，可以使计算机直接访问远端计算机的内存，而无需在本地和远程计算机之间进行数据复制。
aolitianya·2025-04-11 07:03

在Kubernetes上使用RDMA

常见的RDMA实现有三种，基于以太网的Roce网
weixin_34253539·2025-04-07 23:24

2024年分布式存储技术趋势：高性能、灵活架构与广泛应用

利用NVMeSSD和RDMA技术，这种架构彻底改变了存储性能和效率的游戏规则。与传统机械硬盘相比，
蓝讯小刘·2025-04-03 03:48

深入解析RDMA：从原理到C++实践

通信中，数据需经过多次内存拷贝（用户空间→内核空间→网卡）和协议栈处理，导致：高延迟：小消息处理延迟可达数十微秒27高CPU开销：协议处理占CPU资源超30%3带宽浪费：冗余数据拷贝消耗内存带宽61.2RDMA
这个懒人·2025-03-25 03:30

RDMA通信协议中rdma_resolve_addr函数的实现与应用

在RDMA（远程直接内存访问）通信中，rdma_resolve_addr函数是一个关键的API，用于将目标IP地址解析为RDMA地址，从而建立RDMA连接。
109702008·2025-03-23 07:29

【以太网RDMA网卡（DPU）技术--背景】

以太网RDMA网卡（DPU）技术--背景1背景1.1RDMA通信原语1.2RDMA_writedemo【博客首发于微信公众号《漫谈芯片与编程》，欢迎专注一下，多谢大家】RDMA（RemoteDirectMemoryAccess
中古传奇·2025-03-23 06:43

技术干货：如何选择最适合自己的RDMA网卡

近些年来，RDMA网卡的技术应用在全球以太网通讯市场上刮起一股旋风，特别是阿里、腾讯、浪潮、超微、联想等一些互联网巨头企业在服务器上大量部署RDMA网卡。
深圳联瑞电子LRLINK·2025-03-23 06:12

【以太网RDMA网卡功能分析和网卡架构】

2以太网RDMA网卡功能分析和网卡架构【博客首发于微信公众号《漫谈芯片与编程》，欢迎专注一下，多谢大家】标准以太网卡只具备物理层串并转换、数据链路层以太网帧头封装和解析、DMA等功能，无法支持RDMA的通信原语和传输方式等
中古传奇·2025-03-23 06:41

数据库管理-第303期 数据库相关硬件文章汇总（20250319）

数据库管理303期2025-03-19数据库管理-第303期数据库相关硬件文章汇总（20250319）1CPU&内存2SSD3RDMA4存储5CXL6硬件采购7数据库一体机总结数据库管理-第303期数据库相关硬件文章汇总
胖头鱼的鱼缸（尹海文）·2025-03-20 05:53

程序员必看！DeepSeek全栈开发指南：从代码生成到分布式训练的黑科技解析

该库支持FP8精度与NVLink/RDMA技术，吞吐量提升3倍以上，特别适合处理千亿级参数的分布式任务。
AI创享派·2025-03-16 06:00

【弹性计算】弹性裸金属服务器和神龙虚拟化（二）：适用场景

弹性裸金属服务器和神龙虚拟化（二）：适用场景1.混合云和第三方虚拟化软件部署2.高隔离容器部署3.高质量计算服务4.高速低时延RDMA网络支持场景5.RISCCPU支持6.GPU性能无损输出公共云服务提供商推出弹性裸金属服务器
G皮T·2025-03-02 14:20

实现一个 RDMA 用户态驱动程序

写在前面随着DeepSeek的火爆，当众人将目光集中到模型优化时，底层网络通信基础设施的重要性往往容易被忽略。实际上，高性能、易维护、易定制的网络基础设施对于提升AI训练、推理的效率是至关重要的一环。目前，主流的高性能网络通信方案基本被几家头部公司垄断，其提供的标准API接口也已经被精心封装，绝大多数开发者无需关心底层实现细节。达坦科技始终致力于国产高性能网络基础设施解决方案的研发，深知网络通信基
·2025-02-28 11:17

DeepSeek开源周第二弹：DeepEP如何用RDMA+FP8让MoE模型飞起来？

DeepSeek推出的DeepEP作为首个开源EP通信库，通过软硬件协同优化，将节点内通信带宽压榨至158GB/s（接近NVLink极限），跨节点RDMA延迟降至46GB/s，成为大模型训练/推
曦紫沐·2025-02-28 04:03

DeepSeek开源周合集

周一：FlashMLA，核心成就：GPU带宽利用接近理论极限，算力利用效率翻倍；周二：DeepEP，一个高效的MOE架构专家并行通信库：支持高效且优化后的全对全通信使用NVlink和RDMA进行节点内和节点间通信用于训练和推理填充的高吞吐量内核用于推理解码的低延迟内核原生支持
Vip.Gong·2025-02-27 14:03

RDMA原理

RDMA（远程直接内存访问）技术通过绕过操作系统内核和CPU干预，实现高效的低延迟数据传输。
完颜振江·2025-02-26 14:01

Linux下RDMA驱动程序探索系列-2

本系列文章将带领读者逐步了解Linux操作系统下的RDMA子系统。
·2025-02-23 16:35

DeepSeek的架构设计

DeepSeek的架构设计一、基础架构层1.超大规模算力集群跨地域异构计算:南京/临港等多地超算中心构建混合集群，10万+GPU卡规模（含H100/A100等），通过自研RDMA网络实现μs级延迟能效优化
程序猿000001号·2025-02-22 06:24

RDMA ibverbs_API功能说明

设备管理获取当前活动网卡返回当前rdma设备列表structibv_device**ibv_get_device_list(int*num_devices);//使用structibv_device**
小湿哥·2025-02-21 00:46

GPU通信革命：跨平面网络效率提升300%的秘密武器

「无需CPU中转，多平面网络RDMA通信时延降低50%」——Deepseek专利CN118612157A一、技术解析：突破AI算力瓶颈的底层创新1.技术背景：终结多平面网络CPU中转困境传统多平面网络中
CodePatentMaster·2025-02-19 22:27

InfiniBand包头与ibverbs接口实现（一）—— RDMA WRITE分析

InfiniBand是一种高性能网络技术，其数据包格式设计对实现高效可靠的网络传输至关重要。本文将详细介绍InfiniBand数据包的头部结构，分析它们在实际应用中的作用和实现机制。并且我们会讨论可靠连接(RC)服务类型下的传输头格式，以及RDMAWRITE等典型操作场景，以及它们在ibverbs接口中的对应关系。TableofContents:两类包头格式RoutingHeaders2.1.源码
·2025-02-19 15:08

算力机房选择RoCE还是InfiniBand（IB）

RDMA能直接通过网络接口访问内存数据，无需操作系统内核的介入。这允许高吞吐、低延迟的网络通信，尤其适合在大规模并行计算机集群中使用。RDMA技术有
helpme流水·2025-02-10 03:52

RDMA技术详解（一）：RDMA概述

DMA和RDMA概念1.1DMADMA(直接内存访问)是一种能力，允许在计算机主板上的设备直接把数据发送到内存中去，数据搬运不需要CPU的参与。
云越泽·2025-02-08 09:15
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他