首页 > TAG信息列表 > rdma

数据中心网络

我们所有的手机、电脑、超算本质上都在处理三件事:计算、存储和通信。 计算:CPU——GPU——NPU,集中式——分布式 存储:机械硬盘——固态硬盘 通信:网线——光纤,电交换——光交换,TCP/IP——RDMA 网线——光纤 速度:光在二氧化硅中的传播速度:2亿米/秒,非直线传输;电在铜线中的传播速度:2.3

CIPU 向下接入物理的计算--很多技术是你不信却马上改变你生活

CIPU 向下接入物理的计算、存储、网络资源,快速云化并进行硬件加速;向上接入飞天云操作系统,管控阿里云全球上百万台服务器,让算力虚拟化损耗降到 0,并通过规模化应用 RDMA 网络技术,让访问云端比访问本地硬盘更快。

从DPU开始到RDMA到CUDA

从DPU开始到RDMA到CUDA DPU是Data Processing Unit的简称,它是最新发展起来的专用处理器的一个大类,是继CPU、GPU之后,数据中心场景中的第三颗重要的算力芯片,为高带宽、低延迟、数据密集的计算场景提供计算引擎。 DPU将作为CPU的卸载引擎,释放CPU的算力到上层应用。以网络协议处理为

Remote Direct Memory Access(RDMA)¶

RDMA简介¶ 远程直接内存访问Remote Direct Memory Access(RDMA)是一种允许网络中计算机在主内存中交换数据而无需经过每个计算机的处理器、缓存或操作系统。类似本地的直接内存访问(Direct Memory Access, DMA),RDMA提升了网络带宽和性能,因为它释放了资源。RDMA也加速了数据传输率

初识RDMA技术——RDMA概念,特点,协议,通信流程

1. RDMA概念 在DMA技术中,外部设备(PCIe设备)能够绕过CPU直接访问主机的系统主存; RDMA(Remote Direct Memory Access)在概念上是相对于DMA而言的。指外部设备能够绕过CPU,不仅可以访问本地主机的主存,它还可以访问另一台远端主机上用户态的系统主存。 2. RMDA与Socket Socket通信示

浅谈 RDMA 与无损网络

为什么需要 RDMA 当今是云计算、大数据的时代,企业业务持续增长需要存储系统的 IO 性能也持续增长。传统的 TCP/IP 技术在数据包处理过程中,要经过操作系统及其他软件层,数据在系统内存、处理器缓存和网络控制器缓存之间来回进行复制,给服务器的 CPU 和内存造成了沉重负担。尤其是网络

2021云栖大会丨阿里云发布第四代神龙架构,提供业界首个大规模弹性RDMA加速能力

​简介: 10月20日,2021年杭州栖大云会上,阿里云发布第四代神龙架构,升级至全新的eRMDA网络架构,是业界首个大规模弹性RDMA加速能力。 10月20日,2021年杭州栖大云会上,阿里云发布第四代神龙架构。相比上一代,第四代神龙架构基础性能全面提升,存储IOPS提升300%、网络PPS提升100%、网络延迟降

阿里云发布第四代神龙架构云计算首次进入5微秒时延时代

10月20日,2021云栖大会上,阿里云宣布推出第四代神龙架构,这是飞天云操作系统新一代虚拟化技术,首次搭载全球唯一的大规模弹性RDMA加速网络,网络延迟整体降低80%以上。神龙4.0带来的计算架构革新,将云计算首次带进5微秒时延时代。 相比传统TCP协议,RDMA能大幅降低网络通信延迟。阿里云

RDMA 学习资源[WIP]

文档说明 IB Specification 用户手册 RDMA Aware Networks Programming User Manual

NCCL常用环境变量

Table 1. Knobs available for modification in NCCL Environment Variable Description Values Accepted NCCL_SHM_DISABLE The NCCL_SHM_DISABLE variable disables the Shared Memory (SHM) transports. SHM is used between devices when peer-to-peer

新品预售:基于英特尔800系列的25G光纤网卡即将重磅来袭

        9月28日,LR-LINK联瑞对外发出声明推出基于英特尔800系列的25G光纤网卡(品牌型号:LRES1021PF-2SFP28),此款网卡最大的性能特点是支持RDMA功能和应用程序设备队列ADQ。        在数据中心和云计算领域,25G以太网凭借高性能带宽和低成本等优势正迅速成为下一代数据中心主

CNA, FCoE, TOE, RDMA, iWARP, iSCSI等概念及 Chelsio T5 产品介绍

https://www.cnblogs.com/zafu/p/10557800.html   2016年09月01日   鉴于研究所的需求,最近开始研究Chelsio T5(终结者5),本篇博文对相关技术的基础概念做了罗列,并给了一些扩展学习链接。后续自己将针对RDMA技术做进一步学习和研究! 核心基础概念 FCoE:以太网光纤通道 (Fibre Chan

【RDMA】14. RDMA之Memory Window

原文:14. RDMA之Memory Window - 知乎 本文是“RDMA杂谈”专栏文章的第14篇,欢迎转载,转载请注明出处。 我们在Memory Region一文中介绍过Memory Region,它是一片由用户注册的特殊的内存区域:一方面其中的内容不会被换页到硬盘中,另一方面RDMA网卡中记录了它的地址转换关系,使得硬件拿

深入浅出全面解析RDMA

https://blog.csdn.net/qq_21125183/article/details/80563463       RDMA(RemoteDirect Memory Access)技术全称远程直接内存访问,就是为了解决网络传输中客户端与服务器端数据处理的延迟而产生的。它将数据直接从一台计算机的内存传输到另一台计算机,无需双方操作系统的介入

[RoCE]RDMA over Converged Ethernet模式以及配置

https://www.cnblogs.com/burningTheStar/p/8565612.html   [阅读本文之前需要现有RDMA的基础知识] 1.RDMA over Converged Ethernet(RoCE) Remote Direct Memory Access(RDMA)是一种远程内存管理能力,允许不同服务器上应用的内存之间直接移动数据,不需要CPU的干预。RoCE是一种机

Design and Evaluation of an RDMA-aware Data Shuffling Operator for Parallel Database Systems

https://dl.acm.org/doi/fullHtml/10.1145/3360900   FEILONG LIU, LINGYAN YIN, and SPYROS BLANAS, The Ohio State University, USA   ACM Trans. Database Syst., Vol. 44, No. 4, Article 17, Publication date: December 2019.DOI: https://doi.org/10.1145/33

14. RDMA之Memory Window

https://zhuanlan.zhihu.com/p/353590347   我们在Memory Region一文中介绍过Memory Region,它是一片由用户注册的特殊的内存区域:一方面其中的内容不会被换页到硬盘中,另一方面RDMA网卡中记录了它的地址转换关系,使得硬件拿到用户指定在WR中的虚拟地址之后找到对应的物理地址。 本文

10. RDMA之Completion Queue

https://zhuanlan.zhihu.com/p/259650980   知乎对Markdown的支持不太完整,这篇文章又比较长,所以格式上看起来可能有一点乱,还请包涵。本文欢迎转载,转载请注明出处。 我们曾经在前面的文章中简单介绍过CQ,本文将更深入的讲解关于它的一些细节。阅读本文前,读者可以先温习一下这篇文

6. RDMA之Memory Region

https://zhuanlan.zhihu.com/p/156975042   我们假设一种场景,同时也顺便温习一下RDMA WRITE操作的流程: 如下图所示,A节点想要通过IB协议向B节点的内存中写入一段数据,上层应用给本节点的RDMA网卡下发了一个WQE,WQE中包含了源内存地址、目的内存地址、数据长度和秘钥等信息,然后硬件

1. RDMA概述

https://zhuanlan.zhihu.com/p/138874738   本想完全靠自己的语言完成这篇概述,然而开篇并没有想象当中的好写,看样子从宏观上概括一个技术比从微观上探究细枝末节要困难不少。本文是以前人们对RDMA技术的介绍为主,加入了一些自己的理解。随着本专栏内容的增加,本篇概述也会更新和逐

深入浅出全面解析RDMA

https://blog.csdn.net/qq_21125183/article/details/80563463       RDMA(RemoteDirect Memory Access)技术全称远程直接内存访问,就是为了解决网络传输中客户端与服务器端数据处理的延迟而产生的。它将数据直接从一台计算机的内存传输到另一台计算机,无需双方操作系统的介入。

智能无损网络越来越流行了,可以让RDMA直接运行在普通的以太网络上

https://zhuanlan.zhihu.com/p/337941124   发布于 2020-12-18   2016年人机围棋大战,Alpha Go的胜利向全世界强势宣告,AI时代来临了。 AI正在以前所未有的速度改变人们的生活。清晨,自动驾驶的汽车载着你出门,开启安全舒适的一天;路途中,智慧交通系统根据实时路况,智能地疏导交通;到达

RoCE与iWARP的竞争分析

https://zhuanlan.zhihu.com/p/374068044   远程直接内存访问(RDMA)提供从一台计算机的内存到另一台计算机的内存的直接访问,而不涉及任何一台计算机的操作系统。这项技术可以实现高吞吐量、低延迟的网络,同时降低CPU利用率,这在大规模并行计算集群中尤其有用。 RDMA over Converged E

RDMA打造存储利器

导读 在数据不断增长的时代,数据的快速处理对信息的有效利用至关重要。目前数据中心无论对存储读写带宽还是延迟都有极致的要求,例如在线搜索、移动、游戏,视频直播领域都需要以非常快的速度响应用户的请求,数据中心内任何一环导致延迟,都会对用户体验产生极大的影响。 在高性能计算领域

【面试】秋招|百度系统部offer call,附面经(云计算、数据中心网络、RDMA相关)

作者:StarryVae 链接:https://www.nowcoder.com/discuss/218705 来源:牛客网   牛客很少关于数据中心网络、RDMA相关面经,特此记录! 百度智能云计算部 一面: 介绍一下自己的经历RDMA做了什么?dpdk?openstack项目做了什么?openstack的网络组件之间的关系?ovs了解吗?介绍一下做的东西?跟neutr