RoCE网络IP分发

RDMA的概念

RDMA的内核旁路机制，允许应用与网卡之间的直接数据读写，将服务器内的数据传输时延降低到1us以下。
RDMA的内存零拷贝机制，允许接收端直接从发送端的内存读取数据，极大的减少了CPU的负担，提升CPU的效率。

RDMA 的网络协议

1. InfiniBand(IB): 从一开始就支持RDMA的新一代网络协议。由于这是一种新的网络技术，因此需要支持该技术的IB网卡和IB交换机。
2. RDMA过融合以太网(RoCE): 即RDMA over Ethernet, 允许通过以太网执行RDMA的网络协议。这允许在标准以太网基础架构(交换机)上使用RDMA，只不过网卡必须是支持RoCE的特殊的NIC。
3. 互联网广域RDMA协议(iWARP): 即RDMA over TCP, 允许通过TCP执行RDMA的网络协议。这允许在标准以太网基础架构(交换机)上使用RDMA，只不过网卡要求是支持iWARP(如果使用CPU offload的话)的NIC。否则，所有iWARP栈都可以在软件中实现，但是失去了大部分的RDMA性能优势。

RoCE网络 IP的分发方式

1. 基础网络给每台交换机分配26位网段，NOC定时抓取获取交换机VLAN20记录的网段信息通过接口提供给EPC服务端。
2. 服务器上架后系统部确认RoCE网卡状态无异常后，抓取ROCE网卡收到的LLDP报文，将服务器上联的8台ROCE交换机主机名、端口号、400G网卡MAC地址推送给EPC服务端。
3. EPC服务端在控制台装机时根据交换机主机名匹配网段信息，对服务器的每张网卡分配IP并传递网关掩码信息，同时将以上信息与服务器SN关联记录在metadata中。
4. RoCE网络通过白名单形式开放，加白后控制台可以选择开启/关闭RoCE选择不同的库存服务器进行创建实例。
5. 创建完成后控制台实例详情页可以查看该实例网卡所分配的IP、网关、掩码信息。