网络要求和建议
网络要求
- 节点上的所有网络接口必须连接到不同的子网。网络接口可以是 VLAN 标记的逻辑接口、未标记的绑定或以太网链路。
- 用于内部流量的网络可能是不可路由的,带宽至少为 10 Gbit/s。
- 节点由其 IP 地址(不是 FQDN)添加到簇。更改簇中节点的 IP 地址将从簇中删除该节点。如果计划在集群中使用 DHCP,则确保 IP 地址绑定到节点的网络接口的 MAC 地址。
- 每个节点必须有 Internet 访问,以便安装更新。
- 需要网络时间同步 以获得正确的统计数据。默认情况下,使用
chronyd服务启用它。如果想要使用ntpdate或ntpd,则首先停止和禁用chronyd。
网络硬件的建议
- 网络延迟会大大降低簇性能。使用具有低延迟链路的高质量网络设备。不要使用消费级网络交换机。
- 不要使用桌面网络适配器,比如 Intel EXPI9301CTBLK 或 Realtek 8129,因为它们不是针对高负载而设计的,而且可能不支持全双工链路。还使用非阻塞的以太网交换机。
- 当前支持的光纤通道主机总线适配器 (HBA) 是 QLogic QLE2562-CK 和 QLogic ISP2532。
- 建议使用 Mellanox ConnectX-4 和 ConnectX-5 InfiniBand 适配器。Mellanox ConnectX-2 和 ConnectX-3 卡不受支持。
-
如果在节点上使用 Mellanox 适配器和 AMD Epyc Rome CPU,则确保在 BIOS 中启用了 SR-IOV。否则,这可能导致数据丢失。有关详细信息,请参阅知识库:https://kb.acronis.com/content/64948。
- 不建议使用 BNX2X 驱动程序的适配器,例如 Broadcom Limited BCM57840 NetXtreme II 10/20-Gigabit Ethernet/HPE FlexFabric 10Gb 2-port 536FLB Adapter。它们会将 MTU 限制为 3616,这会影响簇性能。
网络安全的建议
- 为内部和公共流量使用单独的网络(尽管是可选的,但最好是单独的网络适配器)。这样做将阻止公共流量影响集群 I/O 性能,还会阻止可能来自外部的拒绝服务供给。
- 要避免入侵,Acronis Cyber Infrastructure 应位于不可从外部访问的专用内部网络上。
- 即使群集节点已配置了必要的
iptables规则,我们还是建议对不受信任的公共网络(例如 Internet)使用外部防火墙。
网络性能的建议
- 节点上有两个 HDD ,每个使用一个 1 Gbit/s 链路(上入)。对于节点上的一个或两个 HDD,仍建议将两个绑定网络接口用于高网络可用性。此建议的原因是,1 Gbit/s 以太网网络可以提供 110-120 MB/s 的吞吐量,这接近于单个磁盘的序列 I/O 性能。因为服务器上的多个磁盘比单个 1 Gbit/s 以太网链路提供更高的吞吐量,因此网络可能成为一个瓶颈。
- 要获得最高的顺序 I/O 性能,请每个硬盘使用一个 1Gbit/s 链路,或每个节点一个 10Gbit/s 链路。即使 I/O 操作在实际场景中经常是随机的,但顺序 I/O 在备份场景中很重要。
- 要获得最高的整体性能,请每个节点使用一个 10 Gbit/s 链路(或者两个绑定用于高网络可用性)。
- 不建议配置 1 Gbit/s 网络适配器来使用非默认的 MTU(例如 9000 字节的巨型帧)。此类设置需要其他交换机配置,并经常导致人为错误。另一方面,需要配置 10+ Gbit/s 网络适配器,以使用巨型帧来实现全部性能。您将需要在网络中的每个路由器和交换机上,以及在每个节点的网卡、绑定或 VLAN 上配置相同的 MTU 值(请参阅您的网络设备手册)。默认情况下,MTU 值设置为 1500。
用于客户端的网络建议
下表列出了客户端可以使用指定的网络接口获得的最大网络性能。对客户端的建议是在任意两个集群节点之间使用 10Gbps 网络硬件,以及最大程度地减少网络延迟,尤其是在使用 SSD 磁盘的情况下。
| 存储网络接口 | 节点最大性能I/O | VM 最大性能I/O(复制) | VM 最大性能I/O(擦除编码) |
|---|---|---|---|
| 1 Gbps | 100 MB/s | 100 MB/s | 70 MB/s |
| 2 x 1 Gbps | ~175 MB/s | 100 MB/s | ~130 MB/s |
| 3 x 1 Gbps | ~250 MB/s | 100 MB/s | ~180 MB/s |
| 10 Gbps | 1 GB/s | 1 GB/s | 700 MB/s |
| 2 x 10 Gbps | 1.75 GB/s | 1 GB/s | 1.3 GB/s |