Exalogic 物理连线

Posted 2021-01-21 missyou-shiyh

以上图表为Exalogic 1/8配中的思科交换机连线，而1/4配、半配、满配的内置思科交换机连线基本上与以上图表一致。下面对该图表进行简要说明：

(1).每台计算节点，只需要从net0上连接一根线到内置的思科交换机上，这根线是net0管理网和ILOM管理网共用，也即Sideband Management模式，而默认情况下，net0管理网和ILOM管理网是Out-of-Band Management模式，像Exadata中的net0管理网和ILOM管理网就是Out-of-Band Management模式。（Exalogic中除了计算节点，存储机头也是Sideband Management模式。）

(2).Exalogic中的PDU不像Exadata一样单独连接客户的管理交换机，而是直接连线到内置的思科交换机上。

(3).每台IB gateway上从net0上连接一根线到内置的思科交换机上。

(4).每台存储机头，都会从net0、net1和net2各连接一根线到内置的思科交换机上。两个机头，则连接6根线到思科交换机。但这仅仅是默认配置，根据官方文档中的介绍，默认情况下，net0和net1这两个网口会保留作为管理网口使用。具体如图所示。

示例：

el01sn01:configuration net interfaces> show Interfaces:   INTERFACE STATE CLASS LINKS ADDRS LABEL ipmp1 up ipmp pffff_ibp1 192.168.10.57/22 IB_Interface pffff_ibp0 ipmp2 up ipmp ixgbe3 10.80.25.238/24 dl-repl-interface ixgbe2 ixgbe0 up ip ixgbe0 10.80.21.232/26 ixgbe0 ixgbe2 up ip ixgbe2 0.0.0.0/8 repl-1-interface ixgbe3 up ip ixgbe3 0.0.0.0/8 repl-2-interface pffff_ibp0 up ip pffff_ibp0 0.0.0.0/8 ibp0 pffff_ibp1 up ip pffff_ibp1 0.0.0.0/8 ibp1

Net0，也即ixgbe0这个网口配置了管理IP地址，用于日常的运维管理使用，而ixgbe1这个网口未配置IP信息。Ixgbe2和ixgbe3这两个网口做成了聚合，聚合成ipmp2，用于容灾网络。Ibp0和ibp1这两个IB口同时做了聚合，聚合成ipmp1，用于Exalogic内部IB网络的数据传输，计算节点NFS访问存储就走的这个IB网络。

 

如上图表为Exalogic 1/8配中IB gateway交换机的连线方式，这比较容易理解，Exalogic中的每个物理组件，为了IB网络的冗余高可用性，所以每个组件都会分别连接到两台不同的IB交换机上。例如计算节点U5，它的IB卡的P1端口会连接到U16这个IB交换机，而P2端口会连接到U23这个IB交换机上。

同时需要注意，两台IB交换机之间互联了6根IB线。