Странности с маршрутизацией W2k12 R2 - решено

[alibek]

Столкнулся с непонятным поведением.

 

Есть сервер под управлением Windows Server 2012 R2.

На сервере есть 2 карточки 10G и две карточки 1G.

Одна 10G нарезана на сабинтерфейсы (интернет и закрытая сеть с IP-камерами), вторая не используется.

Обе 1G подключены в СХД, в iSCSI-порты.

 

Конфигурация:

>ipconfig /all

Windows IP Configuration

  Host Name . . . . . . . . . . . . : SRV01
  Primary Dns Suffix  . . . . . . . : private-site.LOCAL
  Node Type . . . . . . . . . . . . : Hybrid
  IP Routing Enabled. . . . . . . . : No
  WINS Proxy Enabled. . . . . . . . : No
  DNS Suffix Search List. . . . . . : private-site.LOCAL
                                      live.private.ru
                                      direct

Ethernet adapter 10G1-SVC.IPCAMS:

  Connection-specific DNS Suffix  . : private-site.local
  Description . . . . . . . . . . . : Intel(R) 82599 10 Gigabit Dual Port Network Connection - VLAN : IPCAMS
  Physical Address. . . . . . . . . : 90-1B-0E-33-02-7F
  DHCP Enabled. . . . . . . . . . . : No
  Autoconfiguration Enabled . . . . : Yes
  IPv4 Address. . . . . . . . . . . : 10.102.0.40(Preferred)
  Subnet Mask . . . . . . . . . . . : 255.255.0.0
  IPv4 Address. . . . . . . . . . . : 10.102.0.41(Preferred)
  Subnet Mask . . . . . . . . . . . : 255.255.0.0
  Default Gateway . . . . . . . . . :
  DNS Servers . . . . . . . . . . . : 10.102.0.40
  NetBIOS over Tcpip. . . . . . . . : Enabled

Ethernet adapter 10G1-SVC.INET:

  Connection-specific DNS Suffix  . : live.private.ru
  Description . . . . . . . . . . . : Intel(R) 82599 10 Gigabit Dual Port Network Connection - VLAN : INET
  Physical Address. . . . . . . . . : 90-1B-0E-33-02-7F
  DHCP Enabled. . . . . . . . . . . : No
  Autoconfiguration Enabled . . . . : Yes
  IPv4 Address. . . . . . . . . . . : aa.aa.124.41(Preferred)
  Subnet Mask . . . . . . . . . . . : 255.255.255.128
  Default Gateway . . . . . . . . . : aa.aa.124.126
  DNS Servers . . . . . . . . . . . : aa.aa.124.1
                                      aa.aa.124.124
  NetBIOS over Tcpip. . . . . . . . : Enabled

Ethernet adapter 1G2-DIRECT:

  Connection-specific DNS Suffix  . : direct
  Description . . . . . . . . . . . : Intel(R) I350 Gigabit Network Connection #2
  Physical Address. . . . . . . . . : 70-E2-84-09-51-36
  DHCP Enabled. . . . . . . . . . . : No
  Autoconfiguration Enabled . . . . : Yes
  IPv4 Address. . . . . . . . . . . : 10.102.255.42(Preferred)
  Subnet Mask . . . . . . . . . . . : 255.255.255.0
  Default Gateway . . . . . . . . . :
  DNS Servers . . . . . . . . . . . : 10.102.255.40
  NetBIOS over Tcpip. . . . . . . . : Enabled

Ethernet adapter 1G1-DIRECT:

  Connection-specific DNS Suffix  . : direct
  Description . . . . . . . . . . . : Intel(R) I350 Gigabit Network Connection
  Physical Address. . . . . . . . . : 70-E2-84-09-51-37
  DHCP Enabled. . . . . . . . . . . : No
  Autoconfiguration Enabled . . . . : Yes
  IPv4 Address. . . . . . . . . . . : 10.102.255.40(Preferred)
  Subnet Mask . . . . . . . . . . . : 255.255.255.0
  IPv4 Address. . . . . . . . . . . : 10.102.255.41(Preferred)
  Subnet Mask . . . . . . . . . . . : 255.255.255.0
  Default Gateway . . . . . . . . . :
  DNS Servers . . . . . . . . . . . : 10.102.255.40
  NetBIOS over Tcpip. . . . . . . . : Enabled

 

Кроме того, статикой прописаны маршруты (прежне всего для того, чтобы проставлялся правильный адрес источника):

>route print
===========================================================================
Interface List
17...90 1b 0e 33 02 7f ......Intel(R) 82599 10 Gigabit Dual Port Network Connection - VLAN : IPCAMS
16...90 1b 0e 33 02 7f ......Intel(R) 82599 10 Gigabit Dual Port Network Connection - VLAN : INET
15...70 e2 84 09 51 36 ......Intel(R) I350 Gigabit Network Connection #2
12...70 e2 84 09 51 37 ......Intel(R) I350 Gigabit Network Connection
===========================================================================

IPv4 Route Table
===========================================================================
Active Routes:
...
===========================================================================
Persistent Routes:
 Network Address          Netmask  Gateway Address  Metric
  10.102.255.211  255.255.255.255    10.102.255.41       1
  10.102.255.212  255.255.255.255    10.102.255.42       1
        10.1.0.0      255.255.0.0     10.102.0.250       1
      10.202.0.0      255.255.0.0     10.102.0.250       1
    10.102.200.0    255.255.255.0     10.102.0.250       1
    10.102.201.0    255.255.255.0     10.102.0.250       1
         0.0.0.0          0.0.0.0    aa.aa.124.126  Default
===========================================================================

 

Есть двухголовая СХД (с двумя контроллерами), на каждом из контроллеров есть по два хост-интерфейса iSCSI.

Две серверные сетевые карточки 1G подключены хост-интерфейс каждого контроллера.

То есть схема подключений сервера такая:

сервер (aa.aa.124.41/25) - интернет

сервер (10.102.0.41/16) - сеть с камерами (10.102.0.0/16)

сервер (10.102.255.41/24) - СХД, контроллер 1 (10.102.255.211/24)

сервер (10.102.255.42/24) - СХД, контроллер 2 (10.102.255.212/24)

На СХД вторые хост-интерфейсы iSCSI также используются, для них используется адресация 10.102.0.211/16 и 10.102.0.212/16; после апгрейда на 10G именно они и будут использоваться (а на сервере будет использоваться вторая 10G-карточка, которая сейчас отключена), а пока используются прямые соединения патчкордом между СХД и сервером в подсети 10.102.255.0/24.

 

По идее такая схема должна давать отказоустойчивость и распределение нагрузки.

И до сегодняшнего дня давала.

 

Сегодня делал некоторые изменения, но они касались только iSCSI (подключал к серверу дополнительные дисковые разделы, отключал пароль на СХД).

Но теперь трафик через карточки 1G не ходит, судя по счетчикам, он ходит через 10.102.0.41/16 (т.е. на 10.102.255.211).

 

Нет предположений, отчего СХД больше нравится 10.102.0.41/16, чем 10.102.255.41/24?

 

 

UPDATE.

Вспомнил.

Забыл, что до этого я вручную указывал интерфейсы.

Если оставить значения по умолчанию, то статические маршруты не помогают.