Как правильно настроить RSTP на свитчах mikrotik, чтобы не было петли?

Question

[Дмитрий]

Здравствуйте.
Есть сетевая схема ниже. Приоритет при проектировании сетевой структуры был отдан приоритет высокой доступности. В основу ядра сети выбрано два свитча mikrotik CRS125-24G-1S. Для пользователей выбрали CSS326-24G-2S+RM. На всех свитчах включен RSTP.
Схема соединения такая:
SW1 p.23 - SWITCH_A P.1
SW1 p.24 - SWITCH_B P.1
SW2 p.23 - SWITCH_A P.2
SW2 p.24 - SWITCH_B P.2
SW3 p.23 - SWITCH_A P.3
SW3 p.24 - SWITCH_B P.3
SWITCH_A p.24 - GW p.1
SWITCH_B p.24 - GW p.2

SWITCH_A задан Bridge Priority 4000h, у всех остальных свитчей он 8000h.
В данной конфигурации на GW, SWITCH_A, SWITCH_B в логах пишутся ошибки об образовании петли и наблюдается нестабильная работа сети.
Если убрать SWITCH_B ошибки исчезают и все работает ок.
Подскажите, где что не так?


В SW1-3 все оставлено по умолчанию.

В логах на GW или на Switch_A выпадают вот такие сообщения
interface, warning ether1:bridge port received packet with own address as source address (cc:2d:e0:2e:fb:aa); probably loop.

Вот немного урезаные конфиги:

Конфиг

GW

/interface bridge
add fast-forward=no name=LocalNet
/interface ethernet
set [ find default-name=ether1 ] mac-address=E4:8D:8C:17:9E:32 name=SW_A \
speed=100Mbps
set [ find default-name=ether2 ] mac-address=E4:8D:8C:17:9E:33 name=SW_B \
speed=100Mbps
add bridge=LocalNet local-forwarding=yes
/interface bridge port
add bridge=LocalNet interface=SW_A
add bridge=LocalNet interface=SW_B
/ip neighbor discovery-settings
set discover-interface-list=none
/interface list member
set telnet disabled=yes
set ftp disabled=yes
set www port=8888
set ssh port=2200
set api disabled=yes
set api-ssl disabled=yes
/ip socks
set port=4145
/ip ssh
set allow-none-crypto=yes forwarding-enabled=remote
/lcd
set time-interval=hour
/system identity
set name=gw
/system logging
set 3 topics=info
add action=remote topics=info
add action=remote topics=error
add action=remote topics=warning
add action=syslog topics=firewall
add action=syslog topics=error
add action=syslog topics=info
add action=syslog topics=warning
add action=remote topics=firewall
/system watchdog
set automatic-supout=no watchdog-timer=no
/tool bandwidth-server
set authenticate=no enabled=no
/tool mac-server mac-winbox
set allowed-interface-list=DMZ
/tool mac-server ping
set enabled=no
/tool sniffer
set file-limit=5000KiB filter-interface=all

SWITCH_A

/interface ethernet
set [ find default-name=ether1 ] comment=SW1
set [ find default-name=ether2 ] comment=SW2
set [ find default-name=ether3 ] comment=SW3
set [ find default-name=ether24 ] comment=Gateway
/interface bridge
add name=bridge_all_ports priority=0x4000
/interface bridge port
add bridge=bridge_all_ports interface=all
/ip neighbor discovery-settings
set discover-interface-list=none
/ip service
set telnet disabled=yes
set ftp disabled=yes
set www-ssl disabled=no
set api disabled=yes
set api-ssl disabled=yes
/snmp
set enabled=yes trap-generators=interfaces trap-interfaces=all
/system clock
set time-zone-name=Europe/Kiev
/system identity
set name=SW_A

Switch_B

/interface ethernet
set [ find default-name=ether1 ] disabled=yes
set [ find default-name=ether2 ] disabled=yes loop-protect=on
set [ find default-name=ether3 ] disabled=yes loop-protect=on
set [ find default-name=ether4 ] disabled=yes loop-protect=on
set [ find default-name=ether5 ] disabled=yes loop-protect=on
set [ find default-name=ether6 ] disabled=yes
set [ find default-name=ether7 ] disabled=yes loop-protect=on
set [ find default-name=ether8 ] disabled=yes loop-protect=on
set [ find default-name=ether9 ] disabled=yes loop-protect=on
set [ find default-name=ether10 ] disabled=yes loop-protect=on
set [ find default-name=ether11 ] disabled=yes loop-protect=on
set [ find default-name=ether12 ] disabled=yes
set [ find default-name=ether13 ] disabled=yes
/interface bridge
add name=All_ports priority=0x8000
/interface bridge port
add bridge=All_ports interface=all

Comments

[Strabbo]

покажите логи и конфиги

[Дмитрий]

Добавил.

[Strabbo]

Дмитрий, Если можно покажите еще interface bridge print и interface bridge port print stats

[Дмитрий]

Strabbo,

spoiler

SWITCH_A
[admin@SWA_] > interface bridge print
Flags: X - disabled, R - running
0 R name="bridge_all_ports" mtu=auto actual-mtu=1500 l2mtu=1588 arp=enabled arp-timeout=auto mac-address=CC:2D:E0:2E:FB:AF protocol-mode=rstp fast-forward=yes
igmp-snooping=no auto-mac=yes ageing-time=5m priority=0x4000 max-message-age=20s forward-delay=15s transmit-hold-count=6 vlan-filtering=no dhcp-snooping=no
[admin@SW_A] > interface bridge port print
Flags: X - disabled, I - inactive, D - dynamic, H - hw-offload
# INTERFACE BRIDGE HW PVID PRIORITY PATH-COST INTERNAL-PATH-COST HORIZON
0 all bridge_all_ports yes 1 0x80 10 10 none
1 DH ether1 bridge_all_ports yes 1 0x80 10 10 none
2 DH ether2 bridge_all_ports yes 1 0x80 10 10 none
3 DH ether3 bridge_all_ports yes 1 0x80 10 10 none
4 DH ether4 bridge_all_ports yes 1 0x80 10 10 none
5 DH ether5 bridge_all_ports yes 1 0x80 10 10 none
6 DH ether6 bridge_all_ports yes 1 0x80 10 10 none
7 DH ether7 bridge_all_ports yes 1 0x80 10 10 none
8 DH ether8 bridge_all_ports yes 1 0x80 10 10 none
9 DH ether9 bridge_all_ports yes 1 0x80 10 10 none
10 DH ether10 bridge_all_ports yes 1 0x80 10 10 none
11 DH ether11 bridge_all_ports yes 1 0x80 10 10 none
12 DH ether12 bridge_all_ports yes 1 0x80 10 10 none
13 DH ether13 bridge_all_ports yes 1 0x80 10 10 none
14 IDH ether14 bridge_all_ports yes 1 0x80 10 10 none
15 IDH ether15 bridge_all_ports yes 1 0x80 10 10 none
16 IDH ether16 bridge_all_ports yes 1 0x80 10 10 none
17 IDH ether17 bridge_all_ports yes 1 0x80 10 10 none
18 IDH ether18 bridge_all_ports yes 1 0x80 10 10 none
19 IDH ether19 bridge_all_ports yes 1 0x80 10 10 none
20 IDH ether20 bridge_all_ports yes 1 0x80 10 10 none
21 IDH ether21 bridge_all_ports yes 1 0x80 10 10 none
22 IDH ether22 bridge_all_ports yes 1 0x80 10 10 none
23 IDH ether23 bridge_all_ports yes 1 0x80 10 10 none
24 DH ether24 bridge_all_ports yes 1 0x80 10 10 none
25 IDH sfp1 bridge_all_ports yes 1 0x80 10 10 none

[Дмитрий]

SWITCH_B

SWITCH_B
[admin@SW_B] > interface bridge print
Flags: X - disabled, R - running
0 R name="All_ports" mtu=auto actual-mtu=1500 l2mtu=1588 arp=enabled arp-timeout=auto mac-address=D2:57:BC:69:1D:A1 protocol-mode=rstp fast-forward=yes igmp-snooping=no
auto-mac=yes ageing-time=5m priority=0x4FFC max-message-age=20s forward-delay=15s transmit-hold-count=6 vlan-filtering=no dhcp-snooping=no
[admin@MikroTik] > interface bridge port print
Flags: X - disabled, I - inactive, D - dynamic, H - hw-offload
# INTERFACE BRIDGE HW PVID PRIORITY PATH-COST INTERNAL-PATH-COST HORIZON
0 all All_ports yes 1 0x90 10 10 none
1 IDH ether1 All_ports yes 1 0x90 10 10 none
2 IDH ether2 All_ports yes 1 0x90 10 10 none
3 IDH ether3 All_ports yes 1 0x90 10 10 none
4 IDH ether4 All_ports yes 1 0x90 10 10 none
5 IDH ether5 All_ports yes 1 0x90 10 10 none
6 IDH ether6 All_ports yes 1 0x90 10 10 none
7 IDH ether7 All_ports yes 1 0x90 10 10 none
8 IDH ether8 All_ports yes 1 0x90 10 10 none
9 IDH ether9 All_ports yes 1 0x90 10 10 none
10 IDH ether10 All_ports yes 1 0x90 10 10 none
11 IDH ether11 All_ports yes 1 0x90 10 10 none
12 IDH ether12 All_ports yes 1 0x90 10 10 none
13 IDH ether13 All_ports yes 1 0x90 10 10 none
14 IDH ether14 All_ports yes 1 0x90 10 10 none
15 IDH ether15 All_ports yes 1 0x90 10 10 none
16 IDH ether16 All_ports yes 1 0x90 10 10 none
17 IDH ether17 All_ports yes 1 0x90 10 10 none
18 IDH ether18 All_ports yes 1 0x90 10 10 none
19 IDH ether19 All_ports yes 1 0x90 10 10 none
20 IDH ether20 All_ports yes 1 0x90 10 10 none
21 IDH ether21 All_ports yes 1 0x90 10 10 none
22 IDH ether22 All_ports yes 1 0x90 10 10 none
23 IDH ether23 All_ports yes 1 0x90 10 10 none
24 DH ether24 All_ports yes 1 0x90 10 10 none
25 IDH sfp1 All_ports yes 1 0x90 10 10 none

[Дмитрий]

GW
> interface bridge print
Flags: X - disabled, R - running
0 R name="Bridge_LocalNet" mtu=auto actual-mtu=1500 l2mtu=1580 arp=enabled arp-timeout=auto mac-address=E4:8D:8C:17:9E:37 protocol-mode=rstp fast-forward=no
igmp-snooping=no auto-mac=yes ageing-time=5m priority=0x8000 max-message-age=20s forward-delay=15s transmit-hold-count=6 vlan-filtering=no dhcp-snooping=no

> interface bridge port print
Flags: X - disabled, I - inactive, D - dynamic, H - hw-offload
# INTERFACE BRIDGE HW PVID PRIORITY PATH-COST INTERNAL-PATH-COST HORIZON
0 eth7_LocalNet Bridge_LocalNet no 1 0x80 10 10 none
1 eth6_LocalNet Bridge_LocalNet yes 1 0x80 10 10 none

[Strabbo]

Дмитрий, а на GW? Еще нужно interface bridge port print stats (со всех трех. тут будет видно работает или нет rstp)

[Дмитрий]

GW
> interface bridge port print stats
Flags: X - disabled, I - inactive, D - dynamic, H - hw-offload
0 interface=eth7_LocalNet bridge=Bridge_LocalNet priority=0x80 path-cost=10 internal-path-cost=10 edge=auto point-to-point=auto learn=auto horizon=none hw=no
auto-isolate=no restricted-role=no restricted-tcn=no pvid=1 frame-types=admit-all ingress-filtering=no unknown-unicast-flood=yes unknown-multicast-flood=yes
broadcast-flood=yes tag-stacking=no bpdu-guard=no trusted=no multicast-router=temporary-query fast-leave=no status=in-bridge port-number=2 role=designated-port
edge-port=no edge-port-discovery=yes point-to-point-port=yes external-fdb-status=no sending-rstp=yes learning=yes forwarding=yes hw-offload=no

1 interface=eth6_LocalNet bridge=Bridge_LocalNet priority=0x80 path-cost=10 internal-path-cost=10 edge=auto point-to-point=auto learn=auto horizon=none hw=yes
auto-isolate=no restricted-role=no restricted-tcn=no pvid=1 frame-types=admit-all ingress-filtering=no unknown-unicast-flood=yes unknown-multicast-flood=yes
broadcast-flood=yes tag-stacking=no bpdu-guard=no trusted=no multicast-router=temporary-query fast-leave=no status=in-bridge port-number=1 role=root-port
edge-port=no edge-port-discovery=yes point-to-point-port=yes external-fdb-status=no sending-rstp=yes learning=yes forwarding=yes root-path-cost=10
designated-bridge=0x4000.CC:2D:E0:2E:FB:AF designated-cost=0 designated-port-number=24 hw-offload=no

[Дмитрий]

Моей целью является сделать так, что обрывается uplink какого-то из SW1-3 к SWITCH_A, то автоматически начинал работать точно такой-же uplink к SWITCH_B. И когда оборванный uplink восстанавливается, все возвращается как и было раньше.

[Z7D]

У вас видимо опечатка на схеме, указанно 2 switch_A. Вообще в этой схеме вполне логично, что появилась петля т.к. на sw1 sw2 и sw3 приходят дубляжи со switch_B которые идут после в switch_А не знаю нюансов работы rstp. Но практически уверен если sw1, sw2, sw3 подключить только к одному из свичей или к A или к B то проблема исчезнет.

[Дмитрий]

Z7D, Да опечатка, второй это switch_b. Согласен с вашей схемой включения, но при ее применении сразу же теряется надежность и высокодоступность. А протокол STP (Spanning Tree Protocol) — сетевой протокол (или семейство сетевых протоколов) предназначенный для автоматического удаления циклов (петель коммутации) из топологии сети на канальном уровне в Ethernet-сетях.

Answer 1

[Дмитрий]

Правильное решение было такое:
GW- Bridge Priority 6000h, root
Switch_A - Bridge Priority 7000h
Switch_B - Bridge Priority 8000h
SW1-SW3 -Bridge Priority 9000h
Линк между Switch_A и Switch_B возможен по желанию.

Спасибо Strabbo за правильные Коментарии.

Comments

[Ruslan-Strannik]

как и посоветовал Strabbo?

[akelsey]

Дмитрий

Спасибо Strabbo за правильные Коментарии.

Тутт не спасибо нужно говорить, а отмечать ответом не свой ответ, а ответ тов. Strabbo

Answer 2

[Strabbo]

Дмитрий, у 6 порта видно, что role=root-port designated-bridge=0x4000.CC:2D:E0:2E:FB:AF этот этот порт одключен скорее всего к свичу А.
у 7 порта видно, что role=designated-port этот порт идет скорее всего на свич Б. В таком случае при дефолтных настройках свич Б, чтобы добраться до свича А использует линк, который подключен к GW. В таком случае у вас будет петля. Нужно добавить Линк между свичом А и Б, таким образом свиЧ Б заблокирует линк, который идет к GW и сделает его резервным. В вашей схеме я бы отдал роль Root GW, оттуда начинается дерево и втаком случае не придется добавлять линк между А и Б. Можно и без добавления линка пошаманить с настройками рстп и получить желаемый результат, но чем сложнее конфиг, тем сложнее в дальнейшем с ним разбираться.

P.S. Это всего лишь предположения исходя из представленного конфига, для точного диагноза нужно проверить мое предположение на свичах А и Б.

Comments

[Дмитрий]

В ближайшее время проверю ваш совет.

[Ruslan-Strannik]

Дмитрий, удалось победить делему? если да, то как