Nierównomierne równoważenie obciążenia Cisco BGP

9

Usiłuję zaimplementować funkcję równoważenia nierównomiernego obciążenia BGP w mojej sieci. Według podręczników Cisco (długi: http://www.cisco.com/c/en/us/td/docs/ios/12_2s/feature/guide/fsbgplb.html , krótki: https://ccieblog.co.uk / bgp / bgp-unequal-load-cost-sharing ) Zbudowałem taką topologię sieci:

topologia netto

R1 - router, na którym próbuję zaimplementować równoważenie obciążenia dla ruchu wychodzącego. natWykorzystywana jest tabela VRF z nazwą .

R2-R4 - serwery NAT z uruchomionym quagga, z domyślną trasą do R5 współdzieloną z R1 przez eBGP.

Konfiguracja R1

Wersja R1 IOS: 12.2 (33) SXJ4 (s72033-adventerprisek9_wan-mz.122-33.SXJ4.bin)

Konfiguracja R2 ( R3 R4 różni się tylko identyfikatorem routera i vlan)

W rezultacie mam 3 różne domyślne trasy na R1 z tą samą liczbą akcji - 1/1 (1: 1: 1). Ale proporcja 1: 2: 3 wyjaśniła:

R1# sh ip bgp vpnv4 vrf nat 0.0.0.0

Paths: (6 available, best #5, table nat)
Multipath: eiBGP
  Advertised to update-groups:
     2         
  65000
    10.30.227.227 from 10.30.227.227 (10.30.227.227)
      Origin IGP, localpref 100, valid, external, multipath
      Extended Community: RT:192.168.33.4:13
      DMZ-Link Bw 250 kbytes
  65000, (received-only)
    10.30.227.227 from 10.30.227.227 (10.30.227.227)
      Origin IGP, localpref 100, valid, external
      DMZ-Link Bw 250 kbytes
  65000
    10.30.228.228 from 10.30.228.228 (10.30.228.228)
      Origin IGP, localpref 100, valid, external, multipath
      Extended Community: RT:192.168.33.4:13
      DMZ-Link Bw 375 kbytes
  65000, (received-only)
    10.30.228.228 from 10.30.228.228 (10.30.228.228)
      Origin IGP, localpref 100, valid, external
      DMZ-Link Bw 375 kbytes
  65000
    10.30.225.225 from 10.30.225.225 (10.30.225.225)
      Origin IGP, localpref 100, valid, external, multipath, best
      Extended Community: RT:192.168.33.4:13
      DMZ-Link Bw 125 kbytes
  65000, (received-only)
    10.30.225.225 from 10.30.225.225 (10.30.225.225)
      Origin IGP, localpref 100, valid, external
      DMZ-Link Bw 125 kbytes

R1# sh ip cef vrf nat 0.0.0.0/0 internal

0.0.0.0/0, epoch 3, flags rib only nolabel, rib defined all labels, RIB[B], refcount 7, per-destination sharing
  sources: RIB, D/N, DRH
  feature space:
   NetFlow: Origin AS 0, Peer AS 0, Mask Bits 0
   Broker: linked
   IPRM: 0x00018000
  subblocks:
   DefNet source: 0.0.0.0/0
  ifnums:
   Vlan3225(231): 10.30.225.225
   Vlan3227(232): 10.30.227.227
   Vlan3228(233): 10.30.228.228
  path 541B7858, path list 53E3E0D8, share 1/1, type recursive nexthop, for IPv4, flags resolved
  recursive via 10.30.225.225[IPv4:nat], fib 5496C804, 1 terminal fib
    path 541B7BF8, path list 53E3E170, share 1/1, type adjacency prefix, for IPv4
    attached to Vlan3225, adjacency IP adj out of Vlan3225, addr 10.30.225.225 513F6B60
  path 541B78CC, path list 53E3E0D8, share 1/1, type recursive nexthop, for IPv4, flags resolved
  recursive via 10.30.227.227[IPv4:nat], fib 54969B7C, 1 terminal fib
    path 541B7B10, path list 53E3E08C, share 1/1, type adjacency prefix, for IPv4
    attached to Vlan3227, adjacency IP adj out of Vlan3227, addr 10.30.227.227 513F66E0
  path 541B7DC8, path list 53E3E0D8, share 1/1, type recursive nexthop, for IPv4, flags resolved
  recursive via 10.30.228.228[IPv4:nat], fib 54970EAC, 1 terminal fib
    path 541B79B4, path list 53E3E040, share 1/1, type adjacency prefix, for IPv4
    attached to Vlan3228, adjacency IP adj out of Vlan3228, addr 10.30.228.228 513F6560
  output chain:
    loadinfo 51283B80, per-session, 3 choices, flags 0003, 5 locks
    flags: Per-session, for-rx-IPv4
    15 hash buckets
      < 0 > IP adj out of Vlan3225, addr 10.30.225.225 513F6B60
      < 1 > IP adj out of Vlan3227, addr 10.30.227.227 513F66E0
      < 2 > IP adj out of Vlan3228, addr 10.30.228.228 513F6560
      < 3 > IP adj out of Vlan3225, addr 10.30.225.225 513F6B60
      < 4 > IP adj out of Vlan3227, addr 10.30.227.227 513F66E0
      < 5 > IP adj out of Vlan3228, addr 10.30.228.228 513F6560
      < 6 > IP adj out of Vlan3225, addr 10.30.225.225 513F6B60
      < 7 > IP adj out of Vlan3227, addr 10.30.227.227 513F66E0
      < 8 > IP adj out of Vlan3228, addr 10.30.228.228 513F6560
      < 9 > IP adj out of Vlan3225, addr 10.30.225.225 513F6B60
      <10 > IP adj out of Vlan3227, addr 10.30.227.227 513F66E0
      <11 > IP adj out of Vlan3228, addr 10.30.228.228 513F6560
      <12 > IP adj out of Vlan3225, addr 10.30.225.225 513F6B60
      <13 > IP adj out of Vlan3227, addr 10.30.227.227 513F66E0
      <14 > IP adj out of Vlan3228, addr 10.30.228.228 513F6560
    Subblocks:
     None

Co ja robię źle? Według instrukcji różne dmzlink bwwartości powinny powodować różne proporcje podziału obciążenia, ale w rzeczywistości - nie!

AKTUALIZACJA 1 - wymagana przez użytkownika bangal

R1# show ip bgp all summary

For address family: IPv4 Unicast
BGP router identifier X.X.X.129, local AS number 41096
BGP table version is 22283352, main routing table version 22283352
34749 network entries using 4065633 bytes of memory
61661 path entries using 3206372 bytes of memory
8119/5337 BGP path/bestpath attribute entries using 1299040 bytes of memory
3752 BGP AS-PATH entries using 155474 bytes of memory
2990 BGP community entries using 138266 bytes of memory
146 BGP extended community entries using 5168 bytes of memory
53 BGP route-map cache entries using 1696 bytes of memory
0 BGP filter-list cache entries using 0 bytes of memory
BGP using 8871649 total bytes of memory
BGP activity 4716897/4682147 prefixes, 11331539/11269872 paths, scan interval 60 secs

# Here are bgp neighbours from global routing table. Not relevant to the question. IP addresses are hidden 

Neighbor     V       AS    MsgRcvd   MsgSent   TblVer  InQ OutQ Up/Down  State/PfxRcd
X.X.X.1      4       XX219    791704  760380 22283352    0    0 6d17h           1
X.X.X.33     4       XX219 112902498 1315655 22283352    0    0 6d17h           0
X.X.X.238    4       XX772    801422  762830 22283352    0    0 2w5d            0
X.X.X.206    4       XX540   2886112 1313917 22283352    0    0 4w4d         9641
X.X.X.70     4       XX772 188343075 1313853 22283352    0    0 6d14h       25881
X.X.X.78     4       XX772 148265282  941127 22283352    0    0 2w6d        26098

# Here are neighbours for vrf nat.

For address family: VPNv4 Unicast
BGP router identifier X.X.X.129, local AS number 41096
BGP table version is 824, main routing table version 824
1 network entries using 137 bytes of memory
6 path entries using 408 bytes of memory
1 multipath network entries and 3 multipath paths
8119/1 BGP path/bestpath attribute entries using 1299040 bytes of memory
3752 BGP AS-PATH entries using 155474 bytes of memory
2990 BGP community entries using 138266 bytes of memory
146 BGP extended community entries using 5168 bytes of memory
53 BGP route-map cache entries using 1696 bytes of memory
0 BGP filter-list cache entries using 0 bytes of memory
BGP using 1600189 total bytes of memory
3 received paths for inbound soft reconfiguration
BGP activity 4716897/4682147 prefixes, 11331539/11269872 paths, scan interval 15 secs

Neighbor        V          AS MsgRcvd MsgSent   TblVer  InQ OutQ Up/Down  State/PfxRcd
10.30.225.225   4       65000   11003   11443      824    0    0 3d18h           1
10.30.227.227   4       65000    9853   10293      824    0    0 3d18h           1
10.30.228.228   4       65000   10992   11432      824    0    0 3d18h           1

R1# sh ip route vrf nat

Routing Table: nat
Codes: C - connected, S - static, R - RIP, M - mobile, B - BGP
       D - EIGRP, EX - EIGRP external, O - OSPF, IA - OSPF inter area 
       N1 - OSPF NSSA external type 1, N2 - OSPF NSSA external type 2
       E1 - OSPF external type 1, E2 - OSPF external type 2
       i - IS-IS, su - IS-IS summary, L1 - IS-IS level-1, L2 - IS-IS level-2
       ia - IS-IS inter area, * - candidate default, U - per-user static route
       o - ODR, P - periodic downloaded static route

Gateway of last resort is 10.30.228.228 to network 0.0.0.0

     10.0.0.0/24 is subnetted, 4 subnets
C       10.30.0.0 is directly connected, Vlan30
C       10.30.228.0 is directly connected, Vlan3228
C       10.30.227.0 is directly connected, Vlan3227
C       10.30.225.0 is directly connected, Vlan3225
B*   0.0.0.0/0 [20/0] via 10.30.228.228, 3d18h
               [20/0] via 10.30.227.227, 3d18h
               [20/0] via 10.30.225.225, 3d18h

R1# sh ip bgp vpnv4 vrf nat neighbors

R1 sh ip bgp wyjście sąsiadów

R1# sh run

R1 z uruchomionymi informacjami wrażliwymi na konfigurację jest maskowany

cisco load-balancing bgp Shamanu4
źródło
1
Czy twoja konfiguracja R1 nie działa bandwidth 50000dla „interfejsu Vlan3228”? Czy możesz również dołączyć wyjście „sh ip bgp <IP of R5>”?
Andrey Sapegin,
1
Również w konfiguracji bieżącej, o ile rozumiem, przepustowość powinna wynosić 50kbs-100kbs-150kbs, a twoje wyjście R1# sh ip bgp vpnv4 vrf nat 0.0.0.0pokazuje 125kbs-250kbs-350kbs ...
Andrey Sapegin
1
@AndreySapegin sh ip bgp vpnv4 vrf nat 10.30.228.228wyświetla to samo co sh ip bgp vpnv4 vrf nat 0.0.0.0. Czy przegapiłeś neighborssłowo kluczowe? Jeśli tak, dane wyjściowe sh ip bgp vpnv4 vrf nat neighbors 10.30.228.228można zobaczyć na końcu danych wyjściowych sąsiadów R1 sh ip bgp
Shamanu4,
1
Wspomniany przewodnik ( cisco.com/c/en/us/td/docs/ios/12_2s/feature/guide/fsbgplb.html ) rozróżnia między nimi neighbor dmzlink-bw, co umożliwia jedynie reklamowanie przepustowości sąsiadom (przedstawione w konfiguracji) i bgp dmzlink-bw, który umożliwia proporcjonalne równoważenie obciążenia (i wydaje się, że W twojej konfiguracji MISSING). Czy możesz spróbować umieścić bgp dmzlink-bww uruchomionej konfiguracji?
Andrey Sapegin,
1
@AndreySapegin. Tak, jestem pewien, że maximum pathspowinno być poniżej address-family. Potrzebuję funkcji wielościeżkowej w instancji VRR, ale nie w globalnej tabeli routingu. Jeśli umieścić maximum pathspod router bgp 100I uzyskać w wyniku tylko jedna droga przez R5 i nie drogi przez R3 i R2. Ten sam wynik dla ibgprodziny adresów poniżej, ponieważ wszyscy sąsiedzi są zewnętrzni. Dziedziczenie przepustowości na kanale portu jest zgodne w konfiguracji. Usunąłem tę linię bez efektu. commit
Shamanu4,

Odpowiedzi:

3

Kluczowym problemem wydaje się być brakująca bgp dmzlink-bwopcja w rodzinie adresów w konfiguracji. Pozwól mi jednak streścić tutaj moje komentarze:

  1. bgp dmzlink-bwpod address-family. neighbor dmzlink-bwumożliwia jedynie reklamowanie szerokości pasma sąsiadom, a także bgp dmzlink-bwumożliwia proporcjonalne równoważenie obciążenia.
  2. Running-config miał bandwidth 50000opcja brakuje dla „interfejs Vlan3228”
  3. Jak wspomniano w tym przykładzie konfiguracji , maximum-paths eibgp 3zamiast może być potrzebna opcjamaximum-paths 3
  4. Oprócz sh ip bgp vpnv4 vrf nat 0.0.0.0i innych poleceń wymienionych w oryginalnych przewodnikach (patrz pytanie), autorstwa Shamanu4 i bangal, przydatne jest sprawdzenie, czy liczenie udziałów w ruchu jest różne dla linków równoważonych za pomocą obciążeniash ip route vrf nat 0.0.0.0
  5. Sprawdź, czy nie ma innych opcji, które mogłyby zakłócać konfigurację równoważenia obciążenia (np. bandwidth inheritNa kanale portu)

Ogólnie rzecz biorąc, czasami bardzo trudno jest zidentyfikować problem, gdy masz dużą konfigurację do biegania z dużą ilością opcji. Jeśli problem będzie się powtarzał, utworzę podobną konfigurację z pustą konfiguracją i spróbuję skonfigurować tam tylko odpowiednie opcje (Minimalny przykład roboczy), aby zobaczyć, czy to działa i nie koliduje z innymi opcjami, listami dostępu (tak jak przykład, to jest bardzo mało prawdopodobne w tym konkretnym przypadku) itp. Jeśli nie masz zapasowego sprzętu, a router jest w produkcji, więc nie możesz eksperymentować z pustą konfiguracją na nim bezpośrednio, możesz:

  • Używaj komputerów z systemem Linux / maszyn wirtualnych z oprogramowaniem do routingu, takim jak Quagga (wspomniane w pytaniu)
  • Użyj symulatora z Cisco: Boson NetSim dla CCNP obsługuje BGP, jednak nie jestem pewien, czy obsługiwana jest rodzina adresów / VPN / VRF
  • Używaj maszyn wirtualnych z IOS XRv od Cisco. O ile pamiętam, był dostępny za darmo z limitem przepustowości 2 Mbit / s, co powinno wystarczyć do testowania. Ponownie nie jestem pewien, czy obsługiwana jest rodzina adresów / VPN / VRF: przegląd routera Cisco IOS XRv , link do pobrania VM
  • Użyj symulatora GNS3 ( http://www.gns3.com/ ). Są do tego obrazy Cisco IOS, jednak nie wiem, jak je zdobyć.
  • Wreszcie, możesz nawet spróbować kupić używany sprzęt z miejsc takich jak eBay, tak tanio, jak to możliwe, wyłącznie do celów testowych.
Andrey Sapegin
źródło
1
Nadal nie mogę potwierdzić ani obalić tej teorii. IOS w wersji 15.1 (2) SY4a również nie mają możliwości, aby miejsce dmzlink-bwmocy address-family. Potrzebuję trochę czasu, aby rozwikłać sprzeczności dokumentów cisco z prawdziwym życiem.
Shamanu4,
To jest naprawdę dziwne. Możesz spróbować przejrzeć następujące dokumenty: cisco.com/c/en/us/td/docs/ios-xml/ios/iproute_bgp/configuration/… , cisco.com/c/en/us/td/docs/ios -xml / ios / iproute_bgp / configuration /… , ale nie widzę niczego brakującego w twojej konfiguracji ...
Andrey Sapegin
Kupię licencję Cisco VIRL i spróbuję tam symulować topologię. O wszelkich wynikach poinformuję później. Dzięki za pomoc.
Shamanu4,