BSD Router Project

User Tools

Site Tools

Trace:
documentation:examples:multicast_with_pim-sm

Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revisionPrevious revision
Next revision		Previous revision
documentation:examples:multicast_with_pim-sm [2019/11/08 10:45] – [Router 3] olivierdocumentation:examples:multicast_with_pim-sm [2025/10/02 17:52] (current) – [PIM neighbors] olivier
Line 21: Line 21:
 More information on these BSDRP lab scripts available on [[documentation:examples:How to build a BSDRP router lab]]. More information on these BSDRP lab scripts available on [[documentation:examples:How to build a BSDRP router lab]].
  
-Start the lab with 4 routers simulating an e1000 NIC (vtnet interface and they didn't support mcast routing on FreeBSD):+Start the lab with 4 routers:
 <code> <code>
-tools/BSDRP-lab-bhyve.sh -n 4 -e -i BSDRP-1.96-full-amd64-serial.img.xz +tools/BSDRP-lab-bhyve.sh -n 4 -i BSDRP-2.0-full-amd64.img.xz 
-BSD Router Project (http://bsdrp.net) - bhyve full-meshed lab script+BSD Router Project (https://bsdrp.net) - bhyve full-meshed lab script
 Setting-up a virtual lab with 4 VM(s): Setting-up a virtual lab with 4 VM(s):
-- Working directory: /root/BSDRP-VMs +- Working directory: /home/olivier/BSDRP-VMs 
-- Each VM has 1 core and 512M RAM +- Each VM has a total of 1 (1 cores and 1 threads) and 1G RAM 
-- Emulated NIC: e1000+- Emulated NIC: virtio-net 
 +- Boot mode: UEFI
 - Switch mode: bridge + tap - Switch mode: bridge + tap
 - 0 LAN(s) between all VM - 0 LAN(s) between all VM
 - Full mesh Ethernet links between each VM - Full mesh Ethernet links between each VM
 VM 1 has the following NIC: VM 1 has the following NIC:
-- em0 connected to VM 2 +- vtnet0 connected to VM 2 
-- em1 connected to VM 3 +- vtnet1 connected to VM 3 
-- em2 connected to VM 4+- vtnet2 connected to VM 4
 VM 2 has the following NIC: VM 2 has the following NIC:
-- em0 connected to VM 1 +- vtnet0 connected to VM 1 
-- em1 connected to VM 3 +- vtnet1 connected to VM 3 
-- em2 connected to VM 4+- vtnet2 connected to VM 4
 VM 3 has the following NIC: VM 3 has the following NIC:
-- em0 connected to VM 1 +- vtnet0 connected to VM 1 
-- em1 connected to VM 2 +- vtnet1 connected to VM 2 
-- em2 connected to VM 4+- vtnet2 connected to VM 4
 VM 4 has the following NIC: VM 4 has the following NIC:
-- em0 connected to VM 1 +- vtnet0 connected to VM 1 
-- em1 connected to VM 2 +- vtnet1 connected to VM 2 
-- em2 connected to VM 3+- vtnet2 connected to VM 3
 To connect VM'serial console, you can use: To connect VM'serial console, you can use:
-- VM 1 : cu -l /dev/nmdm-BSDRP.1B +- VM 1 : sudo cu -l /dev/nmdm-BSDRP.1B 
-- VM 2 : cu -l /dev/nmdm-BSDRP.2B +- VM 2 : sudo cu -l /dev/nmdm-BSDRP.2B 
-- VM 3 : cu -l /dev/nmdm-BSDRP.3B +- VM 3 : sudo cu -l /dev/nmdm-BSDRP.3B 
-- VM 4 : cu -l /dev/nmdm-BSDRP.4B+- VM 4 : sudo cu -l /dev/nmdm-BSDRP.4B
 </code> </code>
  
Line 64: Line 65:
  gateway_enable=no \  gateway_enable=no \
  ipv6_gateway_enable=no \  ipv6_gateway_enable=no \
- ifconfig_em0="inet 10.0.12.1/24" \+ ifconfig_vtnet0="inet 10.0.12.1/24" \
  defaultrouter=10.0.12.254  defaultrouter=10.0.12.254
 service hostname restart service hostname restart
Line 77: Line 78:
 <code> <code>
 sysrc hostname=VM2 \ sysrc hostname=VM2 \
- ifconfig_em0="inet 10.0.12.254/24" \ + ifconfig_vtnet0="inet 10.0.12.254/24" \ 
- ifconfig_em1="inet 10.0.23.2/24" \+ ifconfig_vtnet1="inet 10.0.23.2/24" \
  defaultrouter=10.0.23.3 \  defaultrouter=10.0.23.3 \
  pimd_enable=yes  pimd_enable=yes
Line 100: Line 101:
 <code> <code>
 sysrc hostname=VM3 \ sysrc hostname=VM3 \
- ifconfig_em1="inet 10.0.23.3/24" \ + ifconfig_vtnet1="inet 10.0.23.3/24" \ 
- ifconfig_em2="inet 10.0.34.254/24" \+ ifconfig_vtnet2="inet 10.0.34.254/24" \
  defaultrouter=10.0.23.2 \  defaultrouter=10.0.23.2 \
  pimd_enable=yes  pimd_enable=yes
Line 122: Line 123:
  gateway_enable=no \  gateway_enable=no \
  ipv6_gateway_enable=no \  ipv6_gateway_enable=no \
- ifconfig_em2="inet 10.0.34.4/24" \+ ifconfig_vnet2="inet 10.0.34.4/24" \
  defaultrouter=10.0.34.254  defaultrouter=10.0.34.254
-hostname VM4+service hostname restart
 service netif restart service netif restart
 service routing restart service routing restart
Line 130: Line 131:
 </code> </code>
  
 +===== Checking NIC drivers and Bhyve compatibility with multicast =====
 +
 +Before to star with advanced routing setup, just start to test simple multicast between 2 relatives host: Some NIC (vtnet) or some hypervisors network setup aren't compliant with very simple multicast.
 +
 +On VM1, start a mcast generator (client emitting mcast):
 +<code>
 +[root@VM1]~# iperf -c 239.1.1.1 -u -T 32 -t 3000 -i 1
 +------------------------------------------------------------
 +Client connecting to 239.1.1.1, UDP port 5001
 +Sending 1470 byte datagrams, IPG target: 11215.21 us (kalman adjust)
 +Setting multicast TTL to 32
 +UDP buffer size: 9.00 KByte (default)
 +------------------------------------------------------------
 +[  3] local 10.0.12.1 port 46636 connected with 239.1.1.1 port 5001
 +[ ID] Interval       Transfer     Bandwidth
 +[  3]  0.0- 1.0 sec   131 KBytes  1.07 Mbits/sec
 +[  3]  1.0- 2.0 sec   128 KBytes  1.05 Mbits/sec
 +[  3]  2.0- 3.0 sec   128 KBytes  1.05 Mbits/sec
 +[  3]  0.0- 3.5 sec   446 KBytes  1.05 Mbits/sec
 +[  3] Sent 311 datagrams
 +(...)
 +</code>
 +
 +On the direct connected VM2, start to check if in non-promiscious mode it sees mcast packets comming:
 +<code>
 +[root@VM2]~# tcpdump -pni vtnet0 -c 2
 +tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
 +listening on vtnet0, link-type EN10MB (Ethernet), capture size 262144 bytes
 +15:22:32.517270 IP 10.0.12.1.33482 > 239.1.1.1.5001: UDP, length 1470
 +15:22:32.528668 IP 10.0.12.1.33482 > 239.1.1.1.5001: UDP, length 1470
 +2 packets captured
 +2 packets received by filter
 +0 packets dropped by kernel
 +</code>
 +
 +=> VM2 is receiving mcast packets from 10.0.12.1 to mcast group 239.1.1.1.
 +Now on VM2 start a mcast listener (server receiving), it should receive multicast flow
 +
 +<code>
 +[root@VM2]~# iperf -s -u -B 239.1.1.1%vtnet0 -i 1
 +------------------------------------------------------------
 +Server listening on UDP port 5001
 +Binding to local address 239.1.1.1
 +Joining multicast group  239.1.1.1
 +Receiving 1470 byte datagrams
 +UDP buffer size: 41.1 KByte (default)
 +------------------------------------------------------------
 +[  3] local 239.1.1.1 port 5001 connected with 192.168.100.149 port 35181
 +[ ID] Interval       Transfer     Bandwidth        Jitter   Lost/Total Datagrams
 +[  3]  0.0- 1.0 sec   129 KBytes  1.06 Mbits/sec   0.038 ms  107/  197 (54%)
 +[  3]  1.0- 2.0 sec   128 KBytes  1.05 Mbits/sec   0.054 ms    0/   89 (0%)
 +[  3]  2.0- 3.0 sec   128 KBytes  1.05 Mbits/sec   0.021 ms    0/   89 (0%)
 +[  3]  3.0- 4.0 sec   128 KBytes  1.05 Mbits/sec   0.025 ms    0/   89 (0%)
 +[  3]  4.0- 5.0 sec   128 KBytes  1.05 Mbits/sec   0.024 ms    0/   89 (0%)
 +[  3]  5.0- 6.0 sec   129 KBytes  1.06 Mbits/sec   0.024 ms    0/   90 (0%)
 +[  3]  6.0- 7.0 sec   128 KBytes  1.05 Mbits/sec   0.024 ms    0/   89 (0%)
 +(...)
 +</code>
 +=> Notice the mcast receiver is correctly receiving at 1Mb/s.
 +
 +Here is a non working example (here because source interface not given, and it uses the other one):
 +<code>
 +[root@VM2]~# iperf -s -u -B 239.1.1.1 -i 1
 +------------------------------------------------------------
 +Server listening on UDP port 5001
 +Binding to local address 239.1.1.1
 +Joining multicast group  239.1.1.1
 +Receiving 1470 byte datagrams
 +UDP buffer size: 41.1 KByte (default)
 +------------------------------------------------------------
 +(...)
 +</code>
 +
 +=> Here it doesn't receive traffic and stay in "waiting" mode forever.
 ===== Checking pimd behavior ===== ===== Checking pimd behavior =====
  
Line 137: Line 212:
  
 <code> <code>
-[root@VM2]~# pimd -r + 
-Virtual Interface Table +root@VM2:~ # pimctl show 
- Vif  Local address    Subnet                Thresh  Flags          Neighbors + 
-   0  10.0.12.2        10.0.12/24            1       DR NO-NBR +PIM Interface Table 
-   1  10.0.23.2        10.0.23/24            1       PIM            10.0.23.3 +Interface         State     Address            Priority  Hello  Nbr  DR Address      DR Priority 
-   2  10.0.12.2        register_vif0         1+vtnet0               Up        10.0.12.2                 1     30    0  10.0.12.2      1 
 +vtnet1               Up        10.0.23.2                 1     30    1  10.0.23.3      1 
 + 
 +PIM Neighbor Table 
 +Interface         Address            Priority  Mode  Uptime/Expires 
 +vtnet1               10.0.23.3                 1  DR    0h2m51s/0h1m25s
  
 Multicast Routing Table Multicast Routing Table
- Source          Group           RP addr         Flags +Source            Group            RP Address       Flags 
---------------------------(*,*,RP)-------------------------- +10.0.12.1         239.1.1.1        10.0.23.2        SG 
-Number of Groups: 0 + 
-Number of Cache MIRRORs: 0+ 
 +Number of Groups        : 1 
 +Number of Cache MIRRORs : 0 
 + 
 +PIM Candidate Rendez-Vous Point Table 
 +Group Address     RP Address       Prio  Holdtime  Expires 
 +232.0.0.0/8       169.254.0.1         1   Forever  Never 
 +224.0.0.0/4       10.0.23.2           1       150  0h1m45s 
 + 
 +Current BSR address: 10.0.23.3 
 + 
 +PIM Rendez-Vous Point Set Table 
 +Group Address     RP Address       Prio  Holdtime  Type 
 +232.0.0.0/8       169.254.0.1         1   Forever  Static 
 +224.0.0.0/4       10.0.23.2           1       105  Dynamic
 </code> </code>
  
-=> VM2 sees VM3+=> VM2 sees VM3 as PIM neighbor
  
 <code> <code>
-[root@VM3]~# pimd -r +root@VM3:~ # pimctl show 
-Virtual Interface Table + 
- Vif  Local address    Subnet                Thresh  Flags          Neighbors +PIM Interface Table 
-   0  10.0.23.3        10.0.23/24            1       DR PIM         10.0.23.2 +Interface         State     Address            Priority  Hello  Nbr  DR Address      DR Priority 
-   1  10.0.34.3        10.0.34/24            1       DR NO-NBR +vtnet1               Up        10.0.23.3                 1     30    1  10.0.23.3       1 
-   2  10.0.23.3        register_vif0         1+vtnet2               Up        10.0.34.3                 1     30    0  10.0.34.3       1 
 + 
 +PIM Neighbor Table 
 +Interface         Address            Priority  Mode  Uptime/Expires 
 +vtnet1               10.0.23.2                 1        0h3m55s/0h1m15s
  
 Multicast Routing Table Multicast Routing Table
- Source          Group           RP addr         Flags +Source            Group            RP Address       Flags 
---------------------------(*,*,RP)-------------------------- + 
-Number of Groups: 0 +Number of Groups        : 0 
-Number of Cache MIRRORs: 0+Number of Cache MIRRORs : 0 
 + 
 +PIM Candidate Rendez-Vous Point Table 
 +Group Address     RP Address       Prio  Holdtime  Expires 
 +232.0.0.0/8       169.254.0.1         1   Forever  Never 
 +224.0.0.0/4       10.0.23.2           1       150  0h2m25s 
 + 
 +Current BSR address: 10.0.23.3 
 + 
 +PIM Rendez-Vous Point Set Table 
 +Group Address     RP Address       Prio  Holdtime  Type 
 +232.0.0.0/8       169.254.0.1         1   Forever  Static 
 +224.0.0.0/4       10.0.23.2           1       145  Dynamic
 </code> </code>
  
-=> VM3 sees VM2.+=> VM3 sees VM2 as PIM Designated Router neighbor.
 ==== Does PIM daemon locally register to PIM mcast group ? ==== ==== Does PIM daemon locally register to PIM mcast group ? ====
  
Line 175: Line 285:
 <code> <code>
 [root@VM2]~# ifmcstat [root@VM2]~# ifmcstat
-em0:+vtnet0:
         inet 10.0.12.2         inet 10.0.12.2
         igmpv2         igmpv2
Line 198: Line 308:
                 group ff02:1::1:ff00:212 refcnt 1                 group ff02:1::1:ff00:212 refcnt 1
                         mcast-macaddr 33:33:ff:00:02:12 refcnt 1                         mcast-macaddr 33:33:ff:00:02:12 refcnt 1
-em1:+vtnet1:
         inet 10.0.23.2         inet 10.0.23.2
         igmpv2         igmpv2
Line 302: Line 412:
 PIM daemon should be updated: PIM daemon should be updated:
 <code> <code>
-[root@VM2]~# pimd -r +[root@VM2]~# pimctl -r 
-Virtual Interface Table ====================================================== +pimctl: Sending cmd show: No error: 0
-Vif  Local Address    Subnet              Thresh  Flags      Neighbors +
----  ---------------  ------------------  ------  ---------  ----------------- +
-  0  10.0.12.2        10.0.12/24               1  DR NO-NBR +
-  1  10.0.23.2        10.0.23/24               1  PIM        10.0.23.3 +
-  2  10.0.12.2        register_vif0            1+
  
- Vif  SSM Group        Sources+PIM Interface Table 
 +Interface         State     Address            Priority  Hello  Nbr  DR Address      DR Priority 
 +vtnet0            Up        10.0.12.2                 1     30    0  10.0.12.2                 1 
 +vtnet1            Up        10.0.23.2                 1     30    1  10.0.23.3                 1
  
-Multicast Routing Table ====================================================== +PIM Neighbor Table 
------------------------------------ (S,G) ------------------------------------ +Interface         Address            Priority  Mode  Uptime/Expires 
-Source           Group            RP Address       Flags +vtnet1            10.0.23.3                 1  DR    0h8m36s/0h1m40s
----------------  ---------------  ---------------  --------------------------- +
-10.0.12.1        239.1.1.1        10.0.23.2        CACHE SG +
-Joined   oifs: ..j +
-Pruned   oifs: ... +
-Leaves   oifs: ... +
-Asserted oifs: ... +
-Outgoing oifs: ..o +
-Incoming     : I..+
  
-TIMERS:  Entry    JP    RS  Assert VIFS:  0  1  2 +Multicast Routing Table 
-           180    35     0       0        0  0  0 +Source            Group            RP Address       Flags 
---------------------------------- (*,*,G) ------------------------------------ +10.0.12.1         239.1.1.1        10.0.23.2        SPT SG 
-Number of Groups: 1 + 
-Number of Cache MIRRORs: 1 +Number of Groups        : 1 
-------------------------------------------------------------------------------+Number of Cache MIRRORs : 0 
 + 
 +PIM Candidate Rendez-Vous Point Table 
 +Group Address     RP Address       Prio  Holdtime  Expires 
 +232.0.0.0/8       169.254.0.1         1   Forever  Never 
 +224.0.0.0/4       10.0.23.2           1       150  0h2m0s 
 + 
 +Current BSR address: 10.0.23.3 
 + 
 +PIM Rendez-Vous Point Set Table 
 +Group Address     RP Address       Prio  Holdtime  Type 
 +232.0.0.0/8       169.254.0.1         1   Forever  Static 
 +224.0.0.0/4       10.0.23.2           1       120  Dynamic
 </code> </code>
  
Line 339: Line 451:
 IPv4 Virtual Interface Table IPv4 Virtual Interface Table
  Vif   Thresh   Local-Address   Remote-Address    Pkts-In   Pkts-Out  Vif   Thresh   Local-Address   Remote-Address    Pkts-In   Pkts-Out
-  0         1   10.0.12.2                            8013          0 +  0         1   10.0.12.2                               0          0 
-  1         1   10.0.23.2                               0          0 +  1         1   10.0.12.2                           18267          0 
-  2         1   10.0.12.2                               0       8013+  2         1   10.0.23.2                               0      18267
  
 IPv4 Multicast Forwarding Table IPv4 Multicast Forwarding Table
  Origin          Group             Packets In-Vif  Out-Vifs:Ttls  Origin          Group             Packets In-Vif  Out-Vifs:Ttls
- 10.0.12.1       239.1.1.1            8013    0    2:1+ 10.0.12.1       239.1.1.1               0  65535
  
  
Line 351: Line 463:
  
 IPv6 Multicast Forwarding Table is empty IPv6 Multicast Forwarding Table is empty
 +
 </code> </code>
  
-VM2 had update its mroute table for adding a source for group 239.1.1.1 comming from vif0 (toward VM1).+VM2 had update its mroute table for adding a source for group 239.1.1.1 coming from '65535'??.
  
 ==== 3. Start a mcast receiver (IPerf server) on VM4 ==== ==== 3. Start a mcast receiver (IPerf server) on VM4 ====
Line 389: Line 502:
  
 <code> <code>
-[root@VM3]~# pimd -r +[root@VM3]~# pimctl -d 
-Virtual Interface Table ====================================================== +pimctl: Sending cmd show: No error: 0
-Vif  Local Address    Subnet              Thresh  Flags      Neighbors +
----  ---------------  ------------------  ------  ---------  ----------------- +
-  0  10.0.23.3        10.0.23/24               1  DR PIM     10.0.23.2 +
-  1  10.0.34.3        10.0.34/24               1  DR NO-NBR +
-  2  10.0.23.3        register_vif0            1+
  
- Vif  SSM Group        Sources+PIM Interface Table 
 +Interface         State     Address            Priority  Hello  Nbr  DR Address      DR Priority 
 +vtnet1            Up        10.0.23.3                 1     30    1  10.0.23.3                 1 
 +vtnet2            Up        10.0.34.3                 1     30    0  10.0.34.3                 1
  
-Multicast Routing Table ====================================================== +PIM Neighbor Table 
------------------------------------ (*,G) ------------------------------------ +Interface         Address            Priority  Mode  Uptime/Expires 
-Source           Group            RP Address       Flags +vtnet1            10.0.23.2                 1        0h14m40s/0h1m35s
----------------  ---------------  ---------------  --------------------------- +
-INADDR_ANY       239.1.1.1        10.0.23.2        WC RP CACHE +
-Joined   oifs: ... +
-Pruned   oifs: ... +
-Leaves   oifs: .l. +
-Asserted oifs: ... +
-Outgoing oifs: .o. +
-Incoming     : I..+
  
-TIMERS:  Entry    JP    RS  Assert VIFS:  0  1  2 +Multicast Routing Table 
-             0    60     0       0        0  0  0 +Source            Group            RP Address       Flags 
------------------------------------ (S,G) ------------------------------------ +ANY               239.1.1.1        10.0.23.2        WC RP 
-Source           Group            RP Address       Flags +10.0.12.1         239.1.1.1        10.0.23.2        CACHE SG 
----------------  ---------------  ---------------  --------------------------- + 
-10.0.12.1        239.1.1.1        10.0.23.2        SG +Number of Groups        : 1 
-Joined   oifs: ... +Number of Cache MIRRORs : 1 
-Pruned   oifs: ... + 
-Leaves   oifs: .l. +PIM Candidate Rendez-Vous Point Table 
-Asserted oifs: ... +Group Address     RP Address       Prio  Holdtime  Expires 
-Outgoing oifs: .o. +232.0.0.0/8       169.254.0.1         1   Forever  Never 
-Incoming     : I..+224.0.0.0/4       10.0.23.2           1       150  0h2m25s 
 + 
 +Current BSR address: 10.0.23.3
  
-TIMERS:  Entry    JP    RS  Assert VIFS:  0  1  2 +PIM Rendez-Vous Point Set Table 
-           195    50     0       0        0  0  0 +Group Address     RP Address       Prio  Holdtime  Type 
---------------------------------- (*,*,G) ------------------------------------ +232.0.0.0/8       169.254.0.1         1   Forever  Static 
-Number of Groups: 1 +224.0.0.0/4       10.0.23.2           1       145  Dynamic                                                                                                               
-Number of Cache MIRRORs: 1 +
-------------------------------------------------------------------------------+
 </code> </code>
  
Line 436: Line 539:
 <code> <code>
 [root@VM3]~# netstat -g [root@VM3]~# netstat -g
- 
 IPv4 Virtual Interface Table IPv4 Virtual Interface Table
  Vif   Thresh   Local-Address   Remote-Address    Pkts-In   Pkts-Out  Vif   Thresh   Local-Address   Remote-Address    Pkts-In   Pkts-Out
-  0         1   10.0.23.3                            7882          0 +  0         1   10.0.23.3                               0          0 
-  1         1   10.0.34.3                               0       7882 +  1         1   10.0.23.3                           30739          0 
-  2         1   10.0.23.3                               0          0+  2         1   10.0.34.3                               0      29215
  
 IPv4 Multicast Forwarding Table IPv4 Multicast Forwarding Table
  Origin          Group             Packets In-Vif  Out-Vifs:Ttls  Origin          Group             Packets In-Vif  Out-Vifs:Ttls
- 10.0.12.1       239.1.1.1            7882    0    1:1+ 10.0.12.1       239.1.1.1           29215    1    2:1
  
  
Line 451: Line 553:
  
 IPv6 Multicast Forwarding Table is empty IPv6 Multicast Forwarding Table is empty
- 
 </code> </code>
  
-VM3 correctly learn that there is a subscriber to group 239.1.1.1 on interface vif1 (toward VM4).+VM3 correctly learn that there is a subscriber to group 239.1.1.1 on interface vif1 (toward VM4) and the source is on vif0 (toward VM2).
documentation/examples/multicast_with_pim-sm.1573206359.txt.gz · Last modified: 2019/11/08 10:45 by olivier
Except where otherwise noted, content on this wiki is licensed under the following license: BSD 2-Clause
Donate Powered by PHP Valid HTML5 Valid CSS Driven by DokuWiki