| ... | ... | @@ -10,6 +10,8 @@ L'ensemble des ports sont tagged sur les switches sur tous les vlans auxquels on |
|
|
|
|
|
|
|
En fonctionnement normal le lien sur le switch de secours sera inactif, en cas de coupure du switch principal il va s'activer.
|
|
|
|
|
|
|
|
Prérequis indispensable : `apt install openvswitch-switch` sur les 3 lames.
|
|
|
|
|
|
|
|
## interfaces ILO
|
|
|
|
Deux options possibles:
|
|
|
|
- brancher l'interface ILO sur un port untagged 201
|
| ... | ... | @@ -27,7 +29,7 @@ Le réseau Ceph sera configuré sur 192.168.30.x. Et c'est tout ! |
|
|
|
|
|
|
|
exemple de config pour une lame :
|
|
|
|
```
|
|
|
|
network interface settings; autogenerated
|
|
|
|
# network interface settings; autogenerated
|
|
|
|
# Please do NOT modify this file directly, unless you know what
|
|
|
|
# you're doing.
|
|
|
|
#
|
| ... | ... | @@ -38,7 +40,7 @@ exemple de config pour une lame : |
|
|
|
# configuration from sourced files, so do not attempt to move any of
|
|
|
|
# the PVE managed interfaces into external files!
|
|
|
|
|
|
|
|
allow-vmbr0 bond0
|
|
|
|
auto bond0
|
|
|
|
iface bond0 inet manual
|
|
|
|
ovs_bonds eno1 eno2 eno49 eno50 eno51 eno52
|
|
|
|
ovs_type OVSBond
|
| ... | ... | @@ -73,31 +75,45 @@ auto eno52 |
|
|
|
iface eno52 inet manual
|
|
|
|
mtu 9000
|
|
|
|
|
|
|
|
allow-vmbr0 cluster
|
|
|
|
auto cluster
|
|
|
|
iface cluster inet static
|
|
|
|
address 192.168.30.6
|
|
|
|
address 192.168.30.6 # à adapter 192.168.10.x si anciennement vlan SN
|
|
|
|
netmask 24
|
|
|
|
ovs_type OVSIntPort
|
|
|
|
ovs_bridge vmbr0
|
|
|
|
ovs_options tag=30
|
|
|
|
ovs_mtu 8996
|
|
|
|
|
|
|
|
allow-vmbr0 management
|
|
|
|
ovs_options tag=30 # 98 si anciennement vlan SN
|
|
|
|
ovs_mtu 1500
|
|
|
|
|
|
|
|
# Pour la version avec sync
|
|
|
|
# auto cluster
|
|
|
|
# iface cluster inet static
|
|
|
|
# address 192.168.20.x # à adapter à la lame
|
|
|
|
# netmask 24
|
|
|
|
# ovs_type OVSIntPort
|
|
|
|
# ovs_bridge vmbr0
|
|
|
|
# ovs_options tag=99
|
|
|
|
# ovs_mtu 1500
|
|
|
|
|
|
|
|
auto management
|
|
|
|
iface management inet static
|
|
|
|
address 172.16.3.36
|
|
|
|
address 172.16.3.36 # à adapter à l'IP de la lame
|
|
|
|
netmask 24
|
|
|
|
gateway 172.16.3.254
|
|
|
|
gateway 172.16.3.254 # à adapter
|
|
|
|
ovs_type OVSIntPort
|
|
|
|
ovs_bridge vmbr0
|
|
|
|
ovs_options tag=3
|
|
|
|
ovs_options tag=3 # à adapter
|
|
|
|
|
|
|
|
auto vmbr0
|
|
|
|
iface vmbr0 inet manual
|
|
|
|
ovs_type OVSBridge
|
|
|
|
ovs_ports bond0 cluster management
|
|
|
|
# pour la version avec sync
|
|
|
|
# ovs_ports bond0 cluster sync management
|
|
|
|
ovs_mtu 9000
|
|
|
|
|
|
|
|
```
|
|
|
|
Les valeurs de MTU ci-dessus sont fonctionnelles.
|
|
|
|
|
|
|
|
Attention, le mtu peut poser problème... Si plus de communication ceph, mettre la valeur à 1500 pour l'interface cluster. Il faudrait tester, pour trouver la bonne valeur, j'ai du mal à m'y retrouver. Normalement un vlan taggé prend 4 bit, donc 9000-4 = 8996 devrait passer sur le bridge vmbr0 qui est à 9000 pour l'interface cluster qui est untagged.
|
|
|
|
|
|
|
|
## Config des switchs
|
| ... | ... | @@ -132,13 +148,14 @@ Il faut disposer d'au moins un nouveau switch. Idéalement le 48G. |
|
|
|
- débrancher les 3 cables du reseau cluster (taggé sur 30) par lames et le mettre sur les trunk du 48G.
|
|
|
|
- il reste 1 cable par lame sur le 2ème sw 8G. Refaire la conf des ports idem 48G, mais sans lacp. Attention 30 doit être tagged des 2 cotes ou untagged, selon la conf initiale.
|
|
|
|
|
|
|
|
Jusque là aucun changement de conf n'est à faire sur les lames. tout doit continuer à fontionner, c'est bien le but de la redondance.
|
|
|
|
Jusque là aucun changement de conf n'est à faire sur les lames. tout doit continuer à fonctionner, c'est bien le but de la redondance.
|
|
|
|
|
|
|
|
- copier la conf ci-dessus dans /etc/network/interfaces.new sur chaque lame, adapter les IP.
|
|
|
|
- modifier la conf des vm pour choisir le vlan de l'interface réseau virtuelle. Si la vm est allumée l'interface affiche une erreur, c'est pas grave, cela s'activera au reboot.
|
|
|
|
- rebooter une lame.
|
|
|
|
- débrancher (ou `ifdown`) les interfaces eno1 et eno2 si elles sont encore branchées sur l'ancien trunk.
|
|
|
|
- démarrer les vm.
|
|
|
|
- si tout est ok, faire les autres lames.
|
|
|
|
- finir de brancher les 2 autre cables par lames sur le 48G
|
|
|
|
- finir de brancher les 2 autre câbles par lames sur le 48G
|
|
|
|
- finaliser la config du 8g si besoin
|
|
|
|
|
