Outils pour utilisateurs

Outils du site


fr:rapports:2026:11-15

2026/11/15 (neutriton) : Refonte du réseau

Heure de début : 10h30

Présences : HgO, Tharyrok, Célo, Bruno, Bruno², wget

Météo

*Moment informel durant lequel on exprime en peu de mots comment on se sent et si on a une attente forte pour la réunion.* Ce n'est pas un moment de discussion mais d'expression individuelle et ce n'est pas obligatoire :-)

Fin : 16h

Attente(s) forte(s)

Si l'une ou l'autre personne exprime une attente forte, merci de vous en occuper en priorité ou de la noter dans le hub ou dans un point approprié.

Refonte du réseau

Résumé des épisodes précédents

https://wiki.neutrinet.be/fr/rapports/2026/11-01

On repasse sur les notions d'IRR, PeeringDB, RPKI, ASPA et MANRS.

Labo GNS3

Le labo complet nécessite 40G de RAM, notamment parce qu'on génère des full views (toutes les routes IP existantes sur internet), et les VM qui génèrent ces full views demandent beaucoup de RAM.

Donc il y a un labo plus simple qui demande moins de RAM.

Il n'y a rien de secret dans ces labos, donc on peut les partager avec qui veut.

  • En haut:
    • labo-verixi-01 qui est une full view
    • labo-belgiumix-rs qui est le route server chez belgiumix
    • des peering vers ovh, cloudflare, etc.
    • On a pris les dump des route server pour être le plus fidèle possible à la réalité
  • 2ème ligne:
    • Ce sont nos bordure de réseau (border)
    • Il y a un par lien de transit ou peering
    • C'est là que ce fait l'aggrégation, la validation, etc. Tout se fait en BGP.
    • Elles annoncent une default gateway aux access (blackhaul et patata)
  • 4ème ligne:
    • blackhaul c'est tout ce qui correspond à la collecte
    • patata c'est le réseau interne des services de Neutrinet
  • 5ème ligne:
    • les openwrt sont juste là pour faire des ping et faire des tests, pour simuler des clients. On utilise openwrt parce qu'il supporte bien ipv6.
    • globalns annonce les préfixes pour vérifier que tout se passe bien pour l'annonce de cet AS.

Tout est géré via une VM management et permet de simuler le réseau interne de management qu'on a déjà dans Neutrinet.

Les liens en bleu c'est la VRF par défaut, les liens en noir c'est la VRF de routing. La VRF routing est utilisée par bird pour remplir les routes apprisent via BGP. La VRF default c'est celle qu'on utilise quand on se connecte en ssh, etc.

Les communautés

Un beau schéma :

flowchart LR EXT["Transit, route-server,
peering"] B[border] C[core] A[access] CL[client] TOOLS["bgp.tools,
bgproutes.io"] CY[Team Cymru] EXT -- "table reçue
marquée 0:20" --> B B -- "0:30 + 0:40 + RTBH
(jamais 0:20)" --> EXT B -- "0:20, 0:30, 0:40,
connectés dans nos préfixes" --> C C -- "0:30, 0:40, 0:60,
RTBH (pas de 0:20)" --> B A -- "0:30 clients, 0:40,
connectés dans nos préfixes" --> C C -- "défaut + 0:60" --> A CL -- "préfixes IRR
marqués 0:30 ou 0:40" --> A A -- "défaut seul" --> CL C -- "0:20 + 0:30" --> TOOLS CY -- "65332:888
devient 0:60" --> C

Les communautés sont fondamentales pour comprendre le routage dans Neutrinet : lorsqu'on reçoit une route, on rajoute une information liée à une communauté, qui permet de filtrer. Une communauté est un tag. Pour ce tag, on utilise notre AS “:” les routes.

Des nombres correspondent aux différentes routes : une route privée, une route qui vient de BelgiumIX, etc. 0:20, ce sont toutes nos routes apprises de l'extérieur.

Lorsque la route est validée sur le plan technique, on lui donne un tag. Le 20 si c'est une route apprise de l'extérieur.

Lorsqu'on annonce nos préfix, on peut tester les différentes routes qui peuvent être exportées et n'exporter que les routes qui n'ont pas le tag 20.

Le fonctionnement avec des tags est plus simple. Cela permet d'être plus générique.

Comment les machines border annoncent au core ?

Toutes les routes qui sont 0:20 (celles qu'on a apprises), 0:30 (nos clients), et les 0:40 (les IP de Neutrinet)

Pourquoi ? Les serveurs border ont une interface lookback. Lorsque bird lit les interfaces réseau, il lit ces infos-là sur l'interface dummy0, et il lui applique le tag 40. Tous les border ont la même ipv4 (80.67.181.0/32) pour une question d'économiser des IPv4.

Les cores annoncent les routes 0:60 et une default route aux access. Et les access envoie une default route aux clients.

Dans l'autre sens, les access annoncent à core les routes 0:30 et 0:40 et les préfixe IP qui sont dans son réseau (par ex. le range d'IP de patata pour access-patata (80.67.181.18/28 et 80.67.181.34/28)).

Team Cymru : c'est un service qui référence les bogons, les IP qui ne sont pas attribuées à aucun opérateur, pour les mettre dans un RTBH : Remotely Triggered Black Hole. Chez Neutrinet, la communauté 60 est cette communauté du trou noir (il faut jeter l'anneau dans un trou noir ??). Cela indique au kernel Linux de jeter le paquet.

Pourquoi un client voudrait mettre dans un trou noir ses IP ? Dans le cas d'une DDoS, il va demander à ce que tous les paquets qu'il reçoit n'arrivent jamais, et il faut que cette info soit le plus haut dans le réseau pour jeter les paquets le plus tôt possible. (Pour rappel le client ne peut annoncer que ses IP sinon il modifierait notre réseau ou il annoncerait des IP que Neutrinet ne peut pas annoncer. Donc il ne peut black hole que ses IPs.)

Config bird

Il y a un petit démon bfd qui permet de savoir si son voisin est vivant ou mort. On vérifie toutes les 0.5s, et si au bout de 3s on a une erreur c'est que le voisin est mort et on retire les routes pour éviter de lui envoyer du traffic.

On retire les routes depuis des tier1 parce qu'on n'est pas connecté à un tier1 directement, donc cela voudrait dire qu'il y a quelqu'un sur le peering qui a une fuite de routes.

On rejette différentes choses. Ca se passe dans le fichier 10_bgp_filters_hygiene.conf. Cela permet de savoir que ce qu'on annonce les standards.

Il y a ensuite les policies. On teste par exemple si ça correspond au blackhole pour labéliser comme tel. On retire aussi la communauté pour éviter qu'un autre routeur de notre réseau fasse le test à nouveau. Le graceful shutdown permet de dire à notre voisin de garder les routes pendant un certain temps en attendant qu'on redémarre nos sessions BGP.

On privilégie en ordre de priorité : nos routes internes (900), les routes via le peering direct (190), les routes via le route server (150), et enfin les routes via le transit (100). On met bgb_local_pref = 0 lors d'un shutdown pour privilégier les autres routes si possible.

Les templates bgp c'est pour éviter de se répéter : le bgp_common indique que toutes nos sessions sont dans le vrf routing, etc.

Entre les border et les core on a dû faire un truc non standard. Que le grand BGP nous pardonne.

Dans rpki, on indique juste tous les combien on refresh les clés, et combien de temps on les garde.

Dans kernel, cela permet de définir comment on passe des routes apprises aux routes insérées dans le kernel. Par exemple on permet le merge paths, ce qui permet d'ajouter plusieurs routes dans le kernel et donc augmenter la bande passante.

On a un script bird-irr-refresh.sh pour rafraichir la table de bird. Ca ne restart le service que si quelque chose à changé. Sinon, on ne rafraichit bird que toutes les 24h. (Pour le transit, ça se met à jour directement.)

Le script find_bilateral_sandidate.py est un script python qui recherche les infos sur les peers potentiels en seconnectant à PeeringDB, etc. Pour NL IX, cela prend longtemps mais on ne doit pas le lancer tout le temps.

NLNOG Looking glass

NLNOG ne fonctionne pas, on va chez Milkywan → lg.milkywan.fr

On voit dans les résultat comment notre RANGE IP est apris via Verixi.

Une fois la 42ème bis refonte du réseau réalisée, on aimerait installé un looking glass pour nous pour faciliter le débuggage.

Maintenance du 12 décembre

Les route-reflector vont devenir des core-main, et les edge vont devenir des border.

Lors de la maintenance, on va éteindre les machines route-reflector, edge*, core et bra et les détruire. On les recréera de 0. On va les recréer car il y a un changement de version de bird.

On commencera par recréer la VM de Verixi, car cela nous permettra d'avoir une full view. Peu importe l'ordre de démarrage des machines, mais on a besoin d'avoir une première full view quelque part.

Une fois qu'on aura 2 main et 2 access, le réseau de Neutrinet sera à nouveau fonctionnel.

Les machines seront relativement facile à reconstruire car on peut réutiliser les variables du labo gns3 de Tharyrok, qui sont déjà dans ansible.

https://static.tharyrok.eu/neutrinet-lab-mini.gns3project

Prochaine réunion

Neutriton :

Prochaine réunion: maintenance le 12/12 à 12h proche de la bleu tower de louise

Réunion hub infra : 07/01/2027 à 18h Garde-Pad : Tharyrok

Météo de fin

*Moment informel durant lequel on exprime en peu de mots comment, à titre personnel, la réunion a été vécue que ce soit positif ou négatif.* *Si une ou plusieurs tension est née durant la réunion, il est peut-être nécessaire d'envisager l'une ou l'autre réunion pour y remédier.*

fr/rapports/2026/11-15.txt · Dernière modification : de tharyrok