Projet

Général

Profil

Projet agregation » Historique » Version 26

Yanick Delarbre, 27/11/2011 19:20

1 1 Laurent GUERBY
h1. Projet agregation
2 1 Laurent GUERBY
3 2 Yanick Delarbre
* [[Bibliographie du projet]]
4 18 Yanick Delarbre
* [[L'installation de gitolite]]
5 3 Yanick Delarbre
* http://pad.rhizome-fai.net/U7HSgxYvDM | Le code du tunnel tun réalisé avec python
6 17 Yanick Delarbre
* http://pad.rhizome-fai.net/TS2HBLkTnN | Spécification de l'iperf (de quel manière on détecte la capacité d'un lien de manière opportuniste ? Monitoring ?)
7 1 Laurent GUERBY
8 1 Laurent GUERBY
* http://lists.tetaneutral.net/listinfo/projet-agregation
9 1 Laurent GUERBY
* http://chiliproject.tetaneutral.net/issues/16
10 4 Jocelyn Dealande
11 22 Laurent GUERBY
h2. Prototype v1
12 22 Laurent GUERBY
13 22 Laurent GUERBY
http://lists.tetaneutral.net/pipermail/projet-agregation/2011-November/000023.html
14 4 Jocelyn Dealande
15 4 Jocelyn Dealande
h2. Test de tunproxy.py
16 4 Jocelyn Dealande
17 4 Jocelyn Dealande
On utilise "tunproxy.py":http://www.secdev.org/projects/tuntap_udp/files/tunproxy.py. Entre 2 machines
18 4 Jocelyn Dealande
* client-adsl (une machine chez nous)
19 4 Jocelyn Dealande
* gateway (la VM)
20 4 Jocelyn Dealande
21 4 Jocelyn Dealande
h3. Sur la gateway (= VM ttn)
22 4 Jocelyn Dealande
23 4 Jocelyn Dealande
Démarrer le tunnel, il crée lui-même une interface _toto0_ (détruite à la sortie).
24 4 Jocelyn Dealande
25 4 Jocelyn Dealande
<pre>
26 4 Jocelyn Dealande
 ./tunproxy.py -s 6000
27 11 Jocelyn Dealande
 ifconfig toto0 10.0.0.1/24 mtu 1468
28 4 Jocelyn Dealande
</pre>
29 1 Laurent GUERBY
30 15 Jocelyn Dealande
La MTU est calculée comme suit : 
31 1 Laurent GUERBY
32 11 Jocelyn Dealande
  MTU de l'iface virtuelle  = MTU  de l'iface physique - taille_max(header IP) - taille(header UDP)
33 15 Jocelyn Dealande
  MTU de l'iface virtuelle = 1500 - 24 - 8
34 11 Jocelyn Dealande
35 17 Yanick Delarbre
http://www.commentcamarche.net/faq/7185-introduction-au-mtu
36 11 Jocelyn Dealande
37 4 Jocelyn Dealande
h3. Sur le client
38 4 Jocelyn Dealande
39 4 Jocelyn Dealande
40 4 Jocelyn Dealande
<pre>
41 4 Jocelyn Dealande
 ./tunproxy.py -c rhizome-fai.tetaneutral.net:6000
42 12 Yanick Delarbre
 ifconfig toto0 10.0.0.2/24 mtu 1468
43 4 Jocelyn Dealande
</pre>
44 4 Jocelyn Dealande
45 4 Jocelyn Dealande
Tout le trafic vers les adresses en 10.0.0.x passera par le tunnel.
46 4 Jocelyn Dealande
47 4 Jocelyn Dealande
* http://lists.tetaneutral.net/listinfo/projet-agregation
48 1 Laurent GUERBY
* http://chiliproject.tetaneutral.net/issues/16
49 1 Laurent GUERBY
50 15 Jocelyn Dealande
Un test de perf sur un téléchargement d'un fichier de 40Mio donne :
51 15 Jocelyn Dealande
52 15 Jocelyn Dealande
* avec tunnel : 909kb/s
53 15 Jocelyn Dealande
* sans tunnel : 942kb/s
54 15 Jocelyn Dealande
55 11 Jocelyn Dealande
h1. Petits points techniques…
56 11 Jocelyn Dealande
57 11 Jocelyn Dealande
h2. Que mesure iperf et comment (en UDP) ?
58 11 Jocelyn Dealande
59 20 Jocelyn Dealande
Iperf mesure le débit du client vers le serveur (dans un seul sens). En UDP, il envoie à une vitesse nominale (par défait 1M). Le résultat donné par le client n'est pas une mesure mais correspond à cette vitesse nominale. *Seul le _server repport_ correspond à la "vraie" mesure.*
60 1 Laurent GUERBY
61 16 Jocelyn Dealande
La saturation d'un lien générant des pertes, pour mesurer les pertes liées à la qualité du lien (et non à sa capacité), il faut demander au client d'émettre un peu en-dessous de la vitesse à laquelle peut recevoir le serveur.
62 17 Yanick Delarbre
63 17 Yanick Delarbre
h2. Quelques outils réseaux bien pratique
64 17 Yanick Delarbre
65 17 Yanick Delarbre
* tcpdump | http://openmaniak.com/fr/tcpdump.php
66 17 Yanick Delarbre
<pre bash>
67 17 Yanick Delarbre
tcpdump -D #Interfaces réseaux disponibles pour la capture
68 17 Yanick Delarbre
tcpdump port 80 -i eth0 -w capture.log #Enregistre le trafic Web vers le fichier capture.log pouvant être ouvert avec Wireshark
69 17 Yanick Delarbre
tcpdump icmp #Affiche tout le trafic associé au protocole icmp
70 17 Yanick Delarbre
</pre>
71 17 Yanick Delarbre
* ping | http://www.bortzmeyer.org/ping-taille-compte.html
72 17 Yanick Delarbre
** Permet de tester un problème de MTU grâce à l'option -s de ping permettant de fixer une taille de paquet
73 17 Yanick Delarbre
* hping3
74 17 Yanick Delarbre
<pre bash>
75 17 Yanick Delarbre
hping --syn -p 80 --data 1200 10.0.0.1 #Envoie de paquet tcp syn sur le port 80 de taille 1200
76 17 Yanick Delarbre
</pre>
77 5 Jocelyn Dealande
78 15 Jocelyn Dealande
79 21 Jocelyn Dealande
*tracepath* pour découvrir le PMTU
80 21 Jocelyn Dealande
81 23 Jocelyn Dealande
h1. TODO étapes suivantes
82 23 Jocelyn Dealande
83 23 Jocelyn Dealande
* Chercher relation entre variations de latence et saturation de lien. Concrètement, être capable de détecter *l'évènement "mon lien est saturé"* et de mémoriser la capacité max. du lien
84 23 Jocelyn Dealande
* Finir de lire/comprendre le code de Fernando (linkagreg)
85 23 Jocelyn Dealande
* Lire/comprendre le bout de script python de Laurent (multi-UDP pour contourner les QoS)
86 23 Jocelyn Dealande
87 9 Jocelyn Dealande
h1. Journal (à partir du 28 oct)
88 1 Laurent GUERBY
89 23 Jocelyn Dealande
Activités du projet de Yanick & Jocelyn (TX) 
90 1 Laurent GUERBY
91 24 Yanick Delarbre
h2. 27 nov.
92 25 Yanick Delarbre
93 24 Yanick Delarbre
* Lecture et utilisation de linkagreg (outil d'agrégation de Fernando)
94 24 Yanick Delarbre
* Faire fonctionner linkagreg sur une architecture 64bits
95 24 Yanick Delarbre
* Faire fonctionner linkagreg avec une connection sur le client //Fonctionnel
96 24 Yanick Delarbre
* Faire fonctionner linkagre avec n connection sur le client //Non fonctionnel
97 26 Yanick Delarbre
* * Test avec une connection filaire et WiFi //Non fonctionnel car perte (important) de paquet sur le lien WiFi
98 26 Yanick Delarbre
* * Test avec des connections virtuelles //Non fonctionnel car QoS inapplicable sur des interfaces virtuelles
99 26 Yanick Delarbre
* * Test avec deux interfaces physiques //Non fonctionnel car QoS déficiente
100 23 Jocelyn Dealande
101 19 Jocelyn Dealande
h2. 11 nov.
102 19 Jocelyn Dealande
103 19 Jocelyn Dealande
* Debuggage du problème de MTU (c'est honteux mais c'est bêtement la taille des buffers qui n'était pas assez grande dans le programme. Notamment dû aux pseudo en-têtes, cf plus bas).
104 19 Jocelyn Dealande
* Configuration auto des adresses IP de chaque côté du tunnel (plus besoin d'ifconfig à la main)
105 19 Jocelyn Dealande
* Ajout sur tunproxy.py de compteurs de débit 
106 19 Jocelyn Dealande
  * mémorise le traffic sur les x dernières tranches de n secondes (défaut 10 tranches de 1 seconde)
107 19 Jocelyn Dealande
  * Affiche les moyennes et les max.
108 19 Jocelyn Dealande
* Compréhension de ce qui passe dans TUN : bien qu'étant un tunnel de niveau 3, il y a une pseudo-en-tête de L2, cf "doc officielle":http://www.mjmwired.net/kernel/Documentation/networking/tuntap.txt#102 (merci Laurent!)
109 19 Jocelyn Dealande
* discussion avec Laurent sur les intérêts de faire un tunnel L2 (qui rajoute pourtant l'overhead de l'en-tête L2), en bref :
110 19 Jocelyn Dealande
  * évite de gérer les soucis spécifiques du niveau IP
111 19 Jocelyn Dealande
  * TUN ne supporte pas IPV6 par exemple …
112 19 Jocelyn Dealande
113 1 Laurent GUERBY
114 23 Jocelyn Dealande
h2. 5 nov.
115 23 Jocelyn Dealande
* Mise en place d'un dépôt git (gitolite) pour partager du code avec Fernando Alves de Sames Wireless : 
116 23 Jocelyn Dealande
117 23 Jocelyn Dealande
    # Dépot public  : (lecture-seule)
118 23 Jocelyn Dealande
    git clone git://rhizome-fai.tetaneutral.net/agregation.git
119 23 Jocelyn Dealande
120 1 Laurent GUERBY
h2.  28 oct. 
121 6 Jocelyn Dealande
122 23 Jocelyn Dealande
* Initiation python (découverte pour Yanick) 
123 5 Jocelyn Dealande
* Commentaire intégral du tunproxy.py et premiers tests de ce dernier
124 8 Jocelyn Dealande
** ping ok (+1ms)
125 15 Jocelyn Dealande
** iperf à travers le tunnel : BP ~= celle de l'uplink ADSL. Le dernier datagrame ne reçoit pas d'ACK
126 5 Jocelyn Dealande
127 5 Jocelyn Dealande
<pre>
128 5 Jocelyn Dealande
[  3] local 10.0.0.2 port 50191 connected with 10.0.0.1 port 5001                        
129 5 Jocelyn Dealande
[ ID] Interval       Transfer     Bandwidth                                              
130 5 Jocelyn Dealande
[  3]  0.0-10.0 sec  1.25 MBytes  1.05 Mbits/sec                                         
131 5 Jocelyn Dealande
[  3] Sent 893 datagrams                                                                 
132 5 Jocelyn Dealande
[  3] WARNING: did not receive ack of last datagram after 10 tries.
133 5 Jocelyn Dealande
</pre>
134 13 Yanick Delarbre
135 13 Yanick Delarbre
h2. 2 novembre
136 13 Yanick Delarbre
137 13 Yanick Delarbre
* Modification de la MTU pour éviter la fragmentation de paquet
138 13 Yanick Delarbre
139 13 Yanick Delarbre
h1. Fonctionnalité
140 13 Yanick Delarbre
141 13 Yanick Delarbre
* Ajouter plusieurs sockets sur le tunnel pour éviter le traffic shaping de la part d'un opérateur