Project

General

Profile

Openstack Installation TTNN » History » Version 132

Mehdi Abaakouk, 09/01/2014 02:27 PM

1 43 Laurent GUERBY
{{>toc}}
2 43 Laurent GUERBY
3 1 Mehdi Abaakouk
h1. Openstack Installation TTNN
4 1 Mehdi Abaakouk
5 44 Laurent GUERBY
h2. Liens
6 44 Laurent GUERBY
7 44 Laurent GUERBY
* http://ceph.com/docs/master/rados/operations/cache-tiering/
8 44 Laurent GUERBY
* http://ceph.com/docs/master/rados/operations/crush-map/
9 44 Laurent GUERBY
10 3 Mehdi Abaakouk
h2. Pending upstream fixes:
11 3 Mehdi Abaakouk
12 1 Mehdi Abaakouk
* build-debian-openstack-images, changes should be in next package version:
13 1 Mehdi Abaakouk
** Fix extlinux installation on jessie: http://anonscm.debian.org/cgit/openstack/openstack-debian-images.git/commit/?id=1a4ddceb99fb66f42f79e87a183d8e96952e5ac3
14 1 Mehdi Abaakouk
** Fix cloud-init setup with configdrive: http://anonscm.debian.org/cgit/openstack/openstack-debian-images.git/commit/?id=15cce87e2fa15b8952d69fb58711bfa88b21ef87
15 15 Mehdi Abaakouk
** Use Configdrive first for cloud-init: http://anonscm.debian.org/cgit/openstack/openstack-debian-images.git/commit/?id=1b1e1093d5ee525426382ad29b8219ab58f6656d
16 1 Mehdi Abaakouk
17 1 Mehdi Abaakouk
* nova: 
18 15 Mehdi Abaakouk
** Fix live-migration avec ceph and configdrive:: https://review.openstack.org/#/c/112014/, si la solution est mergé upstream, j'appliquerai le patch au package debian
19 1 Mehdi Abaakouk
20 4 Mehdi Abaakouk
h2. Installation
21 4 Mehdi Abaakouk
22 4 Mehdi Abaakouk
Le setup installé est composé de :
23 4 Mehdi Abaakouk
24 4 Mehdi Abaakouk
* 3 hyperviseurs (compute node) qui contiendront 1 ceph-mon, N ceph-osd, nova-compute (qui lance les VM), neutron-openvswitch-agent (qui configure le réseau des vms)
25 4 Mehdi Abaakouk
* 1 VM (controler node), qui contient tous les services de management d'openstack (nova, cinder, glance, neutron)
26 4 Mehdi Abaakouk
27 4 Mehdi Abaakouk
Les étapes d'installation sont les suivantes:
28 4 Mehdi Abaakouk
* Préparation manuelle de la VM de management sur un des hyperviseurs
29 4 Mehdi Abaakouk
* Installation de ceph et openstack sur toutes les machines avec puppet
30 4 Mehdi Abaakouk
* Déplacement de la VM de management d'openstack dans openstack.
31 4 Mehdi Abaakouk
32 33 Mehdi Abaakouk
h3. Information sur le puppet master:
33 33 Mehdi Abaakouk
34 33 Mehdi Abaakouk
La conf et modules puppet utilisé par tetaneutral.net ce trouve la:
35 33 Mehdi Abaakouk
36 33 Mehdi Abaakouk
> http://chiliproject.tetaneutral.net/projects/git-tetaneutral-net/repository/puppetmaster
37 33 Mehdi Abaakouk
> http://chiliproject.tetaneutral.net/projects/git-tetaneutral-net/repository/puppetmaster/revisions/master/entry/manifests/nodes/openstack.pp
38 33 Mehdi Abaakouk
39 33 Mehdi Abaakouk
Seulement c'est 3 classes sont spécifique à tetaneutral, le reste est réutilisable:
40 33 Mehdi Abaakouk
41 36 Mehdi Abaakouk
> class { 'ttnn::server': }
42 36 Mehdi Abaakouk
> class { 'backup::client': }
43 36 Mehdi Abaakouk
> class { 'sexymotd': }
44 33 Mehdi Abaakouk
45 33 Mehdi Abaakouk
Les modules qui sont nécessaire pour openstack pour le reste du fichier sont:
46 33 Mehdi Abaakouk
47 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-apache.git 
48 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-apt 
49 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-ceph.git 
50 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-cinder.git 
51 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-concat.git 
52 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-glance.git 
53 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-horizon.git 
54 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-inifile.git 
55 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-keystone.git 
56 33 Mehdi Abaakouk
> https://github.com/camptocamp/puppet-kmod.git 
57 33 Mehdi Abaakouk
> https://github.com/saz/puppet-memcached.git 
58 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-mysql.git 
59 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-neutron.git 
60 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-nova.git 
61 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-rabbitmq.git 
62 33 Mehdi Abaakouk
> https://github.com/nanliu/puppet-staging.git 
63 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-stdlib.git 
64 33 Mehdi Abaakouk
> https://github.com/duritong/puppet-sysctl.git 
65 33 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-vcsrepo.git 
66 33 Mehdi Abaakouk
> https://github.com/stackforge/puppet-vswitch.git 
67 36 Mehdi Abaakouk
> https://github.com/puppetlabs/puppetlabs-xinetd.git
68 33 Mehdi Abaakouk
69 33 Mehdi Abaakouk
h3. Préparation réseaux des hosts:
70 29 Mehdi Abaakouk
71 1 Mehdi Abaakouk
72 126 Mehdi Abaakouk
Preparation des bridges openvswitch:
73 126 Mehdi Abaakouk
74 1 Mehdi Abaakouk
<pre>
75 130 Mehdi Abaakouk
$ apt-get install openvswitch-switch 
76 126 Mehdi Abaakouk
$ modprobe vhost-net
77 126 Mehdi Abaakouk
$ modprobe tun
78 126 Mehdi Abaakouk
$ modprobe loop
79 126 Mehdi Abaakouk
$ ovs-vsctl add-br br-net 
80 126 Mehdi Abaakouk
$ ovs-vsctl add-br br-net-bridged 
81 126 Mehdi Abaakouk
$ ovs-vsctl add-br br-admin 
82 126 Mehdi Abaakouk
$ ip link set br-net up 
83 126 Mehdi Abaakouk
$ ip link set br-net-bridged up 
84 126 Mehdi Abaakouk
$ ip link set br-admin up 
85 126 Mehdi Abaakouk
$ ovs-vsctl br-set-external-id br-net bridge-id br-net 
86 126 Mehdi Abaakouk
$ ovs-vsctl br-set-external-id br-net-bridged bridge-id br-net-bridged
87 126 Mehdi Abaakouk
$ ovs-vsctl br-set-external-id br-net bridge-id br-admin 
88 126 Mehdi Abaakouk
</pre>
89 1 Mehdi Abaakouk
90 126 Mehdi Abaakouk
_note: Les bridges openvswitch sont mémorisés et recréés automatiquement par le service openvswitch-switch_
91 126 Mehdi Abaakouk
92 126 Mehdi Abaakouk
On -recharge le fichier rc.local
93 126 Mehdi Abaakouk
94 126 Mehdi Abaakouk
<pre>
95 126 Mehdi Abaakouk
bash -x /etc/rc.local
96 126 Mehdi Abaakouk
</pre>
97 126 Mehdi Abaakouk
98 126 Mehdi Abaakouk
Voici le fichier rc.local d'un hyperviseur
99 126 Mehdi Abaakouk
100 73 Mehdi Abaakouk
101 73 Mehdi Abaakouk
Sur h7.tetaneutral.net le routage est le suivant
102 6 Mehdi Abaakouk
103 17 Mehdi Abaakouk
<pre>
104 16 Mehdi Abaakouk
ip route add 89.234.156.251/32 dev eth0.3131
105 1 Mehdi Abaakouk
ip route add 89.234.156.252/32 dev eth0.3131
106 20 Mehdi Abaakouk
ip route add 89.234.156.253/32 dev eth0.3131
107 16 Mehdi Abaakouk
ip route add 2a01:6600:8083:fb00::/56 dev eth0.3131
108 16 Mehdi Abaakouk
ip route add 2a01:6600:8083:fc00::/56 dev eth0.3131
109 16 Mehdi Abaakouk
ip route add 2a01:6600:8083:fd00::/56 dev eth0.3131
110 16 Mehdi Abaakouk
</pre>
111 1 Mehdi Abaakouk
112 20 Mehdi Abaakouk
h3. Preparation de la VM de management, le controlleur
113 6 Mehdi Abaakouk
114 6 Mehdi Abaakouk
h4. Installation des prérequis
115 6 Mehdi Abaakouk
116 1 Mehdi Abaakouk
<pre>
117 129 Mehdi Abaakouk
$ apt-get install libvirt-bin openstack-debian-images virtinst
118 131 Mehdi Abaakouk
#NOTE(sileht): temporairement récupérer la dernière version:
119 131 Mehdi Abaakouk
$ curl -# http://anonscm.debian.org/cgit/openstack/openstack-debian-images.git/plain/build-openstack-debian-image > /usr/sbin/build-openstack-debian-image
120 20 Mehdi Abaakouk
</pre>
121 1 Mehdi Abaakouk
122 1 Mehdi Abaakouk
h4. Preparation de l'image de la VM
123 92 Mehdi Abaakouk
124 20 Mehdi Abaakouk
On notera les ip temporaire 192.168.3.100
125 20 Mehdi Abaakouk
126 20 Mehdi Abaakouk
<pre>
127 20 Mehdi Abaakouk
$ vim hook.sh
128 1 Mehdi Abaakouk
set -xv
129 20 Mehdi Abaakouk
130 92 Mehdi Abaakouk
echo "openstack" > $BODI_CHROOT_PATH/etc/hostname
131 40 Mehdi Abaakouk
132 46 Mehdi Abaakouk
cat > $BODI_CHROOT_PATH/etc/resolv.conf <<EOF
133 46 Mehdi Abaakouk
domain tetaneutral.net
134 46 Mehdi Abaakouk
search tetaneutral.net
135 1 Mehdi Abaakouk
nameserver 8.8.8.8
136 46 Mehdi Abaakouk
EOF
137 46 Mehdi Abaakouk
138 92 Mehdi Abaakouk
cat > $BODI_CHROOT_PATH/etc/network/interfaces <<EOF
139 6 Mehdi Abaakouk
auto lo
140 20 Mehdi Abaakouk
iface lo inet loopback
141 1 Mehdi Abaakouk
auto eth0
142 6 Mehdi Abaakouk
iface eth0 inet manual
143 4 Mehdi Abaakouk
  pre-up /sbin/sysctl -w net.ipv6.conf.eth0.accept_ra=0
144 1 Mehdi Abaakouk
  pre-up /sbin/sysctl -w net.ipv6.conf.eth0.autoconf=0
145 4 Mehdi Abaakouk
  up ip link set eth0 up
146 10 Mehdi Abaakouk
  up ip addr add 89.234.156.249/32 dev eth0
147 16 Mehdi Abaakouk
  up ip route add 91.224.148.0/32 dev eth0
148 16 Mehdi Abaakouk
  up ip route add default via 91.224.148.0
149 20 Mehdi Abaakouk
150 1 Mehdi Abaakouk
iface eth0 inet6 static
151 7 Mehdi Abaakouk
    pre-up /sbin/sysctl -w net.ipv6.conf.eth0.accept_ra=0
152 4 Mehdi Abaakouk
    pre-up /sbin/sysctl -w net.ipv6.conf.eth0.autoconf=0
153 21 Mehdi Abaakouk
    address 2a01:6600:8083:f900::1
154 12 Mehdi Abaakouk
    netmask 56
155 4 Mehdi Abaakouk
    gateway fe80::31
156 4 Mehdi Abaakouk
157 4 Mehdi Abaakouk
auto eth1
158 5 Mehdi Abaakouk
iface eth1 inet static
159 13 Mehdi Abaakouk
  pre-up /sbin/sysctl -w net.ipv6.conf.eth1.accept_ra=0
160 18 Mehdi Abaakouk
  pre-up /sbin/sysctl -w net.ipv6.conf.eth1.autoconf=0
161 18 Mehdi Abaakouk
  address 192.168.3.100
162 18 Mehdi Abaakouk
  netmask 255.255.255.0
163 18 Mehdi Abaakouk
EOF
164 18 Mehdi Abaakouk
165 18 Mehdi Abaakouk
mkdir -p $BODI_CHROOT_PATH/root/.ssh
166 59 Mehdi Abaakouk
chmod 600 $BODI_CHROOT_PATH/root/.ssh
167 59 Mehdi Abaakouk
cat >> $BODI_CHROOT_PATH/root/.ssh/authorized_keys <<EOF
168 11 Mehdi Abaakouk
ssh-dss AAAAB3NzaC1kc3MAAACBAJtnGLvuz4uVD6fnERDxDi/C0UyzwCiKmgNtEessopREYasAX4Gu6Fg10jAyIL5Nuc7YDnqj//pOfxNjD7hp99a2ZmkRQgh/ltClxYML9fqhBHgsUCpVse9nOYDHDnDgvXIPRSDUHat2UFpdchHVrFURNLIlZnBztsr+GCDURTV/AAAAFQD9SrBcH49ltaKOm6V5ssCPmgs1SwAAAIAbAvkQ3/tMzzdACO5B9s5Yb3ZuM7XImm0iqufivVf2Xy39g8HOBulUsN7eKEGPhVriqNolgIO7q7tVgYAff4/NE4yDP0Kp0SPg4tjt2yFJuL31Y3wzwHjnKrjgNlDSLl3uZnRXSipwUMwGKbdHB6NZSqlq192VKbHilQ00pbiMlAAAAIB5dfB1lVHkJ0o5CcaVQRPbca9DvbbRwnoTSmKHc5DUcqsPqDhS07CkM9ZcJuY1Nh4wGl4Q9kArj7Tnsvvygf/HReSUcIk4+nbDytJ8/pca/Qx4fzQQyppa94TylN62LSFT6MIJKLoMwYa0dQURT7Mv5+9Qj2vk5pZ38w2iQ9zVCg== root@h1
169 4 Mehdi Abaakouk
EOF
170 4 Mehdi Abaakouk
171 6 Mehdi Abaakouk
sed -i -e 's/^.*Port.*$/Port 2222/' -e 's/^[# ]*PasswordAuthentication.*$/PasswordAuthentication no/' $BODI_CHROOT_PATH/etc/ssh/sshd_config
172 4 Mehdi Abaakouk
chroot $BODI_CHROOT_PATH dpkg-reconfigure openssh-server
173 4 Mehdi Abaakouk
chroot $BODI_CHROOT_PATH apt-get purge -y cloud-init*
174 8 Mehdi Abaakouk
</pre>
175 1 Mehdi Abaakouk
176 90 Mehdi Abaakouk
<pre>
177 90 Mehdi Abaakouk
$ chmod +x hook.sh
178 90 Mehdi Abaakouk
$ build-openstack-debian-image --image-size 20  --release jessie -u http://apt.tetaneutral.net/debian/ -s http://apt.tetaneutral.net/debian/ --hook-script $(pwd)/hook.sh
179 90 Mehdi Abaakouk
$ mv debian-jessie-7.0.0-3-amd64.raw /openstack.raw 
180 90 Mehdi Abaakouk
$ rm debian-jessie-7.0.0-3-amd64.qcow2
181 90 Mehdi Abaakouk
</pre>
182 90 Mehdi Abaakouk
183 90 Mehdi Abaakouk
_note: la derniere commande lancée par le script doit être 'qemu-img convert -c -f raw .... , sinon l'image de bootera pas_
184 90 Mehdi Abaakouk
_note(jessie): si l'erreur est celle ci-dessous, relancer manuellement 'kpartx -d debian-jessie-7.0.0-3-amd64.raw' jusqu'a ce que l'erreur disparaissent et le .raw est utilisable:_
185 90 Mehdi Abaakouk
<pre>
186 5 Mehdi Abaakouk
+ 'kpartx -d debian-jessie-7.0.0-3-amd64.raw'
187 6 Mehdi Abaakouk
device-mapper: remove ioctl on loop0p1 failed: Device or resource busy
188 4 Mehdi Abaakouk
loop deleted : /dev/loop0
189 4 Mehdi Abaakouk
</pre>
190 60 Mehdi Abaakouk
_note: si parted freeze -> lancer /etc/init.d/udev restart_
191 4 Mehdi Abaakouk
192 91 Mehdi Abaakouk
193 91 Mehdi Abaakouk
On garde l'image raw qui sera importable dans ceph plus tard et on la mets à la racine pour qui l'utilisateur libvirt puisse y accéder.
194 19 Mehdi Abaakouk
195 93 Mehdi Abaakouk
h4. Préparation du réseau
196 19 Mehdi Abaakouk
197 128 Mehdi Abaakouk
Ces routes sont temporaires, c'est ensuite bird qui les gérera
198 128 Mehdi Abaakouk
199 19 Mehdi Abaakouk
<pre>
200 24 Mehdi Abaakouk
$ ip route add 89.234.156.249/32 dev br-net
201 24 Mehdi Abaakouk
$ ip -6 route add 2a01:6600:8083:f900::/56 dev br-net
202 19 Mehdi Abaakouk
</pre>
203 19 Mehdi Abaakouk
204 19 Mehdi Abaakouk
h4. Installation de la VM
205 19 Mehdi Abaakouk
206 19 Mehdi Abaakouk
<pre>
207 1 Mehdi Abaakouk
$ virt-install --name openstack --ram 2048 --network bridge=br-net,model=virtio --network bridge=br-admin,model=virtio --nographics --serial pty --wait -1 --noreboot --autostart --disk /openstack.raw,bus=virtio,cache=none,io=native --import
208 22 Mehdi Abaakouk
$ EDITOR="sed -i -e \"s,<source bridge='br-net'/>,<source bridge='br-net'/><virtualport type='openvswitch' />,g\"" virsh edit openstack # Openvswitch is not yet supported by virt-install 
209 61 Mehdi Abaakouk
$ EDITOR="sed -i -e \"s,<source bridge='br-admin'/>,<source bridge='br-admin'/><virtualport type='openvswitch' />,g\"" virsh edit openstack # Openvswitch is not yet supported by virt-install 
210 87 Mehdi Abaakouk
$ virsh  start openstack
211 1 Mehdi Abaakouk
$ ssh root@89.234.156.249 -p 2222
212 19 Mehdi Abaakouk
</pre>
213 19 Mehdi Abaakouk
214 24 Mehdi Abaakouk
Une fois connecté à la VM:
215 26 Mehdi Abaakouk
216 26 Mehdi Abaakouk
<pre>
217 4 Mehdi Abaakouk
$ apt-get install puppet
218 26 Mehdi Abaakouk
$ puppet agent --enable
219 32 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
220 26 Mehdi Abaakouk
Info: Caching certificate for ca
221 34 Mehdi Abaakouk
Info: csr_attributes file loading from /etc/puppet/csr_attributes.yaml
222 34 Mehdi Abaakouk
Info: Creating a new SSL certificate request for openstack.tetaneutral.net
223 35 Mehdi Abaakouk
Info: Certificate Request fingerprint (SHA256): AE:72:47:40:A0:E2:F4:59:BA:39:FA:3D:C2:A7:C9:1B:9F:87:A5:B7:65:3A:F9:D4:DE:AF:E2:A3:02:41:0F:2E
224 94 Mehdi Abaakouk
Info: Caching certificate for ca
225 35 Mehdi Abaakouk
Exiting; no certificate found and waitforcert is disabled
226 35 Mehdi Abaakouk
</pre>
227 35 Mehdi Abaakouk
228 35 Mehdi Abaakouk
Sur le puppetmaster:
229 35 Mehdi Abaakouk
230 35 Mehdi Abaakouk
<pre>
231 35 Mehdi Abaakouk
$ puppet ca sign openstack.tetaneutral.net 
232 35 Mehdi Abaakouk
</pre>
233 35 Mehdi Abaakouk
_note: si un vieux cert existe: puppet ca revoke openstack.tetaneutral.net ; puppet cert clean openstack.tetaneutral.net; puppet node clean openstack.tetaneutral.net_
234 35 Mehdi Abaakouk
235 35 Mehdi Abaakouk
De nouveau sur la VM:
236 35 Mehdi Abaakouk
237 35 Mehdi Abaakouk
<pre>
238 35 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
239 35 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
240 35 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
241 35 Mehdi Abaakouk
</pre>
242 64 Mehdi Abaakouk
243 35 Mehdi Abaakouk
Il ne doit plus y avoir d'erreur la 3°/4° fois.
244 35 Mehdi Abaakouk
245 35 Mehdi Abaakouk
h3. Configuration des hyperviseurs
246 35 Mehdi Abaakouk
247 35 Mehdi Abaakouk
Une fois la configuration réseau faite, tout ce fait avec puppet:
248 35 Mehdi Abaakouk
249 35 Mehdi Abaakouk
<pre>
250 35 Mehdi Abaakouk
$ apt-get install puppet
251 35 Mehdi Abaakouk
$ puppet agent --enable
252 35 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
253 35 Mehdi Abaakouk
Info: Caching certificate for ca
254 35 Mehdi Abaakouk
Info: csr_attributes file loading from /etc/puppet/csr_attributes.yaml
255 35 Mehdi Abaakouk
Info: Creating a new SSL certificate request for openstack.tetaneutral.net
256 35 Mehdi Abaakouk
Info: Certificate Request fingerprint (SHA256): AE:72:47:40:A0:E2:F4:59:BA:39:FA:3D:C2:A7:C9:1B:9F:87:A5:B7:65:3A:F9:D4:DE:AF:E2:A3:02:41:0F:2E
257 35 Mehdi Abaakouk
Info: Caching certificate for ca
258 35 Mehdi Abaakouk
Exiting; no certificate found and waitforcert is disabled
259 35 Mehdi Abaakouk
</pre>
260 35 Mehdi Abaakouk
261 101 Mehdi Abaakouk
Sur le puppetmaster:
262 35 Mehdi Abaakouk
263 35 Mehdi Abaakouk
<pre>
264 35 Mehdi Abaakouk
$ puppet ca sign openstack.tetaneutral.net 
265 35 Mehdi Abaakouk
</pre>
266 35 Mehdi Abaakouk
_note: si un vieux cert existe: puppet ca revoke openstack.tetaneutral.net ; puppet cert clean openstack.tetaneutral.net; puppet node clean openstack.tetaneutral.net_
267 35 Mehdi Abaakouk
268 35 Mehdi Abaakouk
De nouveau sur la VM:
269 35 Mehdi Abaakouk
270 35 Mehdi Abaakouk
<pre>
271 35 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
272 100 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
273 100 Mehdi Abaakouk
$ puppet agent -vt --server puppet.tetaneutral.net --certname openstack.tetaneutral.net --pluginsync 
274 100 Mehdi Abaakouk
</pre>
275 100 Mehdi Abaakouk
276 35 Mehdi Abaakouk
Il ne doit plus y avoir d'erreur la 3°/4° fois.
277 1 Mehdi Abaakouk
278 72 Mehdi Abaakouk
h4. Information sur la configuration d'un hyperviseur sur le puppet master
279 37 Mehdi Abaakouk
280 38 Mehdi Abaakouk
La configuration puppet ressemble à :
281 38 Mehdi Abaakouk
282 109 Mehdi Abaakouk
<pre>
283 1 Mehdi Abaakouk
node "gX.tetaneutral.net" inherits openstack_node_common {
284 120 Mehdi Abaakouk
  # Configuration du routerid et de l'AS number de cette machine
285 1 Mehdi Abaakouk
  # Il faut aussi mettre la conf bgp de h7 ainsi que les fichiers 
286 1 Mehdi Abaakouk
  # /etc/puppet/manifests/files/openstack-bird.conf.erb et
287 125 Mehdi Abaakouk
  # /etc/puppet/manifests/files/openstack-bird6.conf.erb
288 125 Mehdi Abaakouk
  # pour ajouter cette AS interne
289 97 Mehdi Abaakouk
  ttnn_os_bird {'198.51.100.1': asnum => "65001"}
290 109 Mehdi Abaakouk
291 120 Mehdi Abaakouk
  # Dans le cas d'une moniteur ceph, mais uniquement 3 suffissent, on a déjà g1,g2,g3
292 109 Mehdi Abaakouk
  ttnn_ceph_mon {$::hostname:}
293 88 Mehdi Abaakouk
  # Sinon utilisait:
294 88 Mehdi Abaakouk
  # class{"ttnn_ceph_osd_only": }
295 109 Mehdi Abaakouk
296 88 Mehdi Abaakouk
  # La partie Openstack, l'uuid doit être unique par machine (générer avec uuid-gen)
297 109 Mehdi Abaakouk
  ttnn_os_compute {"9d26ec10-a48b-4f0f-a122-f10ed16d270f": }
298 109 Mehdi Abaakouk
}
299 109 Mehdi Abaakouk
</pre>
300 109 Mehdi Abaakouk
301 109 Mehdi Abaakouk
h3. Déplacement du disk du controlleur dans le cluster ceph
302 109 Mehdi Abaakouk
303 97 Mehdi Abaakouk
Les recettes puppet on créé un pool disks pour les mettres les VMs et volumes de VM
304 97 Mehdi Abaakouk
305 109 Mehdi Abaakouk
306 97 Mehdi Abaakouk
Sur g1, on import le disque de la VM dans ceph et on modifie la conf libvirt:
307 97 Mehdi Abaakouk
308 109 Mehdi Abaakouk
<pre>
309 111 Mehdi Abaakouk
$ virsh shutdown openstack
310 120 Mehdi Abaakouk
$ rbd -p disks import /var/lib/ceph/osd/ceph-0/openstack.raw  openstack-disk
311 109 Mehdi Abaakouk
$ virsh edit openstack
312 109 Mehdi Abaakouk
</pre>
313 109 Mehdi Abaakouk
314 109 Mehdi Abaakouk
Remplacer: 
315 112 Mehdi Abaakouk
<pre>
316 109 Mehdi Abaakouk
    <disk type='file' device='disk'>
317 109 Mehdi Abaakouk
      <driver name='qemu' type='raw' cache='none' io='native'/>
318 109 Mehdi Abaakouk
      <source file='/var/lib/ceph/osd/ceph-0/openstack.raw'/>
319 110 Mehdi Abaakouk
      <target dev='vda' bus='virtio'/>
320 109 Mehdi Abaakouk
      <address type='pci' domain='0x0000' bus='0x00' slot='0x04' function='0x0'/>
321 97 Mehdi Abaakouk
    </disk>
322 97 Mehdi Abaakouk
</pre>
323 109 Mehdi Abaakouk
324 97 Mehdi Abaakouk
Par:
325 97 Mehdi Abaakouk
326 109 Mehdi Abaakouk
<pre>
327 109 Mehdi Abaakouk
    <disk type='network' device='disk'>
328 109 Mehdi Abaakouk
        <driver name='qemu' type='raw'/>
329 109 Mehdi Abaakouk
        <source protocol='rbd' name='disks/openstack-disk'>
330 97 Mehdi Abaakouk
                <host name='192.168.3.101' port='6789'/>
331 97 Mehdi Abaakouk
                <host name='192.168.3.102' port='6789'/>
332 109 Mehdi Abaakouk
                <host name='192.168.3.103' port='6789'/>
333 97 Mehdi Abaakouk
        </source>
334 97 Mehdi Abaakouk
        <auth username='openstack-service'>
335 109 Mehdi Abaakouk
            <secret type='ceph' uuid='1fe74663-8dfa-486c-bb80-3bd94c90c967'/>
336 97 Mehdi Abaakouk
        </auth>
337 97 Mehdi Abaakouk
        <target dev='vda' bus='virtio'/>
338 97 Mehdi Abaakouk
        <address type='pci' domain='0x0000' bus='0x00' slot='0x04' function='0x0'/>
339 97 Mehdi Abaakouk
    </disk>
340 97 Mehdi Abaakouk
</pre>
341 97 Mehdi Abaakouk
342 97 Mehdi Abaakouk
La clé ceph pour libvirt a déjà été installé par puppet pour avoir sont uuid:
343 97 Mehdi Abaakouk
344 97 Mehdi Abaakouk
<pre>
345 97 Mehdi Abaakouk
$ virsh secret-list
346 97 Mehdi Abaakouk
 UUID                                  Usage
347 97 Mehdi Abaakouk
--------------------------------------------------------------------------------
348 97 Mehdi Abaakouk
 1fe74663-8dfa-486c-bb80-3bd94c90c967  ceph client.openstack-service secret
349 97 Mehdi Abaakouk
</pre>
350 97 Mehdi Abaakouk
351 97 Mehdi Abaakouk
Puis on démarre
352 97 Mehdi Abaakouk
353 97 Mehdi Abaakouk
<pre>
354 97 Mehdi Abaakouk
$ virsh start openstack
355 97 Mehdi Abaakouk
</pre>
356 97 Mehdi Abaakouk
357 97 Mehdi Abaakouk
358 97 Mehdi Abaakouk
Ca marche !
359 97 Mehdi Abaakouk
360 97 Mehdi Abaakouk
<pre>
361 68 Mehdi Abaakouk
$ ssh openstack.t
362 68 Mehdi Abaakouk
X11 forwarding request failed on channel 0
363 68 Mehdi Abaakouk
364 68 Mehdi Abaakouk
  server: openstack.tetaneutral.net
365 102 Mehdi Abaakouk
  system: Debian jessie/sid, kernel 3.14-2-amd64, puppet 3.6.1
366 1 Mehdi Abaakouk
     cpu: 1/1 (QEMU Virtual CPU version 2.1.0)
367 102 Mehdi Abaakouk
  memory: 1.96 GB
368 1 Mehdi Abaakouk
369 102 Mehdi Abaakouk
    eth0: 52:54:00:90:d8:c7 / 89.234.156.249 / 2a01:6600:8083:f900::1
370 102 Mehdi Abaakouk
    eth1: 52:54:00:13:fa:13 / 192.168.3.100
371 68 Mehdi Abaakouk
372 68 Mehdi Abaakouk
 modules: openstack_node_common ttnn::server resolver checkmk::agent checkmk::client rsyslog::client rsyslog apt apt::update puppet nullmailer backup::client sexymotd 
373 68 Mehdi Abaakouk
                            _             _    
374 68 Mehdi Abaakouk
  ___  _ __   ___ _ __  ___| |_ __ _  ___| | __
375 68 Mehdi Abaakouk
 / _ \| '_ \ / _ \ '_ \/ __| __/ _` |/ __| |/ /
376 68 Mehdi Abaakouk
| (_) | |_) |  __/ | | \__ \ || (_| | (__|   < 
377 68 Mehdi Abaakouk
 \___/| .__/ \___|_| |_|___/\__\__,_|\___|_|\_\
378 68 Mehdi Abaakouk
      |_|                                      
379 68 Mehdi Abaakouk
Last login: Wed Aug 27 08:10:02 2014 from atoulouse-652-1-119-50.w2-6.abo.wanadoo.fr
380 68 Mehdi Abaakouk
root@openstack:~# 
381 68 Mehdi Abaakouk
382 68 Mehdi Abaakouk
</pre>
383 68 Mehdi Abaakouk
384 68 Mehdi Abaakouk
h2. Preparation des OSD pour ceph
385 68 Mehdi Abaakouk
386 68 Mehdi Abaakouk
h3. Cas général un disque entier:
387 68 Mehdi Abaakouk
388 68 Mehdi Abaakouk
$ ceph-disk prepare /dev/sdb
389 68 Mehdi Abaakouk
$ ceph-disk activate /dev/sdb
390 68 Mehdi Abaakouk
391 1 Mehdi Abaakouk
h3. Cas particulier du SSD ou ce trouve l'OS
392 68 Mehdi Abaakouk
393 103 Mehdi Abaakouk
En général avec ceph, on donne un disque, ceph créé 2 partitions une pour le journal de l'OSD, l'autre pour les datas
394 1 Mehdi Abaakouk
mais pour le SSD de tetaneutral qui a aussi l'OS, voici la méthode
395 34 Mehdi Abaakouk
396 103 Mehdi Abaakouk
Création manuelle de la partition de data ceph /dev/sda2 ici
397 102 Mehdi Abaakouk
398 1 Mehdi Abaakouk
<pre>
399 1 Mehdi Abaakouk
$ fdisk /dev/sda
400 102 Mehdi Abaakouk
401 102 Mehdi Abaakouk
n
402 102 Mehdi Abaakouk
p
403 102 Mehdi Abaakouk
<enter>
404 102 Mehdi Abaakouk
<enter>
405 102 Mehdi Abaakouk
<enter>
406 102 Mehdi Abaakouk
<enter>
407 104 Mehdi Abaakouk
w
408 104 Mehdi Abaakouk
409 104 Mehdi Abaakouk
$ partprobe
410 104 Mehdi Abaakouk
</pre>
411 104 Mehdi Abaakouk
412 104 Mehdi Abaakouk
On prepare le disk comme normalement
413 105 Mehdi Abaakouk
414 104 Mehdi Abaakouk
<pre>
415 104 Mehdi Abaakouk
ceph-disk prepare /dev/sda2
416 106 Mehdi Abaakouk
ceph-disk activate /dev/sda2
417 104 Mehdi Abaakouk
</pre>
418 104 Mehdi Abaakouk
419 116 Mehdi Abaakouk
Le disque n'étant pas utilisé uniquement par ceph, le service ceph ne le chargera pas automatiquement:
420 116 Mehdi Abaakouk
Il faut ajouter ceci dans le /etc/rc.local:
421 116 Mehdi Abaakouk
422 116 Mehdi Abaakouk
<pre>
423 116 Mehdi Abaakouk
ceph-disk activate /dev/sda2
424 116 Mehdi Abaakouk
</pre>
425 116 Mehdi Abaakouk
426 116 Mehdi Abaakouk
3. Suppression OSD:
427 116 Mehdi Abaakouk
428 116 Mehdi Abaakouk
<pre>
429 116 Mehdi Abaakouk
name="osd.2"
430 116 Mehdi Abaakouk
ceph osd out ${name}
431 116 Mehdi Abaakouk
/etc/init.d/ceph stop ${name}
432 116 Mehdi Abaakouk
ceph osd crush remove ${name}
433 116 Mehdi Abaakouk
ceph auth del ${name}
434 116 Mehdi Abaakouk
ceph osd rm ${name}
435 116 Mehdi Abaakouk
ceph osd tree
436 116 Mehdi Abaakouk
</pre>
437 116 Mehdi Abaakouk
438 116 Mehdi Abaakouk
h2. Configuration des Placements Groups des pools:
439 116 Mehdi Abaakouk
440 116 Mehdi Abaakouk
Par défaut les pools sont créés avec des placements groups à 8 (pg_num=8), 3 replicats dont 2 "synchrones (dans le sens ack de l'IO au client)" 
441 116 Mehdi Abaakouk
442 116 Mehdi Abaakouk
Mais cette valeur (pg_num) défini le bon fonctionnement de ceph. Dans le cas standard (ie: 1 seul pool) la recette est facile: 
443 116 Mehdi Abaakouk
444 116 Mehdi Abaakouk
<pre>
445 116 Mehdi Abaakouk
               (OSDs * 100)
446 116 Mehdi Abaakouk
Total PGs = (  ------------  )
447 116 Mehdi Abaakouk
              OSD per object
448 116 Mehdi Abaakouk
</pre>
449 116 Mehdi Abaakouk
450 116 Mehdi Abaakouk
On arrondi à la puissance de 2 supperieurs. Mais dans notre cas 3 pools ce n'est pas si simple, les pools auront des cas d'utilisation différent:
451 116 Mehdi Abaakouk
452 116 Mehdi Abaakouk
Ma proposition de configuration:
453 107 Mehdi Abaakouk
* Pool ssds: il a 3 OSDs pour lui tout seul, on applique la recette magique: 3*100/3 ~= 128 pgs
454 1 Mehdi Abaakouk
* Pools images et disks: ils ont 3 OSDs à ce partager donc il faut répartir les 128 pgs. soit 32pgs et 96pgs (PS: il faut au moins 20pgs pour 3 réplicats)
455 69 Mehdi Abaakouk
456 1 Mehdi Abaakouk
Soit:
457 1 Mehdi Abaakouk
<pre>
458 79 Mehdi Abaakouk
ceph osd pool set ssds pg_num 128
459 1 Mehdi Abaakouk
ceph osd pool set images pg_num 32
460 1 Mehdi Abaakouk
ceph osd pool set disks pg_num 96
461 1 Mehdi Abaakouk
462 1 Mehdi Abaakouk
# attendre un peu qu'il y est plus de pg_create dans 'ceph -s'
463 121 Mehdi Abaakouk
ceph osd pool set ssds pgp_num 128  
464 121 Mehdi Abaakouk
ceph osd pool set images pgp_num 32
465 121 Mehdi Abaakouk
ceph osd pool set disks pgp_num 96
466 121 Mehdi Abaakouk
</pre>
467 1 Mehdi Abaakouk
468 107 Mehdi Abaakouk
469 1 Mehdi Abaakouk
470 107 Mehdi Abaakouk
_ref: http://ceph.com/docs/master/rados/operations/placement-groups/_
471 107 Mehdi Abaakouk
472 1 Mehdi Abaakouk
h2. Preparation du Pool SSD pour ceph 
473 107 Mehdi Abaakouk
474 107 Mehdi Abaakouk
Chaque machine se trouve dans 2 hosts, un host SSD et un host HARDDISK (même si en réalité les deux sont sur la même machine physique),
475 107 Mehdi Abaakouk
476 107 Mehdi Abaakouk
Ensuite on créé 2 object root un pour les hosts SSD et un autre pour les host HARDDISK
477 107 Mehdi Abaakouk
478 107 Mehdi Abaakouk
On créé ensuite 2 règles de stockage une qui envoie les objects vers le root SSD et l'autre vers le root HARDDISK
479 107 Mehdi Abaakouk
480 107 Mehdi Abaakouk
Cela permettra d'avoir de définir une règle différente suivant les pools ceph.
481 107 Mehdi Abaakouk
482 107 Mehdi Abaakouk
Niveau Openstack nous avons 3 pools:
483 107 Mehdi Abaakouk
* disks: Ce pool aura les disques de VM et les volumes attaché
484 107 Mehdi Abaakouk
* ssds: Ce pool contiendra les volumes sur ssd
485 107 Mehdi Abaakouk
* images: c'est la que seront stocké les images de VMs (glance).
486 122 Mehdi Abaakouk
487 122 Mehdi Abaakouk
h3. Configuration de la crushmap de ceph:
488 122 Mehdi Abaakouk
489 122 Mehdi Abaakouk
Création de l'arbre de ragnement physique des SSD, l'arbre nommé 'default' sera donc celui des disques durs
490 122 Mehdi Abaakouk
491 122 Mehdi Abaakouk
<pre>
492 122 Mehdi Abaakouk
$ ceph osd crush add-bucket ssd root
493 122 Mehdi Abaakouk
$ ceph osd crush add-bucket g1-ssd host
494 122 Mehdi Abaakouk
$ ceph osd crush add-bucket g2-ssd host
495 122 Mehdi Abaakouk
$ ceph osd crush add-bucket g3-ssd host
496 1 Mehdi Abaakouk
$ ceph osd crush move g1-ssd root=ssd
497 1 Mehdi Abaakouk
$ ceph osd crush move g2-ssd root=ssd
498 1 Mehdi Abaakouk
$ ceph osd crush move g3-ssd root=ssd
499 107 Mehdi Abaakouk
$ ceph osd tree
500 107 Mehdi Abaakouk
# id	weight	type name	up/down	reweight
501 1 Mehdi Abaakouk
-5	0	root ssd
502 118 Mehdi Abaakouk
-6	0		host g1-ssd
503 118 Mehdi Abaakouk
-7	0		host g2-ssd
504 118 Mehdi Abaakouk
-8	0		host g3-ssd
505 118 Mehdi Abaakouk
-1	3	root default
506 117 Mehdi Abaakouk
-2	1		host g1
507 117 Mehdi Abaakouk
0	1			osd.0	up	1	
508 117 Mehdi Abaakouk
3	1			osd.3	up	1	
509 118 Mehdi Abaakouk
-3	1		host g2
510 118 Mehdi Abaakouk
1	1			osd.1	up	1	
511 107 Mehdi Abaakouk
4	1			osd.4	up	1	
512 107 Mehdi Abaakouk
-4	1		host g3
513 122 Mehdi Abaakouk
2	1			osd.2	up	1	
514 122 Mehdi Abaakouk
5	1			osd.5	up	1	
515 122 Mehdi Abaakouk
</pre>
516 122 Mehdi Abaakouk
517 122 Mehdi Abaakouk
518 122 Mehdi Abaakouk
On range les osd qui ont des disques SSD dans ce nouvel arbre.
519 122 Mehdi Abaakouk
520 122 Mehdi Abaakouk
<pre>
521 122 Mehdi Abaakouk
$ ceph osd crush add osd.3 1  root=ssd host=g1-ssd
522 122 Mehdi Abaakouk
$ ceph osd crush add osd.4 1  root=ssd host=g2-ssd
523 122 Mehdi Abaakouk
$ ceph osd crush add osd.5 1  root=ssd host=g3-ssd
524 122 Mehdi Abaakouk
# Ou si l'osd a déjà éte positionné une fois
525 122 Mehdi Abaakouk
$ ceph osd crush set osd.3 1  root=ssd host=g1-ssd
526 122 Mehdi Abaakouk
$ ceph osd crush set osd.4 1  root=ssd host=g2-ssd
527 96 Mehdi Abaakouk
$ ceph osd crush set osd.5 1  root=ssd host=g3-ssd
528 96 Mehdi Abaakouk
529 108 Mehdi Abaakouk
# Vérifier le résultat
530 107 Mehdi Abaakouk
$ ceph osd tree
531 96 Mehdi Abaakouk
# id	weight	type name	up/down	reweight
532 96 Mehdi Abaakouk
-5	3	root ssd
533 121 Mehdi Abaakouk
-6	1		host g1-ssd
534 96 Mehdi Abaakouk
3	1			osd.3	up	1	
535 107 Mehdi Abaakouk
-7	1		host g2-ssd
536 107 Mehdi Abaakouk
4	1			osd.4	up	1	
537 107 Mehdi Abaakouk
-8	1		host g3-ssd
538 107 Mehdi Abaakouk
5	1			osd.5	up	1	
539 107 Mehdi Abaakouk
-1	3	root default
540 107 Mehdi Abaakouk
-2	1		host g1
541 107 Mehdi Abaakouk
0	1			osd.0	up	1	
542 107 Mehdi Abaakouk
-3	1		host g2
543 107 Mehdi Abaakouk
1	1			osd.1	up	1	
544 107 Mehdi Abaakouk
-4	1		host g3
545 107 Mehdi Abaakouk
2	1			osd.2	up	1	
546 107 Mehdi Abaakouk
</pre>
547 107 Mehdi Abaakouk
548 107 Mehdi Abaakouk
549 107 Mehdi Abaakouk
h3. Definition de la crushmap de ttnn
550 107 Mehdi Abaakouk
551 107 Mehdi Abaakouk
552 107 Mehdi Abaakouk
Une fois la crushmap modifié on créée et applique la règle sur le pool ssds:
553 107 Mehdi Abaakouk
554 107 Mehdi Abaakouk
<pre>
555 107 Mehdi Abaakouk
$ ceph osd crush rule create-simple ssd_replicated_ruleset ssd host firstn
556 107 Mehdi Abaakouk
$ ceph osd crush rule dump
557 107 Mehdi Abaakouk
[
558 107 Mehdi Abaakouk
    { "rule_id": 0,
559 107 Mehdi Abaakouk
      "rule_name": "replicated_ruleset",
560 1 Mehdi Abaakouk
      "ruleset": 0,
561 107 Mehdi Abaakouk
      "type": 1,
562 107 Mehdi Abaakouk
      "min_size": 1,
563 107 Mehdi Abaakouk
      "max_size": 10,
564 107 Mehdi Abaakouk
      "steps": [
565 107 Mehdi Abaakouk
            { "op": "take",
566 107 Mehdi Abaakouk
              "item": -1,
567 1 Mehdi Abaakouk
              "item_name": "default"},
568 121 Mehdi Abaakouk
            { "op": "chooseleaf_firstn",
569 1 Mehdi Abaakouk
              "num": 0,
570 1 Mehdi Abaakouk
              "type": "host"},
571 107 Mehdi Abaakouk
            { "op": "emit"}]},
572 1 Mehdi Abaakouk
    { "rule_id": 1,
573 1 Mehdi Abaakouk
      "rule_name": "ssd_replicated_ruleset",
574 107 Mehdi Abaakouk
      "ruleset": 1,
575 1 Mehdi Abaakouk
      "type": 1,
576 1 Mehdi Abaakouk
      "min_size": 1,
577 1 Mehdi Abaakouk
      "max_size": 10,
578 113 Mehdi Abaakouk
      "steps": [
579 114 Mehdi Abaakouk
            { "op": "take",
580 1 Mehdi Abaakouk
              "item": -5,
581 114 Mehdi Abaakouk
              "item_name": "ssd"},
582 113 Mehdi Abaakouk
            { "op": "chooseleaf_firstn",
583 113 Mehdi Abaakouk
              "num": 0,
584 113 Mehdi Abaakouk
              "type": "host"},
585 113 Mehdi Abaakouk
            { "op": "emit"}]}]
586 113 Mehdi Abaakouk
587 113 Mehdi Abaakouk
$ ceph osd pool set ssds crush_ruleset 1
588 113 Mehdi Abaakouk
</pre>
589 1 Mehdi Abaakouk
590 114 Mehdi Abaakouk
Il faut ensuite attendre que ceph redistribue les data comme on lui a demandé, on peut suivre l'avancement avec :
591 114 Mehdi Abaakouk
592 114 Mehdi Abaakouk
<pre>
593 114 Mehdi Abaakouk
ceph -s
594 114 Mehdi Abaakouk
</pre>
595 115 Mehdi Abaakouk
596 115 Mehdi Abaakouk
h2. Management d'openstack
597 114 Mehdi Abaakouk
598 114 Mehdi Abaakouk
h2. Maintenant de la VM de management
599 114 Mehdi Abaakouk
600 114 Mehdi Abaakouk
h3. Live Migration d'un host à l'autre
601 114 Mehdi Abaakouk
602 114 Mehdi Abaakouk
Cela fait tout à notre place niveau kvm/libvirt/ceph
603 114 Mehdi Abaakouk
604 114 Mehdi Abaakouk
<pre>
605 114 Mehdi Abaakouk
virsh migrate --persistent --undefinesource --live --p2p openstack qemu+ssh://g2:2222/system
606 114 Mehdi Abaakouk
</pre>
607 114 Mehdi Abaakouk
608 114 Mehdi Abaakouk
Pour le réseau le service/script 'tetaneutral-openstack-routing-daemon.sh' s'occupe de basculer les routes automatiquement.
609 114 Mehdi Abaakouk
610 114 Mehdi Abaakouk
h3. Recover depuis une perte de la machine hote:
611 114 Mehdi Abaakouk
612 114 Mehdi Abaakouk
Créé un fichier openstack.xml à partir d'un backup de '/etc/libvirt/qemu/openstack.xml' ou utiliser l'exemple ci-dessous:
613 114 Mehdi Abaakouk
614 114 Mehdi Abaakouk
_Note: il faut surement viré les uuid des interfaces openvswitch qui sont différent suivant le hosts_
615 114 Mehdi Abaakouk
616 114 Mehdi Abaakouk
<pre>
617 114 Mehdi Abaakouk
<domain type='kvm'>
618 114 Mehdi Abaakouk
  <name>openstack</name>
619 114 Mehdi Abaakouk
  <uuid>8ff46696-7b94-6d0b-7022-edbcf88648c0</uuid>
620 114 Mehdi Abaakouk
  <memory unit='KiB'>2097152</memory>
621 114 Mehdi Abaakouk
  <currentMemory unit='KiB'>2097152</currentMemory>
622 114 Mehdi Abaakouk
  <vcpu placement='static'>1</vcpu>
623 114 Mehdi Abaakouk
  <os>
624 124 Mehdi Abaakouk
    <type arch='x86_64' machine='pc-i440fx-2.1'>hvm</type>
625 114 Mehdi Abaakouk
    <boot dev='hd'/>
626 114 Mehdi Abaakouk
  </os>
627 114 Mehdi Abaakouk
  <features>
628 114 Mehdi Abaakouk
    <acpi/>
629 114 Mehdi Abaakouk
    <apic/>
630 114 Mehdi Abaakouk
    <pae/>
631 114 Mehdi Abaakouk
  </features>
632 114 Mehdi Abaakouk
  <clock offset='utc'/>
633 114 Mehdi Abaakouk
  <on_poweroff>destroy</on_poweroff>
634 114 Mehdi Abaakouk
  <on_reboot>restart</on_reboot>
635 114 Mehdi Abaakouk
  <on_crash>restart</on_crash>
636 114 Mehdi Abaakouk
  <devices>
637 114 Mehdi Abaakouk
    <emulator>/usr/bin/kvm</emulator>
638 114 Mehdi Abaakouk
    <disk type='network' device='disk'>
639 114 Mehdi Abaakouk
      <driver name='qemu' type='raw'/>
640 114 Mehdi Abaakouk
      <auth username='openstack-service'>
641 114 Mehdi Abaakouk
        <secret type='ceph' uuid='1fe74663-8dfa-486c-bb80-3bd94c90c967'/>
642 114 Mehdi Abaakouk
      </auth>
643 114 Mehdi Abaakouk
      <source protocol='rbd' name='disks/openstack-disk'/>
644 114 Mehdi Abaakouk
      <target dev='vda' bus='virtio'/>
645 114 Mehdi Abaakouk
      <address type='pci' domain='0x0000' bus='0x00' slot='0x04' function='0x0'/>
646 114 Mehdi Abaakouk
    </disk>
647 114 Mehdi Abaakouk
    <controller type='usb' index='0'>
648 114 Mehdi Abaakouk
      <address type='pci' domain='0x0000' bus='0x00' slot='0x01' function='0x2'/>
649 114 Mehdi Abaakouk
    </controller>
650 114 Mehdi Abaakouk
    <controller type='pci' index='0' model='pci-root'/>
651 114 Mehdi Abaakouk
    <interface type='bridge'>
652 114 Mehdi Abaakouk
      <mac address='52:54:00:90:d8:c7'/>
653 114 Mehdi Abaakouk
      <source bridge='br-net'/>
654 114 Mehdi Abaakouk
      <virtualport type='openvswitch'>
655 114 Mehdi Abaakouk
        <parameters interfaceid='f0c8bfd0-36e3-46fb-974e-9dbe8d501c19'/>
656 114 Mehdi Abaakouk
      </virtualport>
657 114 Mehdi Abaakouk
      <model type='virtio'/>
658 114 Mehdi Abaakouk
      <address type='pci' domain='0x0000' bus='0x00' slot='0x02' function='0x0'/>
659 114 Mehdi Abaakouk
    </interface>
660 114 Mehdi Abaakouk
    <interface type='bridge'>
661 114 Mehdi Abaakouk
      <mac address='52:54:00:13:fa:13'/>
662 114 Mehdi Abaakouk
      <source bridge='br-admin'/>
663 114 Mehdi Abaakouk
      <virtualport type='openvswitch'>
664 114 Mehdi Abaakouk
        <parameters interfaceid='25b32029-968f-49a0-aa04-45baf5c443c6'/>
665 114 Mehdi Abaakouk
      </virtualport>
666 114 Mehdi Abaakouk
      <model type='virtio'/>
667 114 Mehdi Abaakouk
      <address type='pci' domain='0x0000' bus='0x00' slot='0x03' function='0x0'/>
668 114 Mehdi Abaakouk
    </interface>
669 114 Mehdi Abaakouk
    <serial type='pty'>
670 1 Mehdi Abaakouk
      <target port='0'/>
671 1 Mehdi Abaakouk
    </serial>
672 1 Mehdi Abaakouk
    <console type='pty'>
673 1 Mehdi Abaakouk
      <target type='serial' port='0'/>
674 1 Mehdi Abaakouk
    </console>
675 1 Mehdi Abaakouk
    <memballoon model='virtio'>
676 1 Mehdi Abaakouk
      <address type='pci' domain='0x0000' bus='0x00' slot='0x05' function='0x0'/>
677 1 Mehdi Abaakouk
    </memballoon>
678 1 Mehdi Abaakouk
  </devices>
679 1 Mehdi Abaakouk
</domain>
680 1 Mehdi Abaakouk
</pre>
681 1 Mehdi Abaakouk
682 1 Mehdi Abaakouk
683 1 Mehdi Abaakouk
Puis on recréé la VM
684 1 Mehdi Abaakouk
685 1 Mehdi Abaakouk
<pre>
686 1 Mehdi Abaakouk
$ virsh create openstack.xml
687 1 Mehdi Abaakouk
$ virsh start openstack.xml
688 1 Mehdi Abaakouk
</pre>