Projet

Général

Profil

PUPPET » Historique » Version 11

Laurent GUERBY, 18/04/2012 15:40

1 6 Mehdi Abaakouk
h1. Master of Puppet
2 1 Mehdi Abaakouk
3 10 Laurent GUERBY
h2. Misc links
4 10 Laurent GUERBY
5 10 Laurent GUERBY
* http://finninday.net/wiki/index.php/Zero_to_puppet_in_one_day
6 11 Laurent GUERBY
* http://blog.wikimedia.org/2011/09/19/ever-wondered-how-the-wikimedia-servers-are-configured/
7 11 Laurent GUERBY
* http://blog.wikimedia.org/2012/04/16/introduction-to-wikimedia-labs/
8 10 Laurent GUERBY
9 6 Mehdi Abaakouk
h2. Exemple duplication www avec puppet et les backups:
10 1 Mehdi Abaakouk
11 6 Mehdi Abaakouk
Installation d'une vm (ici: puppet-tester) avec ganeti:
12 6 Mehdi Abaakouk
13 6 Mehdi Abaakouk
sur h1:
14 6 Mehdi Abaakouk
<pre>
15 6 Mehdi Abaakouk
./gnt-addvm puppet-tester
16 6 Mehdi Abaakouk
</pre>
17 6 Mehdi Abaakouk
18 7 Mehdi Abaakouk
Sur puppet-tester, restauration du dernier backup de /var/www de www.tetaneutral.net qui se trouve sur h2 (Je passe l'installation de clé pgp):
19 7 Mehdi Abaakouk
20 7 Mehdi Abaakouk
<pre>
21 7 Mehdi Abaakouk
cat www.tetaneutral.net-var-www.20120102.master.tar.gz | gpg -d | tar -xzf - -C /
22 7 Mehdi Abaakouk
cat www.tetaneutral.net-var-www.20120103.tar.gz | gpg -d | tar -xzf - -C /
23 8 Mehdi Abaakouk
cat www.tetaneutral.net-var-www.20120104.tar.gz | gpg -d | tar -xzf - -C /
24 7 Mehdi Abaakouk
</pre>
25 6 Mehdi Abaakouk
26 6 Mehdi Abaakouk
Puis installation de puppet:
27 6 Mehdi Abaakouk
<pre>
28 6 Mehdi Abaakouk
$ apt-get install puppet
29 6 Mehdi Abaakouk
30 6 Mehdi Abaakouk
$ cat /etc/puppet/puppet.conf ajouter:
31 6 Mehdi Abaakouk
[main]
32 6 Mehdi Abaakouk
logdir=/var/log/puppet
33 6 Mehdi Abaakouk
vardir=/var/lib/puppet
34 6 Mehdi Abaakouk
ssldir=/var/lib/puppet/ssl
35 6 Mehdi Abaakouk
rundir=/var/run/puppet
36 6 Mehdi Abaakouk
factpath=$vardir/lib/facter
37 6 Mehdi Abaakouk
templatedir=$confdir/templates
38 6 Mehdi Abaakouk
pluginsync = true
39 6 Mehdi Abaakouk
40 6 Mehdi Abaakouk
[agent]
41 6 Mehdi Abaakouk
server=puppet.tetaneutral.net
42 6 Mehdi Abaakouk
43 6 Mehdi Abaakouk
$ puppet agent --test
44 6 Mehdi Abaakouk
</pre>
45 6 Mehdi Abaakouk
46 6 Mehdi Abaakouk
Sur puppet.teteneutral.net, dans le fichier nodes.pp copie du bloc de la machine www en puppet-tester
47 6 Mehdi Abaakouk
puis on sign la cle de puppet-tester
48 6 Mehdi Abaakouk
<pre>
49 6 Mehdi Abaakouk
puppetca --sign puppet-tester.tetaneutral.net
50 6 Mehdi Abaakouk
</pre>
51 6 Mehdi Abaakouk
52 6 Mehdi Abaakouk
sur puppet-tester, on descend la configuration via puppet:
53 6 Mehdi Abaakouk
54 6 Mehdi Abaakouk
<pre>puppet agent --test</pre>
55 6 Mehdi Abaakouk
56 6 Mehdi Abaakouk
et pour finir on restaure le backup mysql:
57 6 Mehdi Abaakouk
58 6 Mehdi Abaakouk
<pre>
59 6 Mehdi Abaakouk
mysql -u root < www.tetaneutral.net-all-mysql-databases.20120103.sql
60 6 Mehdi Abaakouk
</pre>
61 6 Mehdi Abaakouk
62 6 Mehdi Abaakouk
63 1 Mehdi Abaakouk
h2. Ajout d'une machine:
64 1 Mehdi Abaakouk
65 1 Mehdi Abaakouk
Sur le client:
66 1 Mehdi Abaakouk
67 1 Mehdi Abaakouk
<pre>
68 1 Mehdi Abaakouk
$ apt-get install puppet
69 1 Mehdi Abaakouk
</pre>
70 1 Mehdi Abaakouk
71 1 Mehdi Abaakouk
dans /etc/default/puppet mettre:
72 1 Mehdi Abaakouk
<pre>
73 1 Mehdi Abaakouk
START=yes
74 1 Mehdi Abaakouk
</pre>
75 1 Mehdi Abaakouk
76 1 Mehdi Abaakouk
et dans /etc/puppet/puppet.conf ajouter:
77 1 Mehdi Abaakouk
<pre>
78 6 Mehdi Abaakouk
pluginsync=true
79 6 Mehdi Abaakouk
80 1 Mehdi Abaakouk
[agent]
81 1 Mehdi Abaakouk
server=puppet.tetaneutral.net
82 1 Mehdi Abaakouk
</pre>
83 1 Mehdi Abaakouk
84 1 Mehdi Abaakouk
Ensuite ajouter la machine dans le puppet master, MOUAHAHA:
85 1 Mehdi Abaakouk
Sur le client: 
86 1 Mehdi Abaakouk
<pre>
87 1 Mehdi Abaakouk
$ puppet agent --test
88 1 Mehdi Abaakouk
warning: peer certificate won't be verified in this SSL session
89 1 Mehdi Abaakouk
warning: peer certificate won't be verified in this SSL session
90 1 Mehdi Abaakouk
warning: peer certificate won't be verified in this SSL session
91 1 Mehdi Abaakouk
Exiting; no certificate found and waitforcert is disabled
92 1 Mehdi Abaakouk
</pre>
93 1 Mehdi Abaakouk
94 1 Mehdi Abaakouk
Sur le serveur:
95 1 Mehdi Abaakouk
<pre>
96 1 Mehdi Abaakouk
$ puppetca --list
97 1 Mehdi Abaakouk
www.tetaneutral.net
98 1 Mehdi Abaakouk
99 1 Mehdi Abaakouk
$ puppetca  --sign --all
100 1 Mehdi Abaakouk
notice: Signed certificate request for www.tetaneutral.net
101 1 Mehdi Abaakouk
notice: Removing file Puppet::SSL::CertificateRequest www.tetaneutral.net at '/var/lib/puppet/ssl/ca/requests/www.tetaneutral.net.pem'
102 1 Mehdi Abaakouk
</pre>
103 1 Mehdi Abaakouk
104 1 Mehdi Abaakouk
Sur le client: 
105 1 Mehdi Abaakouk
<pre>
106 1 Mehdi Abaakouk
$ puppet agent --test
107 1 Mehdi Abaakouk
warning: peer certificate won't be verified in this SSL session
108 1 Mehdi Abaakouk
info: Caching certificate for www.tetaneutral.net
109 1 Mehdi Abaakouk
info: Caching certificate_revocation_list for ca
110 1 Mehdi Abaakouk
info: Caching catalog for www.tetaneutral.net
111 1 Mehdi Abaakouk
info: Applying configuration version '1325516709'
112 4 Mehdi Abaakouk
info: Creating state file /var/lib/puppet/state/state.yaml
113 4 Mehdi Abaakouk
notice: Finished catalog run in 0.01 seconds
114 4 Mehdi Abaakouk
</pre>
115 4 Mehdi Abaakouk
116 4 Mehdi Abaakouk
Sur le serveur, on associe les modules au client:
117 4 Mehdi Abaakouk
118 4 Mehdi Abaakouk
<pre>
119 4 Mehdi Abaakouk
$ cat manifests/nodes.pp
120 4 Mehdi Abaakouk
121 4 Mehdi Abaakouk
node basenode {
122 2 Mehdi Abaakouk
    include backup
123 2 Mehdi Abaakouk
    include motd
124 5 Mehdi Abaakouk
}
125 5 Mehdi Abaakouk
126 5 Mehdi Abaakouk
node 'www.tetaneutral.net' inherits basenode {
127 5 Mehdi Abaakouk
}
128 5 Mehdi Abaakouk
</pre>
129 5 Mehdi Abaakouk
130 5 Mehdi Abaakouk
131 5 Mehdi Abaakouk
132 5 Mehdi Abaakouk
h2. Récupération de fichier écrasé par puppet:
133 5 Mehdi Abaakouk
134 1 Mehdi Abaakouk
Voir la liste des fichiers backupés:
135 2 Mehdi Abaakouk
<pre>
136 2 Mehdi Abaakouk
find /var/*/puppet/clientbucket -name paths | while read path ; do echo $(cat $path): $(basename $(dirname $path))  $(stat -c %y $path) ; done
137 2 Mehdi Abaakouk
</pre>
138 2 Mehdi Abaakouk
Ensuite pour voir le fichier:
139 2 Mehdi Abaakouk
<pre>
140 6 Mehdi Abaakouk
A venir ... (un truc avec puppet filebucket ...)
141 2 Mehdi Abaakouk
</pre>
142 2 Mehdi Abaakouk
143 2 Mehdi Abaakouk
h2. Ajout d'un module (ie: un truc/service/user a configurer), ici module motdpour l'exemple :
144 2 Mehdi Abaakouk
145 2 Mehdi Abaakouk
h3. Création du module
146 2 Mehdi Abaakouk
147 2 Mehdi Abaakouk
<pre>
148 2 Mehdi Abaakouk
cd /etc/puppet/modules
149 2 Mehdi Abaakouk
mkdir -p  motd/{files,lib,manifests,templates,tests}
150 2 Mehdi Abaakouk
$ cat motd/manifests/init.pp
151 2 Mehdi Abaakouk
class motd {
152 2 Mehdi Abaakouk
        file {'motd':
153 2 Mehdi Abaakouk
                ensure  => file,
154 2 Mehdi Abaakouk
                path    => '/etc/motd.tail',
155 2 Mehdi Abaakouk
                mode    => 0644,
156 2 Mehdi Abaakouk
                content => "Bienvenue sur ${::hostname}, machine de l'infrastructure ${::domain}\n\nCette machine est geree par puppet toutes modifications effectuee est suceptible d'etre perdu."
157 2 Mehdi Abaakouk
        }
158 2 Mehdi Abaakouk
}
159 2 Mehdi Abaakouk
</pre>
160 2 Mehdi Abaakouk
161 2 Mehdi Abaakouk
162 2 Mehdi Abaakouk
h3. Ajout du module à la liste des modules disponibles
163 1 Mehdi Abaakouk
164 2 Mehdi Abaakouk
<pre>
165 2 Mehdi Abaakouk
$ cat manifests/modules.pp
166 2 Mehdi Abaakouk
import "motd"
167 2 Mehdi Abaakouk
</pre>
168 2 Mehdi Abaakouk
169 2 Mehdi Abaakouk
h3. Utilisation du module pour une node
170 2 Mehdi Abaakouk
171 2 Mehdi Abaakouk
<pre>
172 2 Mehdi Abaakouk
$ cat manifests/nodes.pp
173 6 Mehdi Abaakouk
node 'www.tetaneutral.net' {
174 2 Mehdi Abaakouk
    include motd
175 2 Mehdi Abaakouk
}
176 2 Mehdi Abaakouk
</pre>
177 1 Mehdi Abaakouk
178 1 Mehdi Abaakouk
179 9 Mehdi Abaakouk
h2. Installation du serveur PuppetMaster
180 1 Mehdi Abaakouk
181 1 Mehdi Abaakouk
Installation du paquet:
182 1 Mehdi Abaakouk
<pre>
183 1 Mehdi Abaakouk
$ apt-get install puppetmaster
184 1 Mehdi Abaakouk
</pre>
185 1 Mehdi Abaakouk
186 9 Mehdi Abaakouk
Voici le fichier de configuration /etc/puppet/puppet.conf qui permet de maintenir une conf de dev et de prod:
187 1 Mehdi Abaakouk
<pre>
188 9 Mehdi Abaakouk
[main]
189 9 Mehdi Abaakouk
logdir=/var/log/puppet
190 9 Mehdi Abaakouk
vardir=/var/lib/puppet
191 9 Mehdi Abaakouk
ssldir=/var/lib/puppet/ssl
192 9 Mehdi Abaakouk
rundir=/var/run/puppet
193 9 Mehdi Abaakouk
factpath=$vardir/lib/facter
194 9 Mehdi Abaakouk
templatedir=$confdir/templates
195 9 Mehdi Abaakouk
196 9 Mehdi Abaakouk
pluginsync = true
197 9 Mehdi Abaakouk
198 1 Mehdi Abaakouk
[master]
199 1 Mehdi Abaakouk
certname=puppet.tetaneutral.net
200 9 Mehdi Abaakouk
manifest = $confdir/manifests/site_$environment.pp
201 1 Mehdi Abaakouk
</pre>
202 9 Mehdi Abaakouk
203 9 Mehdi Abaakouk
Exemple du fichier site_dev.php
204 9 Mehdi Abaakouk
<pre>
205 9 Mehdi Abaakouk
cat /etc/puppet/manifests/site_dev.pp
206 9 Mehdi Abaakouk
import "classes/*.pp"
207 9 Mehdi Abaakouk
import "keys.pp"
208 9 Mehdi Abaakouk
import "modules.pp"
209 9 Mehdi Abaakouk
import "nodes_dev.pp"
210 9 Mehdi Abaakouk
</pre>
211 9 Mehdi Abaakouk
212 9 Mehdi Abaakouk
Le fichier keys.pp contient les cle ssh des membres, le répertoire classes les fonctions créé pour ttnn (en autres les clés ssh)
213 9 Mehdi Abaakouk
Le fichier modules.pp, la liste des modules à chargé.
214 9 Mehdi Abaakouk
Et enfin nodes_dev.pp la liste des machines puppetisées avec leur configuration.
215 9 Mehdi Abaakouk
216 1 Mehdi Abaakouk
217 1 Mehdi Abaakouk
Dans /etc/puppet/fileserver.conf configurer les autorisations:
218 1 Mehdi Abaakouk
<pre>
219 1 Mehdi Abaakouk
[files]
220 1 Mehdi Abaakouk
  path /etc/puppet/files
221 1 Mehdi Abaakouk
  allow 91.224.149.0/24
222 1 Mehdi Abaakouk
  allow 91.224.148.0/24
223 1 Mehdi Abaakouk
</pre>
224 6 Mehdi Abaakouk
225 6 Mehdi Abaakouk
226 6 Mehdi Abaakouk
h2. Liens:
227 6 Mehdi Abaakouk
228 6 Mehdi Abaakouk
* http://docs.puppetlabs.com/references/stable/
229 6 Mehdi Abaakouk
* http://madeinsyria.fr/2011/06/howto-puppet-administration-et-industrialisation-de-masse/