Supervision et Log » Historique » Version 2
Mehdi Abaakouk, 06/01/2012 11:34
1 | 1 | Mehdi Abaakouk | h1. Supervision et Log |
---|---|---|---|
2 | 1 | Mehdi Abaakouk | |
3 | 1 | Mehdi Abaakouk | h2. Présentation |
4 | 1 | Mehdi Abaakouk | |
5 | 2 | Mehdi Abaakouk | La supervision utilise nagios, pnp4nagios et check_mk sur la machine "nagios.tetaneutral.net":http://nagios.tetaneutral.net |
6 | 2 | Mehdi Abaakouk | "check_mk":http://mathias-kettner.de/check_mk.html est à la fois: |
7 | 1 | Mehdi Abaakouk | * un outils qui génère la configuration de nagios |
8 | 1 | Mehdi Abaakouk | * une "commande" au sens nagios. |
9 | 1 | Mehdi Abaakouk | * une interface Web 2.0 |
10 | 1 | Mehdi Abaakouk | pnp4nagios est un grapher des perfdatas de nagios, et il est intégré parfaitement à l'interface de check_mk |
11 | 1 | Mehdi Abaakouk | La gestion des logs s'effectue avec rsyslog sur la machine ttnnlog |
12 | 1 | Mehdi Abaakouk | |
13 | 1 | Mehdi Abaakouk | h2. Ajouter un machine à la supervision |
14 | 1 | Mehdi Abaakouk | |
15 | 1 | Mehdi Abaakouk | Dans le fichier /etc/check_mk/main.mk ajouter dans le tableau "all_hosts" le nom de la vm suivie de tags comme ceci: |
16 | 1 | Mehdi Abaakouk | |
17 | 1 | Mehdi Abaakouk | <pre> |
18 | 1 | Mehdi Abaakouk | nomdelavme|vm|ssh-2222|smtp|http |
19 | 1 | Mehdi Abaakouk | nomdelamahcine|phy|ssh-22|https|imaps |
20 | 1 | Mehdi Abaakouk | </pre> |
21 | 1 | Mehdi Abaakouk | |
22 | 1 | Mehdi Abaakouk | Les fameux tag permet d'associé la machine à des check de services, des hostgroups et des servicesgroups |
23 | 1 | Mehdi Abaakouk | Par défaut seul le ping est effectué. |
24 | 1 | Mehdi Abaakouk | On peut ensuite étendre rapidement les checks avec les contrôles système. |
25 | 1 | Mehdi Abaakouk | Pour ceci il faut installé un agent sur la machine superviser, soit check-mk-agent, soit net-snmp. |
26 | 1 | Mehdi Abaakouk | |
27 | 1 | Mehdi Abaakouk | h2. Configuration du serveur de log |
28 | 1 | Mehdi Abaakouk | |
29 | 1 | Mehdi Abaakouk | |
30 | 1 | Mehdi Abaakouk | <pre> |
31 | 1 | Mehdi Abaakouk | echo '*.* @91.224.149.204' > /etc/rsyslog.d/ttnnlog.conf |
32 | 1 | Mehdi Abaakouk | /etc/init.d/rsyslog restart |
33 | 1 | Mehdi Abaakouk | </pre> |
34 | 1 | Mehdi Abaakouk | |
35 | 1 | Mehdi Abaakouk | |
36 | 1 | Mehdi Abaakouk | h2. Installation de check-mk-agent |
37 | 1 | Mehdi Abaakouk | |
38 | 1 | Mehdi Abaakouk | Sur la machine cible, il faut installer les xinetd et check-mk-agent_1.1.13i2_all.deb |
39 | 1 | Mehdi Abaakouk | dans /etc/xinetd.d/check_mk ajouter: |
40 | 1 | Mehdi Abaakouk | |
41 | 1 | Mehdi Abaakouk | <pre> |
42 | 1 | Mehdi Abaakouk | only_from = 91.224.149.236 |
43 | 1 | Mehdi Abaakouk | </pre> |
44 | 1 | Mehdi Abaakouk | Puis on redémarre xinetd |
45 | 1 | Mehdi Abaakouk | |
46 | 1 | Mehdi Abaakouk | <pre> |
47 | 1 | Mehdi Abaakouk | etc/init.d/xinetd restart |
48 | 1 | Mehdi Abaakouk | </pre> |
49 | 1 | Mehdi Abaakouk | sur nagios: |
50 | 1 | Mehdi Abaakouk | |
51 | 1 | Mehdi Abaakouk | <pre> |
52 | 1 | Mehdi Abaakouk | check_mk -II nommachine && check_mk -O |
53 | 1 | Mehdi Abaakouk | </pre> |
54 | 1 | Mehdi Abaakouk | |
55 | 1 | Mehdi Abaakouk | h2. Installation rapide de check-mk-agent dans une vm |
56 | 1 | Mehdi Abaakouk | |
57 | 1 | Mehdi Abaakouk | sur h1: |
58 | 1 | Mehdi Abaakouk | |
59 | 1 | Mehdi Abaakouk | <pre> |
60 | 1 | Mehdi Abaakouk | cd nagios |
61 | 1 | Mehdi Abaakouk | ./install_in_vm.sh nomvm 2222 |
62 | 1 | Mehdi Abaakouk | </pre> |
63 | 1 | Mehdi Abaakouk | |
64 | 1 | Mehdi Abaakouk | sur nagios: |
65 | 1 | Mehdi Abaakouk | |
66 | 1 | Mehdi Abaakouk | <pre> |
67 | 1 | Mehdi Abaakouk | check_mk -II nommachine && check_mk -O |
68 | 1 | Mehdi Abaakouk | </pre> |
69 | 1 | Mehdi Abaakouk | |
70 | 1 | Mehdi Abaakouk | h2. Remonter d'alert a partir des fichiers de log |
71 | 1 | Mehdi Abaakouk | |
72 | 1 | Mehdi Abaakouk | Sur ttnnlog ou sur la machine elle même (si elle a check-mk-agent-logwatch d'installer) |
73 | 1 | Mehdi Abaakouk | Dans le fichier /etc/check_mk/logwatch.cfg ajouté des lignes comme: |
74 | 1 | Mehdi Abaakouk | |
75 | 1 | Mehdi Abaakouk | <pre> |
76 | 1 | Mehdi Abaakouk | /var/log/messages |
77 | 1 | Mehdi Abaakouk | # Patterns are indented with one space are prefixed with: |
78 | 1 | Mehdi Abaakouk | # C: Critical messages |
79 | 1 | Mehdi Abaakouk | # W: Warning messages |
80 | 1 | Mehdi Abaakouk | # I: ignore these lines (OK) |
81 | 1 | Mehdi Abaakouk | # The first match decided. Lines that do not match any pattern |
82 | 1 | Mehdi Abaakouk | # are ignored |
83 | 1 | Mehdi Abaakouk | C Fail event detected on md device |
84 | 1 | Mehdi Abaakouk | I mdadm.*: Rebuild.*event detected |
85 | 1 | Mehdi Abaakouk | W mdadm\[ |
86 | 1 | Mehdi Abaakouk | /data/www/*/*/syslog /data/www/*/*/kern.log |
87 | 1 | Mehdi Abaakouk | C Panic |
88 | 1 | Mehdi Abaakouk | C Oops |
89 | 1 | Mehdi Abaakouk | </pre> |
90 | 1 | Mehdi Abaakouk | |
91 | 1 | Mehdi Abaakouk | Puis sur la machine nagios détecté la nouvelle config de l'agent: |
92 | 1 | Mehdi Abaakouk | |
93 | 1 | Mehdi Abaakouk | <pre> |
94 | 1 | Mehdi Abaakouk | cmk -II ttnnlog |
95 | 1 | Mehdi Abaakouk | cmk -O |
96 | 1 | Mehdi Abaakouk | </pre> |
97 | 1 | Mehdi Abaakouk | |
98 | 1 | Mehdi Abaakouk | |
99 | 1 | Mehdi Abaakouk | h2. Fichier de configuration de check_mk |
100 | 1 | Mehdi Abaakouk | |
101 | 1 | Mehdi Abaakouk | Les fichiers de configuration sont dans /etc/check_mk/ |
102 | 1 | Mehdi Abaakouk | Le fichier principal est main.mk, la liste des contacts se trouve dans conf.d/contacts.mk |
103 | 1 | Mehdi Abaakouk | Les fichiers conf.d/vm_auto.mk et conf.d/vm_parent.mk sont générer par le script update_vm_parents_and_update_automap.sh |
104 | 1 | Mehdi Abaakouk | Il génère la liste des vm qui ne sont pas pressente dans main.mk avec les dépendances avec leurs nodes du cluster (avec l'api rapi de ganeti) |
105 | 1 | Mehdi Abaakouk | Il génère aussi la map automap pour nagvis (/usr/local/nagvis/etc/Automap.cfg |
106 | 1 | Mehdi Abaakouk | Il est exécute toutes les 20 minutes |
107 | 1 | Mehdi Abaakouk | |
108 | 1 | Mehdi Abaakouk | h2. Voir le diff entre la conf nagios et la page Architecture du Wiki |
109 | 1 | Mehdi Abaakouk | |
110 | 1 | Mehdi Abaakouk | |
111 | 1 | Mehdi Abaakouk | <pre> |
112 | 1 | Mehdi Abaakouk | /etc/check_mk/diff-nagios-wiki.sh |
113 | 1 | Mehdi Abaakouk | </pre> |
114 | 1 | Mehdi Abaakouk | Le script contrôle le VLAN admin et le 91.224.149.128/25. |