Site web down ?

[dachary]

Je confirme, OOM killer. Machine reboot, on est tranquille pour 4 semaines.

[dachary]

OOM killer a encore frappé, mais à une semaine de distance cette fois ci. Je reboot.

$ openstack console log show website
...
Ubuntu 16.04.3 LTS website ttyS0

website login: [   13.687184] cloud-init[2334]: Cloud-init v. 0.7.9 running 'modules:final' at Fri, 15 Jun 2018 19:35:55 +0000. Up 13.45 seconds.
[   13.731858] cloud-init[2334]: Cloud-init v. 0.7.9 finished at Fri, 15 Jun 2018 19:35:55 +0000. Datasource DataSourceOpenStack [net,ver=2].  Up 13.67 seconds
[374069.646092] Out of memory: Kill process 1953 (mysqld) score 247 or sacrifice child
[374069.653997] Killed process 1953 (mysqld) total-vm:1331448kB, anon-rss:492684kB, file-rss:0kB
[374111.152103] Out of memory: Kill process 24340 (mysqld) score 216 or sacrifice child
[374111.153040] Killed process 24340 (mysqld) total-vm:469228kB, anon-rss:430944kB, file-rss:0kB
[815455.348581] Out of memory: Kill process 24669 (mysqld) score 246 or sacrifice child
[815455.353672] Killed process 24669 (mysqld) total-vm:1326668kB, anon-rss:491284kB, file-rss:0kB

• openstack server reboot --hard website

[dachary]

Je constate ce jour la même erreur et je reboot la machine. Et le site est revenu

[Quitterie]

@ColinMaudry, @dachary : on a un problème sur le site, je cherchais à partager une info sur le financement à des listes participatives sur notre méthodo, mais quand j'essaie d'accedéer au site il y a ce message :
"La connexion n’est pas sécurisée

Les propriétaires de www.mavoix.info ont mal configuré leur site web. Pour éviter que vos données ne soient dérobées, Firefox ne s’est pas connecté à ce site web.

Ce site a recours à HTTP Strict Transport Security (HSTS) pour indiquer à Firefox de n’établir qu’une connexion sécurisée. Ainsi il n’est pas possible d’ajouter d’exception pour ce certificat.

En savoir plus…

Signaler les erreurs similaires pour aider Mozilla à identifier et bloquer les sites malveillants"

Qu'en pensez-vous ? Est-ce réparable ?
merci <3

[dachary]

Salut,

En effet, leger problème de renouvellement de certificats. Je corrige cela de suite en suivant la procédure.

A++

[dachary]

• renouvellement de certificat pour le site web
• renouvellement de certificat pour le forum (qui se fait d'habitude automatiquement, c'est bizarre), en faisant simplement docker restart app
• le wiki a rebooté il y a qq minutes (probablement qqn en train de traiter le problème), j'ai docker start mysql parsoid mediawiki et c'est revenu

Tout bon normalement, merci @Quitterie d'avoir signalé le soucis!

[Quitterie]

Merci beaucoup !

Quitterie de Villepin
06 84 03 24 89

[Quitterie]

Merci c’est revenu !!!!!

Quitterie de Villepin
06 84 03 24 89

[Quitterie]

Bonjour !
On signale ce soir que le site #Mavoix.info est en rade.
« Error establishing a database connection»

[ColinMaudry]

@Team_GEEK @Quitterie Je ne sais pas si c'était la même anomalie ou une nouvelle, mais le site était inaccessible avec ce même message :

Error establishing a database connection.

J'ai suivi la procédure pour le renouvellement des certificats, et je pense que le reboot a réglé le problème d'accès à la base de données.

[dachary]

Bonjour,

L'espace disque sur la machine se faisant rare (<500M), j'ai fait du ménage en supprimant les packages kernel obsoletes qui se sont accumulés suites aux updates automatiques. Cela a libéré ~3G.

A++

[dachary]

[344515.413652] Out of memory: Kill process 26820 (mysqld) score 234 or sacrifice child
[344515.414976] Killed process 26820 (mysqld) total-vm:1325988kB, anon-rss:467320kB, file-rss:0kB

je reboot. C'est ennuyeux parce que ça a reboot il y a qq jours...

[dachary]

Ce coup ci c'est wiki.mavoix.info qui est down, parce que pas assez de RAM. La machine tournait depuis deux mois, c'est pas honteux. Je reboot.

[7135015.075632] Out of memory: Kill process 1741 (mysqld) score 510 or sacrifice child
[7135015.080364] Killed process 1741 (mysqld) total-vm:1827504kB, anon-rss:1017364kB, file-rss:0kB

Le monitoring fait bien son travail

[dachary]

Hop, http://wiki.mavoix.info est de retour.

[dachary]

[Sun Dec  8 00:08:23 2019] Out of memory: Kill process 12423 (mysqld) score 237 or sacrifice child
[Sun Dec  8 00:08:23 2019] Killed process 12423 (mysqld) total-vm:1310376kB, anon-rss:474460kB, file-rss:0kB

Après un reboot le site web revient. C'est ennuyeux que la fréquence de ces problèmes augmente. Si ça devient une fois par semaine régulièrement, il faudra agir.

[dachary]

[Mon Dec  9 18:08:33 2019] Out of memory: Kill process 27526 (mysqld) score 238 or sacrifice child
[Mon Dec  9 18:08:33 2019] Killed process 27526 (mysqld) total-vm:1324168kB, anon-rss:474724kB, file-rss:0kB

Reboot encore.

[dachary]

[Wed Dec 11 12:18:34 2019] Out of memory: Kill process 30985 (mysqld) score 238 or sacrifice child
[Wed Dec 11 12:18:34 2019] Killed process 30985 (mysqld) total-vm:1324688kB, anon-rss:475304kB, file-rss:0kB

Ca commence a devenir lourd C'est rebooté et c'est revenu.

[dachary]

L'espace disque se faisait rare (500MB libre) sur www.mavoix.info: j'ai fait un apt-get autoremove --purge (3.5GB libre) et modifié /etc/apt/apt.conf.d/50unattended-upgrades pour qu'il se fasse automatiquement.

// Do automatic removal of new unused dependencies after the upgrade
// (equivalent to apt-get autoremove)
Unattended-Upgrade::Remove-Unused-Dependencies "true";

[dachary]

Depuis une semaine il faut reboot www.mavoix.info tout les jours en raison d'un problème de mémoire (OOM killer). Je ne comprends pas la raison de ce changement, vu que la machine ne fait rien de plus qu'il y a deux mois. @ColinMaudry est-ce que tu as une idée ?

[dachary]

J'ai ajouté de la mémoire à la VM (4GB au lieu de 2GB): ça coutera 3 euros de plus par mois mais à défaut d'une analyse plus fine ça permet d'assurer la stabilité du site web sans avoir à rebooter tout les jours.