Deuxfleurs
/
infrastructure
Archived
24
2
Fork 2
Code Issues 22 Pull Requests Projects 1 Releases Wiki Activity
This repository has been archived on 2023-03-15. You can view files and clone it, but cannot push or open issues or pull requests.
infrastructure/op_guide/postmortem/petits-incidents.md

1.4 KiB
Raw Blame History

  • 2020 Publii efface le disque dur d'un de nos membres. Il a changé le dossier de sortie vers /home qui a été effacé

  • 2021-07-27 Panne de courant à Rennes - 40 000 personnes sans électricité pendant une journée - nos serveurs de prod étant dans la zone coupée, deuxfleurs.fr est dans le noir - https://www.francebleu.fr/infos/faits-divers-justice/rennes-plusieurs-quartiers-prives-d-electricite-1627354121

  • 2021-12: Tentative de migration un peu trop hâtive vers Tricot pour remplacer Traefik qui pose des soucis. Downtime et manque de communication sur les causes, confusion généralisée.

    Actions à envisager: prévoir à l'avance toute intervention de nature à impacter la qualité de service sur l'infra Deuxfleurs. Tester en amont un maximum pour éviter de devoir tester en prod. Lorsque le test en prod est inévitable, s'organiser pour impacter le moins de monde possible.

  • 2022-03-28: Coupure d'électricité au site Jupiter, io ne redémarre pas toute seule. T est obligée de la rallumer manuellement. io n'est pas disponible durant quelques heures.

    Actions à envisager: reconfigurer io pour s'allumer toute seule quand le courant démarre.

  • 2022-03-28: Grafana (hébergé par M) n'est pas disponible. M est le seul à pouvoir intervenir.

    Actions à envisager: cartographier l'infra de monitoring et s'assurer que plusieurs personnes ont les accès.