Suivi des incidents et maintenances majeures

7 juillet 2023 en soirée - Panne des services privés de sans-nuage.fr (ainsi que la recherche)

Le serveur sans-nuage.fr principal est tombé en panne. Par ailleurs, un bug (toujours en cours affecte actuellement le système de sauvegarde de ce serveur).

EDIT 08/08/2023 11h: La panne a été résolue (en faisant de l’espace disque et en adaptant la configuration des logs du services matrix-synapse).

10 août 2023 - Panne VPN

Les VPN étaient non fonctionnels depuis ~12h30.
Ils sont désormais à nouveau opérationnels !

2 « J'aime »

11 août 2023 - Mise à jour du forum

Mise à jour et création d’une doc (https://wiki.arn-fai.net/benevoles:technique:discourse)

2 « J'aime »

26 aout 2023 - Cure d’amaigrissement pour etherpad

Notre instance pad.sans-nuage.fr devient trop grosse. La base de données pèse 30GB et nous empèche de faire des sauvegardes, nous procédons actuellement à une cure d’amaigrissement en supprimant les pads vides, les anciennes sessions et les historiques. En revanche, toutes les versions finales de chaque pad restent conservées.

Pour rappel: nos pads ne sont jamais supprimés, ce qui permet d’avoir des documents de travail permanent sans se soucier de la péremption. Cette politique pourrait être revue si nous estimons que notre instance devient trop coûteuse en ressource.

Note: le plugin mypads qui permet de créer des pads privés sera peut-être remplacer par le plugin nextcloud ownpad

EDIT 18:13: La maintenance est finie. Nous sommes passés de 68 000 000 de lignes de base de données à 68 000 :tada: L’accès à l’historique n’est donc plus possible (même si nous avons gardé en base une version toutes les 100 versions de vos pads, juste au cas où il y a des réclamations).

1 « J'aime »

21 septembre 2023 au matin - Panne sur sans-nuage

Le serveur était de nouveau plein, le soucis a été résolu, nous continuons d’optimiser les services en ce qui concerne l’espace disque système (hors stockage).

24 septembre 2023 - Panne VPN

Les VPN étaient non fonctionnels depuis ~8h30.
Ils sont désormais à nouveau opérationnels.

27 septembre 2023 - Correction d’un problème de routage sur les serveurs privés virtuels

Nous avons détecté que les serveurs privés virtuels étaient impactés par un soucis de routage (en IPv4) empêchant la mise à jour d’applications utilisant PHP du fait de l’impossibilité de contacter packages.sury.org. Nous estimons que ce soucis était présent depuis longtemps et sommes surpris de ne pas avoir eu de signalement. Les serveurs utilisant prioritairement l’IPv6 n’étant pas concernés, nous supposons que vous êtes nombreux à utiliser l’IPv6 en priorité.

Quoiqu’il en soit, ce problème est désormais résolu, si vous aviez des mises à jour d’applications PHP non fonctionnelles, il est peut être temps de retenter la mise à jour.

28 septembre 2023 à partir de 20:30 - Maintenance (soirée slash)

Comme tous les 2ème et 4ème jeudi du mois, nous procéderons à des travaux sur l’infrastructure avec les bénévoles en présence. L’objectif est de travailler sur l’IPv6 de notre nouveau cluster, mais il est possible que d’autres travaux soient menés et que certains services soient brièvement inaccessibles.

1 « J'aime »

1er octobre 2023 entre 14h et 19h - Intervention au datacenter

Nous allons intervenir au datacenter pour racker un serveur (offre housing), ajouter un serveur 1U au cluster proxmox et permettre à une personne ayant déjà 1U chez nous d’intervenir en cas de besoin.

Sauf à produire une coupure d’électricité ou un problème réseau, vos services ne devraient pas être interrompus.

EDIT: L’intervention est terminée, tout s’est bien passé, même si un des serveurs n’a pas pu être installé par manque de disques…

08 octobre 2023 - Problème d’accès à Nextcloud (sans-nuage)

Un problème lié au SSO empêchait l’accès à Nextcloud.
Le problème est désormais résolu.

1 « J'aime »

Mercredi 18 octobre 20h30-21h30 - Mise à jour du forum

Je me lance dans une mise à jour du forum (docker / discourse)
La dernière fois il y a eu une Interruption de service durant ~45min

Signé:Gyom

21:09 Intervention terminée

3 « J'aime »

24 octobre 2023 - Réparation du résolveur DNS

Le résolveur DNS était en panne ce matin et a été réparé avec sudo unbound-anchor -vv

1 « J'aime »

15 novembre 2023 - Travaux résolveur DNS

Des travaux sont en cours sur le résolveur DNS.
Merci de nous remonter vos problèmes si vous en rencontrez.

14 Décembre 2023 - Redémarrage de sans-nuage.fr et agrandissement espace disque

Le serveur sans-nuage.fr va être redémarré vers 22H ce soir. Il faut s’attendre à plusieurs minutes de coupure des services.

1 « J'aime »

9 Janvier 2024 - Panne de MariaDB sur Sans-nuage.fr

Et c’est maintenant relancé !