ljf
Septembre 8, 2024, 10:49
1
Description du bug
La base de donnée de notre instance a tendance a gonfler, un reindex est nécessaire régulièrement et on pourrait vouloir nettoyer les évènements.
TODO
Cloisonner
Déplacer l’instance matrix et ses bridges sur une autre instance ?
OU associer un quota à la base de données et à l’utilisateur synapse pour éviter qu’il dépasse la taille autoriser
Nettoyer et compresser
Écrire une action de reindex de la base de donnée que l’on pourra facilement lancer (dans un cron, ou via panneau d’admin yunohost)
Étudier ce qui pourrait être nettoyer dans la base (notamment certaines tables consommatrices qui stockent tous les event)
ensuite faudra tester si les settings de rétention font leur boulot.
cf. https://forum.arn-fai.net/t/protection-des-donnees-sur-element-matrix/7508
Et éventuellement ajouter des tâches de cleanup supplémentaires dans le cron
en fait non, ça concerne autre chose. Il faut donc toujours lancer le nettoyage avec synapse-find-unreferenced-state-groups
Comment et où tu dois lancer cette commande ?
du coup le script est maintenant lancé automatiquement chaque lundi à 00:00 UTC
cf. https://github.com/YunoHost-Apps/synapse_ynh/pull/510
Le script/cron échoue :
/var/www/synapse/synapse_clean_unreferenced_states.bash: 7: source: not found
/var/www/synapse/synapse_clean_unreferenced_states.bash: 9: ynh_app_setting_get: not found
/var/www/synapse/synapse_clean_unreferenced_states.bash: 10: ynh_app_setting_get: not found
/var/www/synapse/synapse_clean_unreferenced_states.bash: 11: ynh_app_setting_get: not found
/var/www/synapse/synapse_clean_unreferenced_states.bash: 12: ynh_app_setting_get: not found
Sys. de fichiers Taille Utilisé Dispo Uti% Monté sur
udev 7,8G 0 7,8G 0% /dev
tmpfs 1,6G 688K 1,6G 1% /run
/dev/sda1 217G 126G 81G 61% /
tmpfs 7,9G 23M 7,8G 1% /dev/shm
tmpfs 5,0M 0 5,0M 0% /run/lock
/dev/sdb 492G 308G 162G 66% /mnt/hdd
/var/www/synapse/synapse_clean_unreferenced_states.bash: 24: Syntax error: redirection unexpected
Tu utilises certainement /bin/sh au lieu de /bin/bash pour exécuter le script. Vérifie le shebang et la manière dont cron lance la commande (genre, tu appelle peut-être explicitement /bin/sh plutôt que /bin/bash.
dans mon /etc/cron.d/synapse_clean_unreferenced_states j’avais
0 0 * * 1 root /var/www/synapse/synapse_clean_unreferenced_states.bash
du coup ça donnerait :
0 0 * * 1 /bin/bash -c '/var/www/synapse/synapse_clean_unreferenced_states.bash'
Ca a l’air de se lancer avec
0 0 * * 1 root /bin/bash -c '/var/www/synapse/synapse_clean_unreferenced_states.bash'
Où sont logguées ces actions (démarrage du cron et exécution du script) ?
Oups, pour un test j’ai paramétré le cron pour qu’il se lance toutes les heures. Et j’ai oublié de l’enlever. Donc il s’est lancé à 10H, 11H, 12H et 13H… J’espère qu’un lancement annule le précédent.
ljf
Novembre 2, 2026, 1:08
18
Non celui de midi et 13h sont encore en route:
# ps aux | grep synapse_clean_unreferenced_states
root 2991599 0.0 0.0 2584 904 ? Ss 12:00 0:00 /bin/sh -c /bin/bash -c '/var/www/synapse/synapse_clean_unreferenced_states.bash'
root 2991603 0.0 0.0 9116 5424 ? S 12:00 0:00 /bin/bash -c /var/www/synapse/synapse_clean_unreferenced_states.bash
root 2998671 0.0 0.0 2584 944 ? Ss 13:00 0:00 /bin/sh -c /bin/bash -c '/var/www/synapse/synapse_clean_unreferenced_states.bash'
root 2998673 0.0 0.0 9116 5440 ? S 13:00 0:00 /bin/bash -c /var/www/synapse/synapse_clean_unreferenced_states.bash
root 3007139 0.0 0.0 6448 2044 pts/1 S+ 14:07 0:00 grep --color=auto synapse_clean_unreferenced_states
De mon côté synapse est inaccessible. J’ai restart synapse (mais pas postgresql et heureusement quand je relis le script).
Je capte pas pourquoi les logs sont vides.
celui de 12H VACUUM toujours, et synapse a l’air dans les choux. J’attends la fin du vacuum pour relancer postgre et synapse en espérant que ce soit good.
J’ai modifié le cron pour qu’il se lance tous les jours à 5H UTC et modifié le script pour commenter le REINDEX et VACUUM. Si les unreferenced_states sont nettoyés régulièrement la DB ne devrait pas grossir, et donc pas besoin de VACUUM. Pour le REINDEX j’ai un doute. Je contrôlerai la taille de la DB et ajusterai.