Certains systèmes rencontrent des problèmes

Incidents antérieurs

31st janvier 2020

Aucun incident signalé

30th janvier 2020

Aucun incident signalé

29th janvier 2020

Aucun incident signalé

28th janvier 2020

Matrix Matrix down

Suite a une monté en charge soudaine sur le serveur de Matrix (n'hébergeant que Matrix), le service Matrix a été coupé. Il ne redémarre plus.

Je tente de le relancer

  • Il reste quelques erreurs dans les logs mais les performances globales ont été grandement amélioré.

    Il y a toujours un travail d'amélioration en cours.

  • La restauration c'est correctement déroulé

  • Le recovery de la base ne s'est pas correctement effectué. Un fichier généré par PostgreSQL qui était toujours en fonction est entré en conflit avec un fichier en cours de copie. J'ai relancé la restauration mais base de donnée éteinte cette fois ci.

  • Les manipulations nécessite un temps de restauration beaucoup trop important. Je met en place d'autre manoeuvre pour palier à cela. Matrix sera surement hors service durant toutes la soirée.

    Toutes mes excuses pour la gêne occasioné.

  • Apparament un problème d'encodage de la BDD est la cause. Je change l'encodage pour voir si cela fonctionne mieux par la suite.

  • La requête suivante

    SELECT room_id, MAX(stream_id) FROM current_state_delta_stream WHERE stream_id > 3652753 - 1000 GROUP BY room_id
    

    requête dans une table qui fait plus de 51Go. Le problème a été remonté à Matrix, sans retour.

    Je lance un nettoyage de la BDD et je relance Matrix.

  • Coupure de toutes les connexions à la BDD. Relance de Matrix

  • 27th janvier 2020

    Aucun incident signalé

    26th janvier 2020

    Aucun incident signalé

    25th janvier 2020

    Aucun incident signalé

    24th janvier 2020

    Aucun incident signalé

    23rd janvier 2020

    Matrix Changemernt d'hyperviseur pour Matrix

    Matrix change d'hyperviseur vers un moiins chargé pour espérer avoir de meilleurs performance.

  • Matrix-2 a changé d'hyperviseur avec succès

  • 22nd janvier 2020

    Aucun incident signalé

    21st janvier 2020

    Aucun incident signalé

    20th janvier 2020

    Aucun incident signalé

    19th janvier 2020

    Aucun incident signalé

    18th janvier 2020

    Aucun incident signalé