Bonjour à tous,
Nous rencontrons actuellement un incident sur le stockage Ceph sur le site de ALS.
Suite à opération de maintenance, plusieurs noeuds du stockage sont passés hors ligne.
Nos équipes sont mobilisées pour résoudre cet incident dans les meilleurs délais.
- 09h50 : détection des premiers problème
- 10:09 : les équipes stoppent l'opération de maintenance et interviennent
- 10h15 : diagnostique du problème
- 10h30 : Les workers ceph sont en cours de reprise
- 10h40 : le cluster est à nouveau dans un état conforme et contrôlé
- 10h54 : les etcd mutualisés sont en cours de redémarrage
- 11h04 : les services reviennent progressivement
- 11h34 : nous lançons les contrôles dans les instances clients nodes et vm
- 12h34 : la majorité des instances ont été relancées
- 13:04 : les contrôles des vm restantes sont terminées, rapport préliminaire en relecture et validation, passage en observation, prochain point à 14:00
- 14h00 : le rapport préliminaire à destination des clients impactés est en cours d'envoi.
- 14h20 : Nous avons effectué un point de situation : tous les workloads sont désormais démarrés.
Si vous rencontrez des difficultés, merci de contacter support@agoracalyce.com en précisant la référence AGCINT-3106.
L'incident est résolu.
L’analyse se poursuit avec notre support expert afin d’examiner l’ensemble des éléments et de comprendre l’origine de l’incident.
Merci de votre compréhension.