Incidents antérieurs

Objet : Maintenance annuelle des installations électriques

La maintenance annuelle des installations électriques du Green DataCenter "Mangin" aura lieu le 23 octobre prochain de 9h à 17h incluant le test complet de la chaîne électrique. Ces travaux seront sans impact sur le fonctionnement de nos infrastructures et ne nécessitent donc aucune opération de votre part.

Cordialement

L'équipe d'hébergement

Objet : Mise à jour de nos équipements de monitoring

Dans le cadre de l’amélioration de nos services, une mise à jour de nos outils de monitoring est planifiée mardi 15/10/2019 de 10h à 11h. Durant cette intervention, notre portail web de suivi (http://centreon.eolas.fr/) ne sera pas accessible de nos clients.

Bien entendu, pendant toute la durée de cette maintenance, la surveillance de l'ensemble de nos services continuera d'être 100% opérationnelle .

Cordialement,

L’équipe hébergement.

Objet : Redémarrage d'un Firewall

Bonjour,

Dans le cadre du plan d'action faisant suite à l'incident survenu sur une de nos baies de stockage, nous allons procéder au redémarrage d'une appliance firewall.

Cette interventions aura lieu le 03 octobre à 6h du matin.

Des coupures d'environ 2 à 3 minutes sont à prévoir pour les environnements dépendant de cet équipement.

Merci de revenir vers nous si vous constatez des dysfonctionnements à l’issue de cette intervention.

Cordialement,

L’équipe hébergement.

Bonjour,

Mardi 01/10, nos équipes d’infogérance ont ensuite travaillé sans relâche pour permettre aux différentes plateformes applicatives de reprendre leur fonctionnement normal. Cette opération s’est finalisée aux alentours de 21h. Nous traitons ce jour les derniers effets de bord avec nos clients.

N'hésitez pas à contacter nos équipes sur notre portail (https://my.eolas.fr) si vous constatiez des dysfonctionnements.

Nous vous prions de nous excuser pour la gêne occasionnée.

L'équipe Hébergement

Bonjour,

Aujourd’hui, à 13h, était planifiée une opération de maintenance visant à appliquer un patch sur nos infrastructure de stockage. L’application de ce patch faisait partie du plan d’action correctif de l’incident du 20/09 dernier et devait nous permettre de revenir à l’état nominal.

Ce correctif a été dûment validé par notre fournisseur et nous avons suivi l’ensemble des préconisations prévues. Contre toute attente, alors que la première partie de la maintenance s’était déroulée sans encombres, le correctif a failli sur une partie de notre infrastructure et provoqué une nouvelle défaillance. Un redémarrage forcé nous a permis de reprendre le contrôle. A 14h30, l’infrastructure était 100% opérationnelle.

Depuis, nos équipes d’infogérance sont à l’œuvre pour permettre aux différentes plateformes applicatives de reprendre le fonctionnement normal. Cette opération devrait être terminée dans le courant de l’après-midi.

Veuillez nous excuser pour la gêne occasionnée.

Objet : Mise à jour de nos équipements d'infrastructure

Bonjour,

Déploiement d'une mise à jour de firmware dans le cadre du plan correctif faisant suite à l'incident du 20/09,

Ces interventions auront lieu le 01/10/2019 de 12h à 14h. Aucun impact n'est prévu sur les environnements techniques.

Merci de revenir vers nous si vous constatez des dysfonctionnements à l’issue de cette intervention.

Cordialement, L’équipe hébergement.

Nous faisons suite à l’engagement de suivi que nous avons pris samedi 21/09, alors que l’incident n’était pas encore totalement circonscrit.

L’incident est dû à une défaillance partielle d’un contrôleur d’une baie de stockage. Techniquement, les espaces de stockage de cette baie sont pilotés par deux contrôleurs. L’un des contrôleurs actifs à subit une défaillance, provoquant naturellement la bascule du trafic sur un second contrôleur. Lors de cette bascule, ce contrôleur est resté fonctionnel sur son trafic initial mais a gelé le trafic provenant du premier contrôleur. La défaillance de ce contrôleur, partielle, n’a pas pu être détectée par le système de supervision car le contrôleur continuait de répondre avec succès. Cela a rendu particulièrement difficile le diagnostic de nos équipes.

Dès que le problème a été localisé, nous avons immédiatement contacté notre fournisseur de matériel. La nuit même, nous avons travaillé conjointement avec ses équipes d’experts. Nous avons pris la de décision du redémarrage du contrôleur défectueux après nous être assuré qu’aucune donnée ne pouvait être perdue ou corrompue par l’opération. Cette opération a permis aux environnements techniques de reprendre le contrôle de leur espaces de stockage. A 4h du matin, nos équipes d’infogérance, très fortement mobilisées, ont pris le relais des équipes d’infrastructure pour superviser la réinitialisation de l’ensemble des plateformes et des services. Le rétablissement s’est poursuivi tout au long de la journée de samedi.

Les analyses se sont poursuivies toute la semaine. Le constructeur vient de nous livrer une mise à jour des firmwares du matériel qui corrige le problème très particulier que nous avons rencontré. Cette mise à jour sera déployée dès le début de la semaine prochaine. D’autres actions d’améliorations seront mises en œuvres sur les 2 ou 3 prochaines semaines, autant sur la fiabilisation de nos environnements que sur nos outils et/ou process. D’ailleurs, afin de faciliter le suivi de la disponibilité de nos services nous avons mis en ligne une application qui permet de visualiser l’état de nos services : https://status.eolas.fr/ .

Après cette phase d’amélioration, nous poursuivrons dans les prochains mois, notre plan d’investissement « EOLAS 2020 » comme nous l’avons initialement prévu. Ces investissements nous permettront de vous apporter de nouveaux services de qualités et également d’améliorer nos capacités techniques.

N'hésitez pas à contacter nos équipes si vous souhaitez plus d’informations.

L’équipe d’hébergement