Nous avons eu une perte totale de courant sur moji 1 ce matin à 5h30 sur la voie B, puis sur la voie A. Nos équipes se sont immédiatement rendues sur place. Le courant a été rétabli à 07h31 sur la voie B, et à 7h45 sur la voie A.

Les premières analyses sont les suivantes : - Il y a eu une variation importante sur la voie B, l'onduleur B a basculé, mais notre groupe n'a pas démarré (nous avons eu un code d'erreur inédit, en cours d'analyse chez le constructeur). - Nous avons perdu la voie A dès que les supercaps ont été vides. - Nous avons eu un important report de charge sur la voie A, et l'onduleur A s'est mis en shut. Notre STS de coupure est manuel, il n'a pas basculé automatiquement

Un ré-armage manuel en suivant la procédure a été effectué, remettant le site en production par paliers.

Les premières contre mesures sont déjà en cours - Le constructeur du GE va être contacté ce matin - Le STS de la voie A va être câblé en automatique d'ici vendredi - L'analyse du défaut de l'onduleur de la voie A est en cours

Nous vous prions de nous excuser pour cette coupure de service.

Déroulé de l'incident

L'énergie est revenue peu après 7h30, nous avons du exécuter un roulement sur les différentes baies qui avaient partiellement sautées. Le déroulé de la journée a été le suivant :

• 05h15

Perte d'énergie sur la voie Enedis B, normalement secourue et ondulée. L'onduleur est passé sur batterie, le groupe a tenté un démarrage automatique.

• 05h16

Le groupe s'est mis en sécurité, les supercaps de l'onduleur se sont vidées, coupure totale de la voie B au sein du datacentre. 80kVA se sont ajoutés aux 80kVA initiaux présents sur la voie A. Étant donné une installation temporaire de la part d'Enedis depuis l'année dernière sur un câble temporaire qui est maintenant bien trop permanent, la capacité de la ligne est plus faible que les 200kVA initiaux. Lors du report de charge, une sous-tension d'une vingtaine de volts a fait se mettre l'onduleur de la voie A, qui a pour rôle de lisser la tension et corriger le facteur de puissance. Cependant, sans batterie / supercaps, l'onduleur voie A ne tolère qu'une plage limitée de variation de tension.

• 05h17

Perte totale d'énergie sur moji1.

• 06h28

Les premières personnes sur site ont tenté de démarrer manuellement le groupe électrogène de secours. Ce dernier a bien démarré en manuel, cependant le disjoncteur de départ d'énergie de ce dernier n'était plus armé, et aucune alarme n'était présente sur ce dernier.

• 07h30

Le personnel habilité arrivé sur site, l'onduleur voie A a été relevé de ses alarmes, ce qui a permis de pouvoir le remettre en circuit nominal. Les conteneurs de moji1 ont été allumés par section progressivement. Une surtension a eu lieu lors de l'arrêt de la voie B, entraînant la chute de nombreux disjoncteurs de départ ainsi que du disjoncteur général de la voie B.

• 07h35

L'onduleur voie B a été relevé de ses alarmes, ce qui a permis de remettre de l'énergie sur la voie B.

• 07h50

Une tentative de bascule sur le groupe électrogène de la voie B a été tenté. Ce dernier s'est remis en sécurité comme lors du premier démarrage automatique raté de 05h15. L'arrivée nominale a été rétablie dans la plage de temps que permettent de couvrir les supercaps, aucune coupure de la voie B à cet instant.

• 08h00

Les premières équipes systèmes et réseaux se sont au mis travail pour rétablir le services dont : - Server V - Server A qui n'ont pas pu être rétablis automatiquement. Les services réseaux : - Fiber S - Fiber C sont revenus quant à eux automatiquement dès remise sous tension.

• 08h30

Une odeur anormale a été constatée proche du groupe electrogène. Après diagnostic, un micro fuite de gaz semble provenir du groupe de sécurité. Par sécurité, l'arrivée gaz a été condamnée.

• 09h15

Après diagnostic approfondi, nous avons identifier une mise en sécurité du groupe faisant tomber l'interrupteur de puissance général de ce dernier. Après fermeture de la vanne, une perte de pression aval a confirmé la présence d'une fuite. Le constructeur du groupe electrogène a été saisi pour la réalisation d'une maintenance en urgence sur l'équipement. Notre équipementier d'onduleur a été sollicité pour la commande de deux nouveaux lots de supercaps, l'un pour l'onduleur voie A dans le but de pouvoir sécuriser la voie A plus efficacement, et l'autre sur la voie B dans le but de donner un peu plus de temps à la bascule. De plus, nous avons lancé un diagnostic pour analyser l'anomalie de la surtension apparue lors de la coupure de l'onduleur.

Action curative

• Une maintenance est prévue très prochainement sur le groupe electrogène par notre équipementier pour le remettre en état de fonctionnement,

• Une maintenance sur l'onduleur voie A est prévue dans le but de l'équiper d'un bypass automatique lors du passage hors tolérance,

• Une maintenance sur l'inverseur de source de aval de l'onduleur voie A est prévu dans le but de basculer la source d'énergie en direct d'Enedis en cas de perte de l'onduleur voie A,

• Un outil de phoning/réveil d'urgence des équipes opérationnelles en cas d'incident majeur pour augmenter le temps de réactivité par rapport aux outils classiques de supervision.

Nous gardons l'infrastructure sous surveillance et prenons le maximum d'informations sur le déroulé des événements dans le but d'améliorer nos temps de réactions et améliorer les scénarios de criticité.

Nous vous présentons nos excuses et travaillons à améliorer le service fourni,

Cordialement,

L'équipe moji

Une intervention de maintenance urgente est planifiée pour ce mercredi 04 juin 2025 à 18h dans le but de procéder à la mise en place d'un relayage de commande pour la bascule de la voie A non secourue en cas de défaillance d'onduleur.

Nous allons procéder à une coupure de la voie A pour pouvoir manoeuvrer dans l'inverseur de source piloté de l'arrivée Enedis.

L'intervention prévoit une coupure de 1h, cependant une remise sous tension sera effectuée le plus tôt possible.

La voie B ne sera pas impactée, cependant nous vous conseillons de vérifier la double alimentation dans vos racks.

Nous serons vigilants aux baies clientes en état de surconsommation qui ont tendance à disjoncter en cas de perte d'une des arrivées.

Nous nous excusons pour la gêne occasionnée,

L'équipe moji

Bonjour,

Les préparatifs liés à la maintenance pour l'installation d'une commande automatique à manque de tension de la voie A sont maintenant achevés.

Nous allons progressivement procéder à la coupure de la voie A de moji1.

Cordialement,

L'équipe moji