Wednesday 27th April 2022

Transit Incident majeur sur Pop opérateurs

État à 11h00 Nos services sont 100% opérationnels et fonctionnent en mode nominal.

  • Attention, l'internet Français reste perturbé et des ralentissements entre opérateurs restent d'actualités.
  • Plus d'action de nos équipes et opérateurs en cours sur nos infrastructure et liens
  • Pour nos clients qui rencontrent des dysfonctionnements, il faut contacter notre support.
  • Fin de la cellule de crise.

État à 6h20 Nos services sont 100% opérationnels, sans problèmes de performance majeur.

  • Mise en service d'une nouvelle liaison 100G hier à 18h. L'accès à Lyon est stable et sans perte.
  • Les soudures ont bien eu cette nuit. La porte de collecte de Strasbourg est opérationnelle depuis 22h18.
  • La porte de collecte de Lyon est opérationnelle depuis 1h00. Notre VISP est donc 100% up.
  • Il nous reste un chemin de transit de redondance qui n'est pas opérationnel. Notre opérateur rencontre de multiples coupures.
  • Nous invitons les clients dont les lignes qui ne sont pas remontées à nous contacter via notre support.
  • Nous restons mobilisés à surveiller dans la journée la suite des évènements.

État à 23h00 L'incident est toujours en cours et les actions sur le terrain battent leur plein.

  • Depuis 20h00, les autorités locales ont fini leurs recherches, les techniciens ont pu démarrer les réparations sur les zones impactées.
  • Nos opérateurs n'ont pour le moment pas la possibilité de nous fournir un délai prévisionnel de rétablissement.
  • Déploiement de capacités additionnelles de secours pour améliorer le transit chez un de nos opérateurs
  • Nous avons de ce fait récupéré un meilleur transit internet et entre nos DC, les services de hébergés sont accessibles dans de meilleurs conditions.
  • Nous ferons le point demain matin sur la situation suite aux actions terrain de nos opérateurs.

État à 19h15 L'incident est toujours en cours, voici les derniers retours opérateurs.

  • Plusieurs chambres ont été vandalisées, les travaux de réparation sont en cours pour un rétablissement au mieux dans la nuit.
  • Depuis 18h10, notre transit PARIS - LYON s'améliore, nous constatons une nette amélioration sur nos services à Lyon
  • Un de nos opérateurs va réaliser un remplacement de lien sur ses réseau de secours à 21h00

État à 17h45 Tous les opérateurs impactés communiquent régulièrement entre eux afin de faciliter et coordonner les réparations sur site. Des équipes techniques sont déployées sur de multiples zones dans la région parisienne. Nous essayons d'obtenir des délais de rétablissement de la part de nos fournisseurs mais ceux-ci ne se prononcent pas pour le moment.

Le défaut impactant certaines liaisons EFM L2TP C2E de la région Rhône-Alpes a été corrigé.

Concernant l'avancement terrain :

  • La police a terminé son enquête.
  • L'équipe a commencé le travail pour tirer le câble afin de confirmer s'il y a suffisamment de mou pour faire l'épissure.
  • Une solution temporaire est actuellement à l'étude et sera mise en place au besoin s'il n'y a pas assez de mou.

État à 16h45 Il nous a été confirmé que les pannes sont liées à des actes de malveillance. à plusieurs endroits sur plusieurs liaisons.

Les équipes techniques sont toujours sur le terrain et avancent au rétablissement des fibres impactées.

Voici les étapes qui sont suivies sur le terrain

  1. Tirez sur le câble pour avoir du mou - En cours
  2. En attendant que la police fasse son enquête - en attente
  3. Préparer les boîtiers et souder les câbles - en attente

Ces étapes auront lieu séquentiellement. Nous essayons d'obtenir auprès de nous fournisseurs des délais approximatifs de rétablissement. Cependant, plusieurs d'entre eux évoquent des délais allongés au vu des circonstances. Nous vous tiendrons informés des retours que nous obtiendrons.

État à 14h15 Nous avons eu un retour de nos opérateurs. Les équipes ont identifiés les points de rupture et sont sur place pour réparer les fibres et procéder aux bascules sur des infrastructures de secours. Nous attendons un retour des services au mieux à 18h00. Nous vous tenons informés dès que nous avons de nouvelles informations.

État à 12h30 Les équipes de techniciens sont sur site depuis environ 11h00. Les dégâts doivent être évalués avant de procéder à toute réparation des fibres. En parallèle, un plan d'action est en cours de mise en place par nos opérateurs pour corriger au plus vite cet incident. Nous avons escaladé nos fournisseurs aux plus hauts niveaux afin d'avoir des informations en temps réel sur la résolution de cet incident.

État à 11h30 Nous observons un retour à la normale de quelques liens. Nous attendons un retour opérateur.

État à 10h30 Nos fournisseurs nous ont indiqué avoir identifié le point de coupure des fibres impactées. Des moyens supplémentaires sont nécessaires pour procéder à la réparation des fibres optiques, les équipes techniques sont en route pour le lieu de l'incident. Nous relançons très régulièrement nos fournisseurs afin d'avoir des informations sur l'avancement et la résolution de l'incident

État à 8:30 L'incident est national et perturbe l'ensemble de l'internet Français. Nos infrastructures ne sont pas en panne, nos clients peuvent avoir des difficultés d'accès en raison de rupture de peering entre opérateur.

État à 7:21 Confirmation qu'il s'agit d'un incident multi opérateur national.

État à 6:48 Nous subissons actuellement une coupure vers nos POP de Vénissieux et Strasbourg.

Nos fournisseurs nous informent avoir détecté une coupure à Souppes Sur Loing impacté toutes nos fibres vers ces POP. Les services EFM (hors CELAN) ont pu être remontés et son de nouveau fonctionnels depuis 6h25.

Nous n'avons pas de délai prévisionnel de rétablissement pour les autres services actuellement, les investigations de nos fournisseurs sont toujours en cours et des mainteneurs se rendent sur place.

Nos équipes sont en contact avec nos opérateurs.