21/09/2015 22:19

2015-09-21: Incident sur un routeur

L'un de nos routeur situé à Telehouse2 a planté ce 21/09/2015 à 20:43. Nous l'avons remonté peu de temps après.
Cela a impacté une partie des clients en routage statique, ainsi que certain de nos services entre 20h43 et 21h04.

22/02/2014 17:29

2014-02-22: Incident routage

Nous avons a eu un problème de routage ce 22/02/2014 entre 14:33:32 et a peu près 14:55:01.

Pour un raison inexpliquée la mac-address de l'interface d'un de nos routeurs core (core3 @th2) avec l'un de nos routeurs border (br1 @th2) a été écrasée par celle d'une autre interface (ce qui est en théorie impossible vu que les 2 ont une liaison directe).
Cela a provoqué l'arrêt de la session BGP entre les deux équipements (ce qui est le comportement attendu) mais l'ospf a maintenu le chemin entre ces deux équipements, le lien étant up et le traffic ospf pouvant toujours passer
dessus.

Résultat: le trafic allant du routeur br1 vers ce routeur core3 tombait dans un "trou noir". Cela n'a pas concerné tout le trafic mais une partie importante notament le trafic venant de Orange et Free.

Nous nous sommes aperçu quasi immédiatement du problème, avant même que le monitoring nous remonte des alertes mais nous avons mis du temps à remonter à la cause du problème.

Toutes nos excuses pour cet incident.

04/02/2014 11:48

2013-02-03 Connection a Hopus

Nous sommes maintenant connecté à hetp://www.hopus.net">Hopus ce qui nous permet notamment d'être moins d'une 1ms du réseau as3215 (Orange):









Host Loss% Snt Last
1. em1-v208.br1.th2.fr.oxymium.net 0.0%80.1
2. oxymium.th2-1.rt.hopus.net 0.0%70.3
3. 193.253.13.97 0.0%70.6
4. lag2-816.LYOP2.Lyon.raei.transit 0.0%70.8
5. fw-bae01-v183.fusion.net.b1.fti. 0.0%70.6
6. www.orange.fr.b2.fti.net 0.0%70.7

13/05/2013 10:02

2013-05-10: Incident électrique 10/05/2013 - 17h11-17h23

Un incident électrique a impacté une partie de notre infrastructure sur le Datacenter Telehouse 2 ce 10/05/2013 entre 17h11 et 17h23.

Une des alimentations électriques de l'équipement d'un de nos clients a "brulée" aux environs de 17h11 et a fait disjoncter la baie du client mais également l'une de nos deux arrivées électriques (la "B"), à la fois le coffret et le départ Tableau Général Basse Tension (TGBT).
La source du problème n'étant pas de prime abord évidement identifiable, nous avons pris un peu de temps sur place avec les équipes de Telehouse pour être sur que le ré-enclenchement de l'arrivée ne poserait pas de nouveaux
problèmes.
L'arrivée électrique à été rétablie vers 17h22 et les équipements mono-alimentés sur cette arrivée ont redémarrés à ce moment là.
Les équipement en double alimentation (notamment coeur de réseau) n'ont pas été impactés, les équipements alimentée sur l'arrivée "A" non plus, nis nos équipements situés dans le Datacenter Equinix.


Je vous présente nos excuses pour cet incident.

Nous avons demandé au propriétaire de l'équipement concerné d'investiguer avec son fournisseur pour déterminer la raison de l'impact de ce problème.

11/04/2012 11:12

2012-04-11: Incident électrique sur le 1er TH2

Une coupure électrique a eu lieu ce matin vers 10h sur une zone du 1er etage de Telehouse2.

Etant situé au 2ème étage nous n'avons pas été directement impactés (à part notre standard téléphonique dont l'opérateur est situé dans la zone en question). Nos équipements ont continué a tourner et à être joignables.

Par contre de nombreux opérateurs semblent l'avoir été, plus ou moins fortement.

19/12/2011 18:47

2011-12-19: Redemarrage serveur web 'uweb7'

Nous allons procéder à une opération de maintenance sur le serveur uweb7
Cette opération aura lieu entre 23h et 3h cette nuit. Elle devrait durer entre 5 et 10mn.
Chaque client à été prévenu individuellement.

2011-12-19: Coupure Fibres entre Telehouse2 et Equinix (PA2/PA3)

D'après nos informations un faisceau de 432 fibres optiques aurait été coupé entre les datacenter Telehouse 2 (Paris) et Equinix PA2/PA3 (Saint-Denis) vers 9h45 ce matin.
Nos 2 fibres entre ces datacenters n'ont pas été impactées.
Par contre il semblerait que certains abonnés Bouygues Télécom soient impactés et ne puissent par exemple plus joindre notre réseau (à priori problème de résolution DNS et non de connection proprement dit). D'après des informations (indirectes), le délais de réparation de ce faisceau en service serait de l'ordre de 3 à 4h.

16/12/2011 18:21

2011-12-16: Mise à jour de routeur

Nous avons mis à jour ce matin l'un des routeurs core sur Equinix/PA3.
Aucun impact.

2011-12-17: Mise à jour d'un routeur

Nous allons procéder à la mise à jour d'un de nos routeur de coeur à Telehouse 2 ce 17/12/2011 vers le début de l'après-midi.
Les clients qui ont des sessions BGP sur ce routeur ont été prévenus individuellement qu'une de leurs sessions sera temporairement arretée durant l'opération.
L'impact sera nul: le traffic étant redirigé via le 2ème routeur de coeur.

2011-12-16: Incident sur un serveur

Celui ci a été inaccessible pendant une 20aine des minutes à partir de 12h10 environ.
La cause est une attaque d'un serveur allemand à la recherches de failles sur les serveurs web hébergés.
L'attaque n'a pas réussie mais plusieurs sites web ayant une gestion particulières des pages non trouvées, cela a engendré une très forte charge jusqu'à rendre le serveur incapable de répondre aux requêtes, du fait du grand nombre de requêtes émises par l'attaquant.
La même attaque à également pris pour cibles d'autres serveurs mais ceux-ci non pas été autant impactés, seul un léger ralentissement à pu avoir lieu.

Nous avons mis un place un mécanisme de blocage automatique qui se déclenche lors d'un trop grand nombre de requêtes de ce style afin d'éviter que le problème ne se reproduise.

01/04/2011 11:22

2011-03-31: Transit IPv6

Nous avons maintenant 2 transitaire IPv6: Cogent et Hurricane Electric.
Nous attendons la mise en place d'IPv6 avec nos 2 autres fournisseurs de transit.

31/03/2011 19:21

2011-03-31: Presence sur 2 points de peering supplémentaires

On était présent sur fr-ix (connection 1Gbps) depuis quelques semaines et nous venons de rejoindre le FranceIX (connection 100 Mbps) aujourd'hui.
Cela nous donne des connections sans intermediaire vers Numericable, Google, NeoTelecom, DailyMotion, Celeste et bien d'autres !

08/03/2011 14:23

2011-03-08: Transit IPv6

Nous avons mis en place le peering IPv6 sur Equinix-Paris et Sfinx il y a 3 semaines.
Aujourd'hui nous venons de monter les sessions IPv6 de Transit via Cogent:
Un petit ping vers Google en IPv6 a partir d'un de nos routeurs Border:
--- 2a00:1450:8006::68 ping6 statistics ---
10 packets transmitted, 10 packets received, 0.0% packet loss
round-trip min/avg/max/std-dev = 18.366/18.497/18.742/0.104 ms

Et à partir d'un de nos core:
--- 2a00:1450:8006::68 ping6 statistics ---
11 packets transmitted, 11 packets received, 0.0% packet loss
round-trip min/avg/max/std-dev = 18.705/18.879/18.996/0.078 ms

23/02/2011 18:56

2011-02-23: Problème sur les services de courrier

Entre 14h27 et 15h05 l'un de nosserveur de mail a été l'objet d'une attaque qui a généré une surcharge et rendu difficile voir impossible la réception et/ou l'envoi de mail pour certains.
L'attaquant a été bloqué et nous venons de mettre en place un système de détection de ce genre d'attaque qui bloque automatiquement l'assaillant dans les secondes suivants ses tentatives.

02/01/2011 15:00

2011-01-02: Mise à jour du routeur core3.th2.fr

Nous allons mettre a jour l'un de nos routeurs sur Telehouse 2 ce 02/01/2011 a partir de 19h30.
Aucune interruption n'est prévue: le traffic étant rerouté via un autre équipement.

27/12/2010 20:18

2010-12-28: Mise à jour du routeur core4.th2.fr

Nous allons mettre a jour l'un de nos routeurs sur Telehouse 2 ce 28/12/2010 entre 21h et 23h30.
Aucune interruption n'est prévue: le traffic étant rerouté via un autre équipement.

24/12/2010 18:14

2010-12-25: Migration d'un serveur de Mail

Nous procéderons au remplacement physique de l'un de nos serveurs de mail le
samedi 25 Décembre entre 20h et 24h.
La réception (et pour certains l'emission) des mails (serveurs pop/imap) sur
votre compte sera donc interrompue pendant environ 2h durant cette période.
Aucun mail ne sera perdu: ils seront mis en attente et distribués dès la
migration effectuée.

Avec toutes nos excuses

Toute notre équipe vous souhaite de joyeuses fêtes !

22/12/2010 15:16

2010-12-23: Migration d'un Serveur de mail MX

Nous migrons un serveur de Mail MX le 23/12/2010 entre 22h et 23h30. L'opération durera quelques minutes et pourra retarder la reception de certains mails pendant cette période

18/12/2010 15:22

2010-12-19: Finalisation de la migration d'un serveur Admin

Le serveur gérant la console d'administration sera finalisé de migré le 19/12/2010 en soirée.

03/12/2010 15:27

2010-12-04: Demenagement serveur Web

Nous allons proceder au déménagement physique d'un de nos serveurs web ce 04/18/2010 entre 18h et 22h.
L'opération devrait durer une 20aine de minutes