Le Blog Oxymium

2009-06-23: Redemarrage d'un switch

csw-1 a redemarré automatiquement suite à un bug logiciel à 9h26. Cela a engendré une coupure de 30s sur certains liens client.

2009-06-23: Incident cogent

Le remplacement d'une carte dans le routeur principal Cogent à Telehouse Paris à provoqué un court-circuit qui a endommagé le châssis du routeur ce matin vers 6h20.

Consequence: notre transit Cogent est coupé

Impact: Aucun, notre autre transit achemine le traffic.

Ils remplacent le chassis et notre lien devrait remonter vers 13h

2009-06-23: Doublement des quotas boites mail

Nous avons doublé les quotas standards des boites mails.
Cela vous permettra de passer de bonnes vacances sans avoir à relever votre courrier tous les 3 jours !

2009-06-22: Maintenance serveur mail

Suite à l'ajout de nouveaux disques dur, nous allons effectuer une opération de maintenance sur le serveur de courriers ce lundi 22/06/2009entre 22h et 1h.
L'intervention prendra environ une heure et pendant cette opération, la récupération des emails sera interrompue.
Aucun email recu ne sera bien évidement perdu.

2009-06-02: Problemes SMTP, POP et IMAP

Nous avons des problemes intermittant au niveau de l'authentification des connections SMTP, POP et IMAP ce 02/06 entre 6h13 et 8h53.
Le problème est venu d'un des serveurs ldap qui ne repondait plus à toutes les requêtes sans pour autant être totalement mort.
Nous avons identifié la cause du problème et cela ne devrait plus se reproduire

2009-05-21: Redemarrage serveur d'admin

Nous avons du redemarrer physiquement l'un de nos serveurs d'administration (uadm1) suite à un problème de mémoire non corrigé par l'ECC.
L'interface de gestion des comptes a été indisponibles et les graphes de bande-passante ont été impactés.

2009-05-15 Redemarrage serveur Web

Suite a des problemes de gestion des logs et de connections FTP nous avons redemarré un serveur web à 11h35. Rétablissement total à 11h43

Le mail orange

Amusant: Orange semble toujours avoir des problemes avec ses config:
48.242.12.80.in-addr.arpa. IN PTR smtp21.orange.fr.
mais la reciproque n'est pas vraie:
smtp21.orange.fr. IN A 80.12.242.49

Apres on s'étonne que les mails venant d'Orange n'arrive pas ou arrivent en retard....

2009-02-19: Incident PoP Pastourelle de France Telecom

Depuis 11h30 environ il semble qu'il y ait un incident sur le PoP Pastourelle de France Telecom.
Certaines IP du reseau France Telecom sont joignables avec une forte latence:
...
4 193.252.159.166 48 msec 48 msec 48 msec
5 193.251.128.117 52 msec 48 msec 64 msec
6 193.251.128.118 256 msec 260 msec 252 msec
...

2009-02-16: Probleme de routage

Entre 17h24 et 18h et quelque, certaines destinations ont pu être injoignables.

La cause est une mauvaise configuration (as-path trop long) d'un opérateur en République tchèque, mauvaise configuration qui s'est propagé a plusieurs opérateurs au niveau mondial.

Nous n'avons pas été directement impacté mais plusieurs autres réseaux oui.

Plus d'informations:
Ahh, The Ease of Introducing Global Routing Instability
Reckless Driving on the Internet

2009-02-11 Upgrade FTP sur un serveur web

Suite a un des plnatage lors de certains commande nous allons upgrader le service FTP sur le serveur web concerné.

2009-01-27: Redemarrage d'un switch

Nous allons procéder au reboot d'un switch le 27/01/2009 entre 20h et 21h.
Cette opération engendrera une interruption de l'ordre de quelques secondes pour les réseaux connectés à ce switch.
Les clients impactés ont été directement prévenus.

2009-01-10 Redemarrage d'un serveur web

Suite au plantage inopiné d'un serveur web nous avons du procéder à son redemarrage.

Probleme de liaison Cogent/Sprint

Depuis le 30/10 vers 20h les réseaux Sprint et Cogent ne communiquent plus.

Concrètement, les réseaux qui n'ont comme fournisseur de transit que Sprint ne voient plus les réseaux qui n'ont comme fournisseur de transit que Cogent.

Cela n'a pas d'impact pour nous et nos clients: Sprint est joignable par notre fournisseur de Transit Typhon et Cogent est joignable en direct.

C'est une nouvelle péripétie de la guerre que se livrent les opérateurs 'Tiers 1' (et ceux qui se veulent Tiers 1).

Cogent a indiqué que Sprint avait coupé les liaisons entre leurs réseaux et Sprint indique qu'effectivement ils ont coupé car Cogent ne répondait plus aux criteres de leurs accords de liaison de 2006.

Il semble que le traffic Cogent vers Sprint soit plus important que l'inverse (Sprint vers Cogent): en très gros: les clients de sprint envoient des requêtes vers les clients de Cogent (faible traffic) et les clients de Cogent envoient le contenu demandé (traffic plus important).
Sprint estime sans doute que Cogent doit le payer pour accéder à son réseau et à ses clients tandis que Cogent estime que non.

Ces 2 réseaux n'achetant officiellement pas de transit, il n'y a pas de chemin alternatif.

Comment cela va finir ? En gros celui qui va céder le premier va perdre la manche. Cogent ne peut pas trop se permettre de céder car il court dans ce cas le risque de se voir de-peerer par d'autres réseaux qui lui reprochent ses tarifs agressifs. Sprint a probablement plus de latitude. Cela dit quand la liaison sera rétablit on ne saura sans doute pas qui des deux a gagné ou perdu; le communiqué de presse sera: "Cogent et Sprint ont trouvé un accord; blabla, blabla...". Les termes dudit accords seront confidentiels...
Cela dit, les 'perdants' sont déja connus: les clients mono-homé de Sprint et Cogent...

Morale de l'histoire: ne jamais être mono-homé chez un "Tier 1": vu la guerre en cours depuis plusieurs années, c'est l'assurance d'être un jour ou l'autre (voire régulierement) coupé d'une partie d'Internet.

Plus d'informations techniques:
Blog Renesys

Si vous êtes mono-homé chez Sprint ou Cogent et présent à Telehouse 2 Paris, n'hésitez pas à nous contacter: nous avons des offres de transit backup ou principale intéressantes !

2008-10-16: Upgrade Reseau

Nous allons finaliser l'upgrade à 1 Gbps de notre 2eme transit ce 16/10/2008 entre 20h et 21h.
La session BGP avec ce transit va être interrompue puis le lien va être coupé et une nouvelle session BGP va être montée.
Impact attendu: aucun, l'autre transit prenant le relais.

2008-10-07: Flapping FranceTelecom/Wanado/OpenTransit

Les routes vers FranceTelecom/Wanado/OpenTransit ont flappé quelques secondes vers 12h02 puis vers 12h25 suite semble-il a des annonces Cogent erronées.
Nous avons reconfiguré les preferences de routage pour éviter que le problème se reproduise.

2008-10-04: Retard mails

Un probleme sur un service antispam a induit un delai dans la reception de certains mails, entre 10h30 et 17h.
Aucun mail n'a été perdu.

2008-10-05: Intervention réseau

L'un de nos transits a programmé une mise à jour réseau le dimanche 5/10/2008 entre 4h et 5 du matin: 2 interruptions de 1 à 2 minutes chacune devraient avoir lieu.

Impact attendu: Aucun, le second transit assurant la continuité.

Bon courage leur équipe !
Nous surveillerons de notre coté le bon fonctionnement du réseau.

Préparation upgrade transit

Nous allons upgrader le lien Cogent de 100Mbps à 1Gps dans les prochains jours.
Impact attendu: aucun.

2008-08-20 Probleme de charge sur un serveur Web

Un problème de charge d'origine encore indefini nous a obligé a redemarrer cetains services web entre 8h40 et 9h10.