plexi’Blog

La semaine passée fut assez riche en rebondissement, et a l’heure ou j’écris tous les travaux/incidents ne sont pas encore terminés. Petit retour donc, sans langue de bois :

• Problèmes réseaux : La semaine avait réellement très mal commencé, malgré le passage du coté d’Alionis sur des équipements de marque Cisco et Extreme Networks le temps de trouver le problème sur les routeurs Foundry Networks. Le problème s’étant reproduit sur le matériel des deux autres constructeurs, le problème matériel/logiciel a vite été abandonné, pour s’orienter sur une autre piste. Des modifications ont été faites, et le réseau est de nouveau stable depuis le milieu de la semaine.
• Mise à niveau du cluster mutualisé : Suite a un récente hausse de notre activité, et a divers facteurs (attaques contre un site Internet, …) vous avez pu remarquer mardi et mercredi quelques petites latences au plus fort de la journée. Fort de ce constat, nous avons ajouté de nouvelles machines a notre cluster d’hébergement.
• Indisponibilité du site PlexiWeb : Comme vous avez pu le remarquer notre site a été indisponible toute la journée d’hier, vendredi 27 janvier 2007 jusqu’à 14 heures environs aujourd’hui. Suite a un problème logiciel sur la machine hébergeant le site, nous avons préféré appliquer le principe de précaution et vérifier un a un chaque élément avant de les relancer en production.
• Support par mail : Le support étant précédemment hébergé sur la machine hébergeant notre site, celui-ci s’en retrouve directement impacté. La remise en route est en cours, mais comme chaque fois, l’import de la base de données est très long.
• Changement du LoadBalancer primaire : suite a un problème matériel aujourd’hui vers 13h42 sur le répartiteur de charge de notre cluster mutualisé, celui-ci est en cours de changement. Vous avez pu rencontrer une petite indisponibilité au moment du passage sur le second LoadBalancer due à une erreur dans la configuration de celui-ci (désormais corrigé), qui continue actuellement de fonctionner sans impact pour vos sites Internet.
• Commande en retards, renouvellement non pris en compte : C’est actuellement le plus grand problème pour nous, puisque les problèmes réseaux nous ont fait perdre énormement de temps la semaine passée. La semaine a venir sera donc principalement concentrée sur ce point, merci de votre patience et compréhension.

Ce billet sera sûrement mis à jour en fonction des travaux que nous allons effectuer ce Week-End.

2 Comments »

Comme vous avez pu le constater il y a une semaine en soirée ainsi que ce matin tôt, nous avons du faire face a un problème réseau.
Après discussion avec notre fournisseur de transit Alionis, il apparaît que le problème viens d’un problème sur leur infrastructure. Les premières constations montrent que le routeur sur lequel nous sommes connectés, pour une raison encore inconnue, change sa politique de routage et ne route plus aucun paquet. Le routeur devenant complètement injoignable une intervention sur site est alors nécessaire pour redémarrer celui-ci.
Une investigation est donc en cours pour déterminer l’origine du problème de leur coté, nous ne manquerons pas de vous en préciser les conclusions.
Dans l’attente des conclusions, et des mesures qui en découleront, nous avons déplacés d’un commun accord notre lien de transit sur un autre équipement afin de minimiser l’impact en cas de nouveau “crash” de routeur.
Mise à jour le 20/01/2007 : Il semblerait que le problème soit contagieux, puisque aujourd’hui ce sont deux équipements de plus qui viennent de rencontrer des soucis similaires.

3 Comments »