plexi’Blog

Cela maintenant une semaine que nous travaillons uniquement sur le panneau d’administration, et un constat s’impose : il nous faudrait encore deux semaines de travail pour arriver a un résultat correct.

N’ayant pas envie de vous faire attendre deux semaines, nous allons des ce Week-End remettre en place une sauvegarde du panneau AlternC, en y incluant des patchs maisons (que nous avons finit par retrouver).

Le panneau d’administration sera donc de retour dès le lundi 26 Février.

35 Comments »

Copie de l’email envoyé aujourd’hui a l’ensemble des clients mutualisés :

Bonjour,

Vous avez pu le remarquer depuis dimanche 11 février au matin, l'ensemble de

nos services a rencontré différents soucis suite a une panne matérielle sur un

élément important de notre infrastructure : le

serveur de mail et administration.

Comme son nom l'indique, cette machine hébergeait les services suivants :

mail, espace d'administration, site PlexiWeb, statistiques.* Résumé de la situation

Nous sommes donc intervenus dimanche matin dès l'alerte reçue pour remettre

les services en fonction, c'est alors que les choses se sont très mal

enchaînées :

  - Le disque dur a été isolé, et remplacé afin de re-déployer une des

sauvegardes dont nous disposons.

  - Après diagnostic, les sauvegardes effectuées précédemment (à savoir 72

heures et 2 heures avant la panne) se sont révélées endommagées, et donc

inutilisables.

  - Une tentative a été effectuée de récupérer les données sur le disque dur,

celle-ci s'est soldée par un échec suite à une surtension/coupure de courant

ayant terminé d'achever le disque en question.

Aujourd'hui le constat est simple : la majorité des services sont

fonctionnels, à savoir l'accès à vos sites Internet, vos emails (aucun mail

n'a été perdu), ou bien encore vos bases de données mais nous avons perdu

différents éléments indispensables :

  - Panneau d'administration

  - Statistiques awstats, ainsi que leur historique depuis deux ans.

* Et la suite alors ?

Malgré un climat plus qu'en notre défaveur, nous avons décidé de continuer.

Continuer d'avancer, continuer de vous proposer un service de qualité malgré

ces problèmes, même si nous sommes conscients que la

confiance que vous nous accordez sera longue à revenir.

Nous travaillons donc depuis hier à finaliser un nouveau panneau

d'administration (comprenant la gestion des statistiques) et espérons pouvoir

vous le proposer d'ici une quinzaine de jours.

D'ici ce délai, nous serons à votre disposition par email au support, pour

réagir à toutes vos demandes, y compris celles bénignes qui pouvaient

d'ordinaire être effectuées depuis votre panneau d'administration. Pour

information, vous pouvez accéder à phpMyAdmin (gestion de vos bases de

données) à l'adresse http://mysql.plexiweb.net/.

Conscients que certains d’entre vous souhaiteront déménager leurs données,

nous ferons également tout notre possible pour vous aider dans ce type de

démarches.

Merci de la confiance que vous nous accordez,

–

Emmanuel Cohen - PlexiWeb

(Hébergement simple et facile) - http://www.plexiweb.net

34 Comments »

Comme vous avez pu le remarquer, depuis ce matin 5 heures, l’accès a vos mails, au panneau d’administration, ainsi que le site PlexiWeb ne fonctionne plus suite a un problème matériel sur la machine hébergeant ces services. Nous travaillons donc a reconstruire une configuration fonctionnelle, et a relancer l’ensemble des services aussi vite que possible.
Les mails ne sont normalement pas perdu, puisque le serveur MX de secours récupère ceux-ci.
Nous publierons plus d’informations sur ce blog des que possible.

MAJ 23h50 :

• La sauvegarde du serveur de mail est inutilisable, nous continuons donc de tenter de récupérer les données sur le disque dur décédé.
• Un accès phpMyAdmin (temporaire) a été mis en place a l’adresse suivante.
• Le serveur DNS primaire (ns1.plexiweb.net) est de retour, si vous rencontriez des difficultés d’accès a vos Internet cela devrait maintenant être résolu.

Je tiens a préciser que toutes vos données sont intactes, le problème n’affecte que le fonctionnement des outils d’administration. Nous travaillons actuellement a remettre en production la messagerie, aucun mail n’est perdu!

MAJ 03h15 :

• Le serveur de mails est relancé. Le serveur MX secondaire va donc distribuer les mails au serveur principal, il y a environ 20 000 mails a traiter.
• L’accès POP / IMAP est de nouveau fonctionnel, le POP-SSL et IMAP-SSL seront relancés prochainement.

MAJ 11h20 :

• L’accès au webmail SquirrelMail est de nouveau fonctionnel.
• L’accès en POP-SSL et IMAP-SSL est également de retour.

MAJ 22h40 :

• Services encore impactés a l’heure actuelle : Site PlexiWeb,  panneau d’administration, mailing-list, statistiques, anti-virus sur les emails, anti-spam sur les emails.
• Le support sera rétabli demain à partir de 13 heures, nous répondrons aussi vite que possible a tous vos emails.

46 Comments »

Comme vous avez pu le constater, l’accès a l’ensemble de vos données hébergées chez PlexiWeb (web, mail, bases de données) ont été perturbées aujourd’hui, de 14h47 jusqu’à 18h32 suite a des problèmes sur nos serveurs de fichiers.
Voici la rapport que nous pouvons actuellement faire :

• 14h47 : le serveur de fichiers principal (veloaroulettes), suite a un problème d’origine matériel plante. Le serveur de secours (voitureapedales) tente alors de prendre la main.
  Lors de sa mise en production, le serveur de secours rencontre lui aussi un problème matériel et plante a son tour.
• 15h25 : nous arrivons a relancer l’ensemble des services à partir du serveur de fichier principal, mais il apparaît que les données présentes sur celui-ci ne sont pas consistantes.
• 15h30 : les données présentes sur le serveur de secours sont complètement détruites, suite a un problème sur la carte RAID. nous décidons alors de lancer une vérification sur le serveur de fichiers principal pour récupérer un système consistant.
• 18h32 : les données sont de nouveau corrects, et l’ensemble de nos services sont fonctionnels. Après vérification, les seules données altérées pendant la coupure ne sont pas des données clientes, l’ensemble de vos données sont donc correctes et aucun fichier n’a été perdu.

21 Comments »

La semaine passée fut assez riche en rebondissement, et a l’heure ou j’écris tous les travaux/incidents ne sont pas encore terminés. Petit retour donc, sans langue de bois :

• Problèmes réseaux : La semaine avait réellement très mal commencé, malgré le passage du coté d’Alionis sur des équipements de marque Cisco et Extreme Networks le temps de trouver le problème sur les routeurs Foundry Networks. Le problème s’étant reproduit sur le matériel des deux autres constructeurs, le problème matériel/logiciel a vite été abandonné, pour s’orienter sur une autre piste. Des modifications ont été faites, et le réseau est de nouveau stable depuis le milieu de la semaine.
• Mise à niveau du cluster mutualisé : Suite a un récente hausse de notre activité, et a divers facteurs (attaques contre un site Internet, …) vous avez pu remarquer mardi et mercredi quelques petites latences au plus fort de la journée. Fort de ce constat, nous avons ajouté de nouvelles machines a notre cluster d’hébergement.
• Indisponibilité du site PlexiWeb : Comme vous avez pu le remarquer notre site a été indisponible toute la journée d’hier, vendredi 27 janvier 2007 jusqu’à 14 heures environs aujourd’hui. Suite a un problème logiciel sur la machine hébergeant le site, nous avons préféré appliquer le principe de précaution et vérifier un a un chaque élément avant de les relancer en production.
• Support par mail : Le support étant précédemment hébergé sur la machine hébergeant notre site, celui-ci s’en retrouve directement impacté. La remise en route est en cours, mais comme chaque fois, l’import de la base de données est très long.
• Changement du LoadBalancer primaire : suite a un problème matériel aujourd’hui vers 13h42 sur le répartiteur de charge de notre cluster mutualisé, celui-ci est en cours de changement. Vous avez pu rencontrer une petite indisponibilité au moment du passage sur le second LoadBalancer due à une erreur dans la configuration de celui-ci (désormais corrigé), qui continue actuellement de fonctionner sans impact pour vos sites Internet.
• Commande en retards, renouvellement non pris en compte : C’est actuellement le plus grand problème pour nous, puisque les problèmes réseaux nous ont fait perdre énormement de temps la semaine passée. La semaine a venir sera donc principalement concentrée sur ce point, merci de votre patience et compréhension.

Ce billet sera sûrement mis à jour en fonction des travaux que nous allons effectuer ce Week-End.

2 Comments »

C’est désormais sûr et définitif, PlexiWeb quitte RedbusTelecity … demain soir.
Pourquoi un déménagement aussi rapide ? En fait, ce déménagement est prévu de longue date, mais nous ne pouvions l’annoncer avant d’être certains que celui-ci pourrait se faire, et que nous pourrions assurer qu’il se fasse dans les meilleures conditions.
Nous quittons donc RedbusTelecity après plus de deux ans passés dans ce datacenter pour nous installer dans la suite privative d’Alionis chez IXEurope St-Denis.
Cela fait maintenant une semaine que nous travaillons uniquement sur ce déménagement et aujourd’hui tout est en place pour un déménagement dans de bonnes conditions. Le réseau électrique est bon, le réseau Internet est bon, les climatisations tournent correctement, le précâblage a été effectué. Il ne reste plus qu’a déplacer les machines.

Déroulement de la soirée :

• à partir de 23h00 : L’ensemble des serveurs sera débranché et rangé dans la camionette.
• 23h30 - 23h55 : Ballade pour l’ensemble des machines entre Courbevoie et St-Denis.
• 00h00 - 00h30 : Redéploiement des machines.

Bien que nous ne puissions effectuer une migration sans coupure comme nous aurions souhaité pouvoir le faire, nous allons nous efforcer d’agir le plus rapidement et le plus efficacement possible.
Veuillez par avance nous excuser de la coupure à venir.

13 Comments »