Intervention sur filer 5

• Date : 28 janvier 2012

Bonjour,

Nous allons devoir rebooter filer 5 ce jour en raison d'un problème de kernel qui semble engendrer d'importants ralentissements.

Une mise a jour est en cours et le reboot suivra.

Cela engendrera une interruption des sites hébergés sur celui-ci pendant environ 5 a 10 minutes.

Merci de votre comprehension,

Changement de routeur - Effectué

• Date : 26 janvier 2012

Bonjour,

Le remplacement du routeur a été effectué vers 6h et n'a pas engendré de coupure (moins d'une minute).

Excellente journée,

Changement de routeur

• Date : 25 janvier 2012
• Durée :10 minutes

Bonsoir,

Nous allons intervenir demain 26/01 entre 5h et 6h afin de remplacer le routeur principal de notre réseau.

Ceci engendrera une coupure complète de notre réseau pendant au maximum 10 minutes, le temps que les sessions BGP remontent.

Cette intervention permettra d'accroitre la sécurité de notre réseau et d'en améliorer les performances.

Merci de votre compréhension.

Redémarrage cl1-sql7

• Date : 15 décembre 2011
• Durée :15 minutes

Afin de pouvoir corriger un problème de configuration au niveau du BIOS ne permettant pas le remplacement à chaud de disque sur cl1-sql7, nous devons le redémarrer pour ajuster la configuration et changer un des disques en panne.

cl1-sql7

• Date : 26 novembre 2011

Bonjour,

Nous avons été contraint de rebooter le daemon Mysql sur cl1-sql7 a plusieurs reprises hier 25/11 entre 10h et 13h.

Il s'agissait d'un souci de saturation IO sur cette machine qui a été corrigé dans l'immédiat.

Nous allons néanmoins voir pour corriger définitivement ce problème récurrent.

Filer4 - suite incident

• Date : 10 novembre 2011

Bonsoir,

L'intervention réalisée ce matin n'a pas permit de résoudre le souci sur filer4.
Le souci semble plus important mais n'est pas identifié pour le moment. Cela peut provenir
du backplane (carte sur laquelle les disques sont enfichés) ou encore de la carte mère du serveur.

Nous avons été contraint de basculer sur le serveur de backup afin de stabiliser le service.

Le serveur de backup permet de tenir la charge et d'assurer le service et est forcément synchronisé avec le
filer "normal" au maximum 48h après toute écriture.
Ceci signifie que les données fichiers/scripts/images peuvent dater au maximum de 48h mais peuvent aussi
avoir été synchronisées il y a 1h. En cas d'absolue nécessité, si vous aviez perdu des données importantes,
l'ancien filer reste fonctionnel pour récupérer des données sur demande au support.
Les données des bases de données ne sont pas du tout impactées.

Nous faisons notre maximum pour revenir a une situation de fonctionnement "normal".

Merci de votre compréhension.

Filer4 - suite incident

• Date : 09 novembre 2011
• Durée :20 minutes

Nous avons fixé pour ce soir le problème.

demain matin vers 6h, nous allons intervenir sur filer4 pour :
- changer la carte raid
- changer la connectique vers le backplane

Cela va engendrer une coupure des sites de filer4 demain matin pendant 15 a 20 minutes
environ.

Ceci est nécessaire pour réussir a régler définitivement le problème puisque les interventions
réalisées jusque la n'ont pas solutionné le problème.

Merci de votre compréhension et toutes nos excuses pour la gène occasionnée par ce nouvel
incident imprévisible sur filer4.

Fin d'incident filer4

• Date : 02 novembre 2011

Bonjour,

Suite a l'incident d'hier soir (qui était a priori engendré par un bug de kernel/de driver de la carte raid du filer), le système de fichiers devait impérativement être vérifié/réparé pour revenir a un état normal et être stable de nouveau.

Nous avons été contraint de couper les services de filer4 entre 11h20 et 12h40 environ pour lancer le check.

L'opération s'est correctement déroulée et tout est opérationnel depuis.

Il s'agit d'un incident "imprévisible" et que nous avons pris en charge dès son début. Néanmoins le temps de check du système de fichiers n'est malheureusement pas réductible.
Le passage sur nos plateforme de backup auraient engendré plus de problèmes (retour en arrière au niveau version des fichiers, resynchronisation nécessaire par la suite) que de patienter pendant la réparation du filesystem...

Nous vous remercions par avance de votre compréhension,

Incident sur filer4

• Date : 02 novembre 2011
• Durée :30minutes

Bonjour,

Nous avons eu un incident sur filer 4 le 01/11 vers 23h puis un second incident sur le même serveur ce matin
02/11 vers 09h30.

Ceci était a priori engendré par un souci de driver de carte raid.

Nous avons changé le kernel et le driver afin de corriger cela.

Nous surveillons activement ce serveur afin d'éviter toute récidive.

Merci de votre compréhension,

Remplacement de switch

• Date : 07 juin 2011

Bonjour,

Nous avons remplacé une partie de nos switch (mutualisé, vds, premium et dédié) ce matin.

Ceci a pour but d'améliorer les performances et de régler certains soucis que nous avions.

Cordialement,