Cher blogueur,

Nous avons été victimes d’une coupure de courant qui a mis hors service l’ensemble des serveurs qui hébergent over-blog.

Nous sommes absolument désolés des désagréments causés par cet incident.
Soyez assurés que nous avons fait le maximum, et que nous continuons à faire tout ce qu’il est possible pour rétablir la situation dans les meilleurs délais.
Bien que cela soit arrivé hier dimanche, nous avons travaillé immédiatement à la résolution du problème, et notre équipe travaille en continu depuis.

Que s’est il passé ?

Les serveurs d’over-blog sont chez Redbus. Il s’agit d’un des principaux centres d’hébergement Internet en France.
La société Redbus est une société reconnue pour être l’une des plus sérieuses en Europe.
Redbus nous fournit de l’espace climatisé et de l’électricité.
Théoriquement une panne de courant ne peut pas avoir lieu puisque tous les équipements nécessaires pour acheminer l’énergie sont présents en 2 voire 3 exemplaires.
Plus de 20 000 serveurs sont hébergés chez Redbus à Paris.

Pourtant, malgré les précautions que Redbus prend, et malgré les précautions que nous prenons, un problème électrique est survenu ce dimanche, affectant plus de 20 000 serveurs en même temps. Ce sont des centaines de milliers de sites web qui ont été inaccessibles pour cette raison.


Pour plus d'informations a propos de cet incident :

L'article du Monde
Un autre article chez silicon

Sachez qu'à l'heure qu'il est Redbus alimente en électricité ses serveurs par des groupes électrogènes et se risque à d'autres pannes ce soir lors du basculement vers leur alimentation électrique.
Nous considérons que ce risque supplémentaire est innaceptable. C'est pourquoi nous avons pris cette nuit la décision de déménager et installer nos serveurs chez Interxion.

Après une nuit blanche de travail, nous sommes dans une situation à peu près stabilisée. Il faut néanmoins s'attendre encore à des dysfonctionnements.
Nous nous excusons du manque de communication également mais il faut savoir que nos serveurs de mails étaient, eux aussi, coupés en alimentation électrique.

Qu’allons nous faire pour que cela ne se reproduise plus ?

Nous allons déployer une nouvelle infrastructure technique identique à celle que nous avons déjà, et hébergée dans un autre lieu.
Les données seront dupliquées sur les deux systèmes.
De cette façon, même si un des deux sites devient totalement inaccessible, nous pourrons « basculer » sur l’autre site et solutionner très rapidement les situations les plus graves.
Nous espérons pouvoir mettre cette solution en oeuvre le plus rapidement possible.

Un dédommagement ?

De notre côté nous ne pouvons récupérer aucun dédommagement de notre prestataire.
Cependant nous savons à quel point il est désagréable de ne pas pouvoir accéder à son blog, et de n’avoir aucune information pour l’expliquer.
C’est pourquoi nous allons faire un geste pour que vous conserviez la confiance que vous nous avez toujours témoignée.
Nous vous informerons de cela en détail au plus tôt.


A l’heure où vous recevez ce mail, over-blog doit être à nouveau fonctionnel. Nous vous donnerons toutes les informations que vous jugerez utiles sur le forum d’over-blog.


Merci de votre compréhension.

L’équipe d'Over-Blog.

www.over-blog.com

une petite info en plus:


Depuis hier Redbus est alimenté par les groupes électrogènes. En effet le disjoncteur général est H.S depuis hier. C'est une pièce relativement dificile à trouver étant donné la puissance utilisée.
Le but de l'opération est de raccorder à nouveau le datacenter au réseaux EDF.

Nous n'allons pas couper complètement les machines à 19h30 pour diminuer au maximun le délais d'inactivité du service. Nous bloquerons seulement les gestions en écriture. En effet nos serveurs web supportent les coupures sans trop de problème. Cela n'est pas le cas des 3 serveurs SQL de base de données qui ne peuvent pas d'être coupé à chaud.

Nous espérons un retour à la normal vers 20h30, nous vous en tiendrons informé.

Nous avons confirmation que les onduleurs on leur batterie charger.

Pour notre part apres 48h de travail d'affilé nous remettons ce matin tous les serveurs en mode de production normal.

Il y aura eu 9 coupures de service au total (violente et planifié)

Overblog à pour ca part été completement demenager dans un autre centre informatique.

Car clairement celui de redbus n'est pas fiable du tout.

Dans moins de 1h j'aurais fini de tout rebasculé en mode d'exploitation normal.

Merci pour votre confiance et votre comprehension si certain souhaite le numero de redbus pour les insulté pas de probleme

Resync pour la publication realisé.

Les nouveaux articles apparaisse.

Pour ceux publié entre hier et maintenant, il vont apparaitre dans 30min

Pour les compteurs de forum et autre chose lié au forum cela est 45min

Je viens de finir de remonter le cluster

Et vide l'ensemble des caches de OB

Donc:

  - les articles recent fonction

  - les anciens article (avant maintenant) apparaisse

  - les commentaires sont aussi la

reste en attente les compteurs et login du forum qui sont actuellement en reconstruction

Arret et redemarrage (1 a 2 min maxi)

du forum et admin

Ce qui clotura les maintenances de la journée

Voici le rapport d'incident de redbus pour la second coupure de courant, pardon "perte de charge client" http://www.azuria.com/redbus2.pdf