redémarrage en cours du serveur

reboot cluster 1b après mise à jour + clean logs

reboot en cours 2h

cluster1d en cours de redémarrage

Bonjour,

Un incendie a détruit un ou deux data centers chez OVH cette nuit (nuit de mardi à mercredi 10 mars 2021).

Une partie de notre gamme de serveurs utilise les services de OVH. Il s’agit des packs basic des anciennes gammes.

La gamme Premium et le coffre fort ne sont pas concernés par cet incident.

Voici la liste des serveurs concernés par ce sinistre :

pool390.seedbox.fr
pool391.seedbox.fr
pool392.seedbox.fr
pool393.seedbox.fr
pool394.seedbox.fr
pool395.seedbox.fr
pool396.seedbox.fr
pool397.seedbox.fr
pool398.seedbox.fr
pool399.seedbox.fr
pool400.seedbox.fr
pool401.seedbox.fr
pool403.seedbox.fr
pool404.seedbox.fr
pool405.seedbox.fr
pool406.seedbox.fr
pool407.seedbox.fr
pool409.seedbox.fr
pool410.seedbox.fr
pool411.seedbox.fr
pool412.seedbox.fr
pool413.seedbox.fr
pool414.seedbox.fr

Nous ajouterons les informations utiles dès que possible.

Suite à l’incident précédent, nos emails ne sont plus routés. Un pool de serveurs smtp sera déployé en interne le 11 mars au matin.

Le controlleur spare du stockage pool1 est hors service. Son remplacement est en cours. Il n’y a pas d’impact sur l’utilisation des services.

Le clients utilisant un email iCloud ne reçoivent plus nos emails.

un serveur proxy frontal d’accès à l’interface de partage a posé problème. Cette panne a provoqué des accès aléatoires aux interfaces de partage de certains pack premium.

le cluster SQL qui gère les accès à la console est tombé en panne ce jour (20 mai 2021) de 16h14 à 16h38. L’accès aux services à travers la console a été perturbé.

une panne est survenue concernant l’accès réseau public (internet) au cluster1.
Une intervention est en cours.

Cet accès normalement est redondant mais suite à la panne le basculement n’a pas fonctionné. Nous remplaçons l’ensemble des composants ce matin et une nouvelle configuration sera déployée. ETA 14h00 heure de paris

Suite à une mise à jour réseau et du client de téléchargement Transmission, la configuration du client P2P n’est plus compatible avec les nouvelles versions.

Pour rétablir l’accès au client P2P Transmission, il est nécessaire de le réinstaller en cliquant sur “MISE à JOUR” ou “REINSTALLER LE CLIENT P2P” dans la console.

Suite à cette opération, un nouveau port P2P est attribué, et l’accès externe est réinitialisé. Il peut alors être nécessaire de modifier la configuration de vos programmes tiers (transmission remote, plugin) et/ou réactiver l’accès externe en cliquant sur REMOTE dans l’onglet AVANCE dans la console.

une panne matérielle est survenue sur cluster3p

Le remplacement est en cours, nous attendons la livraison des éléments (cartes réseau/carte mère/carte raid).

Les données client ne sont pas impactées.

cluster3o en défaut, remplacement slot ram en cours

Nous mettons à jour le serveur, un redémarrage est en cours

Un onduleur 130KVA a disjoncté cette nuit provoquant un passage en mode dégradé du pool de stockage cluster4.

L’onduleur a été remplacé ce jour et les accès rétablis.

L’accès au coffre fort est perturbé. Un redémarrage de plusieurs serveurs frontaux est en cours.

Le contrôleur de stockage 2 de cluster 3 s’est mis en défaut suite à l’ajout de capacité de stockage.
Pas d’interruption de service.

Le proxy NL (proxy-nl.seedbox.fr) est actuellement hors service. Les investigations sont en cours.

le cluster4f est en état dégradé, nous investiguons.

Le système est hors ligne, une intervention est en cours

un châssis présente un défaut.
Nous allons dans un premier temps remplacer les modules SAS du châssis (non disruptif).
Si le problème n’est pas corrigé par la manipulation ci dessus, nous devrons remplacer le châssis (disruptif), le temps de coupure serait de 30 minutes.

le chassis cluster2f est tombé en défaut à 8h30 ce matin. Son remplacement est en cours.

Un problème de transfert d’email (>/dev/null) a provoqué la perte des requêtes RGPD effectuées entre le 12 avril et le 5 mai. Les demandes effectuées dans cette intervalle sont à effectuer à nouveau.

Un contrôleur de cluster4 est hors service suite à la panne de deux ventilateurs. La charge est basculée sur les 3 autres contrôleurs du groupe en attendant le remplacement du châssis.