Perturbations

Incidents, perturbations, indisponibilités, interruptions des services

Fil des billets - Fil des commentaires

lundi 10 décembre 2012

Services mutualisés rétablis

Les services mutualisés ont été rétablis lundi 10 décembre 2012 vers 11 heures.

L'origine du problème est probablement du au piratage d'une vielle application d'un des membres.
Cependant il est rare que cela engendre l’arrêt total de la machine. Par ailleurs, nous n'avons simplement pas eu les moyens de relancer la machine pendant le week-end : pas d’accès à distance ni à la salle blanche (l'endroit ou est la machine).

Nous avons donc connu l'interruption des services la plus longue en 8 ans ! Mais la disponibilité des services reste toujours supérieure à 99 %.

L’équipe technique est sincèrement désolé pour cette gène, et met tout en œuvre pour qu'un tel incident se reproduise plus.

Suite à cette panne, vous devriez recevoir tous les messages petit à petit.
Il est cependant possible que vous ne receviez pas quelques messages, selon la configuration du serveur de l’expéditeur, dans ce cas votre expéditeur en est averti.

Explications : En fonction de la configuration du serveur de l'expéditeur, plusieurs tentatives d’envois sont faites pendant au moins 1 jour (en général plusieurs jours - 5 jours chez marsnet) et si l'envoie n’abouti pas un message d'erreur est retourné à l'expéditeur (MAILER-DAEMON) .
Le cas de non réception de message au bout de 2 jours de coupure de services est possible, mais rare et dans tout les cas votre expéditeur est averti que son message n'a pas abouti.

Lire la suite...

vendredi 7 décembre 2012

Les services mutualisés ne sont plus accessibles momentanément

L'équipe d'Assodev-Marsnet est mobilisée pour résoudre ce problème dans les meilleurs délais.
Il s'agit d'un problème exceptionnel, nécessitant le redémarrage du serveur.
Nous avons contacté notre data center pour relancer la machine.

08/12 à 19h30 : Nous n'avons toujours pas de réponse !
il n'y a donc aucune certitude sur un rétablissement avant lundi.
9/12 toujours pas de réponse,... nous sommes tous condamnés à nous reposer en ce dimanche...!
Nous serons au data center des l'ouverture ce lundi et donc les services devraient être rétablit dans la matinée.
10/12 : 10h45 la machine a été relancée et les services ont été rétablis.

Lire la suite...

dimanche 21 octobre 2012

23 et 24 octobre : Changement de serveur : Perturbations et intervention de votre part à prévoir

◄●► La migration s’est bien passée, pensez à changer les DNS de vos domaines ◄●►

Afin d’améliorer vos services, une opération de maintenance a été effectuée le mardi 23 et mercredi 24 . il s’agit du renouvellement du matériel sur une partie de l’infrastructure (serveur mutualisé).

MAJ Jeudi 25 4h30 : les tests sont ok, le nouveau serveur est très rapide :-),

Si vous rencontrez des difficultés :

  1. avez vous bien changé les DNS de vos domaines ? comme indiqué sur les précédents mails et ci-dessous ? si nous n'avons pas accès au réglage de vos domaines et surtout si vous n'utilisez pas nos services DNS, vous devrez changer l'adresse du serveur web/mail/etc. => voir indication ci-dessous
  2. Sur les applications qui n'ont pas été mise à jour depuis longtemps et qui fonctionnent avec du php4 périmé depuis des années ou qui ne sont pas compatible avec php5.3, il peut y avoir un Message d'erreur (Internal Server Error) ou certaines perturbations dans les fonctionnalités => solution : mettre à jour ses applications
  3. il est possible que certains services fonctionnent par intermittence provisoirement ceci est du à la propagation des nouveaux DNS (1) (changement de l'adresse du serveur) et se résoudra progressivement dans la journée.=> résolu
  4. Accès au mail et compte alternC ; si vous rencontrez des difficultés (provisoires) alors faites directement https://mail.marsnet.org/webmail pour le mail et https://marsuper.marsnet.org / pour le bureau alternC-- résolu
  5. les difficultés sur l'interface web des listes sont en cours de résolution. résolu

Merci de faire des tests de vos services et nous signaler les éventuels réglages restant à faire

MAJ Jeu 25 2h24 : les principaux services sont ok, tests
MAJ Mer 24 23h47 : test et réglages des services
MAJ Mer 24 18h38 : fin de la migration = > phase de test et réglages
MAJ Mer 24 14h35 : ça va couper dans qq minutes
Mercredi 24 octobre, suite et fin de la migration, coupure de quelques heures en début d’après-midi, perturbations en soirée
Mardi 23 octobre, notre équipe a assuré la disponibilité des services, aucune perturbation n'a été constatée malgré les modifications techniques.

◄●►IMPORTANT une intervention de votre part est nécessaire ◄●► pour modification des DNS de vos domaines hébergés chez marsnet (changement de serveur) :

Voici les nouveaux DNS (changement en gras)

  • primaire : mars.assodev.org 212.85.154.16
  • secondaire : ns2.assodev.org 80.67.172.93

Merci de changer les DNS de vos domaines hébergés à marsnet :

  1. vous avez un sous domaine monasso.marsnet.org => vous n'avez rien a faire
  2. vous avez un domaine chez gandi avec notre identifiant FD201-GANDI => vous n'avez rien a faire
  3. Vos domaines et leurs DNS sont hébérgés sur marsnet => Le DNS secondaire est à changer mettez ns2.assodev.org à la place de karl.globenet.org chez le registrar de votre nom de domaines
  4. Les DNS de vos domaines sont hébergés ailleurs

Le DNS primaire reste mars.assodev.org mais son IP devient 212.85.154.16
Le DNS secondaire est maintenant ns2.assodev.org 80.67.172.93 à la place de karl.globenet.org 81.93.247.140
L'adresse de la machine d'hébergement mutualisé change de 80.67.172.90 à 212.85.154.16.

Si vous avez un nom de domaine chez Gandi, nous vous conseillons de mettre notre compte (FD201-GANDI) en contact technique, et de nous le signaler, afin de nous permettre d'effectuer les réglages pour vous directement.
allez sur le compte de votre registrar dns (gandi)c => https://www.gandi.net/ demandez a ceux qui ont créé le compte l'identifiant (login) et mot de passe et cliquer sur "s'identifier"
sélectionner votre domaine et à contact technique cliquez sur "modifier" et mettre notre identifiant FD201-GANDI
puis, prévenez nous, nous pourrons alors faire les réglages sur votre compte

Guide pour changer les DNS :

Les certificats de sécurité de tous les services ont changés, acceptez le nouveau certificat voir : http://wiki.marsnet.org/wakka.php ?wiki=CertificatsSSL

Nous vous recommandons pendant ce temps de maintenance de ne pas faire d'opérations sur vos services ou de modifications de vos applications internet
Pour toute question technique écrire à support⊕marsnet.org ou dialoguez avec nous en direct sur http://dialoguer.marsnet.fr (disponibles même pendant les coupures).

Si vous ne comprenez pas ces informations ou que vous ne savez pas comment faire, veuillez entrer en contact avec nous rapidement (support⊕marsnet.org ou http://dialoguer.marsnet.org)

(1) le temps que tout les serveurs par lesquels transitent les mails prennent en compte les modification de DNS (adresse du serveur),

Lire la suite...

jeudi 12 juillet 2012

Les services ne sont plus accessibles momentanément

Toute l'équipe d'Assodev-Marsnet est mobilisée pour résoudre ce problème dans les meilleurs délais.

Nous avons identifié le problème et les services seront rétablit d'ici 1 heure environ.

Lire la suite...

lundi 9 janvier 2012

Perturbations des services

le 09 : 16h - 17h et 19h - 20h Perturbations des services : augmentation très importante du trafic (100 fois plus), ralentissant les accès aux sites et services..
Le 10 : 16h40-19h15 : à nouveau Perturbations (ralentissements et quelques coupures )
Les équipes techniques sont mobilisées pour trouver l'origine de ces perturbations tout à fait inhabituels.
Il semble qu'il s'agisse probablement d'une attaque ddos (Attaque par déni de service), ou d'un piratage d'un site hébergé à travers une faille de sécurité d'une application web
https://www.gitoyen.net/mrtg/globenet-traffic.html

MAJ 11 janv : L'origine des perturbations à été identifiée :
Il y avait une faille de sécurité sur une ancienne version de Joomla (logiciel de site internet) utilisée par un hébergé. L'hébergé n'ayant pas mis à jour récemment ce logiciel et ses composants, cette faille était donc exploitable sur le site de l'hébergé. Cette faille à été utilisée par des personnes malveillantes pour des attaques en masse d'autres serveurs. Cela a surchargé notre serveur, entraînant des perturbation de services.

Lire la suite...

mardi 22 novembre 2011

Problemes réseaux chez nos partenaires Globenet et Lost-Oasis

Les services de Marsnet et notamment l'accès à l'interface de gestion des comptes rencontrent depuis hier soir des perturbations suite à des problèmes réseaux chez nos globenet/gitoyen et Lost-Oasis.

Les équipes techniques sont mobilisées pour rétablir les services dans les meilleurs délais.

MAJ 22h35 :c'est reparti !!!
Après plusieurs heures de recherche, la solution a été trouvée et la vie a reprit :-)
Merci à ceux qui ont passé une partie de leur journée dessus :-)

Lire la suite...

jeudi 23 juin 2011

Jeudi 23 juin 14h50 : Problème Lost Oasis (notre data center) : Services inaccessibles suite à une défaillance de cablage

Les services de Marsnet ne sont plus accessibles depuis 14h50.
Il ne s'agit pas d'un problème sur nos serveurs, mais au niveau de nos partenaires techniques. Il s'agit probablement d'un problème de réseau.
Les équipes d'Assodev-Marsnet et de Globenet, sont mobilisées pour rétablir les services dans les meilleurs délais.
MAJ 1h50 : le problème viens de la liaison Paris-Marseille
MAJ 24 juin 11h50 : l'équipe Globenet / Gitoyen s'est mobilisé hier jusqu'à 3h30 du matin et a repris ce matin avec l'équipe du Data Center a Marseille (Lost Oasis).
MAJ 11h58 : les services sont rétablis - il s'agissait d'une défaillance du câblage dans la salle des machines de notre Data Center Lost Oasis.
Nous remercions toutes les personnes qui se sont investies pour solutionner ce problème.

La défaillance de câblage est un problème statistiquement extrêmement rare et qui peut arriver dans n'importe quel Data Center. Ce problème est très difficile à détecter, car du fait de sa rareté, il est préférable d'étudier d'abord toutes les autres causes possibles, logicielles puis matérielles, puis une fois ces causes éliminées, il faut vérifier tout les câblages qui sont très nombreux, ce qui est long et pénible.
Sans compter la recherche de l'origine du problème : Paris ? Marseille ? Globenet / Gitoyen ? Lost Oasis ? et la mobilisation des équipes correspondantes.
C'est l'interruption de services la plus longue depuis la création de Marsnet, il y a 7 ans.

Lire la suite...

samedi 28 mai 2011

Problème Lost Oasis : Services innaccessibles ce samedi 28 mai suite à une coupure d'électricité dans la salle des machines

Les services de Marsnet ne sont plus accessibles momentanément depuis minuit.
Cette perturbation fait suite à une coupure d'électricité dans la salle des machines de Lost Oasis, notre Data Center Marseillais et Libre
L'électricité a été rétablit quelques minutes après, mais les services restent momentanément inaccessibles
Les équipes d'Assodev-Marsnet, de Globenet et de Lost Oasis, sont mobilisées pour rétablir les services dans les meilleurs délais.
MAJ 16h : le problème viens du lien marseille-paris, les 3 équipes travaillent ensemble au rétablissement des services.
MAJ 16h45 : c'est reparti !!! Après plusieurs heures de recherche, le lien défaillant a été trouvé et la vie a reprit :-)
Merci à ceux qui ont passé une partie de leur samedi dessus, Globenet, LO, Marsnet :-)

Lire la suite...

jeudi 7 octobre 2010

Problème Gitoyen ce jeudi 7 oct : perturbations serveur mutualisé

16h15 : Les services ne sont plus accessibles momentanément
16h25 : Le problème vient de notre opérateur "Gitoyen" (routeurs).
16h35 : Les services sont à nouveau fonctionnels
Cet incident a eu pour conséquence l'indisponibilité des services pendant une vingtaine de minutes (de 16h15 à 16h35).
baie gitoyen

Lire la suite...

samedi 22 mai 2010

Problème Marsnet : Coupure de service du fait d'un dépassement de quota d'un membre ce 22 mai

Cette coupure est due au dépassement de l'espace alloué a des comptes d'hébergement. Merci de faire attention a ne pas garder trop de mails dans vos boites, et aussi ne pas mettre trop de documents images ou autres contenus sur vos sites internet sachez optimiser ces contenus notamment en réduisant la taille et la résolution de vos images. Contactez nous et venez a nos ateliers d'entraide pour mieux gerer vos sites et vos services.
MAJ 13h50 : Les services sont à nouveau accessibles

dimanche 2 mai 2010

Problème Marsnet : Coupure de services du aux forums non modérés d'un site dim 2 mai

Ce problème fait suite à une augmentation inhabituelle des requêtes MySQL d'un des membre-usager (compte 2050), ce matin vers 6h.
Mise à jour : 12h55 : Les services sont à nouveau accessibles, le problème était du à l'un des membres-usagers qui a laissé son site sans protection vis à vis des spams sur les forums
ne laissez pas vos forums avec une modération a postériori si vous ne les gérez pas au quotidien merci.

Lire la suite...

mercredi 28 avril 2010

Perturbation Lost Oasis : Coupure de courant et maintenance "cogent" chez Lost Oasis (salle des machines à Marseille et infrastructure) 28 avril

00h40 : Les services ne sont plus accessibles momentanément.
Le problème fait suite à une coupure électrique dans la salle des machines ou se trouve nos serveurs (lost oasis); la coupure est résolue, il reste un problème de routage vers nos machines.
L'équipe d'Assodev-Marsnet, de Lost Oasis et de Globenet sont mobilisées pour résoudre ce problème dans les meilleur délais.
Mise à jour : 10h30 : Les services sont à nouveau accessibles
Mise à jour : le 29 Avril : Coupure des services entre 4h05 et 5h05 suite un une maintenance "cogent" sur un des liens paris-marseille fait par Lost-Oasis, la structure qui nous fournit l'emplacement en salle des machine et les liens Paris-Marseille.

Lire la suite...

samedi 13 mars 2010

Pertubations Marsnet possibles sur les services, notamment bases de données 13 mars

Toute l'équipe d'Assodev-Marsnet est mobilisée pour résoudre ce problème dans les meilleurs délais.
Si vous constatez des perturbations venez dialoguer avec nous sur http://dialoguer.marsnet.org ou envoyez nous un message à support_@_marsnet.org
MAJ 20h20 : problème corrigé

Lire la suite...

vendredi 5 mars 2010

Problème TH2 (salle des Machine) : Coupure de courant généralisée - 5 mars

Cette après-midi a eu lieu des interruptions de services de Marsnet.
La cause est une coupure de courant généralisée dans la zone EST du premier étage du grand centre de traitement des données parisien (TH2, l'un des plus gros noeuds d'échange entre opérateurs internet ) où se trouve l'équipement qui permet d'assurer la liaison internet à nos serveurs (qui eux se trouvent à Marseille).
Cet incident qui implique des perturbation du trafic internet d'ordre général (impliquant une bonne part des opérateurs IP) a perturbé momentanément le bon fonctionnement de cet équipement.
Les équipes de Globenet et Gitoyen, nos partenaires techniques et opérateur indépendant qui gère cet équipement se sont mobilisés pour rétablir au plus vite la liaison vers nos serveurs.
Nous les en remercions.
data center

Lire la suite...

lundi 22 février 2010

Problème Gitoyen 22 février

12h00 : Les services ne sont plus accessibles momentanément
Le problème vient de notre opérateur "Gitoyen" et a débuter vers 11h55.
L'équipe de Gitoyen est mobilisée pour résoudre ce problème dans les meilleurs délais.
12h07, mise à jour : Les services sont à nouveau accessibles depuis 12h05
Cet incident a eu pour conséquence l'indisponibilité des services pendant une dizaine de minutes (de 11h55 à 12h05).
baie gitoyen

Lire la suite...

vendredi 19 février 2010

Coupure électrique dans une baie de Gitoyen

14h30 : Les services ne sont plus accessibles momentanément. Il semble que le problème vienne du lien paris-marseille. L'équipe d'Assodev-Marsnet et l'équipe Globenet sont mobilisées pour résoudre ce problème dans les meilleur délais.
14h45, mise à jour : Les services sont à nouveau accessibles
Il s'agissait d'une coupure électrique dans une baie de Gitoyen, notre opérateur alternatif.
Cet incident a eu pour conséquence l'indisponibilité des services pendant une quinzaine de minutes (de 14h30 à 14h45).
coupure electricité petit

Lire la suite...

lundi 21 décembre 2009

Tout va bien, bonnes vacances :-)

Le serveur ronronne, vous pouvez partir tranquillement.
L'équipe Marsnet reste vigilante cet été et vous souhaite de bonnes vacances.
tux_xmas3.jpg

mardi 24 novembre 2009

Les services sont à nouveau accessibles

il s'agissait d'un problème de routage lié a l'intervention de ce Week-end

Lire la suite...

Les services ne sont plus accessibles momentanément

Toute l'équipe d'Assodev-Marsnet est mobilisée pour résoudre ce problème dans les meilleurs délais.

Lire la suite...

dimanche 6 septembre 2009

Maintenance ce week-end : Mise à jour des logiciels serveurs.

Améliorations des services : interface de gestion des comptes (alternc) plus conviviale,...

Une importante mise à jours des logiciels serveurs a été réalisé. Les sites peu ou mal entretenus, comme par exemple les vielles applications pas mises à jour, peuvent éventuellement rencontrer des perturbations.

N'hésitez pas à nous contacter si vous constatez des changements indésirables.

- page 2 de 3 -