De 19h00 à 03h00 une intervention dans le noc a été faite. Un nouveau routeur a été mis en place, tout le réseau .dmz a été entièrement reconfiguré, en effet nous abandonnons notre classe privé naté pour laisser place à un adressage publique avec une classe /29. Chaques serveurs disposent maintenant d'une adresse IP publique. La totalité des configurations script, services à donc été entièrement reprise.

Je viens de migrer samus en windows 2003 TSE server. Les stats channels mIRCstats n'on pas été mise à jour pendant le temps de l'intervention, car j'en ai profité pour changer quelques composant hardware et lui faire une révisions. Cela faisait 5 ans que cette machine tournait, il était temps de lui faire un checkup complet. La génération des statistiques étant séparée de la parti logs, aucune perte n'est à déclaré, les stats channels sont de nouveau fonctionnel et ce mettent à jours toutes les heures comme avant :-)

J'ai du relancer les services de rinka, elle a rebooté il y a 2 jours, l'équipe de surveillance est passé à côté... Dans le même genre, samus était planté ne générant donc pas les statistiques channels. Tout est maintenant rentré dans l'ordre.

Et voila, metroid et illidan sont definitivement coupé comme prévu. Je suis en train de migrer les services de ces deux la sur kraid, un serveur bien plus puissant. Au final nous auron 3 gros serveur: rinka, mirana et kraid. :-)

Je viens de changer les noms de serveurs de manière à savoir sur quelle machine tel ou tel serveur tourne. Idem pour les services, j'en ai profiter pour mettre à jours les Ulines et les Throttle.

Apparement elle s'est remise à freezer ce matin, je vais tenter de comprendre ce qu'il lui arrive. Je l'ai rebooté et relancé les services rapidement via un script que j'ai posé sur le master. Message subliminal pour l'equipe opérations: "ce script est dans le bin du master" ;)

rinka ne répondait plus au ping, j'ai du la rebooter via le power switch, après quoi un changement de composant hardware a été fait.

Une interruption de nos services d'une duré 3 heures a eu lieu cette nuit à 2h du matin suite au reboot encore inexpliqué de rinka. D'après mes premières analyses, l'interface eth0 semble n'avoir plus répondu à 2h du mat, avant que les process ne décident de rebooter la machine à 4h. Les services IRC ne redemarrants pas automatiquement Samuel m'a contacté 1h plus tard pour que j'y jette un oeil. Je vais mailer immédiatement OVH pour savoir ce qu'il c'est passé avec l'interace réseau de cette machine.

J'ai réinitialisé les bases utilisateurs a 00h pour le search.

Je viens de modifier l'architecture en coupant mysql.idapnet.org sur ridley qui était connecté au noc. J'ai ajouté sql.rinka.idapnet.org sur le serveur rinka et sql.metroid.idapnet.org sur metroid de manière a load balancer search.idapnet.org sur les deux serveurs web. J'ai deja déplacé certains script php comme le status des services et des serveur sur le www ou sur mrtg.idapnet.org. A suivre le deplacement de stats.idapnet.org vers webtools.idapnet.org, puis la séparation des webtools et des stats de canaux sur stats.idapnet.org generé sur samus. Je vais ajouter un système de synchronisation rsync sur rinka et metroid toutes les heures pour les fichiers .html des stats généré par samus qui serons poussé sur le master de production avant d'être poussé en prod.