HCL.HR

Neočekivani downtime - 22.08.2012

  • 5 Odgovora
  • 1434 Hitova
*

mojsije

  • Administrator
  • **
  • 519
  • HCL Secretary
    • HCL.hr
Neočekivani downtime - 22.08.2012
« : 22. Kolovoz, 2012., 21:24 »
Zbog pregaranja trafo stanice u datacentru, 1200 servera je osjetilo pad napona dok su se upalili rezervni agregati. Samo pregaranje je prouzrocilo i pregaranje glavnih relay switcheva u datacentru tako da je početni downtime bio svega 20 minuta dok se ti switchevi nisu zamjenili.

U našem slučaju, za razliku od ostalih cca 1000 servera (200tinjak ih je iskusilo iste/slične probleme kao i naš), pad napona je prouzročio i manji kvar u samom sistemu. Točnije, oštećen je filesystem te smo zbog toga morali sačekati još dodatnih 5-6 sati dok se prvo nisu izvukli backupovi a zatim i provjera i popravak filesystema.

Zbog mjera predostrožnosti, išli smo malo duljim putem prema uklanjanju problema te je umjesto očekivanih 2 sata downtime trajao znatno više.

Na kraju priče, sretan sam reći da je provjera filesystema uspješno završena, svi problemi su popravljeni, a resyinc raid polja je u tijeku.

Narednih par sati vrlo vjerojatno će odziv servera biti malo sporiji dok se raid polje ne sinkrinizira do kraja.

Ispričavamo se na ovoj smetnji :piva:

*

Radim247

  • *****
  • 2314
  • I ♥ kurac
Odg: Neočekivani downtime - 22.08.2012
« Odgovori #1 : 22. Kolovoz, 2012., 22:26 »
Nebi bas reko,živim u Zagrebu i evo jedne situacije:Znači tuku se,imaju 12 godina otprilike i prolaze razni likovi i niko nista,cak je jedan u sali reko Koji je pobjedio..

Odg: Neočekivani downtime - 22.08.2012
« Odgovori #2 : 23. Kolovoz, 2012., 00:28 »
Jel se prebacujete na drugi hosting, jer kao da sam procitao na face tako?

*

Ementaler

  • Administrator
  • *********
  • 39472
  • Embrace the mountain
    • HCL.hr
Odg: Neočekivani downtime - 22.08.2012
« Odgovori #3 : 23. Kolovoz, 2012., 10:21 »
Da, ovih dana će se obaviti "tiho" prebacivanje na novi hosting, na fine server locirane u Hrvatskoj.

*

mojsije

  • Administrator
  • **
  • 519
  • HCL Secretary
    • HCL.hr
Odg: Neočekivani downtime - 22.08.2012
« Odgovori #4 : 23. Kolovoz, 2012., 17:11 »
Za prebacivanje na novi server moramo uzet podosta stvari u obzir, a i sam proces zahtjeva da svi site-ovi budu offline, tako da ćemo ga uistinu odraditi potiho jednu noć jer će sve skupa trajati minimalno 6 sati.

*

Chux

  • ***
  • 599
  • živi bili pa umrli
    • Guru Gaming
Odg: Neočekivani downtime - 22.08.2012
« Odgovori #5 : 23. Kolovoz, 2012., 21:41 »
Hijao, imam traume svakakve od tih selidbi