Příspěvek od HankaP » úte 27. kvě 2014 18:11:52
Tak tady je podrobné vysvětlení od Wedosu, koho by to zajímalo - byla to taková "akce kulový blesk", ale na to, co všechno se jim stačilo během těch dvou dnů po...., to bylo až neuvěřitelně zadarmo - protože zjevně nepřišli o data.
Dávám jen výňatek (zbytek i s omluvami je případně na
http://datacentrum.wedos.com/a/346/ofic ... -2014.html):
"...
Celá situace vznikla shodou více navazujících problémů. Prvním důvodem bylo vedro, které bylo zdrojem bouřek a ty způsobily značné kolísání elektřiny v síti. Kvůli kolísání el. energie došlo po spuštění klimatizací k poškození jedné z klimatizací a tím k shození hlavního jističe celého datacentra. Tím, že bylo v síti přepětí, došlo k přehřátí tohoto hlavního jističe. Automaticky tedy naskočil dieselový generátor, který ovšem po 15 minutách přestal fungovat kvůli poruše chladícího systému motorgenerátoru (poslední kontrolu jsme prováděli ve čtvrtek, tedy den před tím - činíme tak pravidelně každý týden a při kontrole generátor nevykazoval žádné známky poruchy), naskočily tedy
UPS, které držely servery v chodu dalších 33 minut. V této chvíli jsme již v kontaktu s dodavatelem elektřiny, který k nám posílá opraváře. Po celou dobu fungovala záložní klimatizace. Než jsme stačili poškozený jistič nahradit nouzovým řešením, došlo k vybití baterií, což způsobilo kompletní výpadek napájení na dobu 3 minut. Poté začalo fungovat téměř vše, ale jak jsme již uvedli výše, informovali jsme na našich stránkách o tom, že vše je pod kontrolou, ovšem jednalo se o mylnou informaci, protože malá část našich služeb ještě funkční nebyla.
Po cca hodině pokračovaly další výkyvy na elektrické síti, a proto došlo k poškození UPS na jedné napájecí větvi. A tím opět došlo ke zkratu v naší elektrické síti. Bylo nutné nahradit nouzové řešení hlavního jističe novým plně funkčním hlavním jističem, který jsme mezi tím zajistili. Bohužel UPS z jedné napájecí větve byla natolik poškozena, že nebylo možné ji použít a druhá UPS měla natolik vybité baterie z předcházejícího výpadku elektrické energie, že vše zkolabovalo podruhé. Tentokrát na 13 minut. Po této době se podařilo hlavní jistič vyměnit a tím obnovit dodávku elektřiny.
Většina serverů po tomto druhém výpadku okamžitě nastartovala a fungovala, pouze několik jednotek procent serverů (bohužel je to několik tisícovek zákazníků) mělo problémy delší dobu a jeden mailserver se nám podařilo obnovit až v sobotu nad ránem.
Celá firma od pátečního odpoledne intenzivně pracovala na odstranění následků výpadku. Bohužel celá situace byla o to komplikovanější, že v důsledku výpadku došlo k poškození primárního i záložního firewallu našich kanceláří a tím jsme neměli přístup k internetu z našich kanceláří a k serverům, ke kterým je z bezpečnostních důvodů povolen přístup pouze z počítačů v našich kancelářích. Tím se obnova zbývajících nefunkčních služeb Jednalo se o několik málo kusů sererů) velmi zpomalila a komplikovala. Museli jsme zajistit náhradní (třetí) firewall a po jeho zprovoznění jsme postupně všechny služby obnovili.
Vzhledem k poškození UPS na jedné napájecí větvi, byly servery napájeny pouze přes jednu napájecí větev, což je velmi riskantní, tak jsme se po dohodě s dodavatelem UPS domluvili na tom, že po nabití baterií funkční UPS, přepneme poškozenou UPS do režimu bypass a tím zajistíme serverům napájení i z druhé větve. Tato operace byla naplánována na 8 hodin ráno a mělo se jednat o rutinní operaci bez jakéhokoliv výpadku.
Ráno přišel technik na opravu UPS (ta byla přepnuta na bypass). Vše se zdálo být vyřešeno, ale oprava, ačkoliv se zdála v pořádku (dle veškerých dostupných měření), neproběhla dobře, resp. neodhalila vadnou součástku. Po přepnutí UPS do režimu bypass došlo ke zkratu a tím přerušení napájení. Bohužel baterie, které fungovaly jako záložní zdroj v pátek navečer, nebyly ještě zcela nabité, takže napájely servery 20 minut. Než stihl technik přemontovat nový hlavní jistič, nastal druhý výpadek a to na celých 15 minut. Po tomto výpadku naši technici všechny služby obnovili ve velmi krátké době.
..."
Tak tady je podrobné vysvětlení od Wedosu, koho by to zajímalo - byla to taková "akce kulový blesk", ale na to, co všechno se jim stačilo během těch dvou dnů po...., to bylo až neuvěřitelně zadarmo - protože zjevně nepřišli o data.
Dávám jen výňatek (zbytek i s omluvami je případně na http://datacentrum.wedos.com/a/346/oficialni-vyjadreni-k-problemum-ze-dne-23-24-kvetna-2014.html):
"...
Celá situace vznikla shodou více navazujících problémů. Prvním důvodem bylo vedro, které bylo zdrojem bouřek a ty způsobily značné kolísání elektřiny v síti. Kvůli kolísání el. energie došlo po spuštění klimatizací k poškození jedné z klimatizací a tím k shození hlavního jističe celého datacentra. Tím, že bylo v síti přepětí, došlo k přehřátí tohoto hlavního jističe. Automaticky tedy naskočil dieselový generátor, který ovšem po 15 minutách přestal fungovat kvůli poruše chladícího systému motorgenerátoru (poslední kontrolu jsme prováděli ve čtvrtek, tedy den před tím - činíme tak pravidelně každý týden a při kontrole generátor nevykazoval žádné známky poruchy), naskočily tedy [url=http://cs.wikipedia.org/wiki/UPS]UPS[/url], které držely servery v chodu dalších 33 minut. V této chvíli jsme již v kontaktu s dodavatelem elektřiny, který k nám posílá opraváře. Po celou dobu fungovala záložní klimatizace. Než jsme stačili poškozený jistič nahradit nouzovým řešením, došlo k vybití baterií, což způsobilo kompletní výpadek napájení na dobu 3 minut. Poté začalo fungovat téměř vše, ale jak jsme již uvedli výše, informovali jsme na našich stránkách o tom, že vše je pod kontrolou, ovšem jednalo se o mylnou informaci, protože malá část našich služeb ještě funkční nebyla.
Po cca hodině pokračovaly další výkyvy na elektrické síti, a proto došlo k poškození UPS na jedné napájecí větvi. A tím opět došlo ke zkratu v naší elektrické síti. Bylo nutné nahradit nouzové řešení hlavního jističe novým plně funkčním hlavním jističem, který jsme mezi tím zajistili. Bohužel UPS z jedné napájecí větve byla natolik poškozena, že nebylo možné ji použít a druhá UPS měla natolik vybité baterie z předcházejícího výpadku elektrické energie, že vše zkolabovalo podruhé. Tentokrát na 13 minut. Po této době se podařilo hlavní jistič vyměnit a tím obnovit dodávku elektřiny.
Většina serverů po tomto druhém výpadku okamžitě nastartovala a fungovala, pouze několik jednotek procent serverů (bohužel je to několik tisícovek zákazníků) mělo problémy delší dobu a jeden mailserver se nám podařilo obnovit až v sobotu nad ránem.
Celá firma od pátečního odpoledne intenzivně pracovala na odstranění následků výpadku. Bohužel celá situace byla o to komplikovanější, že v důsledku výpadku došlo k poškození primárního i záložního firewallu našich kanceláří a tím jsme neměli přístup k internetu z našich kanceláří a k serverům, ke kterým je z bezpečnostních důvodů povolen přístup pouze z počítačů v našich kancelářích. Tím se obnova zbývajících nefunkčních služeb Jednalo se o několik málo kusů sererů) velmi zpomalila a komplikovala. Museli jsme zajistit náhradní (třetí) firewall a po jeho zprovoznění jsme postupně všechny služby obnovili.
Vzhledem k poškození UPS na jedné napájecí větvi, byly servery napájeny pouze přes jednu napájecí větev, což je velmi riskantní, tak jsme se po dohodě s dodavatelem UPS domluvili na tom, že po nabití baterií funkční UPS, přepneme poškozenou UPS do režimu bypass a tím zajistíme serverům napájení i z druhé větve. Tato operace byla naplánována na 8 hodin ráno a mělo se jednat o rutinní operaci bez jakéhokoliv výpadku.
Ráno přišel technik na opravu UPS (ta byla přepnuta na bypass). Vše se zdálo být vyřešeno, ale oprava, ačkoliv se zdála v pořádku (dle veškerých dostupných měření), neproběhla dobře, resp. neodhalila vadnou součástku. Po přepnutí UPS do režimu bypass došlo ke zkratu a tím přerušení napájení. Bohužel baterie, které fungovaly jako záložní zdroj v pátek navečer, nebyly ještě zcela nabité, takže napájely servery 20 minut. Než stihl technik přemontovat nový hlavní jistič, nastal druhý výpadek a to na celých 15 minut. Po tomto výpadku naši technici všechny služby obnovili ve velmi krátké době.
..."