Prevádzkovateľ webových stránok biznisweb mal výpadok

biznisweb7. december 2014

Ospravedlnenie z Bizniswebu (poľudnajší výpadok)
Dobrý deň,
ospravedlňujeme sa za neočakávaný výpadok služieb BiznisWeb.sk.
Výpadok začal od 11:25hod a problém bol vyriešený o 12:13hod
Vypadli nám oba databázové servre – hlavný, aj záložný. Problém
spôsobil konkrétny MySQL dotaz, ktorý nám preťažil databázy.
Problém dnes večer systémovo opravíme, aby sa neopakoval.
Veľmi dobre si uvedomujeme, že je práve najdôležitejšie predajné
obdobie v roku.Aj preto sme v septembri nasadili novšiu cloudovú
infraštruktúru, aby išli web stránky a e-shopy v predvianočnej
sezóne rýchlo a stabilne.
Vylepšeniami infraštruktúry sme dosiahli aj zásadné zrýchlenia
načítavania Vašich web stránok a e-shopov.
Žiaľ, vyskytol sa technický škriatok a problémom sme sa
úplne nevyhli.
Ale pracujeme na tom, aby všetko fungovalo na 100%.

 

Ďakujem za pochopenie.

peter polakovič výpadky porucha

Peter Polakovič

S pozdravom
Peter Polakovič
konateľ
IRISOFT, s.r.o.
BiznisWeb.sk

 

 

 

ďalšie výhovorky:

3.1.2015
Ospravedlňujeme sa za výpadok web stránok a eshopov vytvorených vo Flox 2 (Flox 1 je v poriadku).

Bohužiaľ čelíme hardwarovému problému – havárii diskov – čo je asi jedna z najhorších situácií. Problém sme riešili celú noc a dnešok. Je potrebné prekopírovať dáta na nové servere, čo bohužiaľ trvá. Pracujeme na tom, aby boli stránky dostupné čo najskôr. Ospravedlňujeme sa a dúfame v pochopenie.

Servre sú monitorované, okamžite pri výpadku o tom vieme a problémy riešime vrátane noci a víkendov. V noci sme boli hore a pracovali na oprave. Zradil nás hardware. Neustále pracujeme na odstránení problémov.

My sme v septembri spolu s našim dodávateľom zásadne vylepšili infraštruktúru aby sme sa pripravili na Vianoce. Teraz žiaľ nastal závažný hardwarový problém . Je nám jasné že sa to nesmie stať. Plánujeme zmenu cloudu a navrhneme určite aj iné riešenia aby sa to nestávalo.

Určite prejdeme na nové riešenie cloudu. Žial zradil nás hardware a minulý rok aj rôzne bugy na serveroch, čomu nevieme predchádzať ako by sme si predstavovali, tak určite budeme riešiť zmenu a zlepšenia.

zrcadleni mame, bohuzel ale nastal komplikovanejsi problem, který stale resime. Doufame, ze se brzo povede situaci stabilizovat.

Bohužiaľ jednalo sa o nepríjemný výpadok, kedy sme museli obnoviť jeden z databázových serverov. Pripravujeme kroky, aby sa toto už znovu neopakovalo (zdvojenie tejto časti infrašruktúry)

Viete, je to také že keby to bola priamo chyba našich programátorov pri programovaní BiznisWebu tak nám poriadne vynadajte. Ale priamo žiaden náš zamestnanec za to nemohol. Bolo to niekoľko chyb hardware a software vzájomne nakombinované na serveroch za ktoré priamo nemôžeme a neboli predvídateľné. Musíme zlepšiť infraštruktúru aby sa to neopakovalo. Ohľadne kompenzácií nám prosím napíšte na info@biznisweb.sk.

Doplnené 6.1.2015

Vážení klienti,
v piatok 2.1. a v sobotu 3.1. dochádzalo k výpadkom Vašej web stránky hostovanej na Floxe 2. Ospravedlňujeme sa za spôsobené výpadky a posielame vysvetlenie problémov. Vaša web stránka už funguje v poriadku.

Server, ktorý hostuje časť našej infraštruktúry, mal skrytý hardwarový problém na SSD disku, ktorý sa prejavoval náhodným predlžovaním požiadavkov na zápis. Bohužiaľ toto nebol jediný problém, ktorý nastal. Keď nastane problém s cloudom, ten je zrkadlovo vyriešený a ani ho nezaznamenáte. V tomto prípade však došlo ku havárii SSD disku, a zároveň k poškodeniu súborového systému, čím sa dostal celý systém do výrazne nestabilného stavu. Napriek tomu, že sme hneď vymenili SSD disk, poškodenie súborového systému sa prejavilo rapídnym znížením výkonu diskového úložiska a postupnou degradáciou výkonu databázy, čo došlo do stavu, kedy databáza už väčšinovo neodpovedala. Táto závada sa javila ako chyba v kóde filesystému, ako druhá možnosť sa javila vysoká fragmentácia úložiska. Vďaka redundantnému nastaveniu samozrejme nedošlo k žiadnej strate dát. Avšak úložný pool zostal v stave, kedy mal problém prijímať nové dáta. Celý výpadok predĺžilo odkopírovanie databáz na iný server, kvôli potenciálnemu riziku ďaľších problémov s pôvodným serverom a pre bezpecnosť Vašich dát. Nakoniec sa nám podarilo úložisko stabilizovať a nedošlo ku žiadnej strate dát.

Kombináciu hardwarovej závady disku a následných softwarových chýb je možné vyriešiť iba rýchlym odborným zásahom, čo sme urobili v noci z piatka na sobotu a v sobotu. Podobné problémy sú ťažko predvídateľné a predchádzať im je možné kompletným zdvojením celej infraštruktúry, na čom budeme pracovať s našimi dodávateľmi. Ešte raz prosím príjmite naše ospravedlnenie a ďakujeme za pochopenie.

S pozdravom
Juraj Bystrický, Peter Polakovič (konatelia) a tím BiznisWeb.sk