Stanovisko SAŽP k výpadku funkčnosti pri prijímaní žiadostí

11.10.2023
Stanovisko SAŽP k výpadku funkčnosti pri prijímaní žiadostí

Slovenská agentúra životného prostredia (SAŽP) v pondelok, 9. októbra zaznamenala výrazný výpadok funkčnosti webu  http://www.obnovdom.sk, čo narušilo plynulosť generovania elektronických formulárov pre Výzvu č. 4. na predkladanie žiadostí o finančný príspevok na obnovu rodinných domov. Výpadok bol podľa analyzovaných dát spôsobený externým zásahom. Uvedenú udalosť sme nahlásili na MIRRI a NBÚ ako bezpečnostný incident.

Máme za to, že výpadok bol spôsobený externým zásahom (útokom v štádiu zmarenia). Od 7:00 začal vysoký nárast premávky (trafficu) takmer na 98% kapacity (viď graf nižšie). Keďže hrozila nedostupnosť všetkých našich služieb, pristúpili sme k obmedzeniu rýchlosti na FW na 800 Mbps pre dopytované webové sídlo. Zahltenie linky spôsobilo mimoriadny počet požiadaviek na video na webe. Približný počet požiadaviek: 300 000, v niektorých momentoch tvorili požiadavky na video cca 30% celkového počtu požiadaviek. V piatok po zverejnení videa bol počet požiadaviek 20 000 až 50 000.

Disponujeme kapacitou 1GB firewallu - a pri dosiahnutí tejto kapacity začal systém spomaľovať. Na jeden zo serverov bola okamžitá záťaž (load) 300%, pričom ostatne boli vyťažené na cca 15%. Dá sa teda predpokladať, že tento server bol pridelený zdroju incidentu, ktorý vyrábal cielenú premávku (traffic) na video, čím linku blokoval. Ďalšie dva servery však plne fungovali. Po identifikácií problému bolo video z webu odstránené a po resete servera sa dostupnosť služieb znovu obnovila.

V rámci prípravy prebehlo testovanie záťaže serverov cez simulované http požiadavky (requesty) a to v niekoľkých sériách – jedna séria po 500 dávok po 20 súčasných požiadaviek (concurrent requests). Na servery to nebola takmer žiadna záťaž. V ďalšom kroku sme preto vykonali simulovaný test dopytov (vygenerované dáta cez http „post request“, realizovaný náhodne v intervale 1-5 sekúnd), ktorý sme spustili v nedeľu ráno. Takto sme odoslali približne 4 000 žiadostí za 90 minút, servery boli vyťažené na max. 15% CPU s dostatkom voľných slotov. Považovali sme preto zvolené nastavenie za dostatočné.

Vzniknutá situácia spôsobila zahltenie a obmedzenie jedného servera, napriek tomu ďalšie dva servery žiadosti prijímali a spracovávali ich. Do 9.25 h máme uložených 544 žiadosti v databáze. Po identifikácii problému a prijatí opatrení sme začali od cca 9:30 prijímať žiadosti oveľa rýchlejšie a postupne to rástlo na úroveň 10-15 žiadostí za sekundu. Uvedenú udalosť sme zároveň hlásili na MIRRI a NBÚ ako bezpečnostný incident.

Graf vyťaženia

Ďalšie novinky

Test

2. 9. 2024

Test

Testovanie bežného článku
Participatívne stretnutie v Púchove

16. 4. 2024

Participatívne stretnutie v Púchove

V divadelnej sále mesta Púchov sa 12. apríla 2024 uskutočnilo participatívne stretnutie k tvorbe Stratégie adaptácie  mesta Púchov. Stretnutia sa zúčastnili zainteresované strany mesta Púchov a pracovníci SAŽP. Stratégiu adaptácie spracováva  ako pilotný projekt SAŽP v rámci plánu hlavných úloh. Ide o implementáciu metodiky, ktorá bola  vypracovaná v roku 2023. Slovenská agentúra životného prostredia si vybrala mesto Púchov ako aktívnu samosprávu v oblasti životného prostredia a ako dvojnásobného víťaza v súťaži ENVIROMESTO 2021 a 2023.
Vieme, čo jeme?

11. 4. 2024

Vieme, čo jeme?

Jesť musíme všetci. Vieme však, aký vplyv má jedlo na zmenu klímy a naopak? Pestovanie, výroba, ale aj zneškodnenie potravín má veľkú uhlíkovú stopu, ktorou negatívne prispievajú k zmene klímy. Zmena klímy zase vplýva spätne na kvalitu a množstvo potravy, na našu schopnosť vypestovať si dostatok jedla. Na poľnohospodárske účely využívame viac zeme než kedykoľvek predtým, a ak nezmeníme svoje konzumné návyky a systém produkcie potravín, nárast populácie bude dopyt po pôde len zvyšovať.
Viac noviniek