Vint.ee katkestus 18.11.2016

Tere,

Tegemist oli viimaste aastate suurima katkestusega, kus vinti oli juurdepääs piiratud 6 tundi (21.00 - 03.00).


Meil on nii häid kui halbu uudiseid:

Head uudised: Me leidsime võimaluse vint.ee normaalse elu taastamiseks. See on tähelepanuväärne, kuna algselt ei aidanud isegi serveri restart olukorda parandada.

Halvad uudised: Me ei suuda hetkel välja mõelda loogilist seost meie tehtud parandusele ja vea põhjusele. Lihtkeeli: Me ei tea täpselt, mis juhtus, me parandasime selle, ja asi töötab :)

Tehnilistest detailidest: php-fpm max_children limiit oli 5. Oli 5 olnud need kuu aega uuel serveril ja oli 5 ka kõik need aastad vanal serveril. Tõstsime selle numbri 25-le, fpm-ile restart ja kõik hakkas tööle!
Parimad praktikud soovitavad muidugi ühenduse nginx-i ja fpm-i vahel viia native socketilt tcp-ip-le, mida me ka homme hommikul teeme.

Soovin siinkohal tänada Jaanus Jaakmaa'd, kes peolt tulnuna kell 02:30 lahendas probleemi. Mina tulin ka peolt samal ajal aga see on vähemtähtsam ;)

Vint.ee töös hoidmine tundus enne tänast lihtne. Hetkel see enam nii ei ole. Hoiame Jaanusega serveri käitumisel silma peal. Eriti algava mõttespordi olümpiaadi ajal.


Tervitused,
Marten