ืืื ืืืขืจ ืืึทื ืฉืึทืคึฟื ืืื ืืงืกืคึผืขืจืึทืืึทื ืฅ. ืืขืืขืจ ืกืืืจื ืืื ื ืืฉื ืึท ืกืืึทืืืง ืืืขืจืืึทืืขืจืื ื ืคืื ืื ืคืจืืขืจืืืงืข ืึธื ืขืก, ืึธืืขืจ ืึท ืึธืคึผืฉืคึผืืืืื ื ืืืืฃ ืืขืจ ืืขืจืคืึทืจืื ื ืืื ืึท ืืืขืจืืึทื ื ืคืื ืืื ืฆื ืืขืกืขืจ. ืืืขืจ ืืื ืืืจ ืืึทืฉืืึธืกื ืฆื ืฆืืืืืื ืึท ืืึธืจ ื ืืึทืข ืคึฟืึธืจืืึทื - ืฆื ืืขืื ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืื ืึธืื ืืื ื ืึธืขื ื ืืื ืืขืืืขื ืฆื "ืงืึทืืืึทื".
ืืืื ืืืจ ืืขืงืืฆืขืจ ืืึทืฉืจืืึทืื ืืืึธืก ืืืจ ืืึธืื ืืขืืื ืืขืฉืึทืก ืื ืืื ืืขื ืกืืืืข ืงืืจืก: "ืืืจ ืืืืขื, ืืืจ ืืจืขืื, ืืืจ ืคืึทืจืจืืืื,
ืืืจ ืืขืจื ืขืโ. SRE ืืื ืืืขืจื ืงืืืื ืืื ืืืืื ืืขืึธืจืืข - ืืืืื ืคืืจ, ืคืึทืงืืืฉ ืกืึทืืืฉืึทื ื, ืคืึทืงืืืฉ ืคึผืจืึธืืืขืืก.
ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืืขื ืขื ืฆืขืืืืื ืืื ืืืื ืึทืืื ืึทื ืึท ืฉืืึทืจืง ืงืึทืืคึผืขืืืืืื ืืืืกื ืืืึธืื ื ืืฉื ืืึธืื ืืืขืจ ืขืก ืื ืฆื ืคืึทืื ืฉืืึธืคื ืืืง ืึธืืขืจ ืงืึทืืขืจ "ืึทื ืืจื ืืืจืืก" ืืืืฃ ืื iPhone, ืืืื ืื ืืืืฉืคึผืื ืคืื ืืืืืจื ืึทื ืึทืืึธืืืขืืืืืฉ.
ืคึผืจืึธืืืขืืก, ืืืืืฉืื, ืืึทืื ืืื ืืึทืกืงืก ืืขื ืขื ืฆืืืขืฉืืขืื ืฆื ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืืืจื ืคืืจ ืืขื ืืึธืจืก. ืืืืืื ืงืจืืืืึธืื, ืืืืคึผื ืืขืืืขืืึธืคึผืขืจ ืืื Booking.com (ื ืขืืืขืจืืึทื ืืก). ืื ืืืืืขืจ, ืืืืคึผื ืืขืืืขืืึธืคึผืขืจ ืืื Booking.com (USA). Eduard Medvedev, CTO ืืื Tungsten Labs (ืืืึทืืฉืืึทื ื). Evgeniy Varavva, ืืขื ืขืจืึทื ืืขืืืขืืึธืคึผืขืจ ืืื Google (San Francisco).
ืืขืจืฆื, ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืืขื ืขื ืฆืขืืืืื ืืื ืืืื ืืื ืงืึธื ืงืืจืืจื ืืื ืืขืืขืจ ืื ืืขืจืขืจ. ืืฉืืงืึทืืืข?
ืืืืืื, ืื, ืขืืืึทืจื ืืื ืขืืืืขื ื ืงืืงื ืืืืฃ ืื ืึธืจืขืืข ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืคืื Slurm SRE ืืื ืืื ืืขื ืื ืืกื ืกืงืืืื ืฅ ืืืืืขืจ ืื ืึธื ืืืื ืคืื ืื ืคืึทืจืืขืกื.
ืึทืืื ืื ืึทืจืืขื:
ืืืจ ืืขื ืขื ืื ืืืขืจืขืจ, โโืืืจ ืืืขืื ืืืืขื ืึท ื ืืึทืข ืืืขืื ...
ืขืก ืืื ืึท ืืืขืืืืืื ืคึฟืึทืจ ืคึฟืืื ืืืืขื ืึทืืืจืขืืึทืืึธืจ. ืื ืกืืืขื ืฅ ืืขื ืขื ืื ืืืขื ืืึทื ืืืจื ืืขื ืืึธืจืก ืืื ืึท ืคืึทืจ-ืืขืืจืืขื ืกืฆืขื ืึทืจ (ืืึธืืฉ ืงืืื ืืืื ืขืจ ืืงืกืงืืืื ืืขืจ ืืืืคึผื ืกืึทืคืืกืืึทืงืืืืื ืืื ืื ืกืืืืึทืก ืืืคึผืจืึทืืืืืืืฉืึทื), ืื ืคืึธืจืฉืืขืืื ื ืคืื ืืขื ืคึผืืึทืฅ ืืื ืืืกืงืจืืืื ืืืจื ืคืึทืจืฉืืื ืืขืืจืืงืก. ืื ืคืจืืืืขืืขื ืงืขื ืขื ืืืื ืืืืขืจ ืึทื ืืขืจืฉ: ืืืงืืฅ ืคึฟืึทืจ ืื ืืึธืืืื ืจืืืฉ ืืขืึทืืขืจ ืืขื ืขื ื ืืฉื ืืึธืืืื ืืื ืื ืืึทืืึทืืืืก; ืคึผืึธืกืืขืจืก ืคืื ืคืืืืก ืืื ืคึผืขืจืคืึธืจืืึทื ืกืื ืืขื ืขื ืืึธืืืื ืืื ืื ืืึทืืึทืืืืก ืืื ืืขืจ ืืื 10 ืกืขืงืื ืืขืก; ืื ืืึทืฉืจืืึทืืื ื ืคืื ืึท ืืืื ืคืืื ืคืจืืืื; 0,1% ืคืื ืึธืจืืขืจืก ืืขื ืขื ืฉืืื ืจืขืืขืจืืืืจื; ืคืื ืฆืืื ืฆื ืฆืืื ืื ืฆืึธืืื ื ืคึผืจืึทืกืขืกืื ื ืกืืกืืขื ืงืจืึทืฉืื ืคึฟืึทืจ ืึท ืืื ืื ืึธืืขืจ ืฆืืืื. ืืื ืคืืืข, ืคืืืข, ืคืืืข ืคึผืจืืงืจืข ืืื ืื ืืืึธืก ืงืขื ืขื ืคึผืึทืกืืจื ืึท Slurm SRE ืืึทืืืืืืงืืขืจ ืืื ืืืื ืคืึทืงืืืฉ ืึทืจืืขื.
ืืืจ ืืขื ืขื ืืจืืื ืฆื ืฉืขืคึผื ืึทืืฅ ... ืืื ืึทืืขืืขื.
ืืื ืืืขืจ ืืึทื ื-ืฆืึธืจืขืก ืืืขืืืืืื ืืืฉืืืื ืคืื ืขืืืขืืข ืืืงืจืึธ ืืึทืืื ืื ืืก. ืืืื ืึทืจืืขื ืืื ืฆื ืฆืื ืืืคืืืกื ืืึทืื ืืืืฃ ืฉืึธืื, ืคึผืจืืืกืึทื ืืื ืื ืืืฆื ืกืืฅ ืคืื ืึทืืข ืกืื ืขืืึทืก; ืขืก ืืืืึทืื ืคึฟืืื ืืขืืื, ืึทืืึทืื ืืืจ ืฆื ืืืืกืงืืืึทืื ืึท ืกืื ืขืืึท, ืืืืึทืื, ืืึทื ืืื ืึธืจื, ืืื ืืื ืืึทืฆืึธืื ืคึฟืึทืจ ืืืงืืฅ. ืืื ืึทืืืขืืืื, ืึทืืฅ ืืืึธืก ืืขืจ ืฆืืงืืงืขืจ ืงืขื ืขื ื ืึธืจ ืืืื ืคืื. ืึธืืขืจ ืืขืจ ืืึทื ืืฆืขืจ ืงืขื ื ืืฉื ืืคืืื ืืึธืฉืขื ืืืึธืก ืึท ืืืืึทื ืืง ืืขืจืึทื ืื ืคึฟืึทืจ ืื ืคืขืกืืงืืึทื ืืื ืึทืงืกืขืกืึทืืืืืื ืคืื ืืขื ืคึผืืึทืฅ ืืื ืืขืฉืขืขื ืืฉ ืื.
ืคึฟืึทืจ ืื ืืื ืืขื ืกืืืืข ืคึผืืึทืฅ, ืืืจ ืืืฉืขื ืขืจืืืืึทื SLO, SLI, SLA ืื ืืึทืงืืืืขืจื, ืืขืืืขืืึธืคึผืขื ืึทืจืงืึทืืขืงืืฉืขืจ ืืื ืื ืคืจืึทืกืืจืึทืงืืฉืขืจ, ืืืคึผืืืื ืื ืคึผืืึทืฅ, ืฉืืขืื ืึทืจืืืฃ ืืึธื ืืืึธืจืื ื ืืื ืึทืืขืจืืื ื. ืืื ืืืจ ืืืื ืึทืืืขืง.
SLO, SLI, SLA
SLI - ืื ืืืงืึทืืึธืจืก ืคืื ืืื ืกื ืืืจืื. SLOs ืืขื ืขื ืืื ืกื ืืืจืื ืืึธืืื. SLA - ืกืขืจืืืืก ืืืจืื ืึทืืจืืืึทื ืฅ.
SLA ืืื ืึทื ITIL ืืขืืึทืืึทืืึทืืืฉื ืืขืจืืื ืืืึธืก ืืื ืึธืืฅ ืึท ืคืึธืจืืึทื ืืขืกืงืขื ืฆืืืืฉื ืืขืจ ืงืื ื ืคืื ืึท ืืื ืกื ืืื ืืืื ืกืึทืคึผืืืืขืจ, ืืื ืึท ืืึทืฉืจืืึทืืื ื ืคืื ืื ืกืขืจืืืืก, ืื ืจืขืื ืืื ืึทืืืึทืืืืฉืึทื ื ืคืื ืื ืคึผืึทืจืืืขืก ืืื, ืจืืึฟ ืืืคึผืึธืจืืึทื ืืื, ืื ืืกืืื ืงืืืึทืืืืขื ืคึฟืึทืจ ืื ืื ืืึท ืคืื ืืขื. ืืื ืกื.
ืึท SLO ืืื ืึท ืึธืืืขืงืืืื ืคืื ืกืขืจืืืืก ืืืจืื: ืึท ืฆืื ืืืขืจื ืึธืืขืจ ืงืืื ืคืื ืืืึทืืืขืก ืคึฟืึทืจ ืึท ืกืขืจืืืืก ืืืจืื ืืืึธืก ืืื ืืขืืืกืื ืืืจื ืื SLI. ื ื ืึธืจืืึทื ืืืขืจื ืคึฟืึทืจ SLO ืืื "SLI โค ืฆืื" ืึธืืขืจ "ื ืืืขืจืืงืขืจ ืืืืื โค SLI โค ืืืืืขืจืฉืืขืจ ืืืืื".
ืื SLI ืืื ืึท ืกืขืจืืืืก ืืืจืื ืืจืืื - ืึท ืงืขืจืคืึทืื ืืืคืืื ื ืงืืืึทื ืืืืึทืืืืืข ืืึธืก ืคืื ืืืื ืึทืกืคึผืขืงื ืคืื ืืขืจ ืืืจืื ืคืื ืกืขืจืืืืก ืฆืืืขืฉืืขืื. ืคึฟืึทืจ ืจืืึฟ ืกืขืจืืืืกืขืก, ืืขืจ ืฉืืืกื SLI ืืื ืืขืจืขืื ื ืืื ืืขืื ืืืืืึทื ืกื - ืืื ืืึทื ื ืขืก ื ืขืื ืฆื ืฆืืจืืงืงืืืขื ืึท ืขื ืืคืขืจ ืฆื ืึท ืืงืฉื. ืื ืืขืจืข ืคึผืจืึธืกื SLIs ืึทืจืืึทื ื ืขืืขื ืืขืืช ืงืืจืก, ืึธืคื ืืืืกืืขืืจืืงื ืืื ืึท ืืจืึธืืฆืึธื ืคืื ืึทืืข ืจืืงืืืขืก ืืืงืืืขื, ืืื ืกืืกืืขื ืืจืืคึผืื, ืืืืฉืึทืืืึทืื ืืขืืืกืื ืืื ืจืืงืืืขืก ืคึผืขืจ ืกืขืงืื ืืข.
ืขืจืฉืื ืก, ืฐืขืื ืืืจ ืฆืขืืจืขืื ืื ืขืจืืคืืื ืขื, ืืื ืืขืจื ืึธื ืื ืืฒืืืขื, ืืื ืืขืจื ืึธื ืื ืืฒืืืขื...
ืื ืขืจืืขื ืืื ืคืื ืืจืืืกื ืืืง ืกืืืืช ืื ืืขืืืืื ืฆื "ืืืึธืื" ืกืืึธ ืคืื ืื ืืืืขืจ ืขืจืฉืืขืจ ืืื ืื. ืึทืืฅ ืืื ืืขืคืืื ืืืืฃ ืื ืงืขืค ืคืื ืึทืืืื ืืกืืจืึทืืึธืจืก - ืืขืืืขืืึธืคึผืขืจืก ืืืกืืืืงืก, ืื ืคืจืึทืกืืจืึทืงืืฉืขืจ ืคืืืืืขืจื, ืึท ืื ืคืืึทืงืก ืคืื ืืืืืึทืืขืจื ืืื DDoS ืื ืคืืื. ืึทืืฅ ืืืึธืก ืืืขืจืกืึทื ื SLO.
"- ืืืืขืจืข ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ, ืืื ืืื ืฆื ืืืืข ืืืจ, ืืขืจ ืขืจืฉืืขืจ ืืึทื ืืืจ ืคืึทืจืืึธืื ืืื ... ืึทืืฅ!"
ืฆืืืืืขื ืืขื ืืืขื, ืื ืกืคึผืืงืขืจื ืืืกืงืึทืกื ืคืขืกืืงืืึทื, ืืขืืช ืืืืืฉืขื, ืืขืกืืื ื ืคืืจ, ืคืึทืจืืืึทืืืื ื ืคืื ืื ืืขืจืึทืคึผืฉืึทื ื ืืื ืึทืคึผืขืจืืืฉืึทื ืึทื ืืึทืกืข.
ืืืจ ืืขื ืขื ื ืืฉื ืกืืึธืงืขืจืก, ื ืืฉื ืงืึทืจืคึผืขื ืืขืจืก ...
ืืขืืึธืื ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืื ืืขืืืืื ืฆื ืคืึทืจืจืืืื ืืืื - ืื ืืืืคึผื ืืึทื ืืื ืฆื ืคึฟืึทืจืฉืืืื ืืืึธืก ืฆื ืืึทืคึผื ืขืจืฉืืขืจ.
"- ืืืจ, ืืื ืืื ืงืืื ืืึธื ืืขืืขื ืขืก ืืจืขืื ืืื ืืึธืก, ืืื ืืขื ืคืึธืจืขื ืืื ืืื ืึทืืึท ืึท ืฉืืขืืข!"
ืึทืืื, ืึท ืฆืืคืึทื ืคืืจืืขืงืืืขื. ืื ืฆืึธืืื ื ืคึผืจืึทืกืขืกืื ื ืืื ืกื ืืื ืึทืจืึธืคึผ. ืืื ืฆื ืฉืคึผืืื ืฆื ืืืงืขืจื ืคืึทื ืืงืฉืึทื ืึทืืืื ืืื ืื ืฉืึธืจืืืกื ืืขืืืขื ืฆืืื?
ืื ืขืงืกืคึผืขืจืื, ืงืืงื ืืื ืืืืฉืึทืคื ืืืืฃ ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ, ืคึผืจืืคึผืขืจืื ื ืื ืื ืืขืจ ืงืื ืฅ.
ืืขืืขืจ ืืึทื ืฉืึทืคึฟื ืึธืจืืึทื ืืืืจื ืื ืึทืจืืขื ืคืื ืื ืืจืืคึผืข ืฆื ืขืืืืื ืืจื ืืขื ืฆืืคืึทื - ืื ืืืึทืืืื ืืืจืื, ื ืึธืืืึทืคืืื ืืื ืืขืจืขืกืืจื ืคึผืึทืจืืืขืก (ืกืืืืงืืึธืืืืขืจื). ืืื ืืขืจ ืืขืืืืงืขืจ ืฆืืึทื, ืคึผืจืืืึธืจืึทืืื ืืขื ืขื ืฉืืขืื. ืืื ืืขื ืืืขื, ืื ืคึผืึทืจืืืกืึทืคึผืึทื ืฅ ืืจืืื ื ืฆื ืึทืจืืขืื ืืื ืืขืจ ืืจืืง ืืื ืืขืจ ืืึธืจ ืืืืืืขื ืฆืืื ืื ืึธืื.
"ืืืึธืก ืคึฟืึทืจ ืึท ืืจืืื ืืื ืืจืืืก?!"
ืืืกืึธืืขืืขื ... ืืื ืขื ืืืงื ืื ืืขื ืืืื ื
ืฆืืืึทืืขื ืืื ืื ืกืคึผืืงืขืจื, ื ืึธื ืืขืืขืจ ืคึผืจืึธืืืขื ืืื ืกืึทืืืื ืืื ืื ืคึผืืึทืฅ ืืื ืืขืืืขื ืืขืืคึผืขืจืขืจืึทืื ืกืืืืืึทืืืืื, ืื ืืึทื ืฉืึทืคึฟื ืืขืืขืจื ื ืื ืื ืกืึทืืึทื ืฅ ืคึฟืื ืึท SRE ืคืื ื ืคืื ืืืื ืื ื. ืืืจ ืึทื ืึทืืืืื ืื ืคึผืจืึธืืืขืืก ืืื ืืขืืึทื - ืื ืกืืืืช ืคืื ืคึผืึทืกืืจืื ื, ืื ืคึผืจืึธืืจืขืก ืคืื ืืืืืึทื ืืืฉืึทื. ืืขืจื ืึธื, ืืืืืข ืืึทื ืฉืึทืคึฟื ืืื ืงืึธืืขืงืืืื, ืืืจ ืืขืืืื ืืืกืืืฉืึทื ื ืืื ืฆื ืคืึทืจืืืึทืื ืืื ืืืืึทืืขืจ: ืืื ืฆื ืคึฟืึทืจืืขืกืขืจื ืืึธื ืืืึธืจืื ื, ืืื ืฆื ืืืืืื ืื ืึทืจืงืึทืืขืงืืฉืขืจ, ืืื ืฆื ืกืืจืืืขืจื ืื ืฆืืืึทื ื ืฆื ืึทื ืืืืืงืืื ื ืืื ืึธืคึผืขืจืึทืฆืืข, ืืื ืฆื ืจืืืืืง ืจืขืืืึทืืืืฉืึทื ื. ืื ืจืขืื ืขืจ ืืึธืื ืืขืืึทื ืกืืจืืืืื ืื ืคืืจืื ื ืคืื ืึธื ืคืืจื ืคึผืึธืกื-ืืึธืจืืขื.
โ ืฐืขืจ ื ืึธื ืฐืื ืคึผืฒึทื ืืงื! โ ืืื!
ืื ืืฆืืื ืคืื ืื ืืืื ืืขื ืขื ืฉืืจืขื ื ืืื ืงืืืจ ืจืขืงืึธืจืืขื ืืืืฃ ืื ืขืืขืงืืจืึธื ืืฉ ืกืงืึธืจืืึธืจื.
ืคึฟืึทืจ ืขืจืฉืืขืจ ืขืจืืขืจ - ืึท ืืึธื ืืก ืคืื ืกืืืืงืืึธืืืืขืจื.
ืืงืืจ: www.habr.com