SRE (Site Reliability Engineering) ááẠáááºááá±á¬áá»ááºáá»á¬ážááᯠáááºááŸááºážáá®ááá¯ááºá
á±ááẠáá»ááºážáááºááŸá¯áá
áºáá¯ááŒá
áºáááºá áááºážááᯠDevOps á¡ááœáẠáá°áá±á¬ááºáá
áºáá¯á¡ááŒá
ẠáááºááŸááºááŒá®áž DevOps á¡áá±á·á¡áá»áá·áºáá»á¬ážááᯠá¡áá¯á¶ážáá»áá¬ááœáẠáááºááá¯á·á¡á±á¬ááºááŒááºááááºááᯠááŒá±á¬ááŒáááºá á€áá±á¬ááºážáá«ážááᯠáá¬áá¬ááŒááºáá«áááºá á
á¬á¡á¯ááºáá»á¬áž Google á០áá»áœááºá¯ááºááẠá€áá¬áá¬ááŒááºááᯠááá¯ááºááá¯ááºááŒááºáááºááŒá®áž á
á±á¬áá·áºááŒáá·áºááŒááºážáá¯ááºáááºážá
ááºáá»á¬ážááᯠáá¬ážáááºááŒááºážá¡ááœáẠáá»áœááºá¯ááºáááá¯ááºááá¯ááºá¡ááœá±á·á¡ááŒá¯á¶ááᯠá¡á¬ážááá¯ážáá«áááºá ááŒá±ážáááºážáá¯ááºáá¶ááá¯ááºážááœáẠО áááºáá±á¬ááºááŸá¯á¡ááá·áºáááºážááá¯ááºáá»á¬ážá¡ááŒá±á¬ááºáž á¡áá¬ážáá°á
á¬á¡á¯ááºá á¡áááºáž 6 ááᯠáá¬áá¬ááŒááºáá¯ááºáá±áá²á·áááºá
ááŒá±á¬ááºáá¬áá¬ááŒááºá áááºááŸá¯áá¶á
á¬ážáá«á
áááºááá·áºááœáŸááºááááºážáá»á¬áž á¡ááŸááºááááºá¡áá±ážááŒá®ážááŒá±á¬ááºážá áááºážááá¯á·ááᯠáááºááá¯á·ááá¯ááºážáá¬ááŒá®áž á¡áá²ááŒááºááááºááᯠáá¬ážááááºáá«á áááºáá±á¬ááºááŸá¯áá
áºáá¯á¡á¬áž á
á®áá¶ááá·áºááœá²ááẠáááŒá
áºááá¯ááºáá«á á€á¡áá»ááºá¡ááœááºá áá»áœááºá¯ááºááá¯á·ááẠáá»áœááºá¯ááºááá¯á·áááŒááºááœááºáž APIs áá»á¬ážáá²ááŸáá
áºáᯠááá¯á·ááá¯áẠá¡áá»á¬ážáá°ááŸá¬ áá¯ááºáá¯ááºááá¯á¡áá¯á¶ážááŒá¯áááºááŒá
áºá
á± áá»áœááºá¯ááºááá¯á·áá¡áá¯á¶ážááŒá¯áá°áá»á¬ážá¡ááœáẠáááºáá±á¬ááºááŸá¯á¡ááá·áºáá
áºáá¯áááºááŸááºááŒá®áž áá±ážáá±á¬ááºáá«áááºá
áá»áœááºá¯ááºááá¯á·ááẠáááºáá±á¬ááºááŸá¯á¡ááá·áº á¡ááœáŸááºážááááºážáá»á¬áž (SLIs)á áááºáá±á¬ááºááŸá¯á¡ááá·áº áááºááŸááºážáá»ááºáá»á¬áž (SLOs) ááŸáá·áº áááºáá±á¬ááºááŸá¯á¡ááá·áº ááá±á¬áá°áá®áá»ááºáá»á¬áž (SLAs) ááᯠáá¬ážáááºááẠáá¯á¶ážá áœá²áá°áá»á¬ážá ááá¹áááᯠáá»áœááºá¯ááºááá¯á·á áááºááá¯ááºááá±á¬á á¡ááœá±á·á¡ááŒá¯á¶ááŸáá·áº áá¬ážáááºááŸá¯ááᯠá¡áá¯á¶ážááŒá¯áá«áááºá á€á¡ááá¯ááºážá¡áá¬áá»á¬ážááẠáá»áœááºá¯ááºááá¯á· á á±á¬áá·áºááŒáá·áºááá¯ááá·áº á¡ááá áááºááá áºáá»á¬ážááᯠáá±á¬áºááŒáá¬ážááŒá®áž áá»áœááºá¯ááºááá¯á· áá»áŸá±á¬áºááá·áºáá¬ážááá·áº áááºáá±á¬ááºááŸá¯ á¡áááºá¡ááœá±ážááᯠááá±ážááá¯ááºáá«á áá»áœááºá¯ááºááá¯á·áá¯á¶á·ááŒááºááá·áºá¡áá¬áá»á¬ážááᯠáá±á¬áºááŒáááºá á¡áá¯á¶ážá áœááºá¡á¬ážááŒáá·áºá ááŸááºáááºáá±á¬áááºááá áºáá»á¬ážááá¯ááœá±ážáá»ááºááŒááºážááẠáá áºá á¯á¶áá áºáá¯ááŸá¬ážááœááºážáá«á ááŸááºáááºáá±á¬áá¯ááºáá±á¬ááºáá»ááºáá»á¬ážááᯠáááºážááœáŸááºá á±ááŒá®áž áááºáá±á¬ááºááŸá¯ááá»ááºážáá¬áá±ážá¡ááœáẠSRE á¡ááœá²á·á¡á¬áž áá¯á¶ááŒááºááŸá¯ááá¯áááºážáá±ážáá«áááºá
á€á¡áááºážááœáẠáááºááá áºáá±á¬áºáááºáá¯á¶á á¶á áááºááá áºááœá±ážáá»ááºááŸá¯ááŸáá·áº áááºááá áºááœá²ááŒááºážá áááºááŒá¬ááŸá¯ááá¯ááºáᬠááŒá¿áá¬áá»á¬ážááᯠááá¯ááºáá»ááºááẠáá»áœááºá¯ááºááá¯á·á¡áá¯á¶ážááŒá¯ááá·áº áá»ááºážáááºáá¯á¶ááᯠáá±á¬áºááŒáá¬ážáá«áááºá ááŸááºážáááºážáá»ááºá¡áá»á¬ážá á¯ááẠá¥ááá¬áá»á¬ážááá«áá² ááŒá áºáá±áááºááŒá áºáá±á¬ááŒá±á¬áá·áº á¡áááá¡áá»ááºáá»á¬ážááá¯áá±á¬áºááŒáááºá¡ááœáẠáááºážáá¡áá±á¬ááºá¡áááºáá±á¬áºááŸá¯ááá°áá¬ááœááºáá±á¬áºááŒáá¬ážáá±á¬ ááŸáááºá áá®ážáá¬ážáááºáá±á¬ááºááŸá¯ááᯠá¡áá¯á¶ážááŒá¯áá«áááºá
áááºáá±á¬ááºááŸá¯á¡ááá·áº áá±á«áá¬á
á á¬áááºáá°á¡áá»á¬ážá¡ááŒá¬ážááẠSLA áááá±á¬ááá¬ážááᯠáááºážááŸá®ážááŒá®ážáá¬ážááŒá áºááá¯ááºáá±á¬áºáááºáž SLI ááŸáá·áº SLO áá±á«áá¬ááá»á¬ážááẠáá±áá°áá»á¡á¬ážááŒáá·áº SLA áá°áá±á¬á¡áá¯á¶ážá¡ááŸá¯ááºážááẠá¡ááœááºáá»á¬ážááŒá¬ážáá±ááŒá®áž á¡ááŒá±á¬ááºážá¡áá¬áá±á«áºáá°áááºá á¡áááá¹áá«ááºáá»á¬ážá áœá¬ááŸááá±á¬ááŒá±á¬áá·áº ááá¯áá áá¯ááºá¡áááá¹áá«ááºááœáá·áºááá¯ááá¯ááºáá«áááºá ááŸááºážááŸááºážáááºážáááºážáááááºá áá»áœááºá¯ááºááá¯á·ááẠá€áááºááá¯ážáá»á¬ážááᯠááœá²áá¯ááºááá¯áá«áááºá
ááœáŸááºááááºážáá»á¬áž
SLI ááẠáááºáá±á¬ááºááŸá¯á¡ááá·áº ááœáŸááºááŒáá»ááºáá áºáá¯âáá¶á·ááá¯ážáá±ážááá·áº áááºáá±á¬ááºááŸá¯á¡ááá·áºá ááŸá¯áá±á¬áá·áºáá áºáá¯á¡ááœáẠááá¯áá áá¯ááºáááºááŸááºáá¬ážáá±á¬ á¡áá±á¡ááœáẠá¡ááá¯ááºážá¡áá¬áá áºáá¯ááŒá áºáááºá
áááºáá±á¬ááºááŸá¯á¡áá»á¬ážá á¯á¡ááœááºá áá±á¬á· SLI ááᯠáá±á¬ááºážááá¯ááŸá¯ latency á¡ááŒá ẠáááºááŸááºááẠ- áá±á¬ááºážááá¯áá»ááºáá áºáá¯á¡á¬áž áá¯á¶á·ááŒááºááŸá¯áá áºáá¯á¡ááœáẠá¡áá»áááºáááºáá»áŸááŒá¬ááŒá¬ á¡áá»áááºáá°ááááºá á¡ááŒá¬ážá¡áá¯á¶ážáá»á¬ážáá±á¬ SLI áá»á¬ážááœáẠáááºáá¶áááŸáááá·áº áá±á¬ááºážááá¯áá»ááºá¡á¬ážáá¯á¶ážá áá áºá áááºáá áºááá¯ááºážá¡ááŒá Ạáá±á¬áºááŒáá±á·ááŸáááá·áº á¡ááŸá¬ážá¡ááœááºážááŸá¯ááºážááŸáá·áº á áá áºááŒááºáááºážááŸá¯á¡á¬áž áá áºá áá¹ááá·áºáá»áŸáẠáá±á¬ááºážááá¯ááŸá¯áá»á¬ážááŒáá·áº ááá¯ááºážáá¬áá±á·ááŸááááºá ááá¯ááºážáá¬ááŸá¯áá»á¬ážááᯠáááŒá¬áá á á¯á ááºážáá¬ážáááº- áá±áá¬á¡ááŒááºážááᯠáŠážá áœá¬á á¯áá±á¬ááºážááŒá®áž ááŒá±á¬ááºážáá²ááŸá¯ááŸá¯ááºážá áá»ááºážáá»áŸ ááá¯á·ááá¯áẠáá¬ááá¯ááºááŸá¯ááºážá¡ááŒá áºááá¯á· ááŒá±á¬ááºážáá²áááºá
á¡áá±á¬ááºážáá¯á¶ážááŸá¬á SLI ááẠáááºáá±á¬ááºááŸá¯áá áááºáááºá á¬ážááŸá¯á¡ááá·áºááᯠááá¯ááºááá¯ááºááá¯ááºážáá¬áá±á¬áºáááºáž áá áºáá«áá áºáá¶ááœáẠáá°áááºážáá áºáá¯á¡á¬áž ááá°ááẠááá¯á·ááá¯áẠá¡áááá¹áá¬ááºááœáá·áºáááºáááºáá²áá±á¬ááŒá±á¬áá·áº ááá¯ááºážáá¬áááºá¡ááœáẠáááºá ááºáááºááá áºáá áºáá¯áᬠáááŸáááá¯ááºáááºá á¥ááá¬á¡á¬ážááŒáá·áºá client-side latency ááẠáááŒá¬áá ááá¯ááá¯ááá·áºáá»á±á¬áºáá±á¬ áááºááá áºáá áºáá¯ááŒá áºáá±á¬áºáááºážá latency ááᯠserver ááœááºáᬠááá¯ááºážáá¬ááá¯ááºááá·áº á¡áá»áááºáá»á¬ážááŸááá«áááºá
SRE áá»á¬ážá¡ááœáẠá¡áá±ážááŒá®ážáá±á¬ á¡ááŒá¬áž SLI á¡áá»áá¯ážá¡á á¬ážááŸá¬ áááŸáááá¯ááºááŸá¯ ááá¯á·ááá¯áẠáááºáá±á¬ááºááŸá¯ááᯠá¡áá¯á¶ážááŒá¯ááá¯ááºááá·áº á¡áá»áááºá¡ááá¯ááºážá¡ááŒá¬ážááŒá áºáááºá ááá«ááᶠá¡ááœááºááŸá¯ááºážáᯠáá±á«áºáá±á¬ á¡á±á¬ááºááŒááºáá±á¬ áá±á¬ááºážááá¯ááŸá¯ááŸá¯ááºážá¡ááŒá ẠáááºááŸááºáá±á·ááŸááááºá (áá áºáááºáá¬âá¡áá»áááºáá¬ááá áºáá¯á¡áá áá±áá¬ááááºážáááºážáá¬ážáááá·áºááŒá áºááá¯ááºááŒá±âáá±áá¬ááá¯ááŸá±á¬ááºááŸá¯á áá áºáá»á¬ážá¡ááœááºáááºáž á¡áá±ážááŒá®ážáá«áááºá) 100% áááŸáááá¯ááºááŸá¯áááŒá áºááá¯ááºáá±á¬áºáááºáž 100% á¡áá®ážááŸááááŸáááá¯ááºááŸá¯ááẠáááŒá¬áááááá¯ááºáááºá áááŸáááá¯ááºááŸá¯áááºááá¯ážáá»á¬ážááᯠáá±á¬áºááŒáááºá "ááá¯áž" á¡áá±á¡ááœáẠ» áááŸáááá¯ááºááŸá¯ áá¬ááá¯ááºááŸá¯ááºážá á¥ááá¬á¡á¬ážááŒáá·áºá 99% ááŸáá·áº 99,999% áááŸáááá¯ááºááŸá¯ááᯠ"2 ááá¯áž" ááŸáá·áº "5 ááá¯áž" á¡ááŒá áºáá¶ááááºáááºááá¯ááºáááºá Google Compute Engine á áááºááŸááá±á¬áºááŒáá¬ážáá±á¬ áááŸáááá¯ááºááŸá¯áááºážááá¯ááºááŸá¬ "áá¯á¶ážááŸá áºááœá²" ááá¯á·ááá¯áẠ99,95% ááŒá áºáááºá
áááºááŸááºážáá»ááºáááºážááá¯ááº
SLO ááẠáááºáá±á¬ááºááŸá¯á¡ááá·áº áááºááŸááºážáá»ááº- SLI ááŒáá·áº ááá¯ááºážáá¬áá±á¬ áááºáá±á¬ááºááŸá¯á¡ááá·áºá¡ááœáẠáá áºááŸááºáááºááá¯áž ááá¯á·ááá¯áẠáááºááá¯ážáá»á¬áž á¡ááá¯ááºážá¡ááŒá¬ážáá áºáá¯ááŒá áºáááºá SLO á¡ááœáẠáá¯á¶ááŸááºáááºááá¯ážááẠ"SLI †áá áºááŸááº" ááá¯á·ááá¯áẠ"Lower Limit †SLI †Upper Limit" ááŒá áºáááºá á¥ááá¬á¡á¬ážááŒáá·áºá SLO ááᯠáá»ááºážáá»áŸááŸá¬ááœá±ááŸá¯ááŒá¬áá»ááẠ100 áá®áá®á áá¹ááá·áºáááºáááºážáá±á¬ ááŸá¬ááœá±ááŸá¯ááŒá¬áá»áááºá¡ááŒá ẠáááºááŸááºááŒááºážááŒáá·áº ááŸáááºá áá®ážáá¬ážááŸá¬ááœá±ááŸá¯ááááºáá»á¬ážááᯠâá¡ááŒááºâ ááŒááºáá±ážáááºáᯠáá»áœááºá¯ááºááá¯á· áá¯á¶ážááŒááºááá¯ááºáá«áááºá
ááŸááºáááºáá±á¬ SLO ááá¯ááœá±ážáá»ááºááŒááºážááẠááŸá¯ááºááœá±ážáá±á¬áá¯ááºáááºážá ááºáá áºáá¯ááŒá áºáááºá áááá¡áá»ááºá áááºááẠáá®ážááŒá¬ážáááºááá¯ážáá áºáá¯ááᯠá¡ááŒá²áááºážááœá±ážáá»ááºááááá«á ááá·áºáááºáá±á¬ááºááŸá¯ááá¯á· ááŒááºáááŸáááºáá±á¬ááºáá¬áá±á¬ HTTP áá±á¬ááºážááá¯ááŸá¯áá»á¬ážá¡ááœááºá Query Per Second (QPS) áááºááá áºááẠááá·áºáááºáá±á¬ááºááŸá¯ááᯠáááºáá±á¬ááºááŒáá·áºááŸá¯ááá¯ááá·áº áá¯á¶ážá áœá²áá°áá»á¬ážáááá¹áááŒáá·áº á¡áááá¡á¬ážááŒáá·áº áá¯á¶ážááŒááºáá¬ážááŒá®áž áááºážá¡ááœáẠSLO ááᯠáááºáááºááŸááºááááá«á
á¡ááŒá¬ážáá áºáááºááœááºá áááºááẠáá±á¬ááºážááá¯ááŸá¯áá áºáá¯á á®á¡ááœáẠáá»ááºážáá»áŸááŒá¬áá»áááºááᯠ100 áá®áá®á áá¹ááá·áºááẠáááºážá á±ááá¯áááºáᯠááá¯ááá¯ááºáááºá ááá¯ááá¯á·áá±á¬áááºážááá¯ááºááá¯áááºááŸááºááŒááºážááẠááá·áºáá»ááºááŸá¬á á¬ááᯠlatency áááºážáá±á¬á¡áá»áááºááŒáá·áºáá±ážááẠááá¯á·ááá¯áẠááá¯ááá¯á·áá±á¬ latency áá±ážááá·áºáááááá¬ááá¯áááºááẠááá·áºá¡á¬áž ááœááºážá¡á¬ážáá±ážááá¯ááºáááºá (100 milliseconds ááẠáááºáááᯠáá¶áá«ááºááŒá áºáááºá ááá¯á·áá±á¬áº latency áá¶áá«ááºáá»á¬ážááẠááá¯áá±á¬ááºážáá«áááºá á¡ááŒááºá¡ááŒááºááŸá¯ááºážáá»á¬ážááẠááŸá±ážáá±á¬á¡ááŒááºááŸá¯ááºážáá»á¬ážááẠááá¯áá±á¬ááºážááŒá±á¬ááºáž áááºáá±á¡áá±á¬ááºá¡áá¬ážáá»á¬ážááŸáááŒá®áž á¡áá»áá¯á·áá±á¬áááºááá¯ážáá»á¬ážáááºááœáẠáá¯á¶ážá áœá²áá°áá±á¬ááºážááá¯ááŸá¯áá»á¬áž áá¯ááºáá±á¬ááºáá¬ááœáẠlatency ááẠá¡ááŸááºááááºá¡á¬ážááŒáá·áº áá°áá»á¬ážááᯠáá±ážáá±ážááŸáá±ááẠááœááºážá¡á¬ážáá±ážáá«áááºá áááºááááºáá±á¬ááºááŸá¯ááŸá)
ááááºá áááºážááẠááááá áºáá»ááºááœáẠáááºáá¬ážáááºááẠááá¯ááá¯ááŸááºážáááºážáá±áááº- áááºááẠááœááºáá»ááºááŸá¯á០QPS ááᯠáá¯á¶ážá ááááºáá¬ážááá·áºáá«á á¡ááŸááºááŸá¬ QPS ááŸáá·áº latency ááá¯á·ááẠáá áºáá¯ááŸáá·áºáá áºáᯠááá¯ááºááá¯ááºáá¬áá¬áááºá ááºáá±áá±á¬ááŒá±á¬áá·áºááŒá áºáááº- ááŒáá·áºáá¬ážáá±á¬ QPS ááẠáááŒá¬áá ááŒáá·áºáá¬ážáá±á¬ latency ááá¯ááŒá áºáá±á«áºá á±ááŒá®áž áááºáá±á¬ááºááŸá¯áá»á¬ážááẠáááºááŸááºáá¬ážáá±á¬ load á¡ááá·áºááá¯á·áá±á¬ááºááŸááá±á¬á¡áá«ááœáẠá áœááºážáá±á¬ááºáááºáááááá¬áá¬áá»áááºážááœá¬ážáááºáááºá
SLO áá áºáá¯ááᯠááœá±ážáá»ááºááŒááºážááŸáá·áº áá¯ááºáá±ááŒááºážááẠáááºáá±á¬ááºááŸá¯ áááºááá¯á·á¡áá¯ááºáá¯ááºáááºááᯠá¡áá¯á¶ážááŒá¯áá°á áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬ážááᯠáááºááŸááºáá±ážáá«áááºá á€áááºážáá»á°áá¬ááẠá áœááºážáá±á¬ááºáááºááŸá±ážááœá±ážááŒááºážáá²á·ááá¯á·áá±á¬ áááºáá±á¬ááºááŸá¯ááá¯ááºááŸááºá¡áá±á«áº á¡ááŒá±á¡ááŒá áºáááŸááá±á¬ ááá¯ááºááŒá¬ážááŸá¯áá»á¬ážááᯠáá»áŸá±á¬á·áá»ááá¯ááºáááºá áááá»ááŒááºáá¬ážáá±á¬ SLO áááŸááá²á á¡áá¯á¶ážááŒá¯áá°áá»á¬ážááẠáááºáá±á¬ááºááŸá¯ááᯠáá®ááá¯ááºážááœá²ááŒááºážááŸáá·áº á á®áá¶ááá·áºááœá²áá°áá»á¬ážá áááºááŒááºáá°ááá»ááºáá»á¬ážááŸáá·áº áá¬ááŸááááºááá¯ááºááá·áº áááºážááá¯á·á¡ááá¯ááŸááá±á¬ á áœááºážáá±á¬ááºáááºááŸáá·áºáááºáááºá áááºážááá¯á·á ááá¯ááºááá¯ááºáá»áŸá±á¬áºááá·áºáá»ááºáá»á¬ážááᯠáááºáá®ážáá±á·ááŸááááºá á€á¡ááŒá±á¡áá±ááẠáááºáá±á¬ááºááŸá¯ááᯠá¡ááŸááºááááºááẠááá¯ááá¯áá¯á¶ážá áœá²ááá¯ááºáááºáᯠáá¯á¶ážá áœá²áá°áá»á¬áž ááœá²ááŸá¬ážá áœá¬áá¯á¶ááŒááºááá·áºá¡áá« áááºáá±á¬ááºááŸá¯áá¶á០áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬áž ááá¯ážáá¬áᬠáá¯á¶ážá áœá²áá°áá»á¬ážá áááºážá áá áºááẠá¡ááŸááºááááºááẠáá¯á¶ááŒááºá áááºáá»áááŸá¯áááºážáá«ážáááºáᯠáá¯á¶ááŒááºááá·áºá¡áá« ááá¯á¶ááŒááºááŸá¯ááŒá áºá á±ááá¯ááºáááºá
ááá±á¬áá°áá®áá»ááºáá»á¬áž
áááºáá±á¬ááºááŸá¯á¡ááá·áºááá±á¬áá°áá®áá»ááºááẠáááºážááá¯á·áá«ááŸááá±á¬ SLO áá»á¬ážááœá±á·áá¯á¶ááŒááºáž (ááá¯á·ááá¯áẠáááœá±á·áá¯á¶ááŒááºáž) áá¡áá»áá¯ážáááºáá»á¬ážáá«áááºáá±á¬ ááá·áºá¡áá¯á¶ážááŒá¯áá°áá»á¬ážááŸáá·áº áááá»ááŒááºáá¬ážáá±á¬ ááá¯á·ááá¯áẠááœááºááá¯ááºáá±á¬á á¬áá»á¯ááºááŒá áºáááºá á¡áá»áá¯ážáááºáá»á¬ážááẠááœá±ááŒá±ážâáá»áŸá±á¬á·á á»á±áž ááá¯á·ááá¯áẠáááºááœá±âááá¯á·áá±á¬áº áááºážááá¯á·ááẠá¡ááŒá¬ážáá¯á¶á á¶áá»á¬ážááᯠáá°áá±á¬ááºááá¯ááºááá·áºá¡áá«ááœáẠá¡áá»áá¯ážáááºáá»á¬ážááᯠá¡ááœááºáá¯á¶áž ááŸááºááááá¯ááºáááºá SLO ááŸáá·áº SLA áá»á¬ážááŒá¬áž ááŒá¬ážáá¬ážáá»ááºááᯠááœááºáá°á áœá¬ááŒá±á¬ááá¯áááºááŸá¬ "SLOs áá»á¬áž áááá¯ááºáá®áá«á áá¬ááŒá áºááœá¬ážááá²" áᯠáá±ážáá«á ááŸááºážáááºážááŒááºáá¬ážáá±á¬ á¡áá»áá¯ážáááºáá»á¬áž áááŸááá«áá áááºááẠSLO ááᯠáá±áá»á¬áá±á«ááºáá®ážáá«áž ááŒáá·áºááŸá¯áá±áá«áááºá
SRE ááẠáá¯á¶ááŸááºá¡á¬ážááŒáá·áº SLA áá»á¬ážááᯠáááºáá®ážáá¬ááœáẠSLA áá»á¬ážááẠáá¯ááºáááºážááŸáá·áº áá¯ááºáá¯ááºááá¯ááºáᬠáá¯á¶ážááŒááºáá»ááºáá»á¬ážááŸáá·áº áá®ážáááºá áœá¬ áááºá ááºáá±áá±á¬ááŒá±á¬áá·áº ááŒá áºáááºá ááá¯á·áá±á¬áº SRE ááẠáá¡á±á¬ááºááŒááºáá±á¬ SLO áá»á¬ážá á¡áá»áá¯ážáááºáá»á¬ážááᯠáá»á±á¬á·áá«ážá á±ááẠáá°áá®áá±ážáá¬ááœáẠáá«áááºáá«áááºá áááºážááá¯á·ááẠSLI ááᯠáá¯á¶ážááŒááºáá¬ááœááºáááºáž áá°áá®áá±ážááá¯ááºáááº- áá±áá»á¬áááºááŸá¬á ááá±á¬áá°áá®áá»ááºááœáẠSLO ááᯠááá¯ááºážáá¬ááẠáááºááŸááºážáá»ááºáááºážáááºážáá áºáᯠááŸááááẠááá¯á·ááá¯áẠááá±á¬áá¬ážááœá²ááœá²ááŸá¯áá»á¬áž ááŸáááááºá
Google Search ááẠá¡áá»á¬ážáá°ááŸá¬ SLA ááá«áá±á¬ á¡áá±ážááŒá®ážáá±á¬ áááºáá±á¬ááºááŸá¯áá áºáá¯á á¥ááá¬áá áºáá¯ááŒá áºáá«áááº- áá»áœááºá¯ááºááá¯á·ááẠáá°ááá¯ááºážááᯠSearch ááᯠáááºááá¯ááºááá»áŸ áááá±á¬ááºá áœá¬ á¡áá¯á¶ážááŒá¯á á±ááá¯áá±á¬áºáááºáž áá»áœááºá¯ááºááá¯á·ááẠááá¹áá¬ááŸáá·áº á á¬áá»á¯ááºáá»á¯ááºáá¬ážááŒááºáž áááŸááá«á ááá¯á·áá±á¬áº ááŸá¬ááœá±ááŸá¯ ááááŸáááá¯ááºáá«á á¡áá»áá¯ážáááºáá»á¬áž ááŸááá«áá±ážááẠ- ááááŸáááá¯ááºááŸá¯ááẠáá»áœááºá¯ááºááá¯á·á áá¯ááºáááá¹áá¬ááᯠáá»áááºážá á±ááá·áºá¡ááŒáẠááŒá±á¬áºááŒá¬áááºááœá±áááºáž áá»á±á¬á·áá»á á±áá«áááºá Google for Work áá²á·ááá¯á·áá±á¬ á¡ááŒá¬áž Google áááºáá±á¬ááºááŸá¯áá»á¬ážá áœá¬ááœáẠáá¯á¶ážá áœá²áá°áá»á¬ážááŸáá·áº áááá»ááŒááºáá¬ážáá±á¬ áááºáá±á¬ááºááŸá¯á¡ááá·áº ááá±á¬áá°áá®áá»ááºáá»á¬ážááŸááááºá áááºáá±á¬ááºááŸá¯áá áºáá¯ááœáẠSLA áá«ááŸáá á±áá¬áá° SLI ááŸáá·áº SLO ááᯠáááºááŸááºááŒá®áž áááºáá±á¬ááºááŸá¯ááᯠá á®áá¶ááá·áºááœá²áááºá¡ááœáẠáááºážááá¯á·ááᯠá¡áá¯á¶ážááŒá¯ááẠá¡áá±ážááŒá®ážáá«áááºá
áá®á¡áá¯áá®ááœá± á¡áá»á¬ážááŒá®áž - á¡áá¯á០ááœá±á·ááŒá¯á¶áááŸá¬á
áááºááœá±á·á¡ááœáŸááºážááááºážáá»á¬áž
áááºáá±á¬ááºááŸá¯á¡ááá·áºááᯠááá¯ááºážáá¬ááẠááá·áºáá»á±á¬áºáá±á¬ áááºááá áºáá»á¬ážááᯠááœá±ážáá»ááºááẠá¡áá±ážááŒá®ážááŒá±á¬ááºáž áá»áœááºá¯ááºááá¯á· áá±á¬ááºáá»ááºáá»áááá±á¬ááŒá±á¬áá·áºá áááºáá±á¬ááºááŸá¯ ááá¯á·ááá¯áẠá áá áºá¡ááœáẠáááºááá·áº áááºááá áºáá»á¬áž á¡áá±ážááŒá®ážáááºááᯠááẠááᯠáááºááá¯á·ááááá¯ááºááááºážá
áááºááŸáá·áº ááá·áºá¡áá¯á¶ážááŒá¯áá°áá»á¬ážááẠá¡áááºá¡áá¬ááᯠá¡áá±ážáá¬ážááááºážá
á á±á¬áá·áºááŒáá·áºáá±ážá áá áºááœáẠáááºááŒá±áá¬áá¶ááá¯ááºáá±á¬ áááºááá áºááá¯ááºážááᯠSLI á¡ááŒá Ạáááºá¡áá¯á¶ážááŒá¯ááẠáááá¯á¡ááºáá«á á áá áºáá áºáá¯á០áá¯á¶ážá áœá²áá°áá»á¬áž ááá¯áá»ááºáá±á¬á¡áá¬ááᯠáá¬ážáááºááŒááºážááẠááá·áºá¡á¬áž áááºááá áºáá»á¬ážá áœá¬ááᯠááœá±ážáá»ááºááẠáá°áá®áá±ážáá«áááá·áºáááºá ááœáŸááºááááºážáá»á¬ážá áœá¬ááᯠááœá±ážáá»ááºááŒááºážááẠá¡áá±ážááŒá®ážáá±á¬ ááœáŸááºááááºážáá»á¬ážááᯠá¡á¬áá¯á¶á áá¯ááºááẠáááºáá²á á±ááŒá®áž áá¶áá«ááºáááºáá áºáá¯ááᯠááœá±ážáá»ááºááŒááºážááŒáá·áº ááá·áºá áá áºá á¡ááŒá±á¬ááºá¡ááŒá¬ážááᯠááá¯ááºááŸááºáááŸááá² áá¬ážáá²á·ááá¯ááºáá«áááºá áá»áœááºá¯ááºááá¯á·ááẠáá¯á¶ááŸááºá¡á¬ážááŒáá·áº á áá áºáá áºáá¯á áá»ááºážáá¬áá±ážááᯠá¡áá²ááŒááºáááºááŸáá·áº áá¬ážáááºááẠá¡ááá á¡ááœáŸááºážáá»á¬ážá áœá¬ááᯠá¡áá¯á¶ážááŒá¯áá«áááºá
áááºáá±á¬ááºááŸá¯áá»á¬ážááẠáá±áá°áá»á¡á¬ážááŒáá·áº áááºážááá¯á·ááŸáá·áºáááºááá¯ááºáá±á¬ SLI á áááºááŸááºáá»ááºáá»á¬ážá¡á á¡á áááºá¡ááá¯ááºážáá»á¬ážá áœá¬ááá¯á· ááœá²ááœááºááá¯ááºáááº-
- áá»áœááºá¯ááºááá¯á·áááá°áá¬á០ááŸáááºá áá®ážáá¬ážáááºáá±á¬ááºááŸá¯á¡ááœáẠááŸá¬ááœá±ááŸá¯á¡ááºáá¬áá±á·á áºáá»á¬ážáá²á·ááá¯á·áá±á¬ á áááºááŒáá¯ááºááŸá±á·áá¯á¶ážá áá áºáá»á¬ážá áááºážááá¯á·ááẠáááŸáááá¯ááºááááºá ááŸá±á¬áá·áºááŸá±ážááŸá¯áá»á¬ážáááŸáá á±áá² áá¯á¶áá±á¬ááºáá±á¬ bandwidth ááŸááááºá ááá¯á·ááŒá±á¬áá·áº áá±ážááœááºážáá»á¬áž áá±ážááá¯ááºáááº- áá±á¬ááºážááá¯áá»ááºááᯠáá»áœááºá¯ááºááá¯á· áá¯á¶á·ááŒááºááá¯ááºáá«ááá¬ážá áá±á¬ááºážááá¯áá»ááºááᯠáá¯á¶á·ááŒááºááẠá¡áá»áááºáááºáá»áŸááŒá¬áá²á·ááááºážá áá±á¬ááºážááá¯áá»ááºáááºáá»áŸáá¯ááºáá±á¬ááºááá¯ááºááááºážá
- ááá¯ááŸá±á¬ááºááŸá¯á áá áºáá»á¬ážá áááºážááá¯á·ááẠáá¯á¶á·ááŒááºááŸá¯ ááŒá¬ááŒáá·áºáá»áááºá áááŸáááá¯ááºááŸá¯ááŸáá·áº áá¬ááŸááºáá¶ááŸá¯ááᯠáááºááá¯ážáá¬ážááŒáááºá áááºá ááºáá±ážááœááºážáá»á¬áž- á¡áá»ááºá¡áááºáááºááẠááá¯á·ááá¯áẠáá±ážáá¬ážááẠá¡áá»áááºáááºáá»áŸááŒá¬ááááºážá áá±á¬ááºážááá¯áá»ááºá¡á áá±áá¬ááᯠáá»áœááºá¯ááºááá¯á· ááá°ááá¯ááºáá«ááá¬ážá áá»áœááºá¯ááºááá¯á· ááá¯á¡ááºáá»áááºááœáẠáá±áá¬áááŸáááá¯ááºáá«ááá¬ážá á¡áááºáž 26 áá±áᬠááá¯ááºáá¬ááŸá¯ááᯠááŒáá·áºáá«- á€ááŒá¿áá¬áá»á¬ážááᯠá¡áá±ážá áááºááœá±ážááœá±ážáááºá¡ááœáẠáááºáááºáá±á¬á¡áá¬ááẠáááºáá±ážáá¬ážááá·áºá¡áá¬ááŒá áºáááºá
- áá±áá¬áá¯ááºáá±á¬ááºááŒááºáž ááá¯ááºááá¯ááºážáá»á¬ážáá²á·ááá¯á·áá±á¬ ááŒá®ážáá¬ážáá±á¬áá±áá¬á áá áºáá»á¬ážááẠááŒááºáááºážáá±ážááá¯á·ááŸá¯ááŸáá·áº áá±ážááŒááºážááŸá¯áá¯ááºáá±á¬ááºááŒááºáž áá¯á¶á·ááŒááºáá±áá»áááºá¡áá±á«áº áá°áááºáááºá áááºá ááºáá±ážááœááºážáá»á¬áž- áá±áá¬áááºáá»áŸ á á®áá¶áá±á¬ááºááœááºááẠá áá±á¬ááºážááá¯áá»ááºáá áºáá¯áááºáá¶áááŸáá០áá¯á¶á·ááŒááºáá»ááºáá¯ááºáá±ážááá·áºá¡áá áá±áá¬ááá®ážááœááºááẠá¡áá»áááºáááºáá»áŸááŒá¬ááááºážá (á áá áºáá¡áá»áá¯á·á¡á áááºá¡ááá¯ááºážáá»á¬ážááẠá¡áá»áá¯á·áá±á¬á¡ááá·áºáá»á¬ážááœáẠááŸá±á¬áá·áºááŸá±ážááŸá¯áá»á¬ážááŸáááá¯ááºáááºá)
ááœáŸááºážááááºážáá»á¬áž á á¯á ááºážááŸá¯
Borgmon áá²á·ááá¯á·áá±á¬ á á±á¬áá·áºááŒáá·áºáá±ážá áá áºá¡á¬áž á¡áá¯á¶ážááŒá¯á áááºáá±á¬ááºááŸá¯á¡ááá·áºááœáŸááºážááááºážá¡áá»á¬ážá¡ááŒá¬ážááᯠáá¬áá¬áááºááœáẠááá¬áá¡ááá¯ááºáž á á¯áá±á¬ááºážáá¬ážááẠ(á¡á±á¬ááºááœááºááŒáá·áºáá«)á ) ááá¯á·ááá¯áẠPrometheus ááá¯á·ááá¯áẠááŸááºáááºážáá»á¬ážááᯠá¡áá»áááºá¡áá«á¡ááá¯áẠááœá²ááŒááºážá áááºááŒá¬ááŒááºážááŒáá·áº HTTP áá¯á¶á·ááŒááºááŸá¯áá»á¬ážááᯠstatus 500 ááŒáá·áº ááœá²ááŒá¬ážáááºááŸááºááŒááºáž ááŒá áºáááºá ááá¯á·áá±á¬áº á¡áá»áá¯á·áá±á¬á áá áºáá»á¬ážááẠclient-side áááºááá áºáá»á¬áž á á¯á ááºážááŸá¯ááŒáá·áº áááºáááºáá¬ážááá·áºáááºá á¡áááºááŒá±á¬áá·áºááá¯áá±á¬áº client-side monitoring áááŸáááŒááºážááẠáááºáá±á¬ááºááŸá¯ááŸááá±á¬ ááŒá¿áá¬áá»á¬ážá áœá¬ááᯠááœá²ááŸá¬ážááœá¬ážá á±ááá¯ááºáááºá á¡áá¯á¶ážááŒá¯áá°áá»á¬ážá ááá¯á·áá±á¬áº server-side metrics ááá¯áááááá¯ááºá á±áá«á á¥ááá¬á¡á¬ážááŒáá·áºá áá»áœááºá¯ááºááá¯á·á Shakespeare ááŸá¬ááœá±ááŸá¯á ááºážáááºááŸá¯á¡ááá®áá±ážááŸááºážá áá±á¬ááºááœááºááŸáá¯á¶á·ááŒááºááŸá¯ááŒá¬áá»áááºááᯠá¡á¬áá¯á¶á áá¯ááºááŒááºážááẠJavaScript ááŒá¿áá¬áá»á¬ážááŒá±á¬áá·áº áá¯á¶ážá áœá²áá°áááºááœáẠlatency ááŒá áºáá±á«áºá á±ááá¯ááºáááº- á€á¡ááŒá±á¡áá±ááœááºá á á¬áá»ááºááŸá¬ááá¯áá¯ááºáá±á¬ááºááẠááá±á¬ááºáá¬á á¡áá»áááºáááºáá»áŸááŒá¬ááŒá±á¬ááºáž ááá¯ááºážáá¬ááŒááºážááẠááá¯ááá¯áá±á¬ááºážááœááºáá±á¬áááºááá áºááŒá áºáááºá
á á¯á ááºážááŸá¯
ááá¯ážááŸááºážááŒá®áž á¡áá¯á¶ážááŒá¯áááœááºáá°á á±áááºá¡ááœááºá áá»áœááºá¯ááºááá¯á·ááẠá¡ááŒááºážááá¯ááºážáá¬ááŸá¯áá»á¬ážááᯠáááŒá¬áá á á¯á ááºážáá¬ážáááºá áá«ááᯠááá¯áá áá¯ááºáá¯ááºááááºá
á¡áá»áá¯á·áá±á¬ áááºááá áºáá»á¬ážááẠáá áºá áá¹ááá·áºáá»áŸáẠáá±á¬ááºážááá¯ááŸá¯áá»á¬ážáá²á·ááá¯á· ááá¯ážááŸááºážáá¯á¶ááá±á¬áºáááºážá á€áá²á·ááá¯á· ááá¯ážááŸááºážáá±á¬ ááá¯ááºážáá¬ááŸá¯áááºáá»áŸáẠá¡áá»áááºááŒá¬áá¬áááºááŸáá·áºá¡áá»áŸ áá±áá¬ááᯠááœááºááá¯ááºá áœá¬ á á¯á ááºážáá¬ážáááºá ááá¯ááºážáá¬ááŸá¯ááᯠáá áºá áá¹ááá·áºáá»áŸáẠáá áºááŒáááºáááá áááºáá¶áááŸáááŒááºážáá±á¬ ááá¯á·ááá¯áẠááá¯ááºážáá¬ááŸá¯ááẠáá áºáááá áºáá»áŸáẠáá±á¬ááºážááá¯ááŸá¯á¡áá±á¡ááœááºááẠáá»ááºážáá»áŸááŸááá«ááá¬ážá áá±á¬ááºáá¯á¶ážááœá±ážáá»ááºááŸá¯ááẠá áá¹ááá·áºá¡áááºážáááºáá»áŸáá¬ááŒá¬ááá·áº á¡ááœááºááŒáá·áºáá¬ážáá±á¬ áá»ááºáá»ááºážáá±á¬ááºážááá¯ááŸá¯á¡áá±á¡ááœááºááᯠáá»á±á¬ááºáá¬ážááá¯ááºáááºá áá áºá áá¹ááá·áºáá»áŸáẠáá±á¬ááºážááá¯ááŸá¯ 200 ááᯠááááºážááááºážáá»á¬ážááŸáá·áº 0 áá»ááºá¡áá»áááºáá»á¬ážááœáẠáá±á¬ááºááœááºáá±ážááá·áºá áá áºááᯠáá¯á¶ážáááºááŒáá·áºáá«á áá áºá áá¹ááá·áºáá»áŸáẠáá±á¬ááºážááá¯áá»áẠ100 á áá»ááºážáá»áŸáááºááá¯ážá ááááºážáá±áá¯á¶á á¶ááŸáá·áº áá»ááºááŒááºážáááºáá»ááºááŸá áºáááẠáá°áá®áá±á¬á¡áá¬ááá¯ááºáá«á á¡áá¬ážáá°á áá»ááºážáá»áŸáá±ážááŒááºážááŸá¯ latencies áá»á¬ážááẠááœá²áá±á¬ááºááŸá¯ááŸááááºáᯠáááºááá±á¬áºáááºáž áááºážááẠá¡áá±ážááŒá®ážáá±á¬á¡áá±ážá áááºá¡áá»ááºá¡áááºáá»á¬ážááᯠáá¯á¶ážááœááºáá¬ážááá¯ááºáááº- á á¯á¶á ááºážáá±ážááŒááºážááŸá¯á¡áá»á¬ážá á¯ááẠááŒááºáááºáááá·áºáááºá ááá¯á·áá±á¬áº ááŸá±ážááœá±ážáá±á¬áá±ážááœááºážáá»á¬ážá áœá¬áááºáž ááŸááááá·áºáááºá
á¡ááœáŸááºážá¡áá»á¬ážá á¯ááᯠáá»ááºážáá»áŸáá»á¬ážááẠááŒáá·áºááŒá°ážááŸá¯á¡ááŒá ẠááŸá¯ááŒááºáááºá á¥ááá¬á¡á¬ážááŒáá·áºá SLI latency á¡ááœááºá á¡áá»áá¯á·áá±á¬ áá±á¬ááºážááá¯ááŸá¯áá»á¬ážááẠáá»ááºááŒááºá áœá¬ áá¯ááºáá±á¬ááºááá¯ááºáááºááŒá áºááŒá®áž á¡áá»áá¯á·ááŸá¬ á¡ááŒá²áááºáž ááá¯ááŒá¬áááºááŒá áºááŒá®áž áá áºáá«áá áºáá¶ááœáẠááá¯áááŒá¬áá«áááºá ááá¯ážááŸááºážáá±á¬áá»ááºážáá»áŸááẠá€ááŸááºáá»á¬ážááŸá±á¬áá·áºááŸá±ážááŸá¯áá»á¬ážááᯠáá¯á¶ážááœááºáá¬ážááá¯ááºáááºá áá¯á¶ááœááºá¥ááá¬áá áºáá¯ááŒáááº- áá¯á¶ááŸááºáá±á¬ááºážááá¯áá»ááºáá áºáá¯ááẠ50 ms ááá·áºááŒá¬áá±á¬áºáááºáž áá±á¬ááºážááá¯ááŸá¯áá»á¬ážá 5% ááẠá¡á 20 ááá¯ááŸá±ážáááºá áá»ááºážáá»áŸ latency áá±á«áºá¡ááŒá±áá¶á á á±á¬áá·áºááŒáá·áºááŒááºážááŸáá·áº ááááá±ážááŒááºážáá»á¬ážááẠá¡áá»áá¯á·áá±á¬áá±á¬ááºážááá¯ááŸá¯áá»á¬áž (ááááºáá¯á¶ážááá¯ááºáž) ááá¯ááºáá±á¬ááºáá»áááºá¡ááœááºáž áááá¬áááºááŸá¬ážáá±á¬ááŒá±á¬ááºážáá²ááŸá¯áá»á¬ážááŸááá±á¬á¡áá«ááœáẠáá áºáá±á·áá¬áá¯á¶ážááœáẠá¡ááŒá¯á¡áá°ááŒá±á¬ááºážáá²ááŸá¯áá»á¬ážááᯠáááŒááá«á
50á 85á 95á ááŸáá·áº 99 áá¬ááá¯ááºááŸá¯ááºážá
áá
Ạáá¯á¶á·ááŒááºáá»áááºá Y áááºááá¯ážááẠáá±á¬á·ááá
áºáááºáá±á¬áºáááºááŒá
áºáááºá
ááœáŸááºááááºážáá»á¬ážá¡ááœáẠpercentiles ááá¯á¡áá¯á¶ážááŒá¯ááŒááºážááŒáá·áº ááŒáá·áºááŒá°ážáá¯á¶ááá¹áá¬ááºááŸáá·áº áááºážááááá±áááá¹ááá¬áá»á¬ážááᯠááŒááºááá¯ááºá á±áááº- 99 ááá¯á·ááá¯áẠ99,9 áá²á·ááá¯á·áá±á¬ ááŒáá·áºáá¬ážáá±á¬ áá¬ááá¯ááºááŸá¯ááºážá¡ááá·áºááẠá¡ááá¯ážáá¯á¶ážáááºááá¯ážááá¯ááŒáááŒá®áž 50 áá¬ááá¯ááºááŸá¯ááºáž (á¡áááºá¡áááºáá¯áááºážáá±á«áºáááº) ááẠá¡áááŒá¬áááá¯á¶ážá¡ááŒá±á¡áá±ááá¯ááŒááááºá áááºááá áºá áá¯á¶á·ááŒááºááŸá¯á¡áá»áááºááœá¬áááŸá¯ ááá¯áá»á¬ážáá±á áá±ááŸááºáá±á¬ááºážááá¯ááŸá¯áá»á¬ážááẠáá¯á¶ážá áœá²áá°á¡ááœá±á·á¡ááŒá¯á¶ááᯠáááºáá±á¬ááºááŸá¯ááŸááá±ááŒá áºáááºá ááŒáá·áºáá¬ážáá±á¬áááºááŸáá·áº á á®áááºážáá»á¬ážááŸá±á·ááœáẠá¡áá»áá¯ážáááºáá±á¬ááºááŸá¯ááᯠááŒáŸáá·áºáááºáá¬ážáááºá á¡áá¯á¶ážááŒá¯áá°á¡ááœá±á·á¡ááŒá¯á¶ áá¯áá±ááááŒá¯áá»ááºáá»á¬ážá¡á áá°áá»á¬ážááẠáá¯á¶á·ááŒááºááŸá¯á¡áá»áááºááœá¬ááŒá¬ážáá»ááºááŒáá·áºáá¬ážáá±á¬ ááŸá±ážááœá±ážáá±á¬á áá áºá¡á¬áž áá±áá°áá»á¡á¬ážááŒáá·áº ááŸá áºáááºááŒáááºá ááá¯á·ááŒá±á¬áá·áº á¡áá»áá¯á·áá±á¬ SRE á¡ááœá²á·áá»á¬ážááẠáá¬ááá¯ááºááŸá¯ááºážááŒáá·áºáá¬ážáá±á¬áááŸááºáá»á¬ážáá±á«áºááœááºáᬠá¡á¬áá¯á¶á áá¯ááºááŒáááºá á¡áááºá áááºááá áºá 99,9 áá¬ááá¯ááºááŸá¯ááºážááẠáá±á¬ááºážááœááºáá«áá á¡áá¯á¶ážááŒá¯áá°á¡áá»á¬ážá á¯ááẠááŒá¿áá¬áá»á¬ážááŒá¯á¶ááœá±á·ááááá·áºáááºááá¯ááºáá±á .
ááááºážááááºážá¡ááŸá¬ážáá»á¬ážááᯠáááááŒá¯áá«á
áá±áá°áá»á¡á¬ážááŒáá·áº áá»áœááºá¯ááºááá¯á·ááẠáááºááá¯ážá¡á á¯áá áºáá¯á áá»ááºážáá»áŸ (ááááºážáááºá¹áá»á¬áá»ááºážáá»áŸ) ááẠáá¬ááá¯ááºááŸá¯ááºážá¡áá»á¬ážá¡á¬ážááŒáá·áº á¡áá¯ááºáá¯ááºááŒááºážááᯠááá¯ááŸá áºáááºáá«áááºá áááºážááẠáá»áœááºá¯ááºááá¯á·á¡á¬áž áá»ááºážáá»áŸááẠáááááá¬áá¬ááœá²ááŒá¬ážáá±á¬ (ááá¯ááá¯á áááºáááºá á¬ážá áá¬áá±á¬ááºážáá±á¬) áááá±áááá¹ááá¬áá»á¬áž ááŸááá±á·ááŸáááá·áº ááœá²ááœá¬áá±áá±á¬áááºááá¯ážáá»á¬ážááᯠááá¯ááá¯ááá·áºááœááºážá ááºážá á¬ážááá¯ááºá á±áá«áááºá ááœááºááŒá°áá¬á áá áºáá»á¬ážá á¡áá¯á¡áá±á¬ááºááá±á¬ááá¬áááŒá±á¬áá·áºá áááºááá áºáááºááá¯ážáá»á¬ážááᯠáááŒá¬áá ááŸáá·áºá á¬ážáááºáááºá á¥ááá¬á áááºááá·áºáá±á¬ááºážááá¯áá»ááºá០0 ms áááºáááºážáá±á¬ áá¯á¶á·ááŒááºááŸá¯ááᯠááááŸáááá¯ááºáááá¯á 1000 ms á á¡áá»áááºááœááºááŒááºážááẠáááºááá¯ážááá¯ááŒá®ážáá±á¬ á¡á±á¬ááºááŒááºáá±á¬áá¯á¶á·ááŒááºááŸá¯áá»á¬ážááᯠááááŸáááá¯ááºááŒá±á¬ááºáž ááá¯ááá¯áááºá á¡áá»áááºáá¯ááºáá¬ááẠááááºá¡áá±ááŸáá·áºá áá»ááºážáá»áŸááŸáá·áº á¡áááºáááºážááẠáá°áá®ááá¯ááºááẠááá¯á·ááá¯áẠáá áºáá¯ááŸáá·áºáá áºáᯠáá®ážá ááºááá¯ááºáááºááᯠáá»áœááºá¯ááºááá¯á· áááºááá¶ááá¯ááºáá«á
ááŒáá¯áááºá ááºážáááºááŒááºážáááŸááá²á á¡áá»áá¯á·áá±á¬ á á¶áá°ááá»ááºáá»á¬ážááŸáá·áº á¡áá®ážá ááºáá¯á¶ážá¡áá»ááºáá»á¬áž áááááºážáá¬ážáá«áá áá»áœááºá¯ááºááá¯á·ááá±áá¬áá»á¬ážááᯠáá¯á¶ááŸááºá¡ááá¯ááºážááŒáá·áºáá±áá±ááŒá±á¬ááºáž áá±á¬ááºáá»ááºááá»ááá á±ááẠááááá¬ážáá«á ááŒáá·áºáá±ááŸá¯ááẠáá»áŸá±á¬áºááá·áºáá¬ážááá·áºá¡ááá¯ááºážááá¯ááºáá«áá ááŒá¿áá¬ááᯠááŒá±ááŸááºážáá±ážááá·áº á¡ááá¯á¡áá»á±á¬ááºá áá Ạáá¯ááºáááºážá áẠ(á¥ááá¬á á¡á áœááºážá¡áááºážáá»á¬ážááᯠááŒááºáá±á¬á¡áá«á áááºážááẠááŒáá·áºáá¬ážáá±á¬ áá±á¬ááºážááá¯ááŸá¯áá¯ááºáá±á¬ááºááŒááºáž latencies ááŒáá·áº áá¬áá¬ááᯠááŒááºáááºá áááºáááº) áááºážááᯠáááŒá¬áááá¯ááºáá±á¬ááºááŒááºáž ááá¯á·ááá¯áẠáááŒá¬áá ááá¯á¶áá±á¬ááºááŒááºáž (ááá¯ááŸá áºáá¯á áá¯á¶ážááẠááá¯á¶áá±á¬ááºáá«á á¡ááœááºáá±á¬ááºážáááº)á
á¡ááœáŸááºážáá»á¬ážááᯠá á¶áááºááŸááºáá«á
SLI á¡ááœáẠáá±áá°áá»áááá±áááá¹ááá¬áá»á¬ážááᯠá á¶áááºááŸááºááẠáá»áœááºá¯ááºááá¯á· á¡ááŒá¶ááŒá¯áá¬ážáá±á¬ááŒá±á¬áá·áº áááºážááá¯á·á¡ááŒá±á¬ááºážááᯠá¡áá»áááºááá¯ááºáž ááŸááºážááá±ááẠáááá¯á¡ááºáá«á á á¶áá¯á¶á á¶áá»á¬ážááᯠáá»á±áááºá á±áá±á¬ áááºááá·áºá¡ááºá¹áá«áááºááá¯áááᯠSLI áá áºáá¯áá»ááºážá á®á áááºááŸááºáá»ááºáá»á¬ážá០áááºáá¯ááºááá¯ááºáááºá á¥ááá¬-
- á á¯á ááºážááŸá¯ááŒá¬ážáá¬ááá»á¬áž- "áá»ááºážáá»áŸ á áááá áºáá»á±á¬áº"
- á á¯á ááºážááŸá¯áááºáááºáá»á¬áž- "á¡á á¯á¡áá±ážááŸá á¡áá¯ááºáá»á¬ážá¡á¬ážáá¯á¶áž"
- ááá¯ááºážáá¬ááŸá¯ áááºáá»áŸááŒá¬áááº- "10 á áá¹ááá·áºááá¯ááºáž"
- áá±á¬ááºážááá¯áá»ááºáá»á¬ážáá«áááºáááº- "HTTP GET from black box monitoring jobs"
- áá±áá¬ááá°áá¯á¶- "áá¬áá¬áá±á«áºááœáẠááá¯ááºážáá¬áá±á¬ áá»áœááºá¯ááºááá¯á·á á á±á¬áá·áºááŒáá·áºááŸá¯á¡á¬áž áá»á±ážáá°ážáááºááŸááá«áááº"
- áá±áá¬áááºáá±á¬ááºáá»áááºááŒá¬áá»áááº- "áá±á¬ááºáá¯á¶ážááá¯ááºá¡áá»áááº"
á¡á¬ážáá¯ááºááŸá¯ááᯠáááºáá¬á á±áááºá áá¯á¶áááºááá áºáá áºáá¯á á®á¡ááœáẠááŒááºáá¯á¶ážááá¯ááºáá±á¬ SLI ááá°áá¬áá¯á¶á á¶á¡á á¯á¶ááᯠáááºáá®ážáá«á á¡áá»áá¯á·áá±á¬ SLI á á¡áááá¹áá«ááºááᯠáá°ááá¯ááºážáá¬ážáááºá á±áááºáááºáž áááºážááá¯á·á ááá¯ááá¯ááœááºáá°á á±áááºá
áááºááœá±á·áááºážááá¯ááºáá»á¬áž
áááºááá¯ááºážáá¬ááá¯ááºáá±á¬ á¡áá¬ááá¯ááºáá² ááá·áºá¡áá¯á¶ážááŒá¯áá°áá»á¬áž á¡á¬áá¯á¶á áá¯ááºáá±á¬á¡áá¬ááᯠááŸá¬ááœá±ááŒááºáž (ááá¯á·ááá¯ááº) ááŸá¬ááœá±ááŒááºážááŒáá·áº á áááºáá«á áááŒá¬ááááá¯áááᯠááá·áºá¡áá¯á¶ážááŒá¯áá°áá»á¬áž á¡áá±ážáá¬ážáá±á¬á¡áá¬ááẠáááºáá²ááẠááá¯á·ááá¯áẠááá¯ááºážáá¬ááẠáááŒá áºááá¯ááºáá±á¬ááŒá±á¬áá·áº áááºááẠáááºážááá¯á·áááá¯á¡ááºáá»ááºáá»á¬ážááŸáá·áº ááá¯ááá¯áá®ážáááºáá¬á á±áááºá ááá¯á·áá±á¬áºá ááá¯ááºážáá¬ááẠááœááºáá°áá±á¬á¡áá¬ááŒáá·áº á áááºáá«áá á¡áá¯á¶ážáááºážáá±á¬ SLO áá»á¬ážááŒáá·áº á¡áá¯á¶ážáááºáááºááŒá áºáááºá ááááºá¡áá±ááŒáá·áºá ááá¯áá»ááºáá±á¬áááºážááá¯ááºáá»á¬ážááᯠáááŠážáá±á¬áºáá¯ááºááŒá®ážáá±á¬áẠáááá»áá±á¬ááœáŸááºážááááºážáá»á¬ážááŸáá·áºáá¯ááºáá±á¬ááºááŒááºážááẠááœáŸááºážááááºážáá»á¬ážááá¯ááœá±ážáá»ááºááŒá®ážáá±á¬áẠáááºážááá¯ááºáá»á¬ážá¡á±á¬ááºááŒááºááŒááºážááẠááá¯ááá¯áá±á¬ááºážááœááºááŒá±á¬ááºáž áá áºáá«áá áºáᶠáá»áœááºá¯ááºááá¯á·ááœá±á·ááŸááá²á·áá«áááºá
áááºážááá¯ááºáááºááŸááºáá«
á¡ááŒáá·áºáá¯á¶ážááŸááºážáááºážááŸá¯á¡ááœááºá SLO áá»á¬ážááᯠáááºáá²á·ááá¯á·ááá¯ááºážáá¬ááŒá±á¬ááºážááŸáá·áº áááºážááá¯á·ááẠááá¬ážáááºááá·áºá¡ááŒá±á¡áá±áá»á¬ážááᯠáááºááŸááºááá·áºáááºá á¥ááá¬á¡á¬ážááŒáá·áºá áá»áœááºá¯ááºááá¯á·ááẠá¡á±á¬ááºáá«ááá¯á·ááᯠááŒá±á¬ááá¯ááºááẠ(áá¯áááá á¬ááŒá±á¬ááºážááẠáááááŸáá·áºáá°áá±á¬áºáááºáž SLI áá¯á¶áá±áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯áááº)
- Get RPC áá±á«áºááá¯ááŸá¯áá»á¬ážá 99% (áá»ááºážáá»áŸá¡á¬ážááŒáá·áº 1 áááá áºáá»á±á¬áº) ááẠ100ms áááºáááºážáá±á¬ (áá±á¬ááºááœááºááŸááá¬áá¬áá»á¬ážá¡á¬ážáá¯á¶ážááœáẠááá¯ááºážáá¬áááº)á
- Get RPC áá±á«áºááá¯ááŸá¯áá»á¬ážá 99% ááẠ100ms áááºáááºážáá±á¬á¡áá»áááºá¡ááœááºáž á¡ááŒá®ážáááºáá«áááºá
á áœááºážáá±á¬ááºááẠáá»ááºážááœá±ážáá»á¬ážá áá¯á¶ááá¹áá¬ááºááẠá¡áá±ážááŒá®ážáá«áá SLO á¡áá»á¬ážá¡ááŒá¬ážááᯠááẠáááºááŸááºááá¯ááºáááº-
- RPC áá±á«áºááá¯ááŸá¯áá»á¬ážá 90% ááẠ1 ms áááºáááºážá ááŒá®ážááŒá±á¬ááºáááºá
- RPC áá±á«áºááá¯ááŸá¯áá»á¬ážá 99% ááẠ10 ms áááºáááºážá ááŒá®ážááŒá±á¬ááºáááºá
- RPC áá±á«áºááá¯ááŸá¯áá»á¬ážá 99.9% ááẠ100 ms áááºáááºážá ááŒá®ážááŒá±á¬ááºáááºá
á¡áááºá ááá·áºá¡áá¯á¶ážááŒá¯áá°áá»á¬ážááẠááœá²ááŒá¬ážáá±á¬á¡áá¯ááºáááºáá»á¬ážááᯠáá¯ááºáá±ážáááº- á¡á á¯ááá¯ááºáá¯ááºáá±á¬ááºááŒááºáž (ááá¯á¡ááœááºááŒá±á¬áá·áº á¡áá±ážááŒá®ážáááº) ááŸáá·áº á¡ááŒááºá¡ááŸááºáá¯ááºáá±á¬ááºááŒááºáž (latency ááẠá¡áá±ážááŒá®ážáááº)á áááºážááẠload class áá áºáá¯á á®á¡ááœáẠáá®ážááŒá¬ážáááºážááá¯ááºáá»á¬ážááᯠáááºááŸááºááẠáááºááá¯ážááŸáááá¯ááºáááº-
- áá±á¬ááºáááºáá±á¬ááºážááá¯ááŸá¯áá»á¬ážá 95% ááẠááŒááºáááºážááŸá¯ááá¯á¡ááºáááºá áá¯ááºáá±á¬ááºáá²á·áá±á¬ RPC áá±á«áºááá¯ááŸá¯á¡áá±á¡ááœáẠ<1 s ááᯠáááºááŸááºáá«á
- áá±á¬ááºáááºáá»á¬ážá 99% ááẠlatency ááᯠááá¯á áá¯ááºáááºá á¡ááœá¬ážá¡áᬠ<1 KB ááŸáá·áº <10 ms ááŒáá·áº RPC áá±á«áºááá¯ááŸá¯á¡áá±á¡ááœááºááᯠáááºááŸááºáá«á
SLO áá»á¬ážááᯠá¡áá»áááºá 100% ááŒáá·áºáá®áááºáᯠá¡ááá¯ááºá¡áá¬ááŒá±á¬ááá¯ááŒááºážááẠáááºááœá±á·ááá»áá² áááá¯áá¬ážá¡ááºáá±á¬á¡áá»ááºááŒá áºáááº- áááºážááẠáá¯ááºáá±á¬ááºáá»ááºá¡áá áºáá»á¬ážááŸáá·áº ááŒáá·áºáá»ááºááŸá¯á¡ááŸáááºááᯠáá»áŸá±á¬á·áá»ááá¯ááºááŒá®áž á á»á±ážááŒá®ážáá±á¬ááŒá±ááŸááºážáááºážáá»á¬áž ááá¯á¡ááºáá«áááºá áááºážá¡á á¬ážá á¡ááŸá¬ážá¡ááœááºážáááºáá»ááº- á áá áºáááºááá¯ááºážááŸá¯ááœáá·áºááŒá¯ááá·áºáá¬ááá¯ááºááŸá¯ááºáž- ááŸáá·áº á€áááºááá¯ážááᯠáá±á·á áẠááá¯á·ááá¯áẠá¡áááºá áẠá á±á¬áá·áºááŒáá·áºá á áºáá±ážááŒááºážááẠááá¯áá±á¬ááºážáááºá á¡ááŒá®ážáááºážá á®áá¶ááá·áºááœá²ááŸá¯ááẠáá áẠááá¯á·ááá¯áẠáá¯á¶ážááá áºááŒááẠá¡áá²ááŒááºááŸá¯áá»á¬áž ááŒá¯áá¯ááºááá¯áá±áááºá (á¡ááŸá¬ážáááºáá»ááºááẠá¡ááŒá¬áž SLO ááŸáá·áº ááŸáá¯ááºážááŸááºáááºá¡ááœáẠááá¯ážááá¯ážááŸááºážááŸááºáž SLO áá áºáá¯ááŒá áºáááºá)
SLO áá»áá¯ážáá±á¬ááºááŸá¯áá¬ááá¯ááºááŸá¯ááºážááᯠá¡ááŸá¬ážá¡ááœááºážáááºáá»ááºááŸáá·áº ááŸáá¯ááºážááŸááºááá¯ááºááẠ(á¡áááºáž 3 ááŸáá·áº á¡ááá¯ááºážááá¯ááŒáá·áºáá« ) á¡áá áºááœááºááŸáááá·áºá¡áá»áááºááᯠáááºááŸááºáá±ážááá·áº áá¯ááºáááºážá ááºááœáẠááá·áºááœááºážááŸá¯á¡ááŒá Ạá¡áá¯á¶ážááŒá¯ááá·áº ááœá¬ááŒá¬ážáá»ááºáááºááá¯ážááŸáá·áºá
áá áºááŸááºáááºááá¯ážáá»á¬ážááᯠááœá±ážáá»ááºááŒááºážá
á á®áá¶ááááºážáááºááá¯ážáá»á¬áž (SLOs) ááᯠááœá±ážáá»ááºááŒááºážááẠááœá±ážáá»ááºáá¬ážáá±á¬ SLIsá SLOs (ááŸáá·áº ááŒá áºááá¯ááºáá±á¬ SLAs) áá»á¬ážááœáẠáááºáááºá á±ááá·áº áá¯ááºáá¯ááºááŸáá·áº áá¯ááºáááºážááá¯ááºáᬠá¡áá»áá¯ážá á®ážááœá¬ážáá»á¬ážááŒá±á¬áá·áº áááºáááºáááºážááá¬ááá¯ááºáᬠáá¯ááºáá±á¬ááºáá»ááºááá¯ááºáá«á á¡áá¬ážáá°á áááºáááºážááá·áºá¡ááºááŸá¯á á á»á±ážááœááºá¡áá»áááºá á ááºáá á¹á ááºážáááŸáááá¯ááºááŸá¯ááŸáá·áº ááœá±ááŒá±ážááá¯ááºáá¬ááá á¹á áááºáá»á¬ážááŸáá·áºáááºáááºááá·áº á¡áá»ááºá¡áááºáá»á¬áž áááŸááºááẠááá¯á¡ááºáá«áááºá SRE ááẠá€á áá¬ážááá¯ááºážá áá áºá áááºáá áºááá¯ááºážááŒá áºááá·áºááŒá®áž ááá°áá®áá±á¬ááœá±ážáá»ááºááŸá¯áá»á¬ážá á¡áá¹ááá¬ááºáá»á¬ážááŸáá·áº ááŸááºáááºááá¯ááºá áœááºážááᯠáá¬ážáááºááẠáá°áá®áá±ážáá«á ááá¯ááá¯á¡áá»áá¯ážááŸááá±á¬ ááœá±ážááœá±ážááŸá¯ááᯠáá±áá»á¬á á±ááẠá¡áá±á¬ááºá¡áá°ááŒá áºá á±ááá·áº áá±ážááœááºážá¡áá»áá¯á·ááᯠáá»áœááºá¯ááºááá¯á· áá±á¬áºáá¯ááºáá¬ážáá«áááºá
áááºááŸáá
áœááºážáá±á¬ááºáááºá¡áá±á«áºá¡ááŒá±áá¶á áááºážááá¯ááºáá
áºáá¯ááᯠáááœá±ážáá»ááºáá«ááŸáá·áºá
á
áá
áºáá
áºáá¯á á¡á¬ážáá¬áá»ááºáá»á¬ážááŸáá·áº ááá·áºáááºáá»ááºáá»á¬ážááᯠáá¬ážáááºááẠá¡áá±ážááŒá®ážáá±á¬áºáááºážá á¡ááŒá±á¬ááºážááŒáá»ááºáááŸááá² áááºááá
áºáá»á¬ážááᯠááá¯ááºáá»á±á¬áá®ááœá±ááŒá
áºá¡á±á¬áẠááŒá¯áá¯ááºááŒááºážá ááá·áºá¡á¬áž á
áá
áºá¡á¬áž ááááºážááááºážááŒááºážá០áá¬ážáá®ážááá¯ááºáááº- áááá¬áááºááŸá¬ážáá±á¬ áá®ááá¯ááºážááœááºážáá¶ááŸá¯áááŸááá² áá¡á±á¬ááºááŒááºááá¯ááºáá±á¬ áááºááŸááºážáá»ááºáá»á¬ážá¡á±á¬ááºááŒááºááẠáá°áá²áá±á¬ááºážáááºááẠááŒáá¯ážáááºážááŸá¯áá»á¬áž ááá¯á¡ááºáááºááŒá
áºáá«áááºá
á¡á²á·áá¬ááá¯ááá¯ážááŸááºážá¡á±á¬ááºáá¬áž
ááŸá¯ááºááœá±ážáá±á¬ SLI ááœááºáá»ááºááŸá¯áá»á¬ážááẠá
áá
áºá
áœááºážáá±á¬ááºáááºááŒá±á¬ááºážáá²ááŸá¯áá»á¬ážááᯠáá¯á¶ážááœááºááá¯ááºááŒá®áž ááŒá¿áá¬áá¡ááŒá±á¬ááºážáááºážááᯠááŸá¬ááœá±ááẠááá¯ááá¯áááºáá²á
á±áááºá
áááá ááŸá±á¬ááºáá«á
latency ááá¯ážááŒáŸáá·áºááŒááºážáááŸááá² á¡ááá·áºá¡áááºáááŸá ááŒá®ážááœá¬ážáá¬áá±á¬áááºááᯠááá¯ááºááœááºááá¯ááºááá·áºá
áá
áºáá
áºáá¯ááŸáááẠááœá²áá±á¬ááºáá±áá±á¬áºáááºážá á€ááá¯á¡ááºáá»ááºááẠáááºááœá±á·ááá»áá«á ááá¯ááá¯á·áá±á¬á
á¶ááŸá¯ááºážáá»á¬ážááᯠáá»ááºážáááºááá·áºá
áá
áºááẠáá®ááá¯ááºážáá±ážááœá²áááºáá±á¬ááºááẠá¡áá»áááºáá»á¬ážá
áœá¬ ááá¯á¡ááºááá¯ááºááœááºááŸáááŒá®áž áááºáááºááẠá
á»á±ážááŒá®ážáááºááŒá
áºááŒá®áž áááºááá·áºá¡áá¬áááᯠáá»á±á¬á·áááºážá
á±ááá·áº áá¯á¶ážá
áœá²áá°áá»á¬ážá áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬ážá¡ááœáẠá¡ááœááºáá±á¬ááºážááœááºáááºááŒá
áºáááºá
SLO áá»á¬ážááᯠáááºááá¯ááºááá»áŸ á¡áááºážáááºáá¯á¶ážáá«á
á
áá
áºá¡áááºá¡ááœá±ážáá»á¬ážááᯠáá±á¬ááºážááœááºá
áœá¬ááœáŸááºážááŒá¯á¶áá±áá»á¬á
á±ááẠáá¯á¶áá±á¬ááºáá±á¬ SLO á¡áá±á¡ááœááºááᯠááœá±ážáá»ááºáá«á áááºááœá±ážáá»ááºáá±á¬ SLO áá»á¬ážááᯠáá¬ááœááºáá«- áááá»áá±á¬ SLO áá
áºáá¯ááᯠáááºááŸááºááŒááºážááŒáá·áº áŠážá
á¬ážáá±ážáá»á¬ážááŸáá·áºáááºáááºá á¡ááŒááºážá¡áá¯á¶áá
áºáá¯ááᯠáááºáá±á¬á¡áá«á០áá¡ááá¯ááºáá°ááá¯ááºáá«á SLO ááᯠááá·áºááœááºážá
ááºážá
á¬ážááẠáááá¯ááºáááºáá«á ááá¯á·áá±á¬áºá á
áá
áºá¡áááºá¡ááœá±ážá¡á¬ážáá¯á¶ážááẠSLO áá»á¬ážá¡ááœáẠá¡áááºááá·áºáááŒá
áºááá¯ááºáá«á SLOs áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯á áá¯á¶ážá
áœá²áá°ááŸá
áºáááºááŸá¯á¡ááá·áºááᯠááœááºáá»ááºááẠáááºáá²áááºá
ááŒá®ážááŒáá·áºá
á¯á¶ááŸá¯ááᯠáááá¯ááºáá«áá²á·á
á
áá
áºá áá¯ááºáá±á¬ááºáá»ááºá¡ááŒá±á¬ááºáž ááá¯ááá¯ááááŸááá¬áá±á¬á¡áá«ááœáẠáááºááẠá¡áá»áááºááŒá¬áá¬áááºááŸáá·áºá¡áá»áŸ SLO áá»á¬ážá á¡áááá¹áá«ááºááœáá·áºááá¯áá»ááºáá»á¬ážááŸáá·áº áááºážááá¯ááºáá»á¬ážááᯠá¡ááŒá²áááºáž ááŒá¯ááŒááºááá¯ááºáá«áááºá á¡áá»áááºááŒá¬áá¬áá¬áá²á·á¡áá»áŸ áááºááŒááºááŒááºáááá·áº áá»á±á¬áºááá·áºáá»ááºáááºážááá¯ááºáá
áºáá¯áá²á· á
áááºáá¬á ááááá¯ááºáá±á¬ááºá¡á±á¬áẠáááºážáá»ááºááœááºážáá²á· áááºážááá¯ááºáá
áºáá¯ááᯠááœá±ážáá»ááºááá¯á·ááẠáááºá áá¡á±á¬ááºááŒááºááá¯ááºáá°ážááá¯á· áááºááẠááŒá±áá»áŸá±á¬á·ááá¯ááºáá«á
SLO áá»á¬ážááẠáá¯á¶ážá áœá²áá°áá»á¬ážá¡ááœáẠá áá¯ážááááºáá°áááºááŸá¯ááᯠáá±á¬ááºááŒááºáááºáá±áá±á¬ááŒá±á¬áá·áº SRE áá»á¬ážááŸáá·áº áá¯ááºáá¯áẠdeveloper áá»á¬ážá¡ááœáẠá¡áá¯ááºááᯠáŠážá á¬ážáá±ážáá¯ááºáá±á¬ááºáá¬ááœáẠá¡ááááá±á¬á·áá»ááºááŒá áºááá·áºáá«áááºá áá±á¬ááºážáá±á¬ SLO ááẠááœá¶á·ááŒáá¯ážááá¯ážáááºáá±ážá¡ááœá²á·á¡ááœáẠá¡áá¯á¶ážáááºáá±á¬ ááŒáá¹áá¬ááºážáááááá¬áá áºáá¯ááŒá áºáááºá ááá¯á·áá±á¬áº áá¶á·áá»ááºážáá±á¬áá¯á¶á ᶠSLO ááẠá¡ááœá²á·ááẠá¡ááœááºááŒááºážáááºážáá±á¬ SLO ááá¯áááŸáááẠáá°áá²áá±á¬ááºážáááºá áœá¬ ááŒáá¯ážáááºážáá«á ááá¯á·ááá¯áẠSLO á¡ááœááºáááºážáá«á áá¶á·áá»ááºážáá±á¬áá¯ááºáá¯ááºáá áºáá¯ááŒá áºáá¬áá«á ááŒá¯ááºážáá®ážááŸá¯ááŒá áºá á±ááá¯ááºáááºá SLO ááẠá¡á¬ážáá±á¬ááºážáá±á¬ áá®áá¬ááŒá áºááŒá®áž áááºážááᯠááá¬ááŸáááŸá á¡áá¯á¶ážááŒá¯áá«á
áááºáááá¯ááºážáá¬ááŸá¯áá»á¬ážááᯠááááºážáá»á¯ááºáá«á
SLI ááŸáá·áº SLO ááá¯á·ááẠá áá áºáá»á¬ážááᯠá á®áá¶ááá·áºááœá²áá¬ááœáẠá¡áá¯á¶ážááŒá¯ááá·áº á¡ááá á¡á áááºá¡ááá¯ááºážáá»á¬ážááŒá áºáááº-
- SLI á áá áºáá»á¬ážááᯠá á±á¬áá·áºááŒáá·áºááŒá®áž ááá¯ááºážáá¬áá«á
- SLI ááᯠSLO ááŸáá·áº ááŸáá¯ááºážááŸááºááŒá®áž áá¯ááºáá±á¬ááºááẠááá¯á¡ááºááá¬áž áá¯á¶ážááŒááºáá«á
- áá¯ááºáá±á¬ááºááẠááá¯á¡ááºáá«á áááºážááá¯ááºáá±á¬ááºááẠáá¬ááœá± ááá¯á¡ááºáááºááᯠá¡ááŒá±ááŸá¬áá«á
- á€áá¯ááºáá±á¬ááºáá»ááºááᯠá¡ááŒá®ážáááºáá«á
á¥ááá¬á¡á¬ážááŒáá·áºá á¡ááá·áº 2 ááœáẠáá±á¬ááºážááá¯áá»ááºááẠá¡áá»áááºáá¯ááºáá¯á¶ážáá±ááŒá±á¬ááºážááŒáááŒá®áž áá¬ááŸááá¯ááºáá«á áá¬áá®á¡áááºážáááºá¡ááœááºáž SLO ááᯠáá»áá¯ážáá»ááºáááºááá¯áá«áá á¡ááá·áº 3 ááœáẠáá¬áá¬áá»á¬ážááẠCPU áá»ááºááŸá±á¬ááºáá¬ážáááºáá°áá±á¬ áá°ááá»ááºááᯠá ááºážáááºááŒááºážááŸáá·áº áá¬áá¬áá»á¬ážáááºááá·áºááŒááºážááẠáááºááᯠááŒáá·áºáá±áá±ážáááºááŒá áºáááºá SLO áááŸááá»áŸáẠ(ááá¯á·ááá¯ááº) áááºááá·áºá¡áá»áááºááœáẠá¡áá±ážáá°ááááºááᯠáááºáááááá¯ááºáá«á
SLO áááºááŸááºáá« - ááá¯á·áá±á¬áẠá¡áá¯á¶ážááŒá¯áá°áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬ážááᯠáááºááŸááºáá±ážáá«áááºá
SLO áá¯ááºáá±ááŒááºážááẠá
áá
áºá¡áá°á¡áá»áá·áºá¡ááœáẠá¡áá¯á¶ážááŒá¯áá°áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬ážááᯠáááºááŸááºáá±ážáááºá á¡áá¯á¶ážááŒá¯áá°áá»á¬áž (ááŸáá·áº ááŒá
áºááá¯ááºáá»á±ááŸááá±á¬ á¡áá¯á¶ážááŒá¯áá°áá»á¬áž) ááẠá¡áá¯á¶ážááŒá¯ááẠááá·áºáá»á±á¬áºááŸá¯ ááŸááááŸá áá¬ážáááºááẠáááºáá±á¬ááºááŸá¯áá
áºáá¯áá¶á០áá¬ááᯠáá»áŸá±á¬áºááá·áºááááºááᯠáááŒá¬áá áááá»ááºááŒáááºá á¥ááá¬á¡á¬ážááŒáá·áºá áá¬ááºáá¯á¶áá»áŸáá±ááŒááºážáááºááá¯ááºááᯠá¡áá¯á¶ážááŒá¯ááá¯áá°áá»á¬ážááẠááá¯ááŸá±á¬ááºááŸá¯ááŸááºáááºážá
á®áá¶ááá·áºááœá²ááŸá¯á
áá
áºá¡ááœáẠá
á¶ááŒááŒá
áºááá¯ááºáá±á¬áºáááºáž áááºáá±á¬ááºááŸá¯áá
áºáá¯áááºážááẠááá¯ááŸá±á¬ááºááŸá¯ááŸááºáááºážá
á®áá¶ááá·áºááœá²ááŸá¯á
áá
áºá¡ááœáẠá
á¶ááŒááŒá
áºááá¯ááºáá±á¬áºáááºáž á¡áááºááŸááºááŸá¯ááŸáá·áº áá¯ááºáá»á
ááááºáááºáá¬áá±á¬ áááºáá±á¬ááºááŸá¯ááᯠá¡áá¯á¶ážááŒá¯ááŒááºážááᯠááŸá±á¬ááºááŸá¬ážááá¯áá±áááºá
ááá·áºá¡áá¯á¶ážááŒá¯áá°áá»á¬ážá¡ááœáẠáááºááœá±á·áá»áá±á¬áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬ážááᯠáááºááŸááºááẠá¡á±á¬ááºáá«áááºážáá»á°áá¬áá áºáᯠááá¯á·ááá¯áẠááŸá áºáá¯á áá¯á¶ážááᯠá¡áá¯á¶ážááŒá¯áá«á
- áá±ážáááºážáá±ážá¡á áœááºážááᯠááááºážááááºážáá«á áá¯á¶ážá áœá²áá°áá»á¬ážá¡á¬áž ááŒá±á¬áºááŒá¬áá¬ážáááºááẠááá¯ááá¯áááºážáá»ááºáá±á¬ á¡ááœááºážááá¯ááºáž SLO ááᯠá¡áá¯á¶ážááŒá¯áá«á áááºážááẠááá·áºá¡á¬áž ááŒá¿áá¬áá»á¬ážááᯠááŒááºáááœáẠáááŒááºááá¯ááºáá® áá¯á¶á·ááŒááºááẠá¡ááœáá·áºá¡áá±áž áá±ážáááá·áºáááºá SLO buffer ááẠá áá áºá áœááºážáá±á¬ááºáááºááᯠááááá¯ááºá á±áá±á¬ ááŒáá·áºáá»áááŸá¯áá»á¬ážááᯠááá·áºááœááºážááá·áºá¡áá«ááœáẠáá±ážáááºážáá±á¬á¡áá¬ážáááºááá¯áááºáž ááá·áºá¡á¬áž ááœáá·áºááŒá¯áá±ážááŒá®áž á¡áá¯á¶ážááŒá¯áá°áá»á¬ážá¡á¬áž á¡áá»áááºáá¯ááºá á±ááŒááºážáááŸááá² á áá áºá¡á¬áž ááááºážááááºážááẠááœááºáá°ááŒá±á¬ááºáž áá±áá»á¬á á±áá«áááºá
- áá¯á¶ážá áœá²áá°áá»á¬ážá áá»áŸá±á¬áºááŸááºážáá»ááºááẠááá»á±á¬áºááœááºáá«á á±ááŸáá·áºá á¡áá¯á¶ážááŒá¯áá°áá»á¬ážááẠáááºááŒá±á¬ááá·áºá¡áá¬ááá¯ááá¯ááºáá² áááºáááºážááŸááºážáá±á¬á¡áá¬á¡áá±á«áº á¡ááŒá±áá¶áááºá ááá·áºáááºáá±á¬ááºááŸá¯á á¡ááŸááºááááºá áœááºážáá±á¬ááºáááºááẠáá±á¬áºááŒáá¬ážááá·áº SLO ááẠáá»á¬ážá áœá¬áá¬ááœááºáá«áá á¡áá¯á¶ážááŒá¯áá°áá»á¬ážááẠáááºááŸáá áœááºážáá±á¬ááºáááºá¡áá±á«áº á¡á¬ážááá¯ážáá«áááºá á áá áºá¡á¬áž áááºááœááºáá»ááºááŸáááŸá ááááºáá áºááŒááºáž ááá¯á·ááá¯áẠáá±á«á·áá«ážáá±á¬áááºáá»á¬ážá¡á±á¬ááºááœáẠá áœááºážáá±á¬ááºáááºááᯠááá·áºáááºááŒááºážááŒáá·áº áááºááẠá¡ááœááºááŸá®ááá¯ááŸá¯ááᯠááŸá±á¬ááºááŸá¬ážááá¯ááºáááºá
á áá áºáá áºáá¯ááẠáá»áŸá±á¬áºááŸááºážáá»ááºáá»á¬ážááᯠáááºáá»áŸáá±á¬ááºážá áœá¬ ááŒáá·áºáááºážáá±ážááá¯ááºáááºááᯠáá¬ážáááºááŒááºážááẠá áá áºá¡á¬áž á¡ááŸáááºááŒáŸáá·áºáááºááŸáá·áº áááºážááᯠááá¯ááá¯á¡áá¯á¶ážááŒá¯ááá¯ááºááŒá®áž áá¶ááá¯ááºáááºááŸáá á±áááºá¡ááœáẠáááºážááŸá®ážááŒá¯ááºááŸá¶ááẠáá¯á¶ážááŒááºááẠáá°áá®áá±ážáááºá áá áºáááºážá¡á¬ážááŒáá·áº áááºáá±á¬ááºááŸá¯áá áºáá¯ááẠáá±á¬ááºážááœááºááœááºážáá«áá áááºážááá¬á¡ááŒáœá±ážáááºááŒááºážá áááºáá±á¬ááºááŸá¯á¡áá áºáá»á¬ážááá·áºááŒááºáž ááá¯á·ááá¯áẠáá¯ááºáá¯ááºá¡áá áºáá»á¬ážááᯠááááºáááºááŒááºážáá²á·ááá¯á·áá±á¬ á¡ááŒá¬ážáŠážá á¬ážáá±ážáá¯ááºáááºážáá»á¬ážááœáẠáááºáááºážá¡áá»áááºá¡áá»áá¯á·ááᯠáá¯á¶ážá áœá²ááá·áºáááºá
ááá±á¬áá°áá®áá»ááºáá»á¬ážááᯠáááºááœá±á·áá¯ááºáá±á¬ááºáá«á
SLA áá áºáá¯ááᯠáááºáá®ážááŒááºážááẠáááºážááá¯áá»áá¯ážáá±á¬ááºááŸá¯á¡ááœáẠá¡áá»áá¯ážáááºáá»á¬ážááŸáá·áº ááŒá áºáááºáá»á¬ážááᯠáááºááŸááºááẠá á®ážááœá¬ážáá±ážááŸáá·áº á¥ááá±á¡ááœá²á·áá»á¬áž ááá¯á¡ááºáááºá SRE á á¡áááºážááá¹áááẠSLA ááœááºáá«ááŸááá±á¬ SLO áá»á¬ážááᯠááœá±á·áá¯á¶áá¬ááœáẠááŒá áºááá¯ááºááŒá±ááŸááá±á¬ á áááºáá±á«áºááŸá¯áá»á¬ážááᯠáá¬ážáááºá á±ááẠáá°áá®áá±ážáá«áááºá SLO áá»á¬ážáááºáá®ážáááºá¡ááœáẠá¡ááŒá¶ááŒá¯áá»ááºá¡áá»á¬ážá á¯ááẠSLA áá»á¬ážááŸáá·áºáááºáž áááºááá¯ááºáá«áááºá ááá·áºááœáẠááá¯ááá¯áá»á¬ážááŒá¬ážáá±á áá»áá¯ážááŒá±á¬ááºážáá®áá»á±á¬áºááŸá¯áááŸááá±á¬ ááá¯á·ááá¯áẠááœá±á·ááŒá¯á¶ááááºáááºáᯠáááºááá±á¬ SLA áá»á¬ážááᯠááŒá±á¬ááºážáá²ááẠááá¯á·ááá¯áẠáááºááŸá¬ážááẠáááºáá²áá±ááŒá áºáá±á¬ááŒá±á¬áá·áº áá¯á¶ážá áœá²áá°áá»á¬ážá¡á¬áž áááºááááá±ážáá¬ážááá·áºá¡ááá¯ááºáž ááŸá±ážááá¯ážá áœá²áááºáá±ááŒááºážááẠááá¬ááŸááá¬áá±á¬ááºáá«áááºá
áá¬áá¬ááŒááºááᯠá¡áá¯á¶ážáááááºáá±ážááá¯á· áá»á±ážáá°ážáááºáá«áááºá á
á±á¬áá·áºááŒáá·áºááŒááºážá¡ááŒá±á¬ááºáž áá»áœááºá¯ááºá áááºáá®ááááºáá»ááºáááºááá¯á· á
á¬áááºážááœááºážáá«á О .
source: www.habr.com