á áá ᣠá°áá˝! áľá Oleg Anastasyev áĽáŁááá, á áááľááá áĄáľá ááľáĽ Odnoklassniki ááľáĽ áĽá°áŤáá. áĽá á¨áĽá á á°á¨á᪠á Odnoklassniki ááľáĽ á¨áá°áŠ áĽá áááľáá á áᢠᨠ500 áşá á áá á ááááŽá˝ áŤáá¸á áá° 8 áŹááá˝ áŤáá¸á á áŤáľ á¨áá¨á ááá¨áá˝ á áá. á á ááľ á¨á°áá°á ááĽáĽ áá á á˛áľ á¨á áľá°áłá°á áľáááľ áááááľ ááłáŞáŤáá˝á á áĽááľ áááŤá, á¨ááłá¨áť á áľá°áłá°áá ááááťá¸áľ, á¨áŽáááŠá°á ááĽáśá˝á á áŤáľ-á°á (áĽáá°áá) ááá¨ááá, á áłá˛áľ á áááááśá˝á ááááá áĽá ááážá˝á áááá á áĽáá°ááŤáľá˝á á°ááááĽá. ááľááá á á°ááá˝.
áá ááŁ?
á¨áĽá áĽá á¨áááľáá áľáĽáľáĽ á á°á¨á᪠á¨áá áááľáá áá á¨áá°áŠ á°áá˝á á áᥠá ááĽáł á áá¨á ááĽá¨ááľ ááľáĽ á¨ááá áááá˛áśá˝; á¨ááľááá áśááľááŽá˝á á¨ááŤááá ááľáááŽá˝; á¨áá á¨á° áááľá á¨áááá á á á á¨áá°áĄ á áľá°áłáłáŞáá˝ ááá SREs; áĽá á¨áááľ áĄáľáá˝ áĽáŤááłááłá¸á á¨áááłáá á°ááŁáŤáľ á á¨áá á°á áŤá áá¸á. á¨áá áŠáľ áśááľáá áĽáá°áá á áááľ ááá áá°áŤáá˘
á¨á°á áá áĽáŤááá˝ áááąá á ááá áááłá ááľ áááľ áá°ááłá
áĽáŤááłááłá¸á áĽááá á áááááśá˝ á áĽá áá˝áá˝ áá á°áááá°áá, áĽá áĽáŤááłááłá¸á ááááá˝ á á áŤá, áá á áŤáŤá¸á áĽá áá´áááá áĽáľááłá¸á áááááľ áŤáá¸á ááá˘áá˝ á áá¸á. áĽááá áá á áááááśá˝ á áááľáá á°áá¨áŽá˝ áá áá°áŤáᣠáĽá áĽáľá¨ á áἠáá áľá¨áľ á á ááľ á áááá á áľááá á ááľ á°ááŁá áááá áááľá áá ááľ á¨á°áᨠá°ááŁá áአáá áá˘
ááááľáá? áá áá´ á ááŤáł áĽá áá˝ á ááľ-
- áĽáááł á áááˇá á¨á áá á áľá°áłá°á. á ááľ á°ááŁá á ááłááľ á¤á°-ááťáááľáᣠá ááłááľ á ááĽáŽá˝á ááááá áĽáá áᢠáĽá á¨á፠á áááአá áľááá áá ááľ á¨á°áá°á áĄáľá á°ááľá§á ᣠá¨áá áĄáľá cfengine ááᲠá°áááżá (áááá áá°á á˛á á°áááżá) áĽá áá áá á á ááá¨áá áĽá á áŤáľ-á°á á áá áĄáľá ááľáĽ áá ááá á ááááŽá˝ áááŁáá˘
- ááá áŤá á˛áŤáááľá˛ááľ. á ááá¨áá ááŽá°á°á áá áŤááá á¨á¨áá¨áá áááľ á°ááá¨áą áĽá áá áááľ á áá áááľáá ááŽá°á°á áá á áá°áŤá á°ááŁá áĽáť ááá á áĽáá°áá˝á áĽáááááŁááᢠá°á áŤá á¨áá á°á ááá á áŁá á ááĽááľ áŤá ááá˘
- ááá áŤá ááľáľá. á á áááአáá á¨áá á˝áá á¨á°áá ᨠá°ááŁáŁáŞá áŞáááľ áŤá°ááá áĽá á°á áŤáá áá áĽáá°áá á áľááá áŤáááá˘
áĽá á ááá˝á á¨áŤá á áááááľ áĽá á ááááŽá˝ á°ááľá§á - ááĽáŤááłááą á ááľá˘ á¨á፠á¨á áááááą á¨áŽáááŠá°á ááá á áŁá ááá á áá ááááľ ááá°áŁáᥠá áááááą áŤáá á¨á ááááŽá˝ áĽááľáŁ á¨áááá á¨áá°áá á¨ááĽáľ áá áᢠáĽáá áá "ááá" áááľ ááá áá áááľ á áá°áá, ááá áá á¨ááĽáľ áá°áŁ á áĽá áá¨áááá.
áá á áŤááľ áĽááľáá°ááá á áľá˝áááᢠáአá¨áĽá¨áľ ááááŁá áŞáŤáá˝ á áá á áááá áá ááá°áŤ á°ááŁáᢠáľáŤá á¨áá°á áá á áŤáá áá¨á á¨ááŤá¨áá˝ á¨áá 4 á˛áľáŽá˝ áŤáá áťá˛áľ áŤáá 38U á áááá áĽáá ááááᢠáľáŤá áá á áá áľááľ á¨áá, ááŤá˝ á¨áá 1U á áááá ááááľ áĽáá˝ááá. áá á áľááľ áááŁá ááᢠá¨ááá˝ áááŽá˝ á á°á¨ááŞ, áá á ááŤá¨áĽ á¨á ááľ ááłáá áá á áŤá á ááłá¨ áá¨áĽ áá á¨áááłá°á áááľ áŤáá¸á á áŤáľ áĽáĽá áŤáá° áá˝áá˝ áĽááľáá áá áŤáľá˝ááá.
á áŁá ááľ á¨ááá ááá á áááá áá á¨áá áááť á¨áá áá á áŽáááŠá°á ááĽáśá˝ á á ááá á¨ááľ áĽáá˛á áŤáá á ááĽáá á˘áŽáááŤá á ááĽááá áá¨ááἠá áá áľá˘ áá¨á á áá áááľáá á áŁá ááľ áá áᣠáĽá á¨áááľáá ááá áááááľ áĽá áĽá¨áľ á áľááááᣠá¨áááľáá á áľá°áááááľ ááľáááśá˝á áááááľ á¨áľá á°áľ ááťáťá áľáá° áááŽá˝ áá á áááŁáľá˘ áĽá áᏠá¨á áááአáá ááłá ááá áŤááá áľ á°á¨á áá á°áá°áá. á¨á áἠáááá áŤáá°áááą áááŽá˝á á¨áááľ áŤááľáᣠᣠá¨á፠á áá°áá°áŞáŤá ááľáĽ áŤááľ á¨á ááááŽá˝ áአáá á ááá ááἠá¨áááᢠá áá áá á˝áá á ááĽá - á áá¨á ááĽá¨á ááľáĽ á á áááአá¨á°áŤáá áŚáł áá ᣠáááľá ᣠá áá°áá°áŞáŤá ááľáĽ áŤáá áŚáłá˘
ááłáŠ áá
áááá á ááááἠáá°áá°áŞáŤáášá áá áŤá
á áá¤áłá áĽáá°ááá áá áááľááľ áá°áá.
á áŁá áááááá á¨á áááá áá á á˘áŽáááŤá á°ááŁáááľ áŤáá¸á á°áá˝ ááľá°áá ᣠáá áŤá
á áĽáá°áá
áŤá á ááááŽá˝á á áá°áá°áŞáŤáá˝ ááľáĽ ááľááἠáĽáá°ááá˝á ᣠá á áŽáá áá´á âá ááľ á áááá = á ááľ á°ááŁáâ áá á ááááŽá á áĽááą áá áá áŤá
á á°ááŁáŤáľá áĽáá°áááľáŹáľ áĽá áá áŤá
á áĽáá°áá
áŤá á áááááśá˝á á áľáá°áá ᢠá°ááŁáŤáľ ááłáŞáŤáá áá áá áá˝áá. ááĽá¨á áĽáᣠá áŤáŠá˘ áá°áá°áŞáŤá á¨áá áá áĽááłá˝á 11% áŤá
á áĽáá°áá áááá
á°á˝ááᢠáá°áá°ááŤá ááá˝ áá-á¨ááἠááá¨áá˝á á¨áá ááá áá¤áłáááľ ááłá°á á ááĽá. áááľáá ááá˝ á¨áá áááľáá á á ááľ á áááá áá áĽá áľáŤáá˝á á á ááľ áá áááľ áŤáľáááááłá. áá á˝ááŽáš á¨ááááŠáľ áĽáá
áá.
á¨á áá áá á¨áľ á ááŤáľá°áá áááł á¨á°ááłá°á áááá - á áá áááááá áĄáľá áá° á áááá áááá°áĽ á¨áááťá ááᢠá¨ááá á áá á áá áĽá á¨á°ááŤáŠ áľáááá˝ á á ááľ á áááá áá áááአáá˝áá. á á°á¨ááŞáᣠá áááአáá°ááŤáŠ áá°áá áŞáŤáá˝ ááá áá˝ááᢠá á°á¨ááŞá ááááŤá áá áἠá¨á°ááłá°á ááááᥠá á áááአáá á¨á˛áአááá á¨á˛áľá áááł áá¨áá áŤáŠ á¨áľáá áľáŤ á˝áá áĽáá°áááĽá á áłáá áá˘
ááá áá ááá ááá á á°ááłáłáŠ áá˝á áá á áá°áŠ áľáŤáá˝ ááŤá¨á ááá ááŠááľ á¨áá. áĽáá ᣠáááłá ᣠá¨á áááá á°ááŁá á ááŤá á¨ááá˝ áá ááŤá áá ᣠáá á¨áľááľ áá°áá áŞáŤ á á°ááłáłá á áááá áá á¨áááአá ááľ áĽá á áá ᣠá¨ááááŞáŤá áá á ááá ááááľ á ááááá - á¨ááá á°ááŁá ááá˝ áá á á¨áá°á áááł á¨ááŻáá˘
á áŽáá´áááŽá˝ ááľáĽ ááá á áááŁá áá˝áá˝ ááľáĽ áĽáŤáá˝á ááĽáŤáľ áĽáá°ááŤáľááá ááá˝ ááᢠá¨áá áá°á ááá á°ááŁáŽáťá˝á á á ááľ áľááá° ááá (ááááľ) áľá á¨áá°áŠ ááá ááĽáą á¨á°áľá°áŤá¨á á áááá¸á áĽá á¨á°ááŤáŠ áŚááŹá˛áá á˛áľá°áá˝á áá°áá á áŤáľáááááᢠá áá áá°á¨áľáŁ á¨áášáááááá˝á á áŤáľááááᤠá á°á¨áá¨á á°á¨á᪠áá፠ááááŤáľáŁ á¨áŽáá´ááá á á áŤáŠ áŤáá° á ááĽáá ááá¨ááá˘
áľáŤáá˝á á ááĽáł á á ááááŽá˝ áá áááľáŹáľ áĽáá° áŽáá´áááŽá˝ á á°ááŁá á ᣠáśá¨á áĽáŠ áĽáŠ áá á¨ááá áľáááľ ááľáá˝ áĽááľ á áĽááą á¨ááአáá áŽá˝á á á°áἠáááłá ᢠááľáá˝ á¨á ááŤáł ááĽááĽáŽá˝ á¨á°ááŁáĄ áááá¸á á áá á¨á° áááľ áá ááá°ááŤáľ á¨ááŤáľááááá á¨ááἠáá á á á¨áá°á áááł áááááľ áŤáľá˝ááá, á¨á፠áááá˝á áá° á°ááŤáŠ á¨áá á¨áľ á˝ááá˝ áááŤá. á¨á፠áá°á¨áłá (áĽá á áŁá áĽá) ááŁáá˝ á á á ááá áá á¨á° áááľ ááľáĽ á áľááá á ááĽááľ áááá áĽá áĽá á¨á°ááŤáŠ á áááŹá˝áá˝á áĽá áľáŞáśá˝á áááľá¨áľ áľááá˝ ááĽááĽáŽá˝á áĽáť ááľá°ááá áŤáľááááá˘
á á°á¨ááŞáᣠá áśá¨á ááľáĽ ááá á¨áá áááἠá¤áľ áĽá á¨ááľá áá፠ááľá áľ áŽáľá ááá°á áĽá áááľá¨áľ ááá á¨áá ááŞáá˛ááá˝á áá°á ááá˘
áśá¨áᣠáá áĽáá°ááá á°ááłáłá á´ááááᣠá¨áłáĽá ááľáĽ á¨á°áá°á á¨ááŤáŁ áááá áá°á ááᢠáááłá á¨áá á°á¨ áľááľáł áááá - áĽáŤááłááą ááŤáŁ á áá˝á áá á°á¨ áľááľáł á á ááá áá áá°áĽ á°á°áĽáˇá, á¨á፠á áá á áá áá. á á˛áአá á ááá áá á áááľá¨áľ áŽáá´áááŽá˝á áááá áá˝ááᢠááĽá áá áá°á á áá¨áá¨áŤ á á á ááá á¨á. ááá áá á¨áá á áłá˝ á°á¨ááŞ.
áŽáá´áááŽá˝á á á ááááŽá˝ áá á ááĽáł ááľáŹáľ á¨á˝áአá áŤá áĽáť ááᢠááá ááá á á ááááŽá˝ áá ááŤáŁáá˝á á¨ááľá°áááľ áá á¨á°áŤáŤá áá. á¨áľáá ááŤáŁ á á¨áľáá á áááá áá áĽáá°áááἠáá¨áłáľ áŤáľáááááłá. áá ááá áľáŤ á áá°áá, ááááŤáąá áŽáá´áááŽá˝ ááĽááłá¸áá áłááááą á á°áťá áá á á á°áá¨áŽá˝ áá áĽá áĽá áĽáá áááἠá ááŁá¸á. áĽáá˛á ááááą á áááἠá¨áľá á°áľ ááťáťá á áááá á áľá¸á᪠ááá áá˝áá. áĽááá áá á°ááłáłá á áááááľ á ááá˝á á á°ááŤáŠ áá°áá°áŞáŤáá˝ ááľáĽ ááá á á°ááŤáŠ á¨áá¨á ááĽá¨á áááá˝ ááľáĽ ááľááἠáĽáááááá, áľááá á ááľ áá°áá°áŞáŤ ááá ááá áŤáá°áłáŤ, áááá á¨á áááááľ á ááá˝ áá˛áŤáá áĽááłáá á.
8 áşá á°áá¨áŽá˝ áĽá 8-16 áşá áŽáá´áááŽá˝ á˛ááŠááľ áŽáá´áááŽá˝á á áĽá áá°áŤá¨áľ á ááŤá á áá°ááá˘
á á°á¨ááŞáᣠáŤáá áľá°áłáłáŞ áĽáá ááá˘áá˝ á áááááśáťá¸áá á áŤáłá¸á á ááá¨áľ áĽáá˛áŤáľá°áááą á ááĽáľ áľááľá áá á¨á áá ááááľ áááľá áľ áĽááááááᢠá á°ááłáłá áá, á ááłááľ áĽáá á á áááááśá˝ á¨áĽáá á¨áá¨á ááĽá¨áá˝ ááĽáśá˝ á áá áĽááłáá áá ááĽáĽáá ááá á á áĽáááááá.
á ááá˝ ááá¨áľ áĽáá°ááťáá, áá áá á áŤáľ-á°á á¨ááŤá°áá á¨áááŁá áŞáŤ ááĽááĽá áĽáááááá.
áľááá ááá á ááá´ááśá˝ á¨ááŤá¨áĽáŠáľ ááá áĽá áá¨áł á¨áá˝á ááľá áá á°áá°áá-áŚáľáľ áŤáŹáá˝á˘
á¨á ááľ á°áá ááśá˝ áá°áá áŚááŹáľáľáŤ áááááľ áŤáá áŤáá°áłáŤ áááľá°á ááᢠááá˘á á áááááąá áááľá°áááľ áááá á áľááá áá¨ááá˝ á¨áŤááá á áá¸áŁáŤá áá° ááłá áááŤáᢠá áĽáą áá á°áááŠá, ááłá áá°áá¨áĄáľ áĽáá á (áŽáá´áááŽá˝á ááááľ á¨á°áá°á áá˝áá˝) áľáááá˝á áá°áŁá. áááľá´áŽáš áľáááá á¨ááá áá ááŞáá˝á ááśá¨á áľáĽááá áá°áŁá áĽá Docker á°ááłá ááŤáŁáá áááľááá ááááľ á¨áááá áŤáá áŤáᢠá°ááŤáŠ áľáĽááá˝á á¨ááľáá¸á á á°á¨á᪠á áááŽá áá˝á áááł áĽá á áአáá áľááá°áŠ áŽáá´áááŽá˝ áááł áááŚá˝á áááłá áŤáááá¨áĽ áŞáááľ áŤá°áááá˘
á¨ááĽá¨áľ áá°áŁ
á áá ááĽá áááá˝ á¨á áá ááľáĽáľáĽ á¨áááá á¨ááá áľááľáá á˝áá áĽáááá¨áľá˘
á á ááľ á°áá ááľáĽ áŤáá á¨ááľááľ ááĽá áľáĄ-
- á á ááľ á¨á°áá°á á°ááŁá á¨áááá á¨á áááŁáŁáŞ ááá áá áá˘
- ááĽáŤá á¨áááá á¨áá á°á¨ áľááľáł áá áá˘
- á¨á ááłá¨ áá¨áĽ áľáŤáá. áĽáŤááłááą áááľá´áŽá˝ á¨á°áá°á á¨áá°ááá፠áááľ áŤáá á¨á°áá°á á¨á ááłá¨ áá¨áĽ á áááá˝ á áá¸á, áľááá á ááľááአáá á¨ááŤáľá°ááááľá á¨ááἠáá á áááľ ááľáĽ áłáŤáľáᣠáľáŤáá˝á áá°áŤá¨áľ á ááťáá.
- á˛áľáŽá˝ á á°á¨ááŞá ᣠá ááὠᣠááĽááá á°ááŁáŤáľ áŚáł ᣠáĽáá˛áá á¨á˛áľáá á áááľ áĽáááľáŁáá-á¤á˝á˛á˛ ááá á¤áľá¤áľá˛á˘ á˛áľáŽá˝ á á´áŽááľ ááąá á¨áĽáŤááá˝ áĽááľ ááááá áá˝áá - IOPSᢠáľááá ᣠá ááľ á˛áľá ááá á¨áá˝áá á áá IOPS ááááĽáŠ á°ááŁáŤáľáŁ âáľáááľáľâ áááľá ááĽáŤá áĽáť á¨á°áŤá á¨á˛áľá ááŁáŞáŤáá˝á áĽáááľáŁááá˘
á¨á፠áá ááłááľ á áááááśá˝ áááłá áá°á áá-áá¸á፠ᣠá¨á°á áášáľá ááĽáśá˝ á áá ááááľ ááááἠáĽáá˝ááá-400 ááŽá°á°á áŽááŽá˝ ᣠ2,5 á´áŁ áá á°á¨ áľááľáł ᣠ50 áá˘áľ / á° áľáŤáá á áááąá á á áŁáŤáὠᣠ6 á´áŁ HDD áŚáł á 100 áľááá˝ áá ááááᢠááá áĽáá°áá áŁáá á áŁá á ááłáá á á˝
alloc:
cpu: 400
mem: 2500
lan_in: 50g
lan_out: 50g
hdd:100x6T
á¨á°á áá áá¸á፠á áááááľ ááĽáśá˝ á áááľ áá á¨á° áááľ ááľáĽ á¨ááááľ ááá ááĽáśá˝ á¨á°áá°ááá ááá áĽáť áá ááᢠáľááá , á áľáááľ á áŚááŹá°á áľá á°áľ ááá áŁááááŠ, á¨á°á ááá áá¸á፠á¨á°áá°á á á áá áĽá ááĽáśá˝á áĽáá°ááá áá áá¨ááἠáĽááááá. áááľá ááĽáśá˝á ááá°áĽ á ááĽáᢠáá áŽáłáá á¨áá áá ááŤáŤá áĽáá˝ááá?
áá° áĽá á áŁá ááá áá°ááá á¨ááĽá¨ áááŽá˝ ááľá°ááĽá áľááá ááá፠áĽááááľ áĽá á á áá áááá áĽáááá¨á - áĽáá°áá á˘
ááááá á¨ááľá á:
- á¨áľá¨-áá˝ áááŁá áĽá ááá á¨á ááľ áá°áá áŞáŤ á áááá á¨á°áá á ááááá˝á áá áááá˘
- áĽááá ááááá˝ á¨áŤáá¸áá á ááááŽá á ááĽááĽáŽá˝á ááá¨áľ áĽáá˝áááᥠáááŁáŽá˝áŁ áá¸ááŤáá˝áŁ á¨ááἠáá¨ááť áĽá á¨á áľá°áłá°á ááĽááĽáá˘
- á¨ááľ áááľ ááá á¨á°ááŤáŠ áá ᤠáĽáą á¨á°ááŤáŠ á°ááŁáŤá áááľ áľáááśá˝á áŤáŤáľáłáá˘
- áá¸ááŤáá˝ áááŁá¸á á áá¸ááĄá áľ áááľ áľáááľ áá áá á°á áá˝ááá˘
ááľáá áĽáá°áá áĽááłáááĄ-
áŁá ! á á á°áá¨áľ áĽááŤáá! áá áááľ ááĽáśá˝á á áľááá áááĽáŤáŽá˝ áá°áŤá¨áľ áá˝ááᥠáááááľ á¨áá°ááá ááᢠá¨á°ááŁáŤáá áááľ áľáááľ áá ááááá°á á¨áá á°áá¨áľ ááľááá ááááľ áááľáĄ (á ááľá áá áĽáá° âáááâ) áĽá áŽáł á¨á°ááłáłá á¨áĽáááľ á°áá¨áľ áá áŤáŤááᢠáá á°áá¨áľ áá áľá°áłá°á áááááľ á áááááśá˝á á á°ááááááľ áĽááľáá°áŤá áŤáľá˝áááᢠáááłáᣠáá á áŁá áľáá á¨á ááááŽá˝ áľáĽáľáĽ áľááá áááá áľá¨áážá˝ áĽááŤááá¸áááᣠáá° áĽá áľááá˝ áĄáľáá˝áŁ á ááľá áá áĽáá° group1ᣠgroup2á˘
á°á¨á᪠ááľááŽá˝á á ááľáááľ áĽáŤááłááąá á¨áľááá˝áá ááľááá ááááľ á á ááŁá ááá ááá áĽáá˝ááááĄ- áĄáľá1.áľá.ááľ, api.ááá.ááľ, á°á áá-cache.cache.
áá° "á°áá¨áľ áá¨á" á˝áá°-ááłáĽ á¨ááááŁá á áá ááááľ áá. áĽáá° "group1.web.front" áŤá áľá á áá. á¨ááĽá¨áśá˝ áĽá á¨á°á áá ááĽáśá˝ áŽáł á°á°áĽáˇáᢠᨠDevOps á°á áá° áá¨áá á áááááľ áááá ááĽáľ áĽáá°á ááá, áĽá áĽáá°áá á áááľ á°áŤá°á á áá¨áá ááľáĽ á¨áá ááá ááľááłáľ áá˝áá, áĽá ᨠOpsDev áŤáá á°á á¨á áľá°áłáłáŞ ááĽáśá˝ ááá¨áá, áĽá á áá áá¨ááá ááľá°áłá°á, áĽá፠á°áá˝á ááá°áĽ áá˝áá. ááĽááá á°áá˝ ááĽáľ ááľá áľáŁ ááá°. á áá áá¨á áá á¨áá°áŠ á áááááśá˝ á áá¨áá áŽáł ááľáĽ áá°áŤáᢠá¨áá¨áá ááľááľ áŽáł áááá á áááááśá˝ á á ááľ áá áááľáá¸á á á áŤáááᣠá á á°á á°á¨á°á áá¨ááááᣠá áá á áá¨áá áŤáą ááá°á¨áłáá˘
á áááááśášá á áĽáááľ áĽáááá¨áłá¸áᢠá ááľ á áááááľ áá áĽááľ áŤáá áľá á ááᣠáĽáąá áááá á¨áá¨ááá áľá áŤáŤáľáłáᢠá¨á፠á¨ááľ áľá á áááááľ áľá ááá¨áá áĽáş-áľá.áĄáľá1.áľá.ááľ. áĽá á¨ááŤááá á¨áá°áá áŞáŤ á áááá á áááááľ áá áŤá ok-app.group1.web.á¨ááľ. áĽáŤááłááą á áááááľ á á°áá°á áá˝áá˝ áá áááá°áĽ áááá á áľááá áá¨ááá˝á á¨áááá˝ ááá፠á áá-áá á°ááŁá áá áŤá á ááĽáśá˝ áĽáá°ááá ᣠááĽáą áá ááááľ áá á áĽáá°ááŤáľááá ᣠáá áŤá á á ááá˝ áááŠáľ áĽáá°ááᣠᣠá¨áá á áááááľ ááľááśá˝á áááľá°áááľ áŁá áŞáá˝á˘ áĽá á áááááą á ááĽáł á áá˝ááš áá á¨á°ááá á áá á¨áĽáą ááłááá˝ ááłáŤá. áĽáá˛áá á ááŤáťá ááአá°á áá°áá - áĽáá° ááłá ááĽá áĽá á¨á áááááľ áľááĄ- 1.áĽáş-áľá.áĄáľá1.áľá.ááľ áááľáŁ 2.áŚá-áľá.áĄáľá1.áľá.ááľáŁâŚ
áá á áŁá ááš áá: á¨áŠáŤáá ááŤáŁ áľá áĽáť á áááá¨áľ, áá˛áŤáá áĽá ááá áĽáá˝ááá.
á áá áĽááá áááłáá˝ á á°á¨áŁá á¨áá¨ááááľá á°ááŁáŤáľ á áááá áĽáááá¨áľ á˘
á¨á°ááŁá áááá áááá˝
ááá á°ááŁáŤáľ áĽáş (áĽá ááááŁáľá á ááá áŚáł) á áĄáľá áá¨ááá áá˝áááĄ-
- á áá á¨áááá¨áľ á°ááŁáŤáľ - prod. ááĽáá°áá á áááľ áľáŤáá˝ áĽá á áááááśá˝, á¨ááá˝ áááá¨áľ (ááááś) á áŁá á áľááá áá, áĽáŤááłááą áĽáŤááá˝ á áľáááą áá áŤá á á ááĽááľ áĽáá°áá¨ááá. á¨á°ááŁá ááłááá˝áĄ á¨áἠáááŁáŽá˝áŁ áá¸ááŤáá˝áŁ á¨áá°áá áŞáŤ á ááááŽá˝áŁ OLTP áá¨ááťáŁ ááá°
- á¨áľááľ á˝ááŽá˝ - áŁá˝. áĽáá , á¨áĽáŤááłááą á¨á°áá°á áĽáŤá áá°áľ ááĽááľ á áľááá á áá°áá. ááĽááą áá á°ááŁá á á°áá°á (á¨áĽá áá) áá ááľáĽ áá áŤá á áľááśá˝ áĽáá°ááŤá°áá á áľááá áá. áĽááá ááááá MapReduce, Hadoop, áá˝á ááá, áľáłá˛áľá˛ááľ á°ááŁáŤáľ áááá.
- á¨á áľá°ááᣠáľáŤáá˝ - áľáŤ ááľ. ááĽáá°áá á áááľ áľáŤáá˝, áááá¨áľá áá áá°ááá á áŁá á áľááá á áá°áá. áá á¨á°ááŤáŠ áá¨áŤáá˝áᣠááá°áľáᣠáľáá áľááśá˝á áĽá áááĽá á¨á ááľ á áá¸áľ áá° áá ááá¨áá áŤáŤáľáłáᢠá á ááľ á áŠá, áĽááą á¨á°á°ááľ áá á°ááłáłá áá¸á, á áá á áŠá, áá áŤá á á ááĽááľ áĽáá°áá ááá ááĽá ááá ááἠá áŤááŁá.
áĽáá°ááá áŤá á°ááŁáŤáľ ááĽáśá˝á áĽáá´áľ áĽáá°áá áá áĽáá, áááłá ááá¨áá ááŽá°á°á.
á áá á¨áááá¨áľ á°ááŁáŤáľ. áĽáá˛á ááááą á°ááŁá á¨áá áá á¨áááłá°á á¨á˛áአáááł ááľá ááá¨ááá˘
á¨á°á ááá á¨áá¨á áĽáŤá ááá°áą á°ááˇá ᣠá°ááŁáŠ áááá á¨ááááľá á˛áአáŽááśá˝ áá áá ááááŤá ᣠáŤáľáŹáłá ᣠááá˝ áá°áŁá ᣠááŁáŠá áĽáŤá áá áĽáá áĽá ááááᢠá¨áááĽáá áĽáŤá á°á¨á° - áĽáá°áá áĽá፠á¨áá á¨áá áááá ááá ááá áá, á áľáá°á áĽá ááŁáŠá áĽá¨á á á á áá.
ááĽáá°áá á áááą á°ááŁá á ááľá°ááá áááá¨áľ ááľáľá áááľá áľ á¨ááááá á¨áá°ááá ááĽáľ ááľá°á á¨áááááá á¨áŽáŽá˝ áĽááľ á áááŽá áá (áá á á°ááŁá á¨ááŤá¨áááá áá˝á) áá ááľááἠá ááĽáᢠá¨á፠áá˝ááŽáťá˝á á¨ááľáŤáŁ ááá áĽáá°áá¨á°áá áááá
alloc: cpu = 4 (max)
áĽá 16 áŽááá˝ áŤáá áááŽá áá˝á áŤáá, á áľááá á áŤáľ áĽáá°áá áŤá á°ááŁáŤáľ á áĽáą áá áááᥠáá˝áá. á á°ááá á¨áĽáá°áá á áááľ áľáŤáá˝ á ááŤá ááŽá°á°á áááł á áŁá áá á°á áááá áĽááľá°áááá - áá á ááá áá ᣠááááŤáąá á¨áá ááłá ááá á°ááŁáŠ áĽáŤáá áá áĽáá áĽá ááá á áŤá°áááá˘
á¨ááłáĽ áľáŤáá˝. á¨áĽááą ááľá áľáá˝ á¨á°áᨠáááá-
ááĽáá°áá á áááľ áľáŤáá˝ á ááŤá á¨á˛áአááĽáľ áááł á áŁá á¨áá°á ááᢠáĽááá áá á¨ááłáĽ áľáŤ á á°áá°á áá ááľáĽ áĽáá˛á ááá áĽáááááá, áľááá áááá áľááľ á°ááŁáááľ áŁáá áá ááľáĽ áĽáá˛á ááá á¨ááŤáľááááá á ááľá°ááá á¨á áááŁáŁáŞáá˝ áĽááľ ááŤá á ááĽá. á¨áŚáł ááľáŤáŁ ááአáá á áááľááá˘
alloc: cpu = [1,*)
"áĽáŁáá á˘áŤááľ á ááľ áá áŽá áŁáá áľ ááá áá áŤáľáááĄáľ áĽá á¨á፠á¨á á áá á áááá ááá áá ááá˘"
áĽáá á¨á á ááá á ááĽáá á á áá áá áááá¨áľ á¨á°á°á¨á á°ááŁáŤáľ ááá ááľááá á áŁá á¨á°áťá áá. ááá áá áááąáá á áááľ áľáŤáá˝ á á ááľ ááá áá˝á áá áŤáááą áĽá á áá áá ááĽáąá áŤá¨ááá áľáá á áŁá áľáá áááá. á áá áááá¨áľ áŤáá á°ááŁá ááŽá°á°á á˛ááá áá˛áŤáá ááá áá áĽá ááĽáśáš á áááááá áľ áá áá° áľááľ áľáŤ áá°áááá ᣠáááľá áĽáá°áá áŤá áááá˘
áá áŤáá áĽáá´áľ ááľá¨á áĽáá°ááťá?
á ááááŞáŤ ááŽáľ áĽá á áááąá áĽááᥠcpu = 4. á áŤáľ áŽááá˝á ááŤá á ááĽáᢠá Docker run áá á áááľ ááááśá˝ áá¨ááá áá˝áá-
- á ááŤáŠá á áá áá
--cpuset=1-4
, áááľá á áá˝á áá á áŤáľ á¨á°áá°á áŽááá˝á ááĽáŤá áááľáĄ. - á°á áá
--cpuquota=400_000 --cpuperiod=100_000
, áááŽá°á°á áá áŽáł áááľáĄ, áááľá á ᨠ100 ms á¨áĽááá°á áá áľáŤá ᨠ400 ms áŤáá áá ááŽá°á°á áá áĽáá°ááá áŤááááąá˘ á°ááłáłá á áŤáľ áŽáŽá˝ áááá.
áá á¨áĽááá áá´áá˝ ááľáĽ á¨áľáá á°áľáá áá?
cpuset á áŁá ááŤáŞ áááľááᢠá°ááŁáŠ á áŤáľ á¨á°á°áĄ áŽááá˝ á áᾠᣠáá áááľ á¨á áááŁáŁáŞ áá¸ááŤáá˝ á á°áťá áá á á áĽááľ áá°áŤá ââáááľ ááᢠáá á°áá á ááłá áá á ááᥠá¨áľááá° áááá ááá á á°áŤááľ á¨áá˝á áŽáŽá˝ áá áľááśá˝á á¨áá°áŤá¨áľ áľáŤ ááááľáľ áááŁááᣠáĽá áá ááá áŤááá á°ááŁá ááᣠá á°áá á áĽáá°áá á áááľ áá á¨áĄáľá áľáŤáá˝á áááľááἠá¨áá¨áá áá˝á. áá°ááá˝ áĽáá°ááŤáłáŠáľ áŽáł áŤáá á ááŤá áĽáá áá á á°áťá áááł á°áľáá áá-á áá ááááľ áŚááŹá˛áá á˛áľá°á á á áá áá á°ááŁáŠá ááá¨ááá áááá á¨ááá¨áĽ ááááľ á áá áĽá á¨á áááŁáŁáŞá áá á áĽááľ áá°áŤáŤáá˘
á áľááš á¨áŽáŽá˝ áĽááľ áá°á¨áľ á áśá¨á ááľáĽ áĽáá´áľ áŚáł ááľáŤá áĽáá°ááá˝á áĽááá
ᢠááĄáľá áľáŤáá˝ áŽáł á¨á áá á áá á°ááťá á áááá, ááááŤáąá á¨áá°ááá ááá°áĽ á áŤáľáááá, á ááľá°ááá ááľáľá ááľá áľ áĽáť á á áá. áĽá áĽáá
á ááŤáŠ á áľááá ááŁáŁáá docker run --cpushares
.
á ááľ áŁá˝ á˘áŤááľ áá ááľ áŽá ááľáľá á¨áááá á¨áá áĽáá ááááᢠ--cpushares=1024
, áĽá á˘áŤááľ áááľ áŽááśá˝ áŤá, á¨ááŤá áĽáá áááá --cpushares=2048
. á˛áአáááŤáśá˝ á á áĽáľáŤááá áľá¨áľ á á áááŁáŁáŞá áá áľáááľ áá á ááá ááአáŁáá á áááĄáᢠáľááá
ááŽáľ á á áá áá áááá á áŤáąá áŽááśá˝ á¨ááá áá á¨áá ᣠââá¨áŁá˝ á°ááŁáŤáľá á¨áááľáĽ ááá ááá á¨áá ᣠáĽá á°á¨á᪠ááŽá°á°á áá áá áá áá˝ááᢠááá áá á¨á áááŁáŁáŞáá˝ áĽáĽá¨áľ áŁáá áľ áááł ááŽáľ á áŤáąá áŽááášá á¨á áá áŽáłáá á¨á¨á¨á°áŁ á¨á°áá¨á ááŽá°á°á áá ᨠcpushares áá á á°ááŁáŁá áááł áá¨áááá áááľá á áśáľáľ áá áŽáŽá˝ ááľáĽ á ááą ááááᢠᨠ1024 cpushares áá áá ááľ á°ááŁá á°á°áĽáˇá, á¨á°ááŠáľ áááą á°áá ᨠ2048 cpushares áá áá ááľ á°ááŁá áá°áŁá.
ááá áá áŽáł áĽá á áá˛áŽáá˝á áá áá á á á áá°ááᢠááŽá°á°á áá á˛áá°áĽ á áá áááá¨áľ áŤáá á°ááŁá á¨áŁá˝ á°ááŁá ááá
á
áľá፠áĽáá°áá°á á áá¨ááἠá ááĽáᢠáĽáá°áá
á áááľ á
áľá፠áłáá°áĽ, á¨áĄáľá áľáŤá á ááŽáą á ááŤáľáááá áľ áá áááá ááŽá°á°á áááľáłá. á Docker áŠáŤ ááľáĽ ááá á¨ááŤáŁ á
áľá፠á ááŤáŽá˝ á¨ááᣠáá á¨ááááľ á˛áአáááááĽá á á᪠ááá˛áá˝ á áá áá¸áᢠáľááĽááą á áááá ááá ἠáá˝áá
- SCHED_OTHER
á ááŁáŞáŁ ááá áá°á á á¨á°á áá áá°áśá˝ á ááááľ áá˝á ááá ááᢠ- SCHED_BATCH
áááĽáľ-á°áŽá áá°áśá˝ á¨á°áá°áᢠá ááľá á°ááŁá á ááŽá°á°á áá á˛áŤáľááᥠá¨ááá á á áŁáľ ááŁáááĄ- áĽáá˛á áŤáá á°ááŁá á á áá áá á¨SCHED_OTHER áá áľáŤ áá á¨ááá á¨áá á¨á áááŁáŁáŞ ááĽáśá˝á á¨ááá á ááľá á ááľá°á ááᢠ- SCHED_IDLE
á áŁá áá á°á á áľá፠áŤáá á¨á áľá°ááᣠáá°áľáŁ á¨áĽáŠ áĽááłá áŤáá° -19ᢠá¨áá áááľ ááá á¤á°-áá˝áááľ áĽáá ááááá˘á ááľ-áᎠ, á áá°áá ááŤáŁáá á˛ááአá áľááááá ááᲠááááááľ
one.nio.os.Proc.sched_setscheduler( pid, Proc.SCHED_IDLE )
ááá áá á á፠ááŽááŤá áŁáłáááá ᨠchrt áľáááá á áá áá á°ááłáłá ááá ááľá¨á ááťáááĄ-
chrt -i 0 $pid
ááá áááľá¨á áááá á¨áĽá¸áááľ á°á¨áááťá˝áá á á ááľ á áá á¨áĽ áĽáá ááááĄ-
á¨á˘ááąáá˝á ááá
á¨á áá ááłá
Docker á ááľ á ááŤáŽá˝
áááááĽá á ááá
chrt*
áááľ
á˛áአ= 4
--cpuquota=400000
--cpuperiod=100000
SCHED_OTHER
áŁá˝
á˛áአ= [1, *)
--cpushares=1024
SCHED_BATCH
áľáŤ ááľ
á˛ááŠ= [2, *)
--cpushares=2048
SCHED_IDLE
* á¨áŽáá´ááá ááľáĽ ááá chrt áĽá¨á°áŠ á¨ááᣠá¨sys_nice á˝ááł ááŤáľáááááľ áá˝ááᣠááááŤáąá á ááŁáŞááľ Docker ááŤáŁáá á ááááá áľ áá áá áá á˝ááł áŤáľáááłáá˘
ááá áá á°ááŁáŤáľ ááŽá°á°áŠá áĽáť áłááá áľáŤáááá áá ááᣠáá
á á¨á ááłá¨ áá¨áĽ áľáŤá á¨áľá
á°áľ á¨á áááŁáŁáŞ ááĽáśá˝ á ááłá°áĽ á¨á áá áááŤáᢠáľááá
áĽá á á°ááĽáŽ ááľáŤáá á ááľ á áááľ ááľá ááááľ áĽááááááᢠáááľáᣠá¨ááŽáľ á°ááŁá á ááłááľ áĽá˝áá˝á áá° á ááłá¨ áá¨áĄ á˛áá á¨áá°ááá ááĽááľ áĽáááľáŁááᢠalloc: áá=[*,500mbps) ), á á¨áľáá ááŽáľ áá
á ááľá¨á áá˝áá. áĽá ááĄáľá á ááľá°ááá á¨áá¤áľ áá á áĽáť ááľáľá áĽáá°áŁáá ááá áá á¨áá°ááá (ááá alloc: lan= [10Mbps,*) ) á áá
áááł á¨ááŽáľ áľáŤáá á¨áŁá˝ á°ááŁáŤáľ á
áľá፠ááááľ á áá áľá˘
áĽáá
Docker ááá áááŁá¸á á¨ááá˝áá¸á ááŞáá˛ááľ á¨ááľáᢠáá áá° áĽá áĽááłáł áááŁá
áĽáá 1áĄ0 ᨠhsfc á°ááŁá˝ "root qdisc" áá; 1: 1 - ᨠhsfc áá ááá á á á ááá á¨áá°ááá፠áááľ áá°áĽ 8 Gbit / s, á áá áľá á¨ááá áŽáá´áááŽá˝ á¨ááá˝ áááá˝ á¨ááááĄá áľ; 1áĄ2 - ᨠhsfc áá ááá áááá áŁá˝ áĽá áľáŤ ááľ á°ááŁáŤáľ âá°ááááâ áá°áĽ áŤáá á¨á°ááá° ááᣠáá á á¨áá á áłá˝ á°áĽáŤááˇáᢠá¨á°ááŠáľ hsfc á¨á áááľ áááá˝ á¨ááŽáľ áŽáá´áááŽá˝ á¨ááááŁá¨ááŤá¸á áá á¨ááááľ áá°áĽ áŤáá¸á - 450 áĽá 400 Mbit/s áááŤááą áááá˝ á¨á°á°áĄ áááá˝ áá¸áᢠáĽáŤááłááą hsfc ááá á áľáŤáá áááłáł áá áľ ááŹáľ áĽááłáá á á ááááľ á¨ááá áľáŞáľ áá á áááľá¨áľ á¨qdisc áá¨á fq ááá fq_codel á°ááľá§áá˘
á á°áááśáŁ tc á˛á˛ááááśá˝ áá᪠áľáŤáá áĽáť á
áľá፠áá°áŁáᢠáĽá áá áááŞá áľáŤáá á
áľá፠ááľá áľ áĽáááááá - áááአá ááłááľ á¨áĄáľá áľáŤáá˝ á ááá áá˘áá áťáá á áá ááá¨áĽ áá˝áá, áááłá, áľáá
á¨ááĽá áľ ááἠááŤááł áĽá ááááłá. ááá
áááá áĽáá áááá
á áá¨áŤááš áá áľáŁ hsfc á¨1áĄ2 ááá á áľá፠á¨ááá°áŁá¸á áŁá˝/áľáŤ ááľ áľáŤáá á áááŽá áá˝áá˝ áá á¨á°áá°á áá ááľáá á ááá áἠáá á˛áá°áĽ á¨á°áťááá áá¤áľ áĽáá°ááŤáłá á°áá°áá áłáᢠá áá áá፠á áľá፠áŤáá°á°á á áľáŤáá á ááŽáľ á°ááŁáŤáľ áááá¨áľ áá á áŁá áĽá á°á˝áĽá ááá¨ááᢠminiond á¨á ááá á¨ááť áŁááľááľá áá á á á¨á°á¨ááą áááľááᣠáá á á¨á ááľ á¨á°áá°á ááááŽá ááŽáľ-á°ááŁáŤáľ á ááŤá á¨áľáŤáá áááł áááŤáᢠáĽá á¨á ááłá¨ áá¨áĽ á áááá˝ á¨áá°ááá፠áááľ ááááľ á áľáá˝ á áłá áááľá áĽ.á¤.á .
áŁááśá˝ ááᢠáĽá á᪠áľáŤáá á á°ááĽá á¨á°áááš áá¸áᢠáĽá á á á˛áśáš áĽá´áśá˝ áá°á¨áľ áááŽááľ á áľá፠á¨ááá°á áá á¨ááá áá°áĽ 1áĄ2 áĽáá°áá áŤáá áŤáá˘
áľááá ᣠáśáľáąáá á¨áááá áááá˝á á°ááŁáŤá á áľááááᥠááŽáľáŁ áŁá˝ áĽá áľáŤ ááľá˘ áĽááá áááá˝ á á°ááŁáŽá˝ á¨á áááá áŁá áŞáŤáľ áá á¨áá°á á°á˝áá áŤáłáľáŤá. áľááá ᣠáá áá áŁá ᪠á á°áá¨áľ á ááľ áá áááľááἠááľááá ᣠáľáááá á¨áľááŁá áá¨ááá áľá áľáááá¨áľ áá áĽáá°áááľá°áááľ áá˛áŤáá ááá áááááá á˘
ááá áá°ááťá˝á á¨áľá и ááá áááŁáŽáš á ááŽáľ áľá á°áá¨áľ ááľáĽ ááááŁáᢠáááłáᣠá áĄáľá áľáᣠá áááááąá áĽááľááἠá¨ááá áŤáłáááá° Odnoklassniki á¨á°á°áá á¨mp3 áááá˝ áľáĽáľáĽ á¨áľáŤáŽá˝ áŤáłáá á á¨ááá á¨ááŤá áá á ᢠá áĽáŤ ááľ áŤá á áááááľ ááłá ááááᢠá¨ááá áľáŤááľáááá, áá á á¨ááááá á¨áľáá˝ áá á áá°á á áŤá°áááá.
á°á¨á᪠ááľááŽá˝ áĽáá°áá á¨á°áááąáŁ á¨á°ááŁá áááá áááá áá° áá á áááááľ áľá áá¨á¨áť á áá¨á á¨á áááááľ áľááťá˝áá á ááŁá ááá áĽáá˝ááááĄ- web.front.prod, áŤáłáá.ááá.áŁá˝, áľáŤááľáááá.ááá.áľáŤ ááľ.
áĽá á áá, á¨á áááááąá áľá áľáááá¨áľ, áá á áááľ á°ááŁá áĽáá°áá°áŤ áĽáť áłááá á¨áááá°áááľ áááá áááľá ááłáááąá, ááá°.
ááá ááá áłáá áá, áá á ááľ ááŤáŤ áĽáááľ á á. á á ááľ áá˝á áá á¨áá°áŠ áľáŤáá˝á áá ááá áááá á ááťáá.
ááłáŤáľ á¨áťáááᥠáŁá˝ á á¨áá°á áááł á¨áá á á¨áá áĽáť á¨á˛áአááĽáśá˝áŁ á¨ááŤá á áĽáŽ á¨á°á°áŤá á¨ááááľ á˛áአáááááĽá á ááá áľáŤáá á áĽáŠ áááł áá°áŤáᣠáĽá á ááŽáľ áľáŤá áá ááá á áááľ á°á˝áĽá á á°ááŁá á¨ááᢠááá áá áá á¨áĄáľá á°ááŁá á¨ááľáłááľ áá á áááľ ááľáŤáľ á¨ááá¨, á¨á፠á°á˝áĽá ááľááá ááłáŤá. áá á¨ááá áľ ááááŤáľ á¨ááŽáľ áľáŤá á¨á áááŁáŁáŞá áá á°á¨ áľááľáł áá¸ááŤáá˝ ááľáĽ âáłáĽáŚâ áľááá áá - á áá¤áąá ᣠáá¸á፠áá¨áá áŤááá á áĽá ááŽá°á°áŠ á¨ááŽáłááąá áľáŤ á á áá ááĽááľ áŤáŤááłáᢠáĽáá˛á ááááą á¨áľáĽáľáĽ áĽáŤ á¨áĽáá á¨á°ááá° á¨áááľ ááŤáŁ áááá¨áľ á 10% áá¨áá áá˝áá.
áááá á¨ááľááá áŤááśá˝ á¨ááŹáśá˝ ááľáŁá áá¨á áľááá¸á áľáŤááá áááá á¨á áá á¨áŁáľ áá. á¨áĄáľá áľáŤá ááľáĽ áŤáá ááŹáľ ááááŞáŤ á¨á°á¨á°, á¨ááŤá á áŹáĽá áá á¨áá°áááá á¨ááááŞáŤá áááá, áĽá ááá ááá ááľá¨á á ááťáá.
á á°á¨ááŞá, áĽá áĽáľáŤáá á¨áťááá á TCP áľáŤáá á áľá፠á¨ááľá áľ á˝ááá áĽáť áá ᨠhsfc á ááŤá¨áĽ á UDP á áá°áŤá. áĽá á TCP áľáŤáá ááľáĽ áĽááłá, á¨áĄáľá áľáŤá áĽá áľáŤááá á¨ááŤááá á¨áá, áá á°áá á¨ááŽáľ áľáŤáá áááá¨áľ 10% áŤá á áá¨ááŤá.
áľá á°áľá ááłááľ
á ááľ-á°áá á˛áá á á¨ááĄáľ ááŚá˝ á ááą á¨áŚáľáááá˛ááŞá áľá á°áľ ááťáťá ááťáťá áá áᢠáľááá ᣠááĽá áľá ááľááśá˝ áĽá á á°ááá˝ ááá á¨áá˝á áááłáá˝á á á áá áááá áá¤á áĽáááááᢠá ááá áááł áĽáááá - á¨ááŤáŁ á áááłáŤáľá˘
ááŤáŁá áŤáą á á°ááŤáŠ ááááśá˝ ááłáŤ áá˝áá. áá á á áá¸áŁáŤáá ááľáĽ áŤá áá¨áŤáŁ áľá á°áľ ááá áľá á°áľ ááá áá˝ááᣠá áá ááááŤáľ á¨ááŽáľ á°ááŁá á ááááŁá¨á áá á¨á°ááá¨á°á á áá áĽá ááĽáśá˝á áá áá ááááŤáᢠá ááľ ááłá áá á¨á á ááľ ááᢠá ááľ ááľáĽáľáĽ á áááŞááá á áá°áá á áĽá áá áĽáá°áá á°ááś áĽáŤáąá á áá°áĽ áĽá á፠á áááŁáľ á áá¨á¨áť á˝áአáá° ááá áŤááá áá°áľ ááŁá˘ áĽá á¨ááŽáľ áľáŤá á¨á°ááłáłáŠ áááá˝ ááľáĽ á¨áááš áá á¨áá á áľá፠áľááá áááá á¨ááááľá á¨á áááŁáŁáŞ ááĽáśá˝á áá áá ááá¨á˘ á áá áááł, áááá, ááá ááááá á¨á˛áአáá áŽáł, ááá á áľáá. á ááľ á°ááŁá á áŽáł á¨á°áá°á áľáŤá áĽá á ááá áᢠáľááá , á á°ááłáłá áá˝á áá á¨áá°áŠ áŁá˝ áĽá ááá˝ ááŽáľ áľáŤáá˝ ááá á ááľá°ááá.
ááá°áá ááá á¨áá˝á á˝áá ááŤáŁá ááá°á áá. áĽá áĽáá áĽáá°áá ááľááá ááá˛áá˝ áŤáľáááᣠááá áŤááá¸ááᣠáśá¨á áŤáą áĽáŠ áľáŤ áá°áŤáᢠááá áááľ ááťáá á¨ááŽáľ á°ááŁáŤáľ áá áá áłáá ááľááá ááᲠá áá¸áᢠá ááłááľ áá on_failureá ááĄáľá áľáŤáá˝ ááá ááŽáľ áŽáá´áááŽá˝á ááá¨á áĽáá ááááá˘
á ááľ áá ááŽá á¨áááá á¨áá áá ááľá¨á áá˝áá?
á ááá˝ ááá¨áľ áĽáá°ááťáá ááŤáŁáá á áá áá˝á áá áŤááą. áĽáá áá á¨ááŤáľá°ááá ááá áááŤáŁá á¨á°áá°á á á¨á áá á áľáŤáť(áá˝) áá áĽáá°ááá ááá˘
áŽáá´áááŽá˝ áĽááá áŽáá´áááŽá˝ á¨áá áŠáŁá¸á áááŽá áá˝áá˝ áá á ááľ á áááľ á¨á áá á áľáŤáťáá˝á ááá°áĽ áĽáá˝áááᢠá¨ááŤá áŽáá´ááአá áá áá˝á áá á˛ááł á¨á áá á áľáŤáťá ááá¨áŤá áĽá ááá á°áá ááťá¸á áĽáá áĽáá°á°áááłáá° áá¨áłáľ á ááŁá¸á áĽá á áá áá° áá á áľáŤáť áááľ á ááŁá¸á áá á á¨á°áᨠá¨á áááááľ ááá á áááááľ áŤáľááááá.
á¨á áááááľ áááľ ááš ááᢠá¨á áááááľ áááἠááá°áŤááľ á¨á°ááŤá¨ á¨áľá
á°áľ ááťáťá á áá ፠áá áĽá áááľááá˝ á áᢠáĽááá áá áĽáá°áá
áŤá áááľááá˝ á¨áááľ ááá á ááááŽáá˝á á°ááŁáŤá áŤá°ááá, á°á¨á᪠áá
á¨áľá á KV áá¨ááť ááá áŤá¨ááš, ááá°.
ááá áá, á¨á°áᨠáááἠá¨áá°áá á á áľáááááľá áááľáááľ áĽáááááá, ááááŤáąá áá
áááľ á áááľ ááľáĽ ááá á áááááśá˝ á¨áá ááá áľ ááłá áľáááľ ááľá°ááá
áááľ áá. áá
áááľ áá
ááłáŤ á¨áá˝á á¨ááľááľ ááĽáĽ áá, áĽá á áŁá áľá
á°áľá á¨áááá áááľá ááá¨áĽ ááá áááááľ áŤáľáááááłá, áá
á á áŁá á áľá¸ááŞ, áá á¨áááľáľ áĽá ááľ áá.
áĽá á ááľ á°á¨á᪠áľáá
á˝ááᥠá¨áľáŽá áá á¨á° áááłá˝á á¨á á˛áą áá á áĽáŽ áĽáá˛á áŤáŁ á ááľ ááááľ á¨á áááááľ ááá áĽáááľ ááá áá áááá áĽáŤáá˝á áĽáá°áá ááá á ááĽáᢠáĽá áľáŤ á áᣠáĽá á á ááłááľ áŚáłáá˝ á áľááá° ááá á¨ááá á°á¨á ááá á ááĽáł á¨áááľáá áá á¨áá°áŠ áá
á°á á°á¨á áŤáá¸á ááłáŞáŤáá˝ áá á˛áᣠá¨áááťá ááᢠáĽáá° á¨á°áá°á¨áą á¨áááľá ááľáá˝á á áá áá á¨áá
á°ááŁá áľáá áŤ
á á ááľ á°áá ááľáĽ, á ááá ááŤáŁáá áá¨á°áá, áááľá áĽáŤááłááą á¨á°ááŁá ááłá á¨áŤáą á¨á áá á áľáŤáť á áá. áá á áľáŤáť "áá" áá: á áááááą ááááŞáŤ áá° á°áá á˛áá ááĽáŤááłááą ááłá ááá°áŁá. á ááľ á áááááľ á á áááľ á áá á¨á áľ áá á¨á°ááŤáŠ á¨á áĽááľ áĽááľ á¨áá á¨á á áá¨á¨áť á¨áá°áá á ááŁááá˝ áĽáá°áá á¨á áĽá á¨á áá á áľáŤáťáá˝á ááá°áĽááłáá˘
á ááá á, áĽááá á áľáŤáťáá˝ á ááááĄá: á ááľ áá ááá°áŁá áĽá á áááľ ááľáĽ áŁáá á¨á áááááľ ááá áá áááĽáá. á¨á áá á áľáŤáťáá˝ á á ááłá¨ áá¨áĄ ááľáĽ áŤááľá ááŤáŁáá˝ áá¨á°áá. ááŤáŁá áá° áá ááŽá á¨á°ááá á áľáŤáťá áá¨á°áá.
áľááá á¨á áááááľ áľá áá° á áá á áľáŤáťáá˝ áááá ááľáĽ áááááą á áŁá á áá á áá ááá¨áŤáᢠá á áááš ááááŞáŤ áá á¨á ááľáá¸áá á¨á áááááľ á ááŁááá˝ áľá áĽáá°áá á¨á°ááá¨áą (1.áĽáş-áľá.áĄáľá1.áľá.á¨ááľ.ááŽáľáŁ 2.áŚá-áľá.áĄáľá1.áľá.á¨ááľ.ááŽáľáŁ âŚ), á á˛á¤áá¤áľ ááľáĽ áĽá á áá á¨áááľ FQDNs áá áĽáá°áááłá°á áĽááľá°áááá. áá ááᣠá¨á áááááľ ááłááá˝á áľá áá° á áá á áľáŤáťá¸á ááá á¨á˝áŁ á¨á˛ á¤á á¤áľ ááŽáśáŽáá áĽáá ááááᢠá á°á¨ááŞá ᣠáá Რá¤á á¤áľ á¨ááá áŽáá´áááŽá˝ á¨á°áŤá á¨á áá á áľáŤáťáá˝á ááááłá - áááąá áĽá¨áŽáĄ áĽá áá (áŚáľáľ á ááá˝ áĽá á áá áááá áĽáá á ᣠáĽá áĽá፠á¨á°áŤá á ááľáľ á áľáŤáťáá˝ á áá - á ááľáąá ááááłá)ᢠá°áá áá˝ áá áá áá¨á á¨á°áá á á¨á ááľáą á ááá˝ áá áááááľ ááááľá¨áľ ááááŤá - áĽá áľááá áĽá¨á°áŠ áŤááľá áááľááᢠáá á°ááááľá á¨áááľáá áľ á ááŤá á¨á áá á áľá°ááá ááᥠᲠá¤á á¤áľá ááá á áááááľá ááááľá á áŤáŤáľáľáᣠáá áááľ á¨áá¨áá á áľáááááľ áĽá á¨áĽááá á áľáááśá˝ áľá á°áľ ááťáťá ááá¨ááἠááá á áľá¸á᪠á˝ááŽá˝ á¨áá áááľ ááᢠá á°á¨ááŞá ᣠá¨á á ááá áááłá á á áŤá á ááá¨áŽááŁá¸á ááłá á áááááśá˝ ááľáĽ ᣠᲠá¤á á¤áľ á ááŤá˝ áá áá á áá˝áá ᣠáá á ááá á¨á áá á áľáŤáťáá˝á áá° áá á áŤáľááĄá˘
á¨áŽáá´áááŽá˝ á áľá°ááᣠáĽáá˛á ááááąá á¨á áá á˝ááá áá°áá á ááá áŤááá ááá áá˝áá - áĽá áĽáá´áľ áĽáá°áá°áŤ á áá¨á°áá ááłá áĽáááá¨áłááá˘
á ááľ á°áá ááłá ááááŽá á¤á 1 áĽáá˛áŽáĽ áľáĽáá á°á áĽáá á 1.áĽáş-áľá.áĄáľá1.áľá.á¨ááľ.ááŽáľ á á áľáŤáť 1.1.1.1. á ááľ minion áá áá°áŤá
á áá á á ááľ á°áá ááł áĽá á M1 minion ááŤá¨á áŤáá áááááľ áĽáá°á á áĽááľáĽá˘ á¨á ááľ á°áá ááłá á áá á¤á 1 áá á áá ááľáá á ááá áááľ áá áá áŤáᢠáŤá áááľ á M2 minion áĽáá˛ááł áľáááá áá°áŁá web.group1.web.front.prod á á°ááłáłá á áľáŤáť 1.1.1.1. á áá á 1.1.1.1 á ááľááአáá áááľ áĽááľ á ááľ á¨ááአááááśá˝ á áá: á M1 áĽá á M2. áĽáá°áá áŤá áááśá˝á ááááłáľ á BGP ááľáłáá፠áá á¨á°ááá¸áá Multi Exit Discriminator áĽáá ááááᢠáá á¨ááľáłáááŤáá ááááľ ááĽá°áľ á¨ááŤáłá ááĽá ááᢠá¨á°áአááááśá˝ ááŤá¨á, áá á°á ᨠMED áĽá´áľ áŤáá ááááľ ááá¨áŁá. áŁá á ááľ-á°áá ááł MEDá áĽáá° ááŤáŁ á áá á áľáŤáťáá˝ áá á áŤá á áľáá áá°áááᢠáááááŞáŤ áá á áľáŤáťá á¨á°ááá á á á áľáá MED = 1 áá. á áĽáá°áá á áááľ á¨á á°á áá ááŤáŁ á˝ááá áááł, ááłá MED ááááłá, áĽá M000 ááľááá á áľáŤáťáá 000 ᨠMED = áá áááľá°ááá áľáááá ááá áá. 2 á á¤á 1.1.1.1 áá á¨áá áŤá ááłá á áá ááłá áá ááá áááááľ áĽáá°ááá áááŤá ᣠáĽá á¨áĽáą á°á¨á᪠áᣠáááł á¨ááłá áá áŤáá áááááľ áĽáľáŞáłá°áľ áľá¨áľ áĽáá á áá á ááá ᣠáĽáą áĽáá° á áŽá ááá°áľ ááááá˘
á á°ááá˝
ááá á¨ááἠááá¨á á áľá°áłá°á áľáááśá˝ áááá áĽáá á ááľááśá˝á á°ááŁáááľ áŁáá ááአáááá. á á¨áŚáłá áááľ ááťáá á¨ááŤáŁ ááĽááľ á¨á°ááá° ááá˘
áĽáá° á¨ááἠááĽá¨á á ááľ ááá á¨á፠á áá áááá˝ ááľáĽ áĽáá° ááá áĽáá˝áľ áŤá áľááá°á á á°áá áĽáá´áľ áĽáá°áááľá°áááľ áĽááá˘
á á°á ááłáł ááĽá¨á á áľá°áłá°á áľáááľ áá áááľ áá? á ááááŞáŤ á°á¨á, áá á¨áĽá áá˝áá˝ ááá á¨á ááľ áá ááľááľ áá, áĽá á¨ááĽáĽá áľáááą áĽá ááŤáŁáá˝á á á°ááłáłá áá áááá áŤáľááááá. ááá áá á á°áá á áŁá áá á á°á á¨áá, ááá á°ááŁáŤáľ áĽáá°áá áááá˝ áááľá´áŽá˝ ááá°áĽ á¨áááťáá áľ áááł áá¨á°áľ áá˝áá, ááááŤáąá á¨áá¨á ááĽá¨á á¨ááĽáľ á á á ᨠ100% áááľ á áłá˝ ááááłá.
áĽááá áá á á°ááá˝ á¨ááĽáĽá ááĽááĽá ááľááľ áá á áĽá¨á áááŁáᢠáá á ááłáŞáŤá áĽáá˝áľ ááááŤáľ áá¨á°áľ áá˝áá, ááá áá áĽá áá á á°ááá˝ á áááá¨áŤá¸á, áĽá á¨ááĽáĽá ááĽááĽá áĽáŤáą á á°á¨áá¨á áááľ ááááŤáľ áááľáá.
á áá áá áá ááľá¨á áá˝áá?
á¨á áá ááá°áľ áááľ á áá á¨á° áááľ ááľáĽ á¨áá°á¨á áĽáá áľáá´áá˝áŁ ááá°áśá˝ áĽá áľááŞáľ áľáŤáá˝ á áᢠáĽáŤááłááą ááá°áľ á¨áĽá ááŤá˘áŤ ááľáá˝á áá° ááá°áśá˝ áááľá¨áľ áĽá áááá á ᣠáŽáá´áááŽá˝á áááľááłáľ áĽá áááľááá ááá° á¨á°áá°á áá áááľáľ áá˝ááá˘
á¨ááááá¸áá á¨á áááááśá˝ á°áá¨áľ áĽáá°áá áĽáááá¨áłá¸á áĽá á ááááŞáŤ á¨áľáášá á°ááŁáŤáľ áá¨ááá áĽáá°ááááá áááá°á áĽááááá˘
á áĽááἠáĽááá á¨á°á áá áĽáŤááá˝á á ááľáŹáľ áá á ááĽáł á¨ááłá°á áá°áśá˝ áá¸á áááľá ááŽáľ. áá áá á áĽáá ááááᢠáá°áŁ á áľá፠- ááá¨áá ááá°áĽ á¨áá˝á ááĽá. á ááľ áá¨á á¨áá°á á áľá፠á¨áá°á á á¨áá á áááááśáš á á áľá፠ááááŁáá˘
á ááŽáľ áá á¨áá°á á áľááŤáá˝á áĽáááľáŁáá, 0; á áĄáľá - áľáá˝ áá á°á, 100; áľáŤ ááľ áá - áĽáá˛áŤáá áá á°á, 200. á áľá፠á¨áá°áŁá¸á áááŽá˝ á á°áá¨áľ áá°áá áŤá. á á°áá¨áľ áá á°á á¨áá ááá á°ááŁáŤáľ á°ááłá á áľá፠áááŤá¸ááᢠá ááŽáľ ááľáĽ áŤá áá¸ááŤáá˝ á¨áááŁá á ááľ áĽáá˛á¨ááą á¨áááá á áľá፠á¨áá°áŁá¸áá áá¸á፠= 0 áĽá á¨ááľ ááĄáľ á°áŤáá˝á = 1 áĽáááľáŁáá ᢠáááłá ᣠááááŞáŤ ááá áááłá á¨ááľ áááľ áĽáá˛á¨ááľ á¨áááá áĽá á¨ááá áááŁá áĽáť á¨á፠ááááá áá á°á á áľá፠ááľá áľ áĽáá˝ááá - 10.
ááŁáŠ á˝áá á¨ááĽáľ áĽáĽá¨áľ ááᢠáľááá ᣠá¨áá°á áá á áŤáá ááŁáŞáŤáŁ á¨áá¨á ááá¨á á áłáŤážá˝ á áá°áłáŠáᣠáĽá á áŁá áĽá á áááááśá˝á áĽáá°áá á áľááá¨áá á áá áááá á°á á¨ááá á á ááĽáśá˝ á¨ááᢠáá áá á áááááśá˝á áááľáá á á¨áľáášá á°ááŁáŤáľ áĽáá°áá°áá ááá°á áŤáľáááááłá á˘
á¨áá°áŁ á áľá፠á á°áá¨áŁ áááá á¨áĄáľá áľáŤáá˝ áŤáá ááłá˝ á áľáá ááľáááľ ááá°áĽ á áá˝ááᤠá ááłááśáš ááááłá áľáŤ á áľááá áá¸áᢠáľááá , áá¨áĽáť á ááá°áá á¨á áľá፠á áľá፠á°ááŁáŤáľ. á ááááĽá áľ áá á¨á áŤá á¨á áľá፠áĽáŤ á áľá፠áá°áĽ áá˝ááᣠáááľáᣠáááᣠá¨á áá á áá áá áááá˝ á¨áá áá á°á á áľá፠á¨áá°á á á°ááŁáᢠá áá áááł, áá á°á á áľá፠á¨áá°á á á°ááŁá ááááŁáľ áłáááἠáááŤá, áááľá á á áá ááĽáśá˝ áŤáá ááĽáą á°áľáá ááŽá á áááá.
á áĽá á°áá¨áľ ááľáĽáŁ ááŽáľ áĽá áŁá˝ á°ááŁáŤáľ áĽáŤ ááľ á°ááŁáŤáľá ááľáá ááá áĽáá˛áŤááᣠááá áá á ááłá¸á áááá á áá°ááᣠᨠ200 áá áĽáŠá á¨áá á áľá፠á ááĽááľ á¨á áľá፠á áľááŤá áááá˝ á áŁá ááá ááᢠáá áἠááľáĽáľáĽ á°ááŚá˝á ááááá˝ á¨áĽáá á°áá¨áľ áá áá áĽáá˝áááᢠáááłáᥠáááá áἠáááłá á á ááĽá áľ á¨ááá á¨ááá á°ááŁáŠá áĽáá°ááá°á áĽááłáᥠáá°ááłá á áááá˝ á áľá፠á ááľá áľáĄ 10.
áá á¨á˛á˛ á á°ááá˝
ááááľáá á á ááá á¨áá¨á ááá¨á ááłáŤ á¨áá˝áá? ááĽá¨ ááá áĽáŠ ááĽá áá áá˘
áĽá ááá á°á # á á áááľ áĽáŤá áľááľ áĽááłáá ááá¨áá¨á á¨ááá°ááá áá ááá˘
á¨ááááŞáŤá áľááľ áááá ááᢠáĽáŤááłááą áŁá á ááľ á°áá ááłá ááĽáťá áá áĽá áá˝áá˝á á á ááľ á¨ááἠááá¨á áĽáť ááľá°áłá°á áá˝ááᢠáŤá áááľ á áľáá˝ ááá á á°áłáłá° á¨áŚááŹá°á áľáááá˝ ááááŤáľ á¨á°áá ááĽááľ á¨á ááľ á¨ááἠááĽá¨á áĽáť ááŁáľ áá. ááá
ááá ááᥠá¨áá°áá áŞáŤá áĽá á¨áłáł á
ááá˝ á ááá á¨áá¨á ááá¨áá˝ ááľáĽ á¨áááá áľ á¨ááá¨áŞáŤ ááᲠá ááᢠáľá
á°áľá á¨áááá á¨ááἠááłáá˝á áĽáá áááá áĽá á á¨ááá á áááłáŤáśá˝á áĽáááľáťááá˘
á¨áᏠááᎠá áŤáľ á¨áá¨á ááá¨áá˝ á áá ᣠáá
áááľ á áŤáľ á¨á°ááŤáŠ ᣠáá á áá áááá°á á¨á ááľ á°áá ááłááá˝á˘
áá á ááŤá¨áĽ á áŤáá ááľááľá áĽáť áłááá á¨áŚááŹá°á áľá á°áľá áá¨áá¨áá.
á á°áá˝ ááááŤáľ áá áá áá°á¨á áá˝áá? á ááľ áŚááŹá°á áá°ááá áĽáááł á¨áá ááá á á°áá ááá á¨áá˝á áľááá á˛á°áĽáŁ áá áŤá á áĽááłá°á ááá¨áľ á áľáááľ áľáá˝ á˝áá áĽáá˛ááł áá á¨á áá˝ááᢠáááłá ᣠáá á¨áĽá á ááá˝ á¨á áá ááá፠ááá áĽáááł áľáĽáá á¨áá - á¨á°áŁááľá áĽááľ ááááľ ááá á¨ááľáá áľá áááἠᣠáĽá á á á˛áą á áá¸áŁáŤá ááľáĽ áŤááá á¨áľáŞáľ ááĽá áĽáť á áá°ááá˘
áá¤áśá˝
á¨á ááľ á°áá áአáŁá áŞáá˝
- áá áááááśá˝ áĽá áááŤáŁáá˝ á°áá¨áľ áĽá ááľáá á¨áľá á á°áŁáĽ áá´, áá á áľáŤá áá áĽáá°áá, áá áĽáá°ááááľ áĽá áĽáá´áľ áĽáá°áá°áŤ áĽá áá á°á áŤá áĽáá°áá á ááĽááľ áááá áŤáľá˝áááłá.
- á¨áĽáá á°ááŁáŤá áĽáá°áááá áááśá˝á áĽá áŁá˝áľá á¨ááŁáá á´ááá-á¨áá˝á áááŤáľá á ááĽáá áááťáťá á minions áá áŤá á°ááŁáŤáľá˘ ᨠcpuset ááá á¨á˛áአáŽáłáá˝áŁ á áá˛áŽáá˝áŁ á¨á˛áአáááááĽá á á᪠ááá˛áá˝ áĽá ááááľ QoS áĽáá ááááá˘
- á á ááľ áá˝á áá á¨áá áŠáľá áŽáá´áááŽá˝ áá á áá áááá á áá°áťááᣠááá áá á¨á፠á°á˝áá á¸á á 20% ááľáĽ áááŤáá˘
- á áááááśá˝á áá° á°áá¨áľ áá°áŤááľ á áŤáľ-á°á á¨á á°á áááá áá¨áłá á áááἠáĽá á áľá-á á°á á°á¨á°á á áľááŤáá˝.
á á¨áĽ
ááá ááá á¨áá áááľá á ááá°áľáá?
- á¨á°ááŤáŠ á¨á°ááŁá áááá˝ á áĽáá á á°áá˝ áá á˛ááᥠá¨á°áᨠá áááᎠáŤáľáááá¸ááᢠá¨ááŽáľ á°ááŁáŤáľá á ááá ááĽáľá á ááľááἠááľááἠá¨á°áťááŁá ááááŽá áá˝áá˝ áá áŤááá á¨ááĽáľ á á áááá á áá¨áłá°á áŁá˝ áĽá áľáŤ ááľ áľáŤáá˝ áááἠá ááŁá¸áá˘
- á ááłá°ááľ á°ááŁáŤáľ áĽá
á áá á¨ááá ááĽáśá˝á áááľ ááľáĽ ááľááŁáľ á áľááá áá-
- á¨á ááłá¨ áá¨áĽ á¨áá°ááá፠áááľ;
- á¨á˛áľáŽá˝ ááááśá˝ áĽá "áľáááśá˝".
- á á ááľ á°áá ááľáĽ á°áá¨áľ áá¨ááá˝ á áá áá áááľá áá áľááá°á ááá˝ áá áľ á áááááśá˝, ááĽáśá˝ áĽá ááĽáśá˝ áááááľ áľáááá˝ áŽáłáá˝, áŤááá á áľá፠á¨áá áá á áľáááááľ.
- áá á°ááá˝ áĽá áá á°ááá˝ ááá˝ ááá áááááľ á¨áĽá ááŤáŁáá˝ á¨á°á áľá áááŁáľ á áľáááááľ
- á¨á áááááľ áááľá áá ááľ áá á áľááľ á°ááŁáŤá ááľá¨á á¨áááťá; á áááľáá á áľá°áááá˝ áá á¨á°áľá°áááą á°ááŁáŤáľ áá áá¨á á áá á áĽáŽ á¨ááá á áľáááááľ - áŽáá´áááŽá˝á á°á¨áľá á âááâ á áá á áľáŤáťáá˝ á¨áááł ááá ᣠáĽá á áá¤áąá ᣠá¨áľáá á¨á ááłá¨ áá¨áĽ áá á¨á° áááľ áá áአáá á°áľ á áľáááááľá˘
áĽááá áá á°ááŁáŤáľ áĽáá áááľáááľ á ááŁá áááľááá˝ áá ááá ááťáťáŤáá˝á áá áááᣠáĽá á¨áľáŤáá áá á á¨ááááá á ááᣠá áááľ á á°ááłáłá á¨á°á ááá ááŞáá˝ á¨áŤáłá˝áá áááľá áááááľ áĽáá°ááá˝á á°ááááĽáᢠááá áá á¨áĽááľá áááľá áááľáŤáľ áĽá áááłá á á áŁá ááá áááá - áĽá á¨ááŤáľááááá á°ááŁáŤáľá á¨áá°áá á ááľááá áá áááŤáá˝á á ááŤááá˘
á¨áá¨á¨áťáášá ááľááŽá˝ áááŤááĄ, ááľáááľáľá áĽá á áľáŠá¨áľá áĽááá°áááá!
ááá: hab.com