Вақте ки дар Linux Сервери пойгоҳи додаҳо ногаҳон қатъ мешавад ва сабаб бояд муайян карда шавад. Ин метавонад якчанд сабаб дошта бошад. Масалан, СИГСЕГВ — нокомӣ аз сабаби хато дар сервери пуштибонӣ. Аммо ин кам аст. Аксар вақт, шумо танҳо фазои диск ё хотира тамом мешавад. Агар шумо фазои дискро тамом кунед, танҳо як роҳи халосӣ вуҷуд дорад - ҷой холӣ кунед ва пойгоҳи додаҳоро аз нав оғоз кунед.
Қотил аз хотира
Вақте ки шумо сервер ё раванд аз хотира тамом мешавад, Linux Қотили Out-Of Memory ду роҳи ҳалро пешниҳод мекунад: қатъ кардани тамоми система ё қатъ кардани раванд (барнома)-е, ки хотираро мехӯрад. Албатта, беҳтар аст, ки равандро қатъ кунед ва системаи амалиётиро аз вайроншавӣ наҷот диҳед. Хулоса, қотили Out-Of Memory равандест, ки барои наҷот додани ядро аз вайроншавӣ барномаро қатъ мекунад. Он барномаро барои нигоҳ доштани кори системаи амалиётӣ қурбон мекунад. Биёед аввал дар бораи тарзи кори OOM ва чӣ гуна идора кардани он сӯҳбат кунем ва сипас бубинем, ки чӣ гуна OOM қотили кадом барномаҳоро қатъ карданро муайян мекунад.
Яке аз вазифаҳои асосӣ Linux — Ҳангоми дархост кардани хотира ба равандҳо, ба онҳо хотира ҷудо кунед. Одатан, раванд ё барнома аз системаи амалиётӣ хотираро дархост мекунад, аммо онро пурра истифода намебарад. Агар системаи амалиётӣ хотираро ба ҳамаи онҳое, ки онро дархост мекунанд, аммо нақшаи истифодаи онро надоранд, ҷудо кунад, система зуд хотираро тамом мекунад ва система аз кор мемонад. Барои пешгирии ин, системаи амалиётӣ хотираро барои раванд захира мекунад, аммо дар асл онро ҷудо намекунад. Хотира танҳо вақте ҷудо карда мешавад, ки раванд воқеан нияти истифодаи онро дошта бошад. Баъзан системаи амалиётӣ хотираи холӣ надорад, аммо он хотираро ба раванд ҷудо мекунад ва вақте ки раванд ба он ниёз дорад, системаи амалиётӣ онро агар имкон дошта бошад, ҷудо мекунад. Камбудии он дар он аст, ки баъзан системаи амалиётӣ хотираро захира мекунад, аммо дар ҳолати зарурӣ, хотираи холӣ вуҷуд надорад, ки боиси вайрон шудани система мегардад. OOM дар ин сенария нақши калидӣ мебозад ва равандҳоро қатъ мекунад, то аз воҳима дар ядро пешгирӣ кунад. Вақте ки раванди PostgreSQL маҷбуран қатъ карда мешавад, дар гузориш паёми зерин пайдо мешавад:
Out of Memory: Killed process 12345 (postgres).Агар система хотираи кам дошта бошад ва он озод карда нашавад, функсия даъват карда мешавад out_of_memory. Дар ин марҳила, вай танҳо як кор дорад - як ё якчанд равандро анҷом диҳад. Оё OOM-қотил бояд равандро фавран қатъ кунад ё метавонад интизор шавад? Аён аст, вақте ки out_of_memory даъват карда мешавад, ин бо сабаби интизории амалиёти воридот/баҳо ё пейджинг ба диск аст. Аз ин рӯ, қотили OOM бояд аввал санҷишҳоро анҷом диҳад ва дар асоси онҳо қарор кунад, ки ин раванд бояд қатъ карда шавад. Агар ҳамаи санҷишҳои дар поён овардашуда мусбат бошанд, OOM равандро қатъ мекунад.
Интихоби раванд
Вақте ки хотира тамом мешавад, функсия даъват карда мешавад out_of_memory(). Он функсия дорад select_bad_process(), ки аз функсия баҳогузорӣ мегирад badness(). Процесси «бадтарин» максаднок карда мешавад. Функсия badness() аз руи коидахои муайян процессеро интихоб мекунад.
- Ядро барои худ каме хотираи ҳадди ақалро талаб мекунад.
- Шумо бояд хотираи зиёдеро холӣ кунед.
- Барои қатъ кардани равандҳое, ки хотираи камро истифода мебаранд, лозим нест.
- Процессҳои ҳадди аққал бояд анҷом дода шаванд.
- Алгоритмҳои мураккабе, ки имконияти анҷом додани он равандҳоеро, ки худи корбар мехоҳад анҷом диҳад, зиёд мекунад.
Пас аз анҷом додани ҳамаи ин санҷишҳо, OOM холҳоро тафтиш мекунад (oom_score). ООМ таъин мекунад oom_score ҳар як раванд, ва он гоҳ зарб ин арзиш бо ҳаҷми хотира. Равандҳои дорои арзишҳои калонтар эҳтимоли қурбонии OOM Killer мешаванд. Равандҳое, ки бо корбари реша алоқаманданд, холҳои камтар доранд ва эҳтимоли камтар маҷбуран қатъ карда мешаванд.
postgres=# SELECT pg_backend_pid();
pg_backend_pid
----------------
3813
(1 row)ID-и раванди Postgres 3813 аст, бинобар ин дар қабати дигар метавон бо истифода аз ин параметри ядро холро ба даст овард. oom_score:
vagrant@vagrant:~$ sudo cat /proc/3813/oom_score
2Агар шумо нахоҳед, ки OOM-Killer ин равандро тамоман кушад, як варианти дигари ядро вуҷуд дорад: oom_score_adj. Барои кам кардани имконияти анҷом додани раванде, ки шумо арзиш доред, арзиши калони манфӣ илова кунед.
sudo echo -100 > /proc/3813/oom_score_adjБарои таъин кардани арзиш oom_score_adj, OOMScoreAdjust -ро дар блоки хидматрасонӣ насб кунед:
[Service]
OOMScoreAdjust=-1000Ё истифода баред oomprotect дар як даста rcctl.
rcctl set <i>servicename</i> oomprotect -1000Маҷбуран қатъ кардани раванд
Вақте ки як ё якчанд раванд аллакай интихоб шудаанд, OOM-Killer функсияро даъват мекунад oom_kill_task(). Ин функсия сигнали қатъиро ба раванд мефиристад. Дар сурати нарасидани хотира oom_kill() Ин функсияро барои фиристодани сигнали SIGKILL ба раванд даъват мекунад. Ба гузориши ядро паём навишта мешавад.
Out of Memory: Killed process [pid] [name].Чӣ тавр назорат кардани OOM-Killer
В Linux Шумо метавонед OOM-Killer-ро фаъол ё ғайрифаъол кунед (гарчанде ки охирин тавсия дода намешавад). Барои фаъол ё ғайрифаъол кардани он, параметрро истифода баред vm.oom-kill. Барои фаъол кардани OOM-Killer дар вақти корӣ, фармонро иҷро кунед sysctl.
sudo -s sysctl -w vm.oom-kill = 1Барои хомӯш кардани OOM-Killer, арзиши 0-ро дар ҳамон фармон нишон диҳед:
sudo -s sysctl -w vm.oom-kill = 0Натиҷаи ин фармон то абад нигоҳ дошта намешавад, балки танҳо то бори аввал бори аввал. Агар ба шумо суботкории бештар лозим бошад, ин сатрро ба файл илова кунед /etc/sysctl.conf:
echo vm.oom-kill = 1 >>/etc/sysctl.confРоҳи дигари фаъол ва ғайрифаъол ин навиштани тағирёбанда аст panic_on_oom. Арзишро ҳамеша метавон тафтиш кард /proc.
$ cat /proc/sys/vm/panic_on_oom
0Агар шумо арзишро ба 0 муқаррар кунед, пас вақте ки хотира тамом мешавад, воҳимаи ядро на нахоҳад буд.
$ echo 0 > /proc/sys/vm/panic_on_oomАгар шумо арзишро ба 1 муқаррар кунед, пас вақте ки хотира тамом мешавад, воҳимаи ядро ба амал меояд.
echo 1 > /proc/sys/vm/panic_on_oomТавре ки мо аллакай қайд кардем, OOM-Killer-ро фаъол ва ғайрифаъол кардан мумкин аст. Linux метавонад барои равандҳо хотираи бештар аз миқдори мавҷуда захира кунад, аммо дар асл онро ҷудо намекунад ва ин рафтор аз ҷониби параметри ядро идора карда мешавад LinuxТағйирёбанда барои ин масъул аст. vm.overcommit_memory.
Шумо метавонед арзишҳои зеринро барои он муайян кунед:
0: Худи ядро қарор медиҳад, ки оё хотираи аз ҳад зиёд захира кунад ё не. Ин арзиши пешфарз дар аксари версияҳо аст. Linux.
1: Ядро ҳамеша хотираи иловагиро захира мекунад. Ин хатарнок аст, зеро хотира метавонад тамом шавад, зеро, эҳтимол, як рӯз равандҳо онро талаб мекунанд.
2: ядро аз хотираи бештаре, ки дар параметр нишон дода шудааст, захира намекунад overcommit_ratio.
Бо ин параметр, шумо фоизи хотираро, ки барои аз ҳад зиёд ҳифзшуда иҷозат дода мешавад, муайян мекунед. Агар барои он ҷой мавҷуд набошад, хотира ҷудо карда намешавад ва фармоиш рад карда мешавад. Ин беҳтарин вариантест, ки барои PostgreSQL тавсия дода мешавад. Ба OOM-Killer як унсури дигар таъсир мерасонад - қобилияти ивазкунӣ, ки аз ҷониби тағирёбанда идора карда мешавад cat /proc/sys/vm/swappiness. Ин арзишҳо ба ядро мегӯянд, ки чӣ гуна пейджингро идора кардан лозим аст. Чӣ қадаре ки арзиш баланд бошад, эҳтимоли он кам аст, ки OOM равандро қатъ кунад, аммо аз сабаби амалиёти воридотӣ / баромад он ба пойгоҳи додаҳо таъсири манфӣ мерасонад. Ва баръакс - чӣ қадаре ки арзиш паст бошад, эҳтимолияти дахолати OOM-Killer ҳамон қадар баландтар аст, аммо иҷрои пойгоҳи додаҳо низ баландтар аст. Қимати пешфарз 60 аст, аммо агар тамоми пойгоҳи додаҳо ба хотира мувофиқат кунад, беҳтар аст, ки арзишро ба 1 муқаррар кунед.
Натиҷаҳо
Нагузоред, ки "қотил" дар OOM-Killer шуморо тарсонад. Дар ин ҳолат, қотил наҷотдиҳандаи системаи шумо хоҳад буд. Вай процессдои бедтаринро «мекушад» ва системаро аз садама начот медихад. Барои пешгирӣ кардани истифодаи OOM-Killer барои қатъ кардани PostgreSQL, танзим кунед vm.overcommit_memory арзиш 2. Ин кафолат намедиҳад, ки OOM-Killer набояд дахолат кунад, аммо он эҳтимолияти маҷбур кардани раванди PostgreSQL-ро барои қатъ кардан коҳиш медиҳад.
Манбаъ: will.com
