{"id":104459,"date":"2022-06-21T15:36:41","date_gmt":"2022-06-21T13:36:42","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah"},"modified":"2022-06-21T15:36:41","modified_gmt":"2022-06-21T13:36:42","slug":"facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","status":"publish","type":"post","link":"https:\/\/prohoster.info\/fr\/blog\/news\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","title":{"rendered":"Facebook a pr\u00e9sent\u00e9 le m\u00e9canisme TMO, permettant d'\u00e9conomiser 20 \u00e0 32 % de m\u00e9moire sur les serveurs.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Des ing\u00e9nieurs de Facebook (interdit en RF) ont publi\u00e9 un rapport sur l'impl\u00e9mentation de l'ann\u00e9e derni\u00e8re de la technologie TMO (Transparent Memory Offloading), qui permet d'\u00e9conomiser consid\u00e9rablement la m\u00e9moire vive sur les serveurs en d\u00e9pla\u00e7ant les donn\u00e9es secondaires non n\u00e9cessaires vers des supports moins co\u00fbteux tels que les disques NVMe SSD. Selon Facebook, l'utilisation de TMO permet d'\u00e9conomiser entre 20 et 32 % de la RAM sur chaque serveur. Cette solution est con\u00e7ue pour \u00eatre utilis\u00e9e dans des infrastructures o\u00f9 les applications fonctionnent dans des conteneurs isol\u00e9s. Les composants de TMO fonctionnant au niveau du noyau sont d\u00e9j\u00e0 int\u00e9gr\u00e9s au noyau Linux. <\/p>\n

Du c\u00f4t\u00e9 du noyau Linux, le fonctionnement de la technologie est assur\u00e9 par le sous-syst\u00e8me PSI (Pressure Stall Information), disponible depuis la version 4.20. PSI est d\u00e9j\u00e0 utilis\u00e9 dans divers gestionnaires de p\u00e9nurie de m\u00e9moire et permet d'analyser les informations sur le temps d'attente pour obtenir diverses ressources (CPU, m\u00e9moire, entr\u00e9e\/sortie). Gr\u00e2ce \u00e0 PSI, les gestionnaires en espace utilisateur peuvent \u00e9valuer plus pr\u00e9cis\u00e9ment le niveau de charge du syst\u00e8me et la nature du ralentissement, ce qui permet de d\u00e9tecter les anomalies \u00e0 un stade pr\u00e9coce, lorsque celles-ci n'affectent pas encore de mani\u00e8re significative la performance. <\/p>\n

En espace utilisateur, le fonctionnement de TMO est assur\u00e9 par le composant Senpai, qui ajuste dynamiquement la limite de m\u00e9moire pour les conteneurs d'applications en fonction des donn\u00e9es re\u00e7ues de PSI via cgroup2. Senpai analyse les signes de d\u00e9but de p\u00e9nurie de ressources via PSI, \u00e9value la sensibilit\u00e9 des applications au ralentissement de l'acc\u00e8s \u00e0 la m\u00e9moire et tente de d\u00e9terminer la taille minimale de m\u00e9moire n\u00e9cessaire pour le conteneur, afin que les donn\u00e9es n\u00e9cessaires au fonctionnement restent en RAM, tandis que les donn\u00e9es accessoires, qui se trouvent dans le cache de fichiers ou ne sont pas directement utilis\u00e9es \u00e0 ce moment-l\u00e0, sont d\u00e9plac\u00e9es vers la m\u00e9moire swap.

\"Facebook<\/center> <\/p>\n

Ainsi, l'id\u00e9e principale de TMO est de garder les processus sous stricte surveillance en ce qui concerne la consommation de m\u00e9moire, en for\u00e7ant le transfert vers la zone d'\u00e9change des pages de m\u00e9moire non utilis\u00e9es, dont l'expulsion n'affecte pas significativement les performances (par exemple, les pages avec un code utilis\u00e9 uniquement lors de l'initialisation, et les donn\u00e9es utilis\u00e9es une seule fois dans le cache disque). Contrairement \u00e0 l'expulsion d'informations vers la zone d'\u00e9change en r\u00e9ponse \u00e0 un manque de m\u00e9moire, dans TMO, les donn\u00e9es sont expuls\u00e9es sur la base d'une pr\u00e9vision proactive. <\/p>\n

Comme crit\u00e8re d'expulsion, on utilise l'absence d'acc\u00e8s \u00e0 une page de m\u00e9moire pendant 5 minutes. Ces pages sont appel\u00e9es froides (cold memory page) et repr\u00e9sentent en moyenne environ 35 % de la m\u00e9moire des applications (selon le type d'applications, cette proportion varie de 19 % \u00e0 65 %). Lors de l'expulsion, on prend en compte l'activit\u00e9 li\u00e9e aux pages de m\u00e9moire anonymes (m\u00e9moire allou\u00e9e par l'application) et \u00e0 la m\u00e9moire utilis\u00e9e pour le cache de fichiers (allou\u00e9e par le noyau). Dans certaines applications, la consommation principale est li\u00e9e \u00e0 la m\u00e9moire anonyme, mais dans d'autres, le cache de fichiers a \u00e9galement une grande importance. Pour \u00e9viter un d\u00e9s\u00e9quilibre lors de l'expulsion de la m\u00e9moire vers le cache, TMO applique un nouvel algorithme d'\u00e9change qui expulse proportionnellement les pages anonymes et les pages li\u00e9es au cache de fichiers. <\/p>\n

L'expulsion des pages rarement utilis\u00e9es vers une m\u00e9moire plus lente n\u2019affecte pas beaucoup les performances, mais permet de r\u00e9duire consid\u00e9rablement les co\u00fbts mat\u00e9riels. Les donn\u00e9es sont expuls\u00e9es vers des disques SSD ou dans une zone d'\u00e9change comprim\u00e9e dans la m\u00e9moire vive. En ce qui concerne le co\u00fbt de stockage d'un octet de donn\u00e9es, l'utilisation de SSD NVMe est jusqu'\u00e0 10 fois moins cher que l'utilisation de la compression en m\u00e9moire vive.

\"Facebook<\/center>
\n
Source : opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u0418\u043d\u0436\u0435\u043d\u0435\u0440\u044b \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Facebook (\u0437\u0430\u043f\u0440\u0435\u0449\u0435\u043d\u0430 \u0432 \u0420\u0424) \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043b\u0438 \u043e\u0442\u0447\u0451\u0442 \u043e \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0438 \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u043c \u0433\u043e\u0434\u0443 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 TMO (Transparent Memory Offloading), \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0435\u0439 \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u0443\u044e \u043f\u0430\u043c\u044f\u0442\u044c \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 \u0437\u0430 \u0441\u0447\u0451\u0442 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u043d\u0435 \u0442\u0440\u0435\u0431\u0443\u0435\u043c\u044b\u0445 \u0434\u043b\u044f \u0432\u044b\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0432\u0442\u043e\u0440\u0438\u0447\u043d\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0431\u043e\u043b\u0435\u0435 \u0434\u0435\u0448\u0451\u0432\u044b\u0435 \u043d\u0430\u043a\u043e\u043f\u0438\u0442\u0435\u043b\u0438, \u0442\u0430\u043a\u0438\u0435 \u043a\u0430\u043a NVMe SSD-\u0434\u0438\u0441\u043a\u0438. \u041f\u043e \u043e\u0446\u0435\u043d\u043a\u0435 Facebook, \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u0435 TMO \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u0442 20 \u0434\u043e 32% […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":104460,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-104459","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-news"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47 Facebook a pr\u00e9sent\u00e9 le m\u00e9canisme TMO, permettant d\u2019\u00e9conomiser 20-32 % de m\u00e9moire sur les serveurs | ProHoster","description":"Des ing\u00e9nieurs de Facebook (interdit en Russie) ont publi\u00e9 un rapport sur l'impl\u00e9mentation l'ann\u00e9e derni\u00e8re de la technologie TMO (Transparent Memory Offloading), permettant d'\u00e9conomiser consid\u00e9rablement de la m\u00e9moire vive sur les serveurs.","canonical_url":"https:\/\/prohoster.info\/fr\/blog\/news\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"fr_FR","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47Facebook \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u0438\u043b \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c TMO, \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0438\u0439 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c 20-32% \u043f\u0430\u043c\u044f\u0442\u0438 \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 | ProHoster","og:description":"\u0418\u043d\u0436\u0435\u043d\u0435\u0440\u044b \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Facebook (\u0437\u0430\u043f\u0440\u0435\u0449\u0435\u043d\u0430 \u0432 \u0420\u0424) \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043b\u0438 \u043e\u0442\u0447\u0451\u0442 \u043e \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0438 \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u043c \u0433\u043e\u0434\u0443 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 TMO (Transparent Memory Offloading), \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0435\u0439 \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u0443\u044e \u043f\u0430\u043c\u044f\u0442\u044c \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 \u0437\u0430 \u0441\u0447\u0451\u0442.","og:url":"https:\/\/prohoster.info\/fr\/blog\/news\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2022-06-21T13:36:42+00:00","article:modified_time":"2022-06-21T13:36:42+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"104459","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":"default","schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2022-06-21 13:37:49","updated":"2022-10-01 20:35:20","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/posts\/104459","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/comments?post=104459"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/posts\/104459\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/media\/104460"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/media?parent=104459"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/categories?post=104459"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/fr\/wp-json\/wp\/v2\/tags?post=104459"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}