{"id":104459,"date":"2022-06-21T15:36:41","date_gmt":"2022-06-21T13:36:42","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah"},"modified":"2022-06-21T15:36:41","modified_gmt":"2022-06-21T13:36:42","slug":"facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","status":"publish","type":"post","link":"https:\/\/prohoster.info\/de\/blog\/news\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","title":{"rendered":"Facebook hat einen TMO-Mechanismus vorgestellt, der 20-32 % RAM auf Servern einsparen kann.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Ingenieure von Facebook (in Russland verboten) haben einen Bericht \u00fcber die Einf\u00fchrung der Technologie TMO (Transparent Memory Offloading) im vergangenen Jahr ver\u00f6ffentlicht. Diese Technologie erm\u00f6glicht eine signifikante Reduzierung des Arbeitsspeichers auf Servern, indem nicht ben\u00f6tigte sekund\u00e4re Daten auf kosteng\u00fcnstigere Speicherl\u00f6sungen wie NVMe SSDs ausgelagert werden. Sch\u00e4tzungen zufolge erm\u00f6glicht TMO eine Einsparung von 20 bis 32 % RAM auf jedem Server. Die L\u00f6sung ist f\u00fcr Infrastrukturen ausgelegt, in denen Anwendungen in isolierten Containern betrieben werden. Die TMO-Komponenten, die im Kern arbeiten, sind bereits Teil des Linux-Kernels. <\/p>\n

Im Linux-Kernel wird die Funktionsweise der Technologie durch das PSI (Pressure Stall Information) -Subsystem unterst\u00fctzt, das seit der Version 4.20 verf\u00fcgbar ist. PSI wird bereits in verschiedenen Handlungen bei Speichermangel eingesetzt und erm\u00f6glicht die Analyse von Wartezeiten f\u00fcr verschiedene Ressourcen (CPU, Speicher, Ein-\/Ausgabe). Mithilfe von PSI k\u00f6nnen die Prozessoren im Benutzerspeicher die Systemlast und die Art der Leistungsbeeintr\u00e4chtigung genauer beurteilen, was es erm\u00f6glicht, Abweichungen in einem sehr fr\u00fchen Stadium zu erkennen, wenn sie sich noch nicht merklich auf die Performance auswirken. <\/p>\n

Im Benutzerspeicher wird die TMO-Funktion durch die Komponente Senpai bereitgestellt, die \u00fcber cgroup2 dynamisch die Speicherkapazit\u00e4tsgrenzen f\u00fcr die Anwendungscontainer basierend auf den von PSI erhaltenen Daten anpasst. Senpai analysiert Anzeichen f\u00fcr einen beginnenden Ressourcenmangel \u00fcber PSI, bewertet die Sensibilit\u00e4t der Anwendungen hinsichtlich der Verlangsamung des Speicherzugriffs und versucht, die minimale notwendige Speicherkapazit\u00e4t f\u00fcr den Container zu bestimmen, bei der die ben\u00f6tigten Daten im RAM bleiben und begleitende Daten, die im Dateicache gespeichert sind oder derzeit nicht verwendet werden, in den Swap-Bereich ausgelagert werden.

\"Facebook<\/center> <\/p>\n

Damit besteht die Essenz von TMO darin, die Prozesse einer strengen Di\u00e4t hinsichtlich des Speicherverbrauchs zu unterwerfen, indem ungenutzte Seiten des Speichers proaktiv in den Paging-Bereich verschoben werden, deren Austritt die Leistung nicht merklich beeinflusst (zum Beispiel Seiten mit Code, die nur bei der Initialisierung verwendet werden, und einzeln verwendete Daten im Festplattencache). Im Gegensatz zur Informationseinlagerung in den Paging-Bereich als Reaktion auf Speicherknappheit werden die Daten bei TMO auf der Grundlage proaktiver Prognosen verschoben. <\/p>\n

Als eines der Kriterien f\u00fcr das Auslagern wird die Nichtzug\u00e4nglichkeit einer Speicherseite \u00fcber einen Zeitraum von 5 Minuten verwendet. Solche Seiten werden als kalte Speicherseiten (cold memory page) bezeichnet und machen im Durchschnitt etwa 35% des Speichers von Anwendungen aus (je nach Art der Anwendungen liegt der Bereich zwischen 19% und 65%). Bei der Auslagerung wird die Aktivit\u00e4t in Bezug auf anonyme Speicherseiten (Speicher, der vom Programm zugewiesen wird) und den Speicher, der zur Datei-Caching verwendet wird (vom Kernel zugewiesen), ber\u00fccksichtigt. In einigen Anwendungen ist der Hauptspeicherverbrauch mit anonymer Speicherbelegung verbunden, w\u00e4hrend in anderen der Datei-Cache von gro\u00dfer Bedeutung ist. Um eine Ungleichheit beim Auslagern des Speichers in den Cache zu vermeiden, wird in TMO ein neuer Paging-Algorithmus verwendet, der anonyme Seiten und Seiten, die mit Datei-Caching verbunden sind, proportional auslagert. <\/p>\n

Das Auslagern selten genutzter Seiten in einen langsameren Speicher hat nur geringe Auswirkungen auf die Leistung, erm\u00f6glicht jedoch eine erhebliche Reduzierung der Hardwarekosten. Daten werden auf SSD-Speicher oder in einen komprimierten Paging-Bereich im RAM verschoben. In Bezug auf die Kosten f\u00fcr die Speicherung eines Bytes von Daten ist die Verwendung von NVMe SSD bis zu 10 Mal g\u00fcnstiger als die Verwendung von Kompression im RAM.

\"Facebook<\/center>
\n
Quelle: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u0418\u043d\u0436\u0435\u043d\u0435\u0440\u044b \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Facebook (\u0437\u0430\u043f\u0440\u0435\u0449\u0435\u043d\u0430 \u0432 \u0420\u0424) \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043b\u0438 \u043e\u0442\u0447\u0451\u0442 \u043e \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0438 \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u043c \u0433\u043e\u0434\u0443 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 TMO (Transparent Memory Offloading), \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0435\u0439 \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u0443\u044e \u043f\u0430\u043c\u044f\u0442\u044c \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 \u0437\u0430 \u0441\u0447\u0451\u0442 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u043d\u0435 \u0442\u0440\u0435\u0431\u0443\u0435\u043c\u044b\u0445 \u0434\u043b\u044f \u0432\u044b\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0432\u0442\u043e\u0440\u0438\u0447\u043d\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0431\u043e\u043b\u0435\u0435 \u0434\u0435\u0448\u0451\u0432\u044b\u0435 \u043d\u0430\u043a\u043e\u043f\u0438\u0442\u0435\u043b\u0438, \u0442\u0430\u043a\u0438\u0435 \u043a\u0430\u043a NVMe SSD-\u0434\u0438\u0441\u043a\u0438. \u041f\u043e \u043e\u0446\u0435\u043d\u043a\u0435 Facebook, \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u0435 TMO \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u0442 20 \u0434\u043e 32% […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":104460,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-104459","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-news"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Facebook stellte den TMO-Mechanismus vor, der es erm\u00f6glicht, 20-32% des Speichers auf Servern zu sparen | ProHoster","description":"Ingenieure von Facebook (in Russland verboten) ver\u00f6ffentlichten einen Bericht \u00fcber die Implementierung der Technologie TMO (Transparent Memory Offloading) im letzten Jahr, die eine signifikante Einsparung von Arbeitsspeicher auf Servern erm\u00f6glicht.","canonical_url":"https:\/\/prohoster.info\/de\/blog\/news\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"de_DE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47Facebook \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u0438\u043b \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c TMO, \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0438\u0439 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c 20-32% \u043f\u0430\u043c\u044f\u0442\u0438 \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 | ProHoster","og:description":"\u0418\u043d\u0436\u0435\u043d\u0435\u0440\u044b \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Facebook (\u0437\u0430\u043f\u0440\u0435\u0449\u0435\u043d\u0430 \u0432 \u0420\u0424) \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043b\u0438 \u043e\u0442\u0447\u0451\u0442 \u043e \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0438 \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u043c \u0433\u043e\u0434\u0443 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 TMO (Transparent Memory Offloading), \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0435\u0439 \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u0443\u044e \u043f\u0430\u043c\u044f\u0442\u044c \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 \u0437\u0430 \u0441\u0447\u0451\u0442.","og:url":"https:\/\/prohoster.info\/de\/blog\/news\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2022-06-21T13:36:42+00:00","article:modified_time":"2022-06-21T13:36:42+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"104459","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":"default","schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2022-06-21 13:37:49","updated":"2022-10-01 20:35:20","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/104459","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/comments?post=104459"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/104459\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media\/104460"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media?parent=104459"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/categories?post=104459"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/tags?post=104459"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}