{"id":104459,"date":"2022-06-21T15:36:41","date_gmt":"2022-06-21T13:36:42","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah"},"modified":"2022-06-21T15:36:41","modified_gmt":"2022-06-21T13:36:42","slug":"facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","status":"publish","type":"post","link":"https:\/\/prohoster.info\/de\/blog\/novosti-interneta\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","title":{"rendered":"Facebook hat einen TMO-Mechanismus vorgestellt, der 20-32 % Speicher auf Servern spart.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Ingenieure von Facebook (in Russland verboten) haben einen Bericht \u00fcber die Implementierung der TMO-Technologie (Transparent Memory Offloading) im vergangenen Jahr ver\u00f6ffentlicht. Diese Technologie erm\u00f6glicht eine erhebliche Einsparung von Arbeitsspeicher auf Servern, indem unn\u00f6tige sekund\u00e4re Daten auf kosteng\u00fcnstigere Speicher wie NVMe-SSDs ausgelagert werden. Laut Facebook erm\u00f6glicht der Einsatz von TMO eine Einsparung von 20 bis 32 % RAM auf jedem Server. Die L\u00f6sung ist f\u00fcr Infrastrukturen konzipiert, in denen Anwendungen in isolierten Containern ausgef\u00fchrt werden. Die TMO-Komponenten, die im Kernel arbeiten, sind bereits Teil des Linux-Kernels. <\/p>\n

Die Technologie auf der Linux-Kernel-Seite wird von der PSI (Pressure Stall Information) bereitgestellt, die seit der Version 4.20 verf\u00fcgbar ist. PSI wird bereits in verschiedenen Out-of-Memory-Handlern verwendet und erm\u00f6glicht die Analyse von Wartezeiten f\u00fcr verschiedene Ressourcen (CPU, Arbeitsspeicher, Ein-\/Ausgabe). Mit PSI k\u00f6nnen Benutzerraum-Handler die Systemauslastung und die Art der Leistungsverschlechterung genauer einsch\u00e4tzen, was es erm\u00f6glicht, Abweichungen fr\u00fchzeitig zu erkennen, bevor sie sich signifikant auf die Leistung auswirken. <\/p>\n

Im Benutzerraum sorgt das TMO f\u00fcr die Funktionalit\u00e4t des Senpai-Moduls, das \u00fcber cgroup2 die Speicherkapazit\u00e4t f\u00fcr Anwendungscontainer dynamisch anpasst, basierend auf den aus PSI gewonnenen Daten. Senpai analysiert Anzeichen f\u00fcr einen bevorstehenden Ressourcenmangel \u00fcber PSI, bewertet die Empfindlichkeit der Anwendungen gegen\u00fcber einer Verlangsamung des Zugriffs auf den Speicher und versucht, die minimal ben\u00f6tigte Speicherkapazit\u00e4t f\u00fcr den Container zu bestimmen. Dabei bleibt sichergestellt, dass die erforderlichen Daten im RAM verbleiben, w\u00e4hrend begleitende Daten, die im Dateicache abgelegt oder aktuell nicht verwendet werden, in den Swap-Bereich verschoben werden.

\"Facebook<\/center> <\/p>\n

Die Kernidee von TMO besteht darin, Prozesse in Bezug auf den Speicherverbrauch strengen Vorgaben zu unterziehen. Dadurch wird erreicht, dass nicht genutzte Seiten in den Auslagerungsbereich verschoben werden. Dieses Auslagern hat keinen signifikanten Einfluss auf die Leistung, beispielsweise bei Seiten mit Code, der nur w\u00e4hrend der Initialisierung verwendet wird, oder bei einzelnen Daten, die im Festplattencache gespeichert sind. Im Gegensatz zur Auslagerung von Informationen bei speicherbedingtem Druck erfolgt die Datenverlagerung im TMO auf Grundlage von proaktiven Vorhersagen. <\/p>\n

Ein Kriterium f\u00fcr die Speicherverdr\u00e4ngung ist die Abwesenheit eines Zugriffs auf eine Speicherseite f\u00fcr 5 Minuten. Solche Seiten werden als kalt (cold memory page) bezeichnet und machen durchschnittlich etwa 35 % des Anwendungsbodens aus (je nach Art der Anwendungen variiert dies zwischen 19 % und 65 %). Bei der Verdr\u00e4ngung wird die Aktivit\u00e4t ber\u00fccksichtigt, die mit anonymen Speicherseiten (Speicher, der von der Anwendung zugewiesen wird) und der beim Caching von Dateien verwendeten Speicher (von dem Kern zugewiesen) verbunden ist. In einigen Anwendungen ist der Hauptverbrauch mit anonymem Speicher verbunden, in anderen ist der Dateicache von gro\u00dfem Bedeutung. Um Ungleichgewichte bei der Verdr\u00e4ngung von Speicher in den Cache zu vermeiden, kommt im TMO ein neuer Seitenauslagerungsalgorithmus zum Einsatz, der anonyme Seiten und Seiten, die mit dem Dateicache verbunden sind, proportional verdr\u00e4ngt. <\/p>\n

Die Auslagerung selten genutzter Seiten in einen langsameren Speicher hat zwar keinen gro\u00dfen Einfluss auf die Leistung, erm\u00f6glicht jedoch eine deutliche Reduzierung der Hardwarekosten. Daten werden auf SSD-Laufwerke oder in einen komprimierten Bereich des Arbeitsspeichers ausgelagert. In Bezug auf die Kosten f\u00fcr die Speicherung eines Bytes sind NVMe SSDs bis zu 10 Mal g\u00fcnstiger als die Verwendung von Kompression im Arbeitsspeicher.

\"Facebook<\/center>
\n
Quelle: opennet.ru<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u0418\u043d\u0436\u0435\u043d\u0435\u0440\u044b \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Facebook (\u0437\u0430\u043f\u0440\u0435\u0449\u0435\u043d\u0430 \u0432 \u0420\u0424) \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043b\u0438 \u043e\u0442\u0447\u0451\u0442 \u043e \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0438 \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u043c \u0433\u043e\u0434\u0443 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 TMO (Transparent Memory Offloading), \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0435\u0439 \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u0443\u044e \u043f\u0430\u043c\u044f\u0442\u044c \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 \u0437\u0430 \u0441\u0447\u0451\u0442 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u043d\u0435 \u0442\u0440\u0435\u0431\u0443\u0435\u043c\u044b\u0445 \u0434\u043b\u044f \u0432\u044b\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0432\u0442\u043e\u0440\u0438\u0447\u043d\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0431\u043e\u043b\u0435\u0435 \u0434\u0435\u0448\u0451\u0432\u044b\u0435 \u043d\u0430\u043a\u043e\u043f\u0438\u0442\u0435\u043b\u0438, \u0442\u0430\u043a\u0438\u0435 \u043a\u0430\u043a NVMe SSD-\u0434\u0438\u0441\u043a\u0438. \u041f\u043e \u043e\u0446\u0435\u043d\u043a\u0435 Facebook, \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u0435 TMO \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u0442 20 \u0434\u043e 32% […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":104460,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[702],"tags":[],"class_list":["post-104459","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-novosti-interneta"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47 Facebook hat den TMO-Mechanismus vorgestellt, der 20-32% Arbeitsspeicher auf Servern spart | ProHoster","description":"Ingenieure von Facebook (in Russland verboten) haben einen Bericht \u00fcber die Einf\u00fchrung der Technologie TMO (Transparent Memory Offloading) im vergangenen Jahr ver\u00f6ffentlicht, die erheblich Arbeitsspeicher auf Servern spart, indem sie nicht ben\u00f6tigte sekund\u00e4re Daten auf kosteng\u00fcnstigere Speicherger\u00e4te wie NVMe SSDs auslagert. Sch\u00e4tzungen von Facebook zufolge erm\u00f6glicht der Einsatz von TMO Einsparungen von 20 bis 32%.","canonical_url":"https:\/\/prohoster.info\/de\/blog\/novosti-interneta\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"de_DE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47Facebook \u043f\u0440\u0435\u0434\u0441\u0442\u0430\u0432\u0438\u043b \u043c\u0435\u0445\u0430\u043d\u0438\u0437\u043c TMO, \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0438\u0439 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c 20-32% \u043f\u0430\u043c\u044f\u0442\u0438 \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 | ProHoster","og:description":"\u0418\u043d\u0436\u0435\u043d\u0435\u0440\u044b \u0438\u0437 \u043a\u043e\u043c\u043f\u0430\u043d\u0438\u0438 Facebook (\u0437\u0430\u043f\u0440\u0435\u0449\u0435\u043d\u0430 \u0432 \u0420\u0424) \u043e\u043f\u0443\u0431\u043b\u0438\u043a\u043e\u0432\u0430\u043b\u0438 \u043e\u0442\u0447\u0451\u0442 \u043e \u0432\u043d\u0435\u0434\u0440\u0435\u043d\u0438\u0438 \u0432 \u043f\u0440\u043e\u0448\u043b\u043e\u043c \u0433\u043e\u0434\u0443 \u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438 TMO (Transparent Memory Offloading), \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u044e\u0449\u0435\u0439 \u0437\u043d\u0430\u0447\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u043f\u0435\u0440\u0430\u0442\u0438\u0432\u043d\u0443\u044e \u043f\u0430\u043c\u044f\u0442\u044c \u043d\u0430 \u0441\u0435\u0440\u0432\u0435\u0440\u0430\u0445 \u0437\u0430 \u0441\u0447\u0451\u0442 \u0432\u044b\u0442\u0435\u0441\u043d\u0435\u043d\u0438\u044f \u043d\u0435 \u0442\u0440\u0435\u0431\u0443\u0435\u043c\u044b\u0445 \u0434\u043b\u044f \u0432\u044b\u043f\u043e\u043b\u043d\u0435\u043d\u0438\u044f \u0440\u0430\u0431\u043e\u0442\u044b \u0432\u0442\u043e\u0440\u0438\u0447\u043d\u044b\u0445 \u0434\u0430\u043d\u043d\u044b\u0445 \u043d\u0430 \u0431\u043e\u043b\u0435\u0435 \u0434\u0435\u0448\u0451\u0432\u044b\u0435 \u043d\u0430\u043a\u043e\u043f\u0438\u0442\u0435\u043b\u0438, \u0442\u0430\u043a\u0438\u0435 \u043a\u0430\u043a NVMe SSD-\u0434\u0438\u0441\u043a\u0438. \u041f\u043e \u043e\u0446\u0435\u043d\u043a\u0435 Facebook, \u043f\u0440\u0438\u043c\u0435\u043d\u0435\u043d\u0438\u0435 TMO \u043f\u043e\u0437\u0432\u043e\u043b\u044f\u0435\u0442 \u044d\u043a\u043e\u043d\u043e\u043c\u0438\u0442\u044c \u043e\u0442 20 \u0434\u043e 32%","og:url":"https:\/\/prohoster.info\/de\/blog\/novosti-interneta\/facebook-predstavil-mehanizm-tmo-pozvolyayushhij-ekonomit-20-32-pamyati-na-serverah","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2022-06-21T13:36:42+00:00","article:modified_time":"2022-06-21T13:36:42+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"104459","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":"default","schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2022-06-21 13:37:49","updated":"2022-10-01 20:35:20"},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/104459","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/comments?post=104459"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/104459\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media\/104460"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media?parent=104459"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/categories?post=104459"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/tags?post=104459"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}