Компанията Cloudflare отвори кода на Pingora, инструментарий за създаване на мрежови услуги

Компания Cloudflare обяви за откритие на изходния код на фреймворка Pingora, предназначен за разработка на Rust на защитени високо производителни мрежови услуги и програмирани мрежови системи. Фреймворкът е добре тестван и вече се използва в работа на високо натоварени системи — построени на негова база проксита повече от година са внедрени в мрежата за доставки на съдържание на Cloudflare вместо nginx и обработват над 40 милиона запитвания в секунда. Кодът е написан на Rust и е публикуван под лиценз Apache 2.0.

Pingora може да се използва за многопоточно обработване на запитвания в асинхронен режим, поддържа HTTP/1 и HTTP/2 (в плановете е и HTTP/3), проксиране на gRPC и WebSocket, включаеми балансьори на натоварването, промяна на конфигурацията без повторно стартиране, обновяване на кода без прекъсване на връзките, определяне на стратегия за превключване на натоварването в случай на срив (failover), интеграция с различни системи за мониторинг и логиране (Syslog, Prometheus, Sentry, OpenTelemetry). В Pingora също се поддържа TLS шифроване, но то е реализирано като надстройка върху C библиотеките OpenSSL и BoringSSL.

Предоставят се готови Rust пакети за създаване на HTTP проксита, работа с мрежови протоколи, разбиране на HTTP заглавия, управление и ограничаване на трафика, балансиране на натоварването, работа с разпределена хеш таблица Ketama, поддържане на кеш в оперативната памет и асинхронна обработка на таймаути. Освен HTTP, се поддържа създаването на услуги, използващи свои протоколи или UDP/TCP.

Ключовият приоритет на проекта е осигуряване на безопасност — за да се намали вероятността от грешки, свързани с работа с паметта, е избран езикът Rust за разработката. Голямо внимание е обърнато и на ефективност, производителност и разширяемост. Например, при създаването на проксита и балансьори на натоварването на базата на Pingora е предвидена възможност за прикрепяне на callback обработчици и филтри, позволяват да се управява различни етапи на обработка на запитванията, както и да се променят, пренасочват, блокират и журнализират запитвания и отговори.сървъри Совместно с организацията ISRG (Internet Security Research Group), която е учредител на проекта Let’s Encrypt и спомага за развитието на технологии за повишаване на защитеността на интернет, на базата на Pingora ще бъде създаден обратен прокси River, проектиран за приложение в критично важни елементи.

. Кодът на River ще бъде написан на Rust и ще се разпространява под лиценз Apache 2.0. Разработката ще започне през второто тримесечие на 2024 година. В момента проектът е на етап проектиране и определяне на архитектурата. Проектът се развива под ръководството на Джеймс Маннс (James Munns) от Rust Embedded Working Group. на мрежовата инфраструктура.

Основната цел на проекта River е реализиране на прокси, който може да трансферира клиентски заявки към бекенд сървъри, терминирайки входящите TLS връзки и маршрутизирайки, променяйки и филтрирайки заявките в съответствие с определени правила. Специална черта на River е многопоточният модел на обработка на заявки, позволяващ по-ефективно повторно използване на връзките в сравнение с проксита като nginx. За разширяване на функционалността на проксито и създаване на филтри ще бъде поддържано свързването на модули, компилирани във формат WebAssembly (може да се използват всички програмни езици, за които се поддържа компилация в WASM). Форматът на конфигурацията ще бъде направен възможно най-прост и удобен.

Източник: opennet.ru