Facebook의 새로운 메모리 관리 방법

소셜 네트워크 개발팀의 구성원 중 한 명 페이스북, 로만 구쉬친, 개발자 메일링 리스트에 다음과 같은 제안을 제안했습니다. 리눅스 커널 패치새로운 메모리 관리 컨트롤러 구현을 통해 메모리 관리 개선을 목표로 합니다. 슬래브(슬래브 메모리 컨트롤러).

슬래브 분포 메모리를 보다 효율적으로 할당하고 심각한 조각화를 제거하도록 설계된 메모리 관리 메커니즘입니다. 이 알고리즘의 기본은 특정 유형의 객체를 포함하는 할당된 메모리를 저장하고 다음에 동일한 유형의 객체에 할당될 때 해당 메모리를 재사용하는 것입니다. 이 기술은 Jeff Bonwick이 SunOS에서 처음 도입했으며 현재 FreeBSD 및 Linux를 포함한 많은 Unix 운영 체제의 커널에서 널리 사용되고 있습니다.

새로운 컨트롤러는 슬랩 계정을 메모리 페이지 수준에서 커널 객체 수준으로 이동하는 것을 기반으로 합니다. 이를 통해 각 cgroup에 별도의 캐시를 할당하는 대신 서로 다른 cgroup에서 하나의 슬랩 페이지를 공유할 수 있습니다.

테스트 결과에 따르면 제안하는 메모리 관리 방법은 유효성 슬래브를 사용하여 %를 45하기, 또한 OS 커널의 전체 메모리 소비를 줄입니다. 또한 슬랩에 할당되는 페이지 수를 줄임으로써 전체적으로 메모리 단편화가 줄어들어 시스템 성능에 영향을 미칠 수밖에 없습니다.

새 컨트롤러는 몇 달 동안 프로덕션 Facebook 서버에서 테스트되었으며 지금까지 이 테스트는 성공적이라고 할 수 있습니다. 성능 손실이나 오류 수가 증가하지 않고 메모리 소비가 확실히 감소한 것으로 나타났습니다. 서버는 최대 1GB입니다. 이 수치는 매우 주관적입니다. 예를 들어 이전 테스트에서는 약간 낮은 결과가 나타났습니다.

• 웹 프런트엔드의 경우 650-700MB
• 데이터베이스 캐시가 있는 서버의 경우 750-800MB
• DNS 서버에서 700MB

>>> GitHub의 작성자 페이지

>>> 초기 테스트 결과

출처 : linux.org.ru