מערכת סינון דואר זבל Rspamd 2.0 זמינה

שהוגש על ידי שחרור מערכת סינון דואר זבל Rspamd 2.0, המקנה כלים להערכת הודעות על פי קריטריונים שונים, לרבות כללים, שיטות סטטיסטיות ורשימות שחורות, שעל בסיסן נוצר משקל הודעה סופי, המשמש להחלטה האם לחסום. Rspamd תומך כמעט בכל הפיצ'רים המיושמים ב-SpamAssassin, ויש לו מספר תכונות המאפשרות לך לסנן דואר בממוצע פי 10 מהר יותר מ-SpamAssassin, וכן לספק איכות סינון טובה יותר. קוד המערכת כתוב ב-C ו מופץ על ידי מורשה תחת Apache 2.0.

Rspamd נבנה באמצעות ארכיטקטורה מונעת אירועים ותוכננה תחילה לשימוש במערכות עמוסות מאוד, מה שמאפשר לה לעבד מאות הודעות בשנייה. הכללים לזיהוי סימני ספאם הם גמישים ביותר ובצורתם הפשוטה ביותר יכולים להכיל ביטויים רגולריים, ובמצבים מורכבים יותר ניתן לכתוב אותם ב- Lua. הרחבת הפונקציונליות והוספת סוגים חדשים של בדיקות מיושמת באמצעות מודולים שניתן ליצור בשפות C ו-Lua. לדוגמה, מודולים זמינים לאימות השולח באמצעות SPF, אישור הדומיין של השולח באמצעות DKIM ויצירת בקשות לרשימות DNSBL. כדי לפשט את התצורה, ליצור כללים ולעקוב אחר סטטיסטיקות, מסופק ממשק אינטרנט ניהולי.

חידושים עיקריים:

• בוצע מעבר לתכנית מספור נושאים חדשה. מכיוון שהמספר הראשון במספר הגרסה לא השתנה במשך מספר שנים, ומחוון הגרסה האמיתי הוא המספר השני, הוחלט לעבור לפורמט "yz" במקום סכימת "xyz";
• עבור לולאת האירוע במקום ליבבנט הספרייה מעורבת ליבב, שמסיר חלק מהמגבלות של libevent ומאפשר ביצועים טובים יותר. נוֹהָג
  libev אפשרה לפשט את הקוד, לשפר את הטיפול באותות ובזמן קצוב, ולאחד את מעקב אחר שינויים בקבצים באמצעות מנגנון inotify (לא כל המהדורות של libevent שנשלחו לפלטפורמות נתמכות יכולות לעבוד עם inotify);

• הופסקה התמיכה במודול סיווג ההודעות המשתמש בספריית למידת מכונה עמוקה של Torch. הסיבה שצוינה היא המורכבות המוגזמת של לפיד והמורכבות הגבוהה של שמירתו עדכנית. מודול משוכתב לחלוטין מוצע כתחליף לסיווג באמצעות שיטות למידת מכונה עצביים, שבו משמשת ספרייה כדי להבטיח את פעולת הרשת העצבית קאן, הכולל רק 4000 שורות של קוד C. היישום החדש פותר בעיות רבות עם התרחשות מבוי סתום במהלך האימון;
• Модуль RBL החליף את המודולים SURBL ו-Emails, שאפשרו לאחד את העיבוד של כל בדיקות הרשימה השחורה. היכולות של RBL הורחבו כדי לכלול תמיכה בסוגים נוספים, כגון סלקטורים, וכלים להרחבת כללים קיימים בקלות. חוקי חסימת דואר אלקטרוני המבוססים על רשימות מפות במקום DNS RBL אינם נתמכים עוד; מומלץ להשתמש במקום זאת ב-Multimap עם בוררים;
• כדי לקבוע סוגי קבצים על סמך תוכן, נעשה שימוש בספריית Lua Magic חדשה, באמצעות Lua ו-Hyperscan במקום libmagic.
  הסיבות ליצירת ספרייה משלך כוללות את הרצון להשיג ביצועים גבוהים יותר, להיפטר מכשלים בעת זיהוי קבצי docx, לקבל API מתאים יותר ולהוסיף סוגים חדשים של היוריסטיות שאינם מוגבלים על ידי כללים נוקשים;

• מודול משופר לאחסון נתונים ב-DBMS בית קליק. שדות LowCardinality נוספו וצריכת זיכרון אופטימלית משמעותית;
• יכולות המודול הורחבו Multimap, שבה הופיעה תמיכה מְשׁוּלָב и תלוי השוואות;
• מודול Maillist שיפר את ההגדרה של רשימות דיוור;
• לתהליכי עובד יש כעת את היכולת לשלוח הודעות דופק לתהליך הראשי, המאשרות פעולה תקינה. אם אין הודעות כאלה במשך זמן מסוים, התהליך העיקרי יכול להפסיק בכוח את תהליך העובד. כברירת מחדל, מצב זה מושבת לעת עתה;
• נוספה סדרה של סורקים חדשים בשפת Lua. לדוגמה, נוספו מודולים לסריקת הודעות ב-Kaspersky ScanEngine, Trend Micro IWSVA (באמצעות icap) ו
  F-Secure Internet Gatekeeper (באמצעות icap), ומציעה גם סורקים חיצוניים עבור Razor, oletools ו-P0F;

• נוספה את היכולת לשנות הודעות דרך ה-API של Lua. מודול הוצע לביצוע שינויים בלוקי MIME lib_mime;
• עיבוד נפרד של הגדרות שהוגדרו באמצעות "Settings-Id:" סופק, לדוגמה, כעת אתה יכול לאגד כללים רק למזהי הגדרות מסוימים;
• בוצעו אופטימיזציות עבור הביצועים של מנוע Lua, פענוח base64 וזיהוי שפה עבור טקסט. נוספה תמיכה בשמירת מפות מורכבות. תמיכה יושמה
  HTTP לשמור בחיים.

מקור: OpenNet.ru