מיקרון מפרסמת מנוע אחסון HSE 3.0 המותאם לכונני SSD

Micron Technology, חברה המתמחה בייצור של DRAM וזיכרון פלאש, פרסמה את שחרורו של מנוע האחסון HSE 3.0 (Heterogeneous-memory Storage Engine), שתוכנן תוך התחשבות בפרטי השימוש בכונני SSD ובזיכרון לקריאה בלבד ( NVDIMM). המנוע מתוכנן כספרייה להטמעה באפליקציות אחרות ותומך בעיבוד נתונים בפורמט מפתח-ערך. קוד HSE כתוב ב-C והוא מורשה תחת רישיון Apache 2.0.

HSE מותאם לא רק לביצועים מקסימליים, אלא גם לאריכות ימים במגוון מחלקות SSD. מהירות פעולה גבוהה מושגת באמצעות מודל אחסון היברידי - הנתונים הרלוונטיים ביותר מאוחסנים בזיכרון RAM, מה שמפחית את מספר הגישה לכונן. המנוע יכול לשמש לאחסון נתונים ברמה נמוכה ב-NoSQL DBMS, אחסון תוכנה (SDS, Software-Defined Storage) כגון Ceph ו-Scality RING, פלטפורמות לעיבוד כמויות גדולות של נתונים (Big Data), מחשוב בעל ביצועים גבוהים (HPC) ) מערכות, התקני אינטרנט של הדברים (IoT) ופתרונות למערכות למידת מכונה. כדוגמה לשילוב המנוע בפרויקטים של צד שלישי, הוכנה גרסה של DBMS מונחה מסמכים MongoDB, שהוסבה לשימוש ב-HSE.

מאפיינים עיקריים של HSE:

• תמיכה במפעילים סטנדרטיים ומורחבים לעיבוד נתונים בפורמט מפתח/ערך;
• תמיכה מלאה בעסקאות עם יכולת לבודד פרוסות אחסון באמצעות יצירת תמונת מצב (ניתן להשתמש בתמונות גם לשמירה על אוספים עצמאיים באחסון אחד);
• היכולת להשתמש בסמנים כדי לחזור על נתונים בתצוגות מבוססות תמונת מצב;
• מודל נתונים מותאם לסוגי עומס עבודה מעורבים;
• מנגנונים גמישים לניהול אמינות אחסון;
• סכימות תזמור נתונים הניתנות להתאמה אישית (הפצה על פני סוגים שונים של זיכרון הקיימים באחסון);
• ספרייה עם C API שיכולה לקשר באופן דינמי לכל אפליקציה. זמינות של כריכות עבור Python ו-Java;
• תמיכה באחסון מפתחות ונתונים בצורה דחוסה.
• יכולת קנה מידה לטרה-בייט של נתונים ומאות מיליארדי מפתחות באחסון;
• עיבוד יעיל של אלפי פעולות מקבילות;
• היכולת להשתמש בכונני SSD ממחלקות שונות באחסון אחד כדי לייעל את הביצועים ולהאריך את חיי השירות של הכונן.

השינוי המשמעותי במספר הגרסה ב-HSE 3.0 נובע משינויים ב-API, CLI, אפשרויות תצורה, ממשק REST ופורמט אחסון ששוברים תאימות לאחור. המהדורה החדשה התמקדה באופטימיזציה של אחסון הנתונים כדי לשפר את הביצועים עבור כמה עומסי עבודה קריטיים. בין השיפורים הבולטים ביותר:

• הביצועים של פעולות הסמן אינם תלויים כעת באורך המסנן, מה שמאפשר לך לחזור על מקשים באמצעות סמן עם מסננים שרירותיים מבלי להפחית את התפוקה.
• ביצועי הקריאה והכתיבה הוגדלו במצבים שבהם נעשה שימוש במפתחות בעלי גדילה מונוטונית, למשל, בעת אחסון פרוסות של ערכי פרמטרים שנרשמו במרווחי זמן מסוימים במערכות ניטור, פלטפורמות פיננסיות ומערכות לבדיקת מצבי חיישן.
• ה-API מספק את היכולת לשלוט בדחיסה ברמת הערך האישי, ומאפשר לך לאחסן רשומות דחוסות ולא דחוסות באותו אחסון.
• נוספו מצבים חדשים לפתיחת KVDB, המאפשרים לך ליצור שאילתות למסד הנתונים באחסון לקריאה בלבד.

מקור: OpenNet.ru