פרויקט xrdesktop לשימוש ב-GNOME ו-KDE באוזניות מציאות מדומה

מפתחים מ-Collabora הציג פרויקט שולחן עבודה xr, שבה, בתמיכת Valve, פותחת ספרייה עם אלמנטים לאינטראקציה עם שולחנות עבודה מסורתיים בתוך סביבות תלת מימדיות שנוצרו באמצעות משקפי תלת מימד וקסדות מציאות מדומה. קוד הספרייה כתוב ב-C ו מופץ על ידי תחת רישיון MIT. מכלולים מוכנים מוּכָן עבור Arch Linux и אובונטו 19.04 / 18.04.

נכון לעכשיו, ללינוקס כבר יש כלים לפלט ישיר לאוזניות מציאות מדומה (הרחבות וולקן VK_EXT_acquire_xlib_display עבור X11 ו-VK_EXT_acquire_wl_display עבור Wayland), אך אין תמיכה ברמת עיבוד נכון של חלונות במרחב תלת מימד וסנכרון של קצב רענון המסך. מטרת פרויקט xrdesktop היא לפתח שיטות שיאפשרו שימוש בממשקים קלאסיים בסביבות וירטואליות, המתמקדות בפלט מסך דו מימדי ושליטה במקלדת ובעכבר.

רכיבי xrdesktop מרחיבים את מנהלי החלונות והמרוכבים הקיימים לשימוש במערכות זמן ריצה של מציאות מדומה לעיבוד חלונות ושולחנות עבודה בסביבות וירטואליות תלת-ממדיות. xrdesktop מקדם את הרעיון של שילוב בסביבות שולחן עבודה קיימות ללא צורך בהפעלת מנהל מורכב מיוחד נפרד ומאפשר שימוש בתצורות מותאמות אישית קיימות המשמשות עם צג רגיל לשימוש עם קסדות תלת מימד.

ארכיטקטורת הפרויקט מרמזת על יכולת אינטגרציה עם כל שולחן עבודה, אך בשלב הפיתוח הנוכחי מיושמים רכיבים לתמיכה באוזניות מציאות מדומה עבור KDE ו-GNOME. עבור KDE, תמיכה בקסדות תלת מימד מיושמת באמצעות תוסף דמוי Compiz, ועבור GNOME באמצעות סט תיקונים עבור GNOME Shell. רכיבים אלו משקפים חלונות קיימים לסביבה הוירטואלית של קסדות תלת מימד בצורה של סצנה נפרדת או במצב שכבת-על, שבו ניתן להרכיב חלונות שולחניים על יישומי מציאות מדומה אחרים הפועלים.

בנוסף למנועי רינדור, xrdesktop מספקת רכיבים כדי לספק ניווט וקלט באמצעות בקרים מרחביים מיוחדים כגון Valve Index ו-VIVE Wand. Xrdesktop משתמש במידע מבקרי VR כדי ליצור אירועי קלט קבועים, המדמים את השימוש במקלדת ובעכבר.

xrdesktop כולל מספר ספריות היוצרות טקסטורות חלונות עבור זמן הריצה של VR באמצעות OpenVR, כמו גם מערכת עיבוד מבוססת API עבור שולחן עבודה מלא בסביבת תלת מימד. מכיוון ש-xrdesktop אינו מספק מנהל חלונות משלו, נדרשת עבודת אינטגרציה עם מנהלי חלונות קיימים (ניתן להעביר את xrdesktop לכל מנהל חלונות X3 או Wayland). בצד מנהל ההתקן הגרפי, הפעולה דורשת דרייבר התומך ב-Vulkan API ובסיומת VK_KHR_external_memory.

המרכיבים העיקריים של xrdesktop:

• גולקן - כריכה גלילית ל-Vulkan, מתן שיעורים לעיבוד התקנים, הצללות ואתחול טקסטורות מזיכרון או מאגרי DMA;
• gxr - API להפשטת ממשקי תוכניות לפיתוח יישומי מציאות מדומה. נכון לעכשיו רק OpenVR נתמך, אך תמיכה בתקן OpenXR תתווסף בעתיד הקרוב;
• libinputsynth - ספריה לסינתזה של אירועי קלט, כגון תנועת עכבר, לחיצות והקשות, המיושמת בצורה של backends עבור xdo, xi2 ו-Clutter;
• שולחן עבודה xr - ספרייה לניהול חלונות בסביבת תלת מימד, קבוצה של ווידג'טים נלווים וחלקים אחוריים לעיבוד הסצנה;
• kwin-effect-xrdesktop и kdeplasma-applets-xrdesktop - תוסף עבור KWin לשילוב עם KDE ויישומי פלזמה למעבר KWin למצב פלט בקסדת תלת מימד;
• ערכת טלאים של גמדים и gnome-shell-extension-xrdesktop - סט תיקונים עבור GNOME Shell לשילוב תמיכה ב-xrdesktop ותוספת למעבר פלט לקסדת תלת מימד ב-GNOME Shell.

הפרויקט תומך במספר שיטות לארגון אינטראקציה עם שולחן העבודה והחלונות בסביבה וירטואלית, אשר ניתן להשתמש בהן ללכידת חלונות, קנה מידה, הזזה, סיבוב, שכבת על על כדור, לעגון והסתרת חלונות, שימוש בתפריט הבקרה ובו-זמנית לשלוט עם שתי ידיים באמצעות בקרים מרובים.

מקור: OpenNet.ru