במאמר זה, אני מציג בפניכם את מחשבותי על ההיסטוריה והסיכויים לפיתוח האינטרנט, רשתות ריכוזיות ומבוזרות, וכתוצאה מכך, הארכיטקטורה האפשרית של הדור הבא של הרשת המבוזרת.

משהו לא בסדר באינטרנט

התוודעתי לאינטרנט לראשונה בשנת 2000. כמובן, זה רחוק מההתחלה - הרשת כבר הייתה קיימת לפני זה, אבל אפשר לכנות את התקופה ההיא תקופת הזוהר הראשונה של האינטרנט. הרשת העולמית היא ההמצאה הגאונית של טים ברנרס-לי, web1.0 בצורתו הקנונית הקלאסית. אתרים ודפים רבים המקשרים זה לזה באמצעות היפר-קישורים. במבט ראשון, הארכיטקטורה פשוטה, כמו כל הדברים הגאונים: מבוזר וחינמי. אני רוצה - אני נוסע לאתרים של אנשים אחרים על ידי מעקב אחר היפר-קישורים; אני רוצה ליצור אתר משלי בו אני מפרסם את מה שמעניין אותי – למשל מאמרים שלי, צילומים, תוכניות, קישורים לאתרים שמעניינים אותי. ואחרים מפרסמים לי קישורים.

זה ייראה כמו תמונה אידילית? אבל אתה כבר יודע איך הכל נגמר.

יש יותר מדי דפים, וחיפוש מידע הפך למשימה מאוד לא טריוויאלית. ההיפר-קישורים שנקבעו על ידי המחברים פשוט לא יכלו לבנות את כמות המידע העצומה הזו. תחילה היו ספריות שמולאו באופן ידני, ואחר כך מנועי חיפוש ענקיים שהחלו להשתמש באלגוריתמי דירוג היוריסטיים גאוניים. אתרי אינטרנט נוצרו ונטשו, המידע שוכפל ועיוות. האינטרנט התמסחר במהירות והתרחק מהרשת האקדמית האידיאלית. שפת סימון הפכה במהירות לשפת עיצוב. הופיע פרסום, באנרים מעצבנים מגעילים וטכנולוגיה לקידום והטעיית מנועי חיפוש - SEO. הרשת נסתמה במהירות באשפה מידע. היפר-קישורים הפסיקו להיות כלי לתקשורת לוגית והפכו לכלי לקידום. אתרים סגרו על עצמם, הפכו מ"דפים" פתוחים ל"אפליקציות חתומות" והפכו לאמצעי יצירת הכנסה בלבד.

כבר אז הייתה לי מחשבה מסוימת ש"משהו כאן לא בסדר". חבורה של אתרים שונים, החל מדפי בית פרימיטיביים עם מראה עטוי עיניים, ועד "מגה-פורטלים" עמוסים בבאנרים מהבהבים. גם אם האתרים עוסקים באותו נושא, הם לא קשורים בכלל, לכל אחד יש עיצוב משלו, מבנה משלו, באנרים מעצבנים, חיפוש לא מתפקד, בעיות בהורדה (כן, רציתי לקבל מידע לא מקוון). כבר אז, האינטרנט החל להפוך לאיזשהו טלוויזיה, שבה כל מיני טינסל נדבק לתוכן שימושי.
ביזור הפך לסיוט.

מה אתה רוצה?

זה פרדוקסלי, אבל גם אז, בלי לדעת עדיין על web 2.0 או p2p, אני, כמשתמש, לא נזקקתי לביזור! כשאני זוכר את המחשבות הלא מעוננות שלי על אותם זמנים, אני מגיע למסקנה שהייתי צריך... מסד נתונים מאוחד! שאילתה כזו תחזיר את כל התוצאות, ולא את אלו שהכי מתאימות לאלגוריתם הדירוג. כזה שבו כל התוצאות הללו יעוצבו בצורה אחידה ומסוגננת על ידי העיצוב האחיד שלי, ולא על ידי עיצובים עצמיים מגלגלי עיניים של מספר רב של פופקינס ואסיה. כזה שאפשר היה לשמור לא מקוון ולא לפחד שמחר האתר ייעלם והמידע יאבד לנצח. כזה שבו אוכל להזין את המידע שלי, כגון הערות ותגיות. כזה שבו יכולתי לחפש, למיין ולסנן בעזרת האלגוריתמים האישיים שלי.

Web 2.0 ורשתות חברתיות

בינתיים, הרעיון של Web 2.0 נכנס לזירה. נוסחה בשנת 2005 על ידי טים אוריילי כ"טכניקה לעיצוב מערכות שבהתחשב באינטראקציות ברשת, משתפרות ככל שיותר אנשים משתמשים בהן" - ומרמזת על מעורבות פעילה של משתמשים ביצירה ועריכה קולקטיבית של תוכן אינטרנט. בלי הגזמה, השיא והניצחון של המושג הזה היו הרשתות החברתיות. פלטפורמות ענק המחברים מיליארדי משתמשים ומאחסנות מאות פטה-בייט של נתונים.

מה קיבלנו ברשתות החברתיות?

• איחוד ממשק; התברר שמשתמשים אינם זקוקים לכל ההזדמנויות ליצור מגוון עיצובים מושכי עין; לכל הדפים של כל המשתמשים יש את אותו עיצוב וזה מתאים לכולם ואפילו נוח; רק התוכן שונה.
• איחוד פונקציונליות; כל מגוון התסריטים התברר כמיותר. "פיד", חברים, אלבומים... במהלך קיומן של רשתות חברתיות, הפונקציונליות שלהם פחות או יותר התייצבה ולא סביר שתשתנה: אחרי הכל, הפונקציונליות נקבעת על פי סוגי הפעילויות של אנשים, ואנשים כמעט לא משתנים .
• מסד נתונים בודד; התברר שהרבה יותר נוח לעבוד עם מסד נתונים כזה מאשר עם הרבה אתרים שונים; החיפוש הפך להרבה יותר קל. במקום לסרוק באופן רציף מגוון דפים הקשורים באופן רופף, לאחסן הכל במטמון, לדרג באמצעות אלגוריתמים היוריסטיים מורכבים - שאילתה מאוחדת פשוטה יחסית למסד נתונים בודד עם מבנה ידוע.
• ממשק משוב - לייקים ופוסטים חוזרים; ברשת הרגילה, אותה גוגל לא יכלה לקבל משוב ממשתמשים לאחר לחיצה על קישור בתוצאות החיפוש. ברשתות החברתיות התברר שהחיבור הזה פשוט וטבעי.

מה הפסדנו? איבדנו את הביזור, כלומר חופש. מאמינים שהנתונים שלנו כעת אינם שייכים לנו. אם קודם לכן יכולנו למקם דף בית אפילו על המחשב שלנו, עכשיו אנחנו נותנים את כל הנתונים שלנו לענקיות האינטרנט.

בנוסף, עם התפתחות האינטרנט, ממשלות ותאגידים החלו להתעניין בו, מה שהעלה בעיות של צנזורה פוליטית והגבלות על זכויות יוצרים. ניתן לאסור ולמחוק את הדפים שלנו ברשתות החברתיות אם התוכן אינו תואם לכל כללים של הרשת החברתית; למשרה רשלנית - להביא לאחריות מנהלית ואף פלילית.

ועכשיו אנחנו חושבים שוב: האם לא כדאי להחזיר ביזור? אבל בצורה אחרת, נטולת החסרונות של הניסיון הראשון?

רשתות עמית לעמית

רשתות ה-p2p הראשונות הופיעו הרבה לפני web 2.0 והתפתחו במקביל לפיתוח האינטרנט. היישום הקלאסי העיקרי של p2p הוא שיתוף קבצים; הרשתות הראשונות פותחו להחלפת מוזיקה. הרשתות הראשונות (כגון Napster) היו בעיקרן ריכוזיות, ולכן הן נסגרו במהירות על ידי בעלי זכויות היוצרים. חסידים הלכו בדרך של ביזור. בשנת 2000 הופיעו פרוטוקולי ED2K (לקוח eDkney הראשון) ו-Gnutella, בשנת 2001 - פרוטוקול FastTrack (לקוח KaZaA). בהדרגה עלתה מידת הביזור, הטכנולוגיות השתפרו. מערכות "תור הורדה" הוחלפו בטורנטים, והמושג של טבלאות חשיש מבוזר (DHT) הופיע. ככל שהמדינות מהדקות את הברגים, האנונימיות של המשתתפים הפכה למבוקשת יותר. רשת Freenet פותחה מאז 2000, I2003P מאז 2, ופרויקט RetroShare שהושק ב-2006. אנו יכולים להזכיר רשתות p2p רבות, קיימות בעבר וכבר נעלמו, וכיום פועלות: WASTE, MUTE, TurtleF2F, RShare, PerfectDark, ARES, Gnutella2, GNUNet, IPFS, ZeroNet, Tribbler ועוד רבים אחרים. הרבה מהם. הם שונים. שונה מאוד - גם במטרה וגם בעיצוב... כנראה שרבים מכם בכלל לא מכירים את כל השמות האלה. וזה לא הכל.

עם זאת, לרשתות p2p יש חסרונות רבים. בנוסף לחסרונות הטכניים הגלומים בכל פרוטוקול ויישום לקוח ספציפי, אנו יכולים, למשל, לציין חיסרון כללי למדי - מורכבות החיפוש (כלומר, כל מה ש-Web 1.0 נתקל בו, אבל בגרסה מורכבת עוד יותר). אין כאן גוגל עם החיפוש הקיים והמיידי שלו. ואם עבור רשתות שיתוף קבצים אתה עדיין יכול להשתמש בחיפוש לפי שם קובץ או מטא מידע, אז למצוא משהו, נגיד, ברשתות כיסוי בצל או i2p הוא מאוד קשה, אם לא בלתי אפשרי.

באופן כללי, אם נצייר אנלוגיות לאינטרנט הקלאסי, אז רוב הרשתות המבוזרות נתקעות איפשהו ברמת ה-FTP. תארו לעצמכם אינטרנט שבו אין דבר מלבד FTP: אין אתרים מודרניים, אין web2.0, אין YouTube... זה בערך המצב של רשתות מבוזרות. ולמרות ניסיונות בודדים לשנות משהו, יש מעט שינויים עד כה.

תוכן

בואו נפנה לעוד חלק חשוב בפאזל הזה - תוכן. תוכן הוא הבעיה העיקרית של כל משאב אינטרנט, ובמיוחד מבוזר. מאיפה להשיג? כמובן שאפשר לסמוך על קומץ חובבים (כמו שקורה עם רשתות p2p קיימות), אבל אז הפיתוח של הרשת יהיה ארוך למדי, ויהיה שם מעט תוכן.

עבודה עם האינטרנט הרגיל פירושה חיפוש ולימוד תכנים. לפעמים - שמירה (אם התוכן מעניין ושימושי, אז רבים, במיוחד אלה שהגיעו לאינטרנט בימי החיוג - כולל אני - שומרים אותו בזהירות במצב לא מקוון כדי לא ללכת לאיבוד; כי האינטרנט הוא שם דבר. מעבר לשליטתנו, היום האתר שם מחר אין , היום יש סרטון ביוטיוב - מחר הוא ימחק וכו'.

ועבור טורנטים (שאותם אנו תופסים יותר רק כאמצעי מסירה מאשר כרשת p2p), חיסכון משתמע בדרך כלל. וזו, אגב, אחת הבעיות בטורנטים: קשה להעביר קובץ שהורד פעם אחת למקום שבו הוא נוח יותר לשימוש (ככלל, אתה צריך ליצור מחדש את ההפצה באופן ידני) ולחלוטין לא ניתן לשנות את שמו ( אתה יכול לקשר את זה בצורה קשה, אבל מעט מאוד אנשים יודעים על זה).

באופן כללי, אנשים רבים שומרים תוכן בצורה כזו או אחרת. מה גורלו העתידי? בדרך כלל, קבצים שנשמרו מגיעים למקום כלשהו בדיסק, בתיקייה כמו הורדות, בערימה הכללית, ושוכבים שם יחד עם אלפים רבים של קבצים אחרים. זה רע - ורע למשתמש עצמו. אם לאינטרנט יש מנועי חיפוש, אז למחשב המקומי של המשתמש אין שום דבר דומה. זה טוב אם המשתמש מסודר ורגיל למיין קבצים שהורדו "נכנסים". אבל לא כולם כאלה...

למעשה, כיום ישנם רבים שאינם חוסכים דבר, אלא מסתמכים לחלוטין על האינטרנט. אבל ברשתות p2p, ההנחה היא שהתוכן מאוחסן באופן מקומי במכשיר של המשתמש ומופץ למשתתפים אחרים. האם ניתן למצוא פתרון שיאפשר לשתי קטגוריות המשתמשים להיות מעורבים ברשת מבוזרת מבלי לשנות את הרגליהם, ויותר מכך, להקל על חייהם?

הרעיון הוא די פשוט: מה אם נעשה אמצעי לשמירת תוכן מהאינטרנט הרגיל, נוח ושקוף למשתמש, וחסכון חכם - עם מטא-מידע סמנטי, ולא בערימה משותפת, אלא במבנה ספציפי עם את האפשרות של מבנה נוסף, ובמקביל להפיץ את התוכן השמור לרשת מבוזרת?

נתחיל בחיסכון

לא נשקול את השימוש התועלתני באינטרנט לצפייה בתחזיות מזג אוויר או לוחות זמנים של מטוסים. אנחנו מתעניינים יותר בחפצים עצמאיים ובלתי ניתנים לשינוי פחות או יותר - מאמרים (מציוצים/פוסטים מרשתות חברתיות ועד מאמרים גדולים כמו כאן ב-Habré), ספרים, תמונות, תוכניות, הקלטות אודיו ווידיאו. מאיפה המידע מגיע בעיקר? בדרך כלל זה

• רשתות חברתיות (חדשות שונות, הערות קטנות - "ציוצים", תמונות, אודיו ווידאו)
• מאמרים על משאבים נושאיים (כגון Habr); אין הרבה משאבים טובים, בדרך כלל משאבים אלו בנויים גם על עיקרון הרשתות החברתיות
• אתרי חדשות

ככלל, ישנן פונקציות סטנדרטיות: "אהבתי", "פוסט מחדש", "שיתוף ברשתות חברתיות" וכו'.

בואו נדמיין כמה תוסף לדפדפן, אשר ישמור במיוחד את כל מה שאהבנו, פרסמנו מחדש, נשמר ב"מועדפים" (או לחצתי על כפתור תוסף מיוחד המוצג בתפריט הדפדפן - למקרה שלאתר אין פונקציית לייק/repost/סימניות). הרעיון המרכזי הוא שאתה פשוט אוהב את זה - כפי שעשית מיליון פעמים בעבר, והמערכת שומרת את הכתבה, התמונה או הסרטון באחסון לא מקוון מיוחד והמאמר או התמונה הזו הופכים לזמינים - ולך לצפייה לא מקוונת דרך ממשק לקוח מבוזר, וברשת המבוזרת ביותר! לדעתי זה מאוד נוח. אין פעולות מיותרות, ואנו פותרים בעיות רבות בבת אחת:

• שימור תוכן בעל ערך שעלול ללכת לאיבוד או להימחק
• מילוי מהיר של הרשת המבוזרת
• צבירה של תוכן ממקורות שונים (ניתן להירשם בעשרות משאבי אינטרנט, וכל הלייקים/פוסטים מחדש יזרמו למסד נתונים מקומי אחד)
• מבנה תוכן שמעניין אותך לפיו вашим החוקים

ברור שיש להגדיר את התוסף לדפדפן למבנה של כל אתר (זה די ריאלי - יש כבר תוספים לשמירת תוכן מיוטיוב, טוויטר, VK וכו'). אין כל כך הרבה אתרים שעבורם הגיוני ליצור תוספים אישיים. ככלל, מדובר ברשתות חברתיות נפוצות (אין כמעט יותר מתריסר מהן) ומספר אתרים נושאיים איכותיים כמו Habr (יש גם כמה כאלה). עם קוד מקור פתוח ומפרטים, פיתוח תוסף חדש המבוסס על תבנית לא אמור לקחת הרבה זמן. עבור אתרים אחרים, אתה יכול להשתמש בכפתור שמירה אוניברסלי, שישמור את כל העמוד ב-mhtml - אולי לאחר ניקוי דף הפרסום הראשון.

עכשיו לגבי מבנה

בשמירה "חכמה" אני מתכוון לפחות לשמירה עם מטא מידע: מקור התוכן (URL), קבוצה של לייקים שהוגדרו בעבר, תגים, הערות, המזהים שלהם וכו'. הרי במהלך שמירה רגילה המידע הזה הולך לאיבוד... ניתן להבין את המקור לא רק ככתובת URL ישירה, אלא גם כמרכיב סמנטי: למשל קבוצה ברשת חברתית או משתמש שעשה פוסט מחדש. התוסף יכול להיות חכם מספיק כדי להשתמש במידע זה עבור מבנה ותיוג אוטומטיים. כמו כן, צריך להבין שהמשתמש עצמו תמיד יכול להוסיף קצת מטא-מידע לתוכן השמור, לשם כך יש לספק את כלי הממשק הנוחים ביותר (יש לי די הרבה רעיונות איך לעשות זאת).

כך, הנושא של מבנה וארגון הקבצים המקומיים של המשתמש נפתרה. זוהי הטבה מוכנה שניתן להשתמש בה גם ללא כל p2p. סתם סוג של מסד נתונים לא מקוון שיודע מה, איפה ובאיזה הקשר שמרנו, ומאפשר לנו לערוך מחקרים קטנים. לדוגמה, מצא משתמשים ברשת חברתית חיצונית שהכי אהבו את אותם פוסטים כמוך. כמה רשתות חברתיות מאפשרות זאת במפורש?

כבר צריך להזכיר כאן שתוסף דפדפן אחד בהחלט לא מספיק. המרכיב השני בחשיבותו של המערכת הוא שירות הרשת המבוזר, הפועל ברקע ומשרת הן את רשת ה-p2p עצמה (בקשות מהרשת ובקשות מהלקוח) והן את שמירת התוכן החדש באמצעות התוסף. השירות, בשיתוף פעולה עם התוסף, ימקם את התוכן במקום הנכון, יחשב גיבוב (ואולי יקבע שתוכן כזה כבר נשמר בעבר), ויוסיף את המטא-מידע הדרוש למסד הנתונים המקומי.

מה שמעניין הוא שהמערכת תהיה שימושית כבר בצורה הזו, בלי שום p2p. אנשים רבים משתמשים ב-web clippers שמוסיפים תוכן מעניין מהאינטרנט ל-Evernote, למשל. הארכיטקטורה המוצעת היא גרסה מורחבת של קוצץ כזה.

ולבסוף, חילופי p2p

החלק הטוב ביותר הוא שניתן להחליף מידע ומטא-מידע (הן שנלכדו מהאינטרנט והן משלכם). הרעיון של רשת חברתית עובר בצורה מושלמת לארכיטקטורת p2p. אנחנו יכולים לומר שהרשת החברתית ו-p2p נראות כאילו נוצרו זה לזה. כל רשת מבוזרת צריכה להיבנות באופן אידיאלי כרשת חברתית, רק אז היא תעבוד ביעילות. "חברים", "קבוצות" - אלה אותם עמיתים שעמם צריכים להיות קשרים יציבים, ואלה לקוחים ממקור טבעי - האינטרסים המשותפים של המשתמשים.

עקרונות השמירה וההפצה של תוכן ברשת מבוזרת זהים לחלוטין לעקרונות שמירת (לכידת) תוכן מהאינטרנט הרגיל. אם אתה משתמש בתוכן כלשהו מהרשת (ולכן שמרת אותו), אז כל אחד יכול להשתמש במשאבים שלך (דיסק וערוץ) הדרושים כדי לקבל את התוכן הספציפי הזה.

אוהב - כלי השמירה והשיתוף הפשוטים ביותר. אם אהבתי את זה - לא משנה באינטרנט החיצוני או בתוך הרשת המבוזרת - זה אומר שאני אוהב את התוכן, ואם כן, אז אני מוכן לשמור אותו מקומית ולהפיץ אותו למשתתפים אחרים ברשת המבוזרת.

• תוכן לא "יאבד"; הוא נשמר כעת באופן מקומי, אני יכול לחזור אליו מאוחר יותר, בכל עת, מבלי לדאוג שמישהו ימחק או יחסום אותו
• אני יכול (מיד או מאוחר יותר) לסווג אותו, לתייג אותו, להגיב עליו, לשייך אותו לתוכן אחר, ובאופן כללי לעשות איתו משהו משמעותי - בואו נקרא לזה "יצירת מטא-אינפורמציה".
• אני יכול לחלוק את המטא מידע הזה עם חברי רשת אחרים
• אני יכול לסנכרן את המטא מידע שלי עם המטא מידע של חברים אחרים

כנראה שגם לוותר על דיסלייקים נראה הגיוני: אם אני לא אוהב את התוכן, אז זה די הגיוני שאני לא רוצה לבזבז את שטח הדיסק שלי לאחסון ואת ערוץ האינטרנט שלי להפצת התוכן הזה. לכן, דיסלייקים אינם מתאימים באופן אורגני במיוחד לביזור (אם כי לפעמים כן יכול להיות שימושי).

לפעמים אתה צריך לשמור על מה שאתה "לא אוהב". יש מילה כמו "חייב" :)
«סימניות" (או "מועדפים") - אני לא מביע זיקה לתוכן, אבל אני שומר אותו במסד הנתונים המקומי של הסימניות שלי. המילה "מועדפים" לא ממש מתאימה במשמעותן (בשביל זה יש לייקים וסיווגם לאחר מכן), אבל "סימניות" מתאימות למדי. גם תוכן ב"סימניות" מופץ - אם אתה "צריך" אותו (כלומר, אתה "משתמש" בו בצורה כזו או אחרת), אז הגיוני שמישהו אחר עשוי "זדקק" לזה. למה לא להשתמש במשאבים שלך כדי לעשות זאת?

הפונקציה "друзья". אלו הם עמיתים, אנשים בעלי תחומי עניין דומים, ולכן אלו שסביר להניח שיהיו להם תוכן מעניין. ברשת מבוזרת, זה בעיקר אומר להירשם לעדכוני חדשות מחברים ולגשת לקטלוגים (אלבומים) שלהם של תוכן שהם שמרו.

בדומה לפונקציה "קבוצות"- סוג של עדכונים קולקטיביים, או פורומים, או משהו שאתה יכול גם להירשם אליו - וזה אומר לקבל את כל החומרים של הקבוצה ולהפיץ אותם. אולי "קבוצות", כמו פורומים גדולים, צריכות להיות היררכיות - זה יאפשר מבנה טוב יותר של תוכן הקבוצה, כמו גם להגביל את זרימת המידע ולא לקבל/להפיץ את מה שלא מאוד מעניין אותך.

כל השאר

יש לציין כי ארכיטקטורה מבוזרת היא תמיד מורכבת יותר מאשר ריכוזית. במשאבים מרכזיים יש תכתיב קפדני של קוד השרת. במבוזר, יש צורך לנהל משא ומתן בין משתתפים שווים רבים. כמובן שלא ניתן לעשות זאת ללא קריפטוגרפיה, בלוקצ'יין והישגים אחרים שפותחו בעיקר על מטבעות קריפטוגרפיים.

אני מניח שייתכן שיידרש סוג כלשהו של דירוגי אמון הדדי הצפנתיים שנוצרו על ידי משתתפי רשת זה עבור זה. הארכיטקטורה אמורה לאפשר להילחם ביעילות בבוטנטים, שקיימים בענן מסוים יכולים, למשל, להגדיל הדדית את הדירוגים שלהם. אני באמת רוצה שתאגידים וחוות בוטנט, עם כל העליונות הטכנולוגית שלהם, לא יתפסו את השליטה ברשת מבוזרת כזו; כך שהמשאב העיקרי שלה הוא אנשים חיים המסוגלים לייצר ולבנות תוכן מעניין ושימושי לאנשים חיים אחרים.

אני גם רוצה שרשת כזו תניע את הציוויליזציה לקראת התקדמות. יש לי חבורה שלמה של רעיונות בנושא זה, אשר, עם זאת, אינם מתאימים להיקף המאמר הזה. אני רק אגיד שבאופן מסוים מדעי, טכני, רפואי וכו'. תוכן צריך לקבל עדיפות על פני בידור, וזה ידרוש סוג של מתינות. התמתנות של רשת מבוזרת עצמה היא משימה לא טריוויאלית, אך ניתן לפתור אותה (עם זאת, המילה "מתינות" כאן שגויה לחלוטין ואינה משקפת כלל את מהות התהליך - לא חיצונית ולא פנימית... ו אפילו לא יכולתי לחשוב איך אפשר לקרוא לתהליך הזה).

כנראה שלא יהיה צורך להזכיר את הצורך להבטיח אנונימיות, הן באמצעים מובנים (כמו ב-i2p או Retroshare) והן על ידי העברת כל התעבורה דרך TOR או VPN.

ולבסוף, ארכיטקטורת התוכנה (מתוארת באופן סכמטי בתמונה למאמר). כפי שכבר ציינו, הרכיב הראשון של המערכת הוא תוסף דפדפן הלוכד תוכן עם מטא מידע. הרכיב השני בחשיבותו הוא שירות p2p, שפועל ברקע ("backend"). פעולת הרשת כמובן לא צריכה להיות תלויה אם הדפדפן פועל. הרכיב השלישי הוא תוכנת הלקוח - חזית. זה יכול להיות שירות אינטרנט מקומי (במקרה זה, המשתמש יוכל לעבוד עם רשת מבוזרת מבלי לעזוב את הדפדפן המועדף עליו), או יישום GUI נפרד עבור מערכת הפעלה ספציפית (Windows, Linux, MacOS, Andriod, iOS, וכו.). אני אוהב את הרעיון של כל אפשרויות החזית הקיימות בו זמנית. יחד עם זאת, זה ידרוש ארכיטקטורת אחורי קפדנית יותר.

ישנם היבטים רבים נוספים שאינם כלולים במאמר זה. התחברות להפצה של אחסון קבצים קיימים (כלומר כאשר יש לך כבר כמה טרה-בייט של נתונים שאובים, ואתה נותן ללקוח לסרוק אותם, לקבל hashes, להשוות אותם עם מה שיש בתוך הרשת ולהצטרף להפצה, ובמקביל זמן לקבל מטא-אינפורמציה על הקבצים שלהם - שמות רגילים, תיאורים, דירוגים, ביקורות וכו'), חיבור של מקורות מטא-אינפורמציה חיצוניים (כגון מסד הנתונים של Libgen), שימוש אופציונלי בשטח דיסק לאחסון תוכן מוצפן של אנשים אחרים (כמו ב-Freenet ), ארכיטקטורת אינטגרציה עם רשתות מבוזרות קיימות (זהו יער חשוך לחלוטין), הרעיון של hashing מדיה (שימוש ב-hashs תפיסתי מיוחד עבור תוכן מדיה - תמונות, אודיו ווידאו, שיאפשרו לך להשוות קבצי מדיה של אותה משמעות, שונה בגודל, ברזולוציה וכו') ועוד הרבה יותר.

תקציר קצר של המאמר

1. ברשתות מבוזרות אין גוגל עם החיפוש והדירוג שלו - אבל יש קהילה של אנשים אמיתיים. רשת חברתית עם מנגנוני המשוב שלה (לייקים, פוסטים חוזרים...) והגרף החברתי (חברים, קהילות...) היא מודל שכבת יישומים אידיאלי לרשת מבוזרת
2. הרעיון המרכזי שאני מביא עם מאמר זה הוא שמירה אוטומטית של תוכן מעניין מהאינטרנט הרגיל כאשר אתה מגדיר לייק/ריפוסט; זה יכול להיות שימושי ללא p2p, רק שמירה על ארכיון אישי של מידע מעניין
3. תוכן זה יכול גם למלא אוטומטית את הרשת המבוזרת
4. העיקרון של שמירה אוטומטית של תוכן מעניין עובד גם עם לייקים/פוסטים מחדש ברשת הכי מבוזרת

מקור: www.habr.com