wZD 1.0.0-ის პირველი გამოშვება, კომპაქტური შენახვის სერვერი მცირე ფაილებისთვის

ხელმისაწვდომია პირველი გამოცემა wZD 1.0.0 - სერვერი დიდი რაოდენობით ფაილების კომპაქტურ ფორმაში ეფექტურად შესანახად, რომელიც გარედან ჩვეულებრივ WebDAV სერვერს ჰგავს. შეცვლილი ვერსია გამოიყენება შესანახად BoltDB. პროექტის კოდი იწერება Go და ვრცელდება BSD ლიცენზიით.

სერვერი საშუალებას აძლევს მნიშვნელოვნად შეამცირებს მცირე ფაილების რაოდენობას ჩვეულებრივ ან კლასტერულ ფაილურ სისტემებზე სრული ჩაკეტვის მხარდაჭერით. wZD დეველოპერის მიერ შენარჩუნებული კლასტერი ინახავს დაახლოებით 250 მილიონ პატარა ფაილს, რომლებიც განაწილებულია 15 მილიონ დირექტორიაში კლასტერულ FS-ში. MooseFS.

wZD შესაძლებელს ხდის დირექტორიების შიგთავსის გადატანას (დაარქივებას) არქივებში BoltDB ფორმატში და შემდეგ ამ ფაილების გავრცელებას ამ არქივებიდან (ან ფაილების არქივში PUT მეთოდის გამოყენებით), მნიშვნელოვნად ამცირებს ფაილების რაოდენობას FS-ში და ამცირებს მეტამონაცემების შენახვის ზედნადები. დიდი ფაილების დამუშავების ეფექტურობის გასაზრდელად, ასეთი ფაილების შენახვა შესაძლებელია Bolt-ის არქივიდან დამოუკიდებლად. ეს მიდგომა საშუალებას გაძლევთ მოაწყოთ დიდი რაოდენობით მცირე ფაილების შენახვა, ფაილურ სისტემაში ინოდების რაოდენობის შეზღუდვის გარეშე.

სერვერი ასევე შეიძლება გამოვიყენოთ როგორც NoSQL მონაცემთა ბაზა გასაღების/მნიშვნელობის ფორმატში არსებული მონაცემებისთვის (საქაღალდის სტრუქტურაზე დაფუძნებული განაწილებით) ან მონაცემთა ბაზიდან წინასწარ გენერირებული html ან json დოკუმენტების გასავრცელებლად. შესრულების თვალსაზრისით, Bolt-ის არქივების გამოყენებით მონაცემების ატვირთვა და ჩაწერა იწვევს შეყოვნების ზრდას დაახლოებით 20-25%-ით კითხვისას და 40-50%-ით წერისას. რაც უფრო მცირეა ფაილის ზომა, მით უფრო მცირეა განსხვავება ლატენტურობაში.

მთავარი შესაძლებლობები:

• Multithreading;
• მულტისერვერი, რომელიც უზრუნველყოფს ხარვეზების ტოლერანტობას და დატვირთვის დაბალანსებას;
• მაქსიმალური გამჭვირვალობა მომხმარებლის ან დეველოპერისთვის;
• მხარდაჭერილი HTTP მეთოდები: GET, HEAD, PUT და DELETE;
• კითხვისა და ჩაწერის ქცევის მართვა კლიენტის მხარის სათაურების მეშვეობით;
• მაღალკონფიგურირებადი ვირტუალური ჰოსტების მხარდაჭერა;
• CRC მონაცემთა მთლიანობის მხარდაჭერა წერის/კითხვისას;
• ნახევრად დინამიური ბუფერები მეხსიერების მინიმალური მოხმარებისთვის და ქსელის მუშაობის ოპტიმალური რეგულირებისთვის;
• მონაცემთა დაგვიანებული შეფუთვა;
• გარდა ამისა, შემოთავაზებულია მრავალნაკადიანი არქივატორი wZA ფაილების გადატანა Bolt-ის არქივებში სერვისის შეწყვეტის გარეშე.

ამჟამინდელი გამოშვების ზოგიერთი შეზღუდვა: მხარდაჭერის გარეშე Multipart, POST მეთოდი, HTTPS პროტოკოლი, პროგრამირების ენების აკინძვა, დირექტორიების რეკურსიული წაშლა, სტრუქტურის ფაილურ სისტემაში WebDAV-ის ან FUSE-ის საშუალებით დამონტაჟების მხარდაჭერა, ფაილები ინახება სისტემის ერთი მომხმარებლის ქვეშ. . შენახვის ფორმატი სპეციფიკურია არქიტექტურისთვის და არ არის პორტატული Little Endian და Big Endian სისტემებს შორის. იმისდა მიუხედავად, რომ wZD სერვერი ახორციელებს HTTP პროტოკოლის მხარდაჭერას, თქვენ მხოლოდ მისი გაშვება გჭირდებათ საპირისპირო მარიონეტების საფარქვეშ, როგორიცაა nginx და ჰაპროქსი.

წყარო: opennet.ru