ລຸ້ນທຳອິດຂອງ wZD 1.0.0, ເຊີບເວີສຳລັບການເກັບຮັກສາໄຟລ໌ຂະໜາດນ້ອຍ

ມີໃຫ້ ສະບັບທໍາອິດ wZD 1.0.0 - ເຊີບເວີສໍາລັບການເກັບຮັກສາໄຟລ໌ຈໍານວນຫລາຍຢ່າງມີປະສິດທິພາບໃນຮູບແບບທີ່ຫນາແຫນ້ນ, ເຊິ່ງຈາກພາຍນອກເບິ່ງຄືວ່າເຄື່ອງແມ່ຂ່າຍ WebDAV ປົກກະຕິ. ສະບັບດັດແກ້ແມ່ນໃຊ້ສໍາລັບການເກັບຮັກສາ BoltDB. ລະຫັດໂຄງການແມ່ນຂຽນໃນ Go ແລະ ແຈກຢາຍໂດຍ ພາຍໃຕ້ໃບອະນຸຍາດ BSD.

Server ອະນຸຍາດ ຫຼຸດລົງຢ່າງຫຼວງຫຼາຍຂອງໄຟລ໌ຂະຫນາດນ້ອຍໃນລະບົບໄຟລ໌ປົກກະຕິຫຼືເປັນກຸ່ມທີ່ມີການສະຫນັບສະຫນູນການລັອກຢ່າງເຕັມທີ່. ກຸ່ມທີ່ສະຫນັບສະຫນູນໂດຍຜູ້ພັດທະນາ wZD ເກັບຮັກສາໄຟລ໌ຂະຫນາດນ້ອຍປະມານ 250 ລ້ານໄຟລ໌ທີ່ແຈກຢາຍໃນທົ່ວ 15 ລ້ານໄດເລກະທໍລີໃນລະບົບໄຟລ໌ຂອງກຸ່ມ. MooseFS.

wZD ເຮັດໃຫ້ມັນເປັນໄປໄດ້ທີ່ຈະຍ້າຍ (ຮວບຮວມ) ເນື້ອໃນຂອງໄດເລກະທໍລີເຂົ້າໄປໃນບ່ອນເກັບມ້ຽນໃນຮູບແບບ BoltDB ແລະຫຼັງຈາກນັ້ນແຈກຢາຍໄຟລ໌ເຫຼົ່ານີ້ຈາກບ່ອນເກັບມ້ຽນເຫຼົ່ານີ້ (ຫຼືວາງໄຟລ໌ໃນແຟ້ມໂດຍໃຊ້ວິທີການ PUT), ຫຼຸດລົງຢ່າງຫຼວງຫຼາຍຂອງໄຟລ໌ໃນລະບົບໄຟລ໌ແລະ ຫຼຸດຜ່ອນຄ່າໃຊ້ຈ່າຍໃນການເກັບຮັກສາ metadata. ເພື່ອເພີ່ມປະສິດຕິພາບຂອງການປຸງແຕ່ງໄຟລ໌ຂະຫນາດໃຫຍ່, ໄຟລ໌ດັ່ງກ່າວສາມາດຖືກບັນທຶກໄວ້ແຍກຕ່າງຫາກຈາກແຟ້ມ Bolt. ວິທີການນີ້ຊ່ວຍໃຫ້ທ່ານສາມາດຈັດແຈງການເກັບຮັກສາໄຟລ໌ຂະຫນາດນ້ອຍຈໍານວນຫລາຍໂດຍບໍ່ໄດ້ຈໍາກັດໂດຍຈໍາກັດຈໍານວນ inodes ໃນລະບົບໄຟລ໌.

ເຄື່ອງແມ່ຂ່າຍຍັງສາມາດຖືກນໍາໃຊ້ເປັນຖານຂໍ້ມູນ NoSQL ສໍາລັບຂໍ້ມູນໃນຮູບແບບທີ່ສໍາຄັນ / ມູນຄ່າ (ມີ sharding ໂດຍອີງໃສ່ໂຄງສ້າງຂອງໄດເລກະທໍລີ) ຫຼືສໍາລັບການແຈກຢາຍເອກະສານ html ຫຼື json ທີ່ສ້າງຂຶ້ນກ່ອນຈາກຖານຂໍ້ມູນ. ໃນດ້ານການປະຕິບັດ, ການສົ່ງແລະການຂຽນຂໍ້ມູນໂດຍໃຊ້ Bolt archives ເຮັດໃຫ້ມີການເພີ່ມຂື້ນຂອງ latency ປະມານ 20-25% ເມື່ອອ່ານແລະ 40-50% ເມື່ອຂຽນ. ຂະ​ຫນາດ​ໄຟລ​໌​ຂະ​ຫນາດ​ນ້ອຍ​ກວ່າ​, ຄວາມ​ແຕກ​ຕ່າງ​ກັນ​ໃນ​ການ latency ຂະ​ຫນາດ​ນ້ອຍ​.

ຕົ້ນ​ຕໍ ໂອກາດ:

• Multithreading;
• Multiserver, ການສະຫນອງຄວາມທົນທານຄວາມຜິດແລະການດຸ່ນດ່ຽງການໂຫຼດ;
• ຄວາມໂປ່ງໃສສູງສຸດສໍາລັບຜູ້ໃຊ້ຫຼືຜູ້ພັດທະນາ;
• ວິທີການ HTTP ທີ່ຮອງຮັບ: GET, HEAD, PUT ແລະ DELETE;
• ການຄວບຄຸມພຶດຕິກໍາການອ່ານແລະການຂຽນຜ່ານຫົວລູກຄ້າ;
• ສະຫນັບສະຫນູນສໍາລັບການເປັນເຈົ້າພາບ virtual ປ່ຽນແປງໄດ້;
• ສະຫນັບສະຫນູນຄວາມສົມບູນຂອງຂໍ້ມູນ CRC ໃນເວລາທີ່ຂຽນ / ອ່ານ;
• buffers ເຄິ່ງໄດນາມິກສໍາລັບການບໍລິໂພກຫນ່ວຍຄວາມຈໍາຫນ້ອຍທີ່ສຸດແລະການປັບປະສິດທິພາບເຄືອຂ່າຍທີ່ດີທີ່ສຸດ;
• ການຫຸ້ມຫໍ່ຂໍ້ມູນຊັກຊ້າ;
• ນອກ​ຈາກ​ນັ້ນ​, archiver ຫຼາຍ​ກະ​ທູ້​ແມ່ນ​ສະ​ຫນອງ​ໃຫ້​ wZA ເພື່ອຍ້າຍໄຟລ໌ໄປຫາ Bolt archives ໂດຍບໍ່ຕ້ອງຢຸດການບໍລິການ.

ຂໍ້ຈໍາກັດບາງຢ່າງຂອງການປ່ອຍປະຈຸບັນ: ບໍ່ມີການສະຫນັບສະຫນູນສໍາລັບ Multipart, ວິທີການ POST, HTTPS protocol, ການຜູກມັດສໍາລັບພາສາການຂຽນໂປຼແກຼມ, ການລຶບບັນຊີຄືນໃຫມ່, ບໍ່ມີການສະຫນັບສະຫນູນສໍາລັບການຕິດຕັ້ງໂຄງສ້າງກັບລະບົບໄຟລ໌ຜ່ານ WebDAV ຫຼື FUSE, ໄຟລ໌ ຖືກເກັບໄວ້ພາຍໃຕ້ຜູ້ໃຊ້ລະບົບດຽວ. ຮູບແບບການເກັບຮັກສາແມ່ນສະຖາປັດຕະຍະກໍາສະເພາະ ແລະບໍ່ສາມາດເຄື່ອນທີ່ລະຫວ່າງລະບົບ Little Endian ແລະ Big Endian. ເຖິງວ່າຈະມີຄວາມຈິງທີ່ວ່າເຊີບເວີ wZD ປະຕິບັດການສະຫນັບສະຫນູນສໍາລັບໂປໂຕຄອນ HTTP, ມັນຈໍາເປັນຕ້ອງເປີດຕົວພຽງແຕ່ພາຍໃຕ້ການຊີ້ບອກຂອງຕົວແທນທາງກົງກັນຂ້າມເຊັ່ນ nginx ແລະ haproxy.

ແຫຼ່ງຂໍ້ມູນ: opennet.ru