PayPal ເປີດລະຫັດ JunoDB DBMS

PayPal ໄດ້ເປີດລະຫັດແຫຼ່ງຂອງ DBMS JunoDB ທີ່ທົນທານຕໍ່ຄວາມຜິດ, ເຊິ່ງຈັດການຂໍ້ມູນໃນຮູບແບບທີ່ສໍາຄັນ. ລະບົບດັ່ງກ່າວໄດ້ຖືກອອກແບບໃນເບື້ອງຕົ້ນທີ່ມີຄວາມປອດໄພສູງ, ການຂະຫຍາຍອອກຕາມລວງນອນ, ຄວາມທົນທານຕໍ່ຄວາມຜິດ, ແລະຄວາມສາມາດໃນການຈັດການຫຼາຍຮ້ອຍພັນຂອງການເຊື່ອມຕໍ່ພ້ອມໆກັນກັບ latencies ຄາດຄະເນຢູ່ໃນໃຈ. ຢູ່ PayPal, ເກືອບທຸກການບໍລິການ, ຈາກການເຂົ້າສູ່ລະບົບຂອງຜູ້ໃຊ້ໄປສູ່ການປະມວນຜົນທຸລະກໍາທາງດ້ານການເງິນ, ແມ່ນຜູກມັດກັບ JunoDB. ລະຫັດໂຄງການຖືກຂຽນໄວ້ໃນ Go (ຫ້ອງສະຫມຸດລູກຄ້າ Java) ແລະຖືກແຈກຢາຍພາຍໃຕ້ໃບອະນຸຍາດ Apache 2.0. ການພັດທະນາຕໍ່ໄປຈະຍອມຮັບການແກ້ໄຂ, ການປັບປຸງແລະການປ່ຽນແປງຈາກຊຸມຊົນ.

ສະຖາປັດຕະຍະກໍາຂອງ JunoDB ແມ່ນອີງໃສ່ການນໍາໃຊ້ຕົວດຸ່ນດ່ຽງການໂຫຼດທີ່ຍອມຮັບຄໍາຮ້ອງຂໍຈາກຄໍາຮ້ອງສະຫມັກຂອງລູກຄ້າແລະແຈກຢາຍພວກມັນໃນບັນດາເຄື່ອງແມ່ຂ່າຍຕົວແທນທີ່ເຂົ້າເຖິງກຸ່ມຂອງເຄື່ອງແມ່ຂ່າຍການເກັບຮັກສາພ້ອມໆກັນໃນເວລາທີ່ການຮ້ອງຂໍຖືກປະຕິບັດ. ແຕ່ລະເຊີບເວີພຣັອກຊີສ້າງການເຊື່ອມຕໍ່ກັບເຄື່ອງແມ່ຂ່າຍການເກັບຮັກສາທັງຫມົດໃນເວລາດຽວກັນແລະສົ່ງຕໍ່ຄໍາຮ້ອງຂໍໄປຫາກຸ່ມຂອງເຄື່ອງແມ່ຂ່າຍການເກັບຮັກສາໂດຍອີງໃສ່ດັດຊະນີພາທິຊັນ, ເຊິ່ງຖືກເກັບໄວ້ໃນລະບົບການເກັບຮັກສາທີ່ແຈກຢາຍ etcd configuration.

ຂໍ້ມູນຖືກແບ່ງສ່ວນ ແລະເຊື່ອມຕໍ່ກັບ nodes ການເກັບຮັກສາໂດຍໃຊ້ hashing, ເຊິ່ງຊ່ວຍຫຼຸດຜ່ອນການເຄື່ອນໄຫວຂອງຂໍ້ມູນ ເນື່ອງຈາກ nodes ໃນ cluster ເຕີບໂຕ ຫຼືຫຍໍ້ລົງ. ເພື່ອຮັບປະກັນຄວາມທົນທານຕໍ່ຄວາມຜິດ, ຂໍ້ມູນແຕ່ລະອັນໄດ້ຖືກຈໍາລອງຢູ່ໃນຫຼາຍໂຫນດການເກັບຮັກສາ, ເຊິ່ງຊ່ວຍໃຫ້ທ່ານສາມາດບັນທຶກຂໍ້ມູນໃນເວລາທີ່ເຄື່ອງແມ່ຂ່າຍແຕ່ລະຄົນລົ້ມເຫລວ. ການສ້າງບ່ອນເກັບຮັກສາທີ່ແຈກຢາຍຕາມພູມສັນຖານແມ່ນສະຫນັບສະຫນູນ, ເຊິ່ງກຸ່ມຂອງ nodes ແມ່ນຢູ່ໃນສູນຂໍ້ມູນທີ່ແຕກຕ່າງກັນ.

ໃນໂຫນດການເກັບຮັກສາຂໍ້ມູນ, ພວກມັນຕັ້ງຢູ່ໃນ RAM ຫຼືບ່ອນເກັບຂໍ້ມູນໃນທ້ອງຖິ່ນໂດຍອີງໃສ່ຫ້ອງສະຫມຸດ RocksDB. ເມື່ອຖືກເກັບໄວ້ຢ່າງຖາວອນ, ຂໍ້ມູນຈະຖືກເກັບໄວ້ໃນຮູບແບບທີ່ຖືກເຂົ້າລະຫັດ (ລະຫັດການເຂົ້າລະຫັດສາມາດຖືກກໍານົດໂດຍລູກຄ້າຫຼືຕັ້ງຢູ່ໃນລະດັບຕົວແທນ).

ເພື່ອເຂົ້າເຖິງຖານຂໍ້ມູນຈາກແອັບພລິເຄຊັນ, ຫ້ອງສະຫມຸດລູກຄ້າແມ່ນສະຫນອງ API ສໍາລັບແອັບພລິເຄຊັນໃນ Java, Go ແລະ C ++. ພາກສ່ວນລູກຄ້າແມ່ນງ່າຍດາຍຫຼາຍເທົ່າທີ່ເປັນໄປໄດ້, ແລະເຫດຜົນແລະການຕັ້ງຄ່າທີ່ສັບສົນຖືກໂອນໄປຫາຝ່າຍ DBMS ທຸກຄັ້ງທີ່ເປັນໄປໄດ້. ການໂຕ້ຕອບລະຫວ່າງລູກຄ້າແລະຜູ້ດຸ່ນດ່ຽງຫຼືຕົວແທນແມ່ນດໍາເນີນໂດຍຜ່ານຊ່ອງທາງການສື່ສານທີ່ຖືກເຂົ້າລະຫັດ. ເພື່ອຈັດການແລະສົ່ງຄໍາຮ້ອງຂໍ, ທ່ານສາມາດນໍາໃຊ້ການໂຕ້ຕອບເສັ້ນຄໍາສັ່ງ, ເຊິ່ງ replicates ຄວາມສາມາດທັງຫມົດຂອງ API ລູກຄ້າ.

ລະບົບໄດ້ຖືກອອກແບບເພື່ອປະມວນຜົນການຮ້ອງຂໍທີ່ມີ latency ຕ່ໍາທີ່ຄາດເດົາໄດ້, ຕົວຢ່າງ, ກຸ່ມຂອງສາມ nodes ການເກັບຮັກສາແລະຫນຶ່ງ proxy, ສ້າງຕັ້ງຂຶ້ນຈາກສະພາບແວດລ້ອມ n1-highmem-32 (32 Intel Xeon 2.30GHz CPUs, 214G RAM ແລະ 450G SSD-based storage) , ສາມາດສະຫນອງຄວາມລ່າຊ້າຄົງທີ່ບໍ່ເກີນ 2.5 ms ໃນ 95% ຂອງກໍລະນີແລະ 16 ms ໃນ 99% ເມື່ອປະມວນຜົນ 200 ພັນການເຊື່ອມຕໍ່ TLS ພ້ອມກັນແລະການໄຫຼເຂົ້າຂອງ 15 ພັນຄໍາຮ້ອງຂໍຕໍ່ວິນາທີ (ມີ 3000 ການເຊື່ອມຕໍ່ພ້ອມໆກັນແລະການໄຫຼເຂົ້າຂອງ 80 ພັນຄໍາຮ້ອງຂໍ. ຕໍ່ວິນາທີ, ຄວາມລ່າຊ້າບໍ່ເກີນ 6 ms ໃນ 95% ຂອງກໍລະນີແລະ 15 ms ໃນ 99%). ຢູ່ PayPal, ການບໍລິການທີ່ອີງໃສ່ JunoDB ໃຫ້ບໍລິການປະມານ 350 ຕື້ຄໍາຮ້ອງຂໍຕໍ່ມື້.

ແຫຼ່ງຂໍ້ມູນ: opennet.ru