ປ່ອຍເຄື່ອງຈັກການເກັບຮັກສາ TileDB 2.0

ເຜີຍແຜ່ໃນ ຫໍໄຕ TileDB 2.0, ເຫມາະສໍາລັບການເກັບຮັກສາອະເຣ multidimensional ແລະຂໍ້ມູນທີ່ໃຊ້ໃນການຄິດໄລ່ວິທະຍາສາດ. ລະບົບຕ່າງໆສໍາລັບການປະມວນຜົນຂໍ້ມູນພັນທຸກໍາ, ຂໍ້ມູນທາງກວ້າງຂອງພື້ນທີ່ແລະທາງດ້ານການເງິນແມ່ນໄດ້ກ່າວເຖິງເປັນພື້ນທີ່ຂອງຄໍາຮ້ອງສະຫມັກສໍາລັບ TileDB, i.e. ລະບົບປະຕິບັດການ ກະແຈກກະຈາຍ ຫຼືຕື່ມຂໍ້ມູນໃສ່ອະເຣຫຼາຍມິຕິຢ່າງຕໍ່ເນື່ອງ. TileDB ສະເຫນີຫ້ອງສະຫມຸດ C ++ ສໍາລັບການເຂົ້າເຖິງຂໍ້ມູນແລະ metadata ຢ່າງໂປ່ງໃສໃນແອັບພລິເຄຊັນ, ເບິ່ງແຍງການເຮັດວຽກໃນລະດັບຕ່ໍາທັງຫມົດສໍາລັບການເກັບຮັກສາທີ່ມີປະສິດທິພາບ. ລະຫັດໂຄງການແມ່ນຂຽນໃນ C ++ ແລະ ແຈກຢາຍໂດຍ ພາຍໃຕ້ໃບອະນຸຍາດ MIT. ຮອງຮັບການເຮັດວຽກໃນ Linux, macOS ແລະ Windows.

ຄຸນ​ນະ​ສົມ​ບັດ​ຕົ້ນ​ຕໍ​ຂອງ TileDB​:

• ວິທີການທີ່ມີປະສິດທິພາບສໍາລັບການເກັບຮັກສາ array sparse, ຂໍ້ມູນທີ່ບໍ່ຕໍ່ເນື່ອງ; array ແມ່ນເຕັມໄປດ້ວຍຊິ້ນສ່ວນແລະອົງປະກອບສ່ວນໃຫຍ່ຍັງຄົງຫວ່າງເປົ່າຫຼືເອົາຄ່າດຽວກັນ.
• ຄວາມສາມາດໃນການເຂົ້າເຖິງຂໍ້ມູນໃນຮູບແບບ key-value ຫຼືຊຸດຖັນ (DataFrame);
  

• ສະຫນັບສະຫນູນການເຊື່ອມໂຍງກັບການເກັບຮັກສາຟັງ AWS S3, Google Cloud Storage ແລະ Azure Blob Storage;
• ສະຫນັບສະຫນູນສໍາລັບ tiled (block) arrays;
• ຄວາມສາມາດໃນການນໍາໃຊ້ການບີບອັດຂໍ້ມູນທີ່ແຕກຕ່າງກັນແລະການເຂົ້າລະຫັດສູດການຄິດໄລ່;
• ສະຫນັບສະຫນູນການກວດສອບຄວາມຖືກຕ້ອງໂດຍໃຊ້ checksums;
• ເຮັດ​ວຽກ​ຢູ່​ໃນ​ຮູບ​ແບບ​ຫຼາຍ​ກະ​ທູ້​ທີ່​ມີ​ການ​ປ້ອນ​ຂໍ້​ມູນ / ຜົນ​ຜະ​ລິດ​ຂະ​ຫນານ​;
• ສະຫນັບສະຫນູນສໍາລັບການສະບັບຂໍ້ມູນທີ່ເກັບຮັກສາໄວ້, ລວມທັງການດຶງຂໍ້ມູນລັດໃນຈຸດໃດຫນຶ່ງໃນອະດີດຫຼືການອັບເດດປະລໍາມະນູຂອງຊຸດຂະຫນາດໃຫຍ່ທັງຫມົດ.
• ຄວາມສາມາດໃນການເຊື່ອມຕໍ່ metadata;
• ສະຫນັບສະຫນູນການຈັດກຸ່ມຂໍ້ມູນ;
• ໂມດູນປະສົມປະສານສໍາລັບການນໍາໃຊ້ເປັນເຄື່ອງຈັກໃນການເກັບຮັກສາລະດັບຕ່ໍາໃນ Spark, Dask, MariaDB, GDAL, PDAL, Rasterio, gVCF ແລະ PrestoDB;
• binding libraries ສໍາລັບ C++ API ສໍາລັບ Python, R, Java ແລະ Go.

ການປ່ອຍ 2.0 ເປັນທີ່ຫນ້າສັງເກດສໍາລັບການສະຫນັບສະຫນູນແນວຄວາມຄິດ "DataFrame", ເຊິ່ງອະນຸຍາດໃຫ້ຂໍ້ມູນຖືກເກັບໄວ້ໃນຮູບແບບຂອງຄໍລໍາຂອງຄ່າຂອງຄວາມຍາວ arbitrary, tied ກັບຄຸນລັກສະນະສະເພາະໃດຫນຶ່ງ. ການເກັບຮັກສາຍັງຖືກປັບປຸງໃຫ້ເຫມາະສົມສໍາລັບການປຸງແຕ່ງ array sparse ຂອງຂະຫນາດ heterogeneous (ຈຸລັງສາມາດເກັບຮັກສາຂໍ້ມູນຂອງປະເພດຕ່າງໆແລະສາມາດປະຕິບັດການລວມຢູ່ໃນຖັນຂອງປະເພດທີ່ແຕກຕ່າງກັນ, ສໍາລັບການຍົກຕົວຢ່າງ, ຊື່ເກັບຮັກສາ, ເວລາແລະລາຄາ). ເພີ່ມການຮອງຮັບຖັນທີ່ມີຂໍ້ມູນສະຕຣິງ. ເພີ່ມໂມດູນສໍາລັບການເຊື່ອມໂຍງກັບ Google Cloud Storage ແລະ Azure Blob Storage. API ສໍາລັບພາສາ R ໄດ້ຮັບການອອກແບບໃຫມ່.

ແຫຼ່ງຂໍ້ມູນ: opennet.ru