Slurm: Kubernetes ສຸມ. ໂຄງການແລະໂບນັດ

ໃນວັນທີ 27-29 ເດືອນພຶດສະພາພວກເຮົາກໍາລັງຖື Slurm ສີ່: ສຸມຢູ່ໃນ Kubernetes.

ໂບນັດ: ຫຼັກສູດອອນໄລນ໌ກ່ຽວກັບ Docker, Ansible, Ceph
ພວກເຮົາໄດ້ມາຈາກຫົວຂໍ້ Slurm ທີ່ມີຄວາມສໍາຄັນສໍາລັບການເຮັດວຽກກັບ Kubernetes, ແຕ່ບໍ່ກ່ຽວຂ້ອງໂດຍກົງກັບ k8s. ວິທີການ, ເປັນຫຍັງແລະສິ່ງທີ່ເກີດຂຶ້ນ - ພາຍໃຕ້ການຕັດ.
ຜູ້ເຂົ້າຮ່ວມ Slurm 4 ທັງໝົດຈະມີການເຂົ້າເຖິງຫຼັກສູດເຫຼົ່ານີ້.

ເງິນຄືນເຕັມໃນມື້ທໍາອິດ
ທີ່ St. Petersburg Slurm, ຜູ້ເຂົ້າຮ່ວມສອງຄົນໄດ້ອອກໄປ ການທົບທວນຄືນທີ່ບໍ່ດີທີ່ສຸດ. ຂ້ອຍເສຍໃຈແນວໃດທີ່ມັນເປັນໄປບໍ່ໄດ້ທີ່ຈະກັບຄືນໄປໃນເວລານັ້ນ ແລະເປັນສ່ວນໜຶ່ງກັບເຂົາເຈົ້າໂດຍບໍ່ມີການຮຽກຮ້ອງເຊິ່ງກັນແລະກັນ.
ຖ້າເຈົ້າພົບສິ່ງທີ່ເຈົ້າບໍ່ມັກແທ້ໆກ່ຽວກັບ Slurm, ມື້​ທໍາ​ອິດ ຂຽນໄປຫາຜູ້ຈັດຕັ້ງໃດໆ. ພວກເຮົາຈະປິດການເຂົ້າເຖິງ ແລະສົ່ງເງິນຄືນລາຄາເຂົ້າຮ່ວມເຕັມ.

ທີ່ປຶກສາດ້ານວິຊາການ
ຖ້າໃຜຮູ້ Dmitry Simonov (ລາວໄດ້ສ້າງຕັ້ງສະໂມສອນຂອງຜູ້ອໍານວຍການດ້ານວິຊາການ), ພວກເຮົາໄດ້ເຊື້ອເຊີນລາວໄປ Slurm (ເພື່ອສຶກສາ, ບໍ່ແມ່ນເພື່ອປະຕິບັດ). ລາວສັນຍາວ່າຈະໃຫ້ຄໍາແນະນໍາກັບທຸກໆຄົນ. ນີ້ບໍ່ຫນ້າຈະເປັນຄວາມສົນໃຈສໍາລັບຜູ້ບໍລິຫານແລະນັກພັດທະນາ, ແຕ່ວ່າມັນຈະເປັນຫນ້າສົນໃຈຫຼາຍສໍາລັບຜູ້ຈັດການ IT.

Slurm ແມ່ນຫຍັງ

Slurm-4: ຫຼັກສູດພື້ນຖານ (27-29 ພຶດສະພາ)
ອອກແບບມາສໍາລັບຜູ້ທີ່ເຫັນ Kubernetes ເປັນຄັ້ງທຳອິດ ຫຼືຕ້ອງການຈັດລະບົບຄວາມຮູ້ຂອງເຂົາເຈົ້າ.
ຜູ້ເຂົ້າຮ່ວມແຕ່ລະຄົນຈະສ້າງກຸ່ມຂອງຕົນເອງຢູ່ໃນ Selectel cloud ແລະນໍາໃຊ້ແອັບພລິເຄຊັນຢູ່ທີ່ນັ້ນ.

ລາຄາ: 25 ພັນ

ໂປລແກລມ

ຫົວຂໍ້ທີ 1: ການແນະນໍາກ່ຽວກັບ Kubernetes, ອົງປະກອບຕົ້ນຕໍ
• ການແນະນໍາເຕັກໂນໂລຊີ k8s. ຄໍາອະທິບາຍ, ຄໍາຮ້ອງສະຫມັກ, ແນວຄວາມຄິດ
• Pod, ReplicaSet, Deployment, Service, Ingress, PV, PVC, ConfigMap, Secret
• ປະຕິບັດ

ຫົວຂໍ້ທີ 2: ການອອກແບບກຸ່ມ, ອົງປະກອບຕົ້ນຕໍ, ຄວາມທົນທານຕໍ່ຄວາມຜິດພາດ, ເຄືອຂ່າຍ k8s
•ການອອກແບບກຸ່ມ, ອົງປະກອບຕົ້ນຕໍ, ຄວາມທົນທານຕໍ່ຄວາມຜິດ
•ເຄືອຂ່າຍ k8s

ຫົວຂໍ້ #3: Kubespray, ປັບ ແລະຕັ້ງກຸ່ມ Kubernetes
• Kubespray, ການຕັ້ງຄ່າແລະການປັບແຕ່ງຂອງກຸ່ມ Kubernetes
• ປະຕິບັດ

ຫົວຂໍ້ທີ 4: Ceph, ການຕິດຕັ້ງກຸ່ມ ແລະ ລັກສະນະການເຮັດວຽກໃນການຜະລິດ
• Ceph, ການຕິດຕັ້ງກຸ່ມແລະລັກສະນະຂອງການເຮັດວຽກໃນການຜະລິດ
• ການປະຕິບັດ: ການຕັ້ງຄ່າ ceph

ຫົວຂໍ້ #5: Advanced Kubernetes Abstractions
• DaemonSet, StatefulSet, RBAC, ວຽກ, CronJob, Pod Scheduling, InitContainer

ຫົວຂໍ້ທີ 6: ແນະນໍາກ່ຽວກັບ Helm
• ແນະນໍາກ່ຽວກັບ Helm
• ປະຕິບັດ

ຫົວຂໍ້ທີ 7: ບໍລິການເຜີຍແຜ່ ແລະແອັບພລິເຄຊັນ
• ພາບລວມຂອງວິທີການເຜີຍແຜ່ການບໍລິການ: NodePort vs LoadBalancer vs Ingress
• Ingress controller (Nginx): ດຸ່ນດ່ຽງການຈະລາຈອນຂາເຂົ້າ
• ຜູ້ຈັດການຜູ້ຈັດການ: ໄດ້ຮັບໃບຢັ້ງຢືນ SSL/TLS ໂດຍອັດຕະໂນມັດ
• ປະຕິບັດ

ຫົວຂໍ້ທີ 8: ການຕັດໄມ້ ແລະ ການຕິດຕາມ
• ການຕິດຕາມກຸ່ມ, Prometheus
• ການຕັດໄມ້ແບບກຸ່ມ, ຄ່ອງແຄ້ວ / ຢືດຢຸ່ນ / Kibana
• ປະຕິບັດ

ຫົວຂໍ້ທີ 9: CI/CD, ການສ້າງການນໍາໄປໃຊ້ເປັນກຸ່ມຕັ້ງແຕ່ເລີ່ມຕົ້ນ

ຫົວຂໍ້ທີ 10: ການປະຕິບັດຕົວຈິງ, ການນຳໃຊ້ dockerization ແລະ ເປີດຕົວເປັນກຸ່ມ

ເວັບໄຊທ໌ Slurm

MegaSlurm: ຫຼັກສູດຂັ້ນສູງ (ວັນທີ 31 ພຶດສະພາ - 2 ມິຖຸນາ)
ອອກແບບມາສໍາລັບວິສະວະກອນ ແລະສະຖາປະນິກ Kubernetes, ເຊັ່ນດຽວກັນກັບຜູ້ຮຽນຈົບຫຼັກສູດພື້ນຖານ.
ພວກເຮົາກຳນົດຄ່າຂອງກຸ່ມເພື່ອເປີດການອັບເດດຂອງອົງປະກອບຂອງກຸ່ມ ແລະ ນຳໃຊ້ໄປພ້ອມໆກັນກັບກຸ່ມ.

ລາຄາ: 60 ພັນ (45 ພັນສໍາລັບຜູ້ເຂົ້າຮ່ວມ Slurm-4)

ໂປລແກລມ

ຫົວຂໍ້ທີ 1: ຂະບວນການສ້າງກຸ່ມຄວາມລົ້ມເຫລວຈາກພາຍໃນ
•ເຮັດວຽກກັບ Kubespray
•ການຕິດຕັ້ງອົງປະກອບເພີ່ມເຕີມ
• ການທົດສອບກຸ່ມ ແລະແກ້ໄຂບັນຫາ
• ປະຕິບັດ

ຫົວຂໍ້ #2: ການອະນຸຍາດໃນກຸ່ມໂດຍໃຊ້ຜູ້ໃຫ້ບໍລິການພາຍນອກ
• LDAP (Nginx + Python)
• ODC (Dex + Gangway)
• ປະຕິບັດ

ຫົວຂໍ້ທີ 3: ນະໂຍບາຍເຄືອຂ່າຍ
• ແນະນໍາ CNI
• ນະໂຍບາຍຄວາມປອດໄພເຄືອຂ່າຍ
• ປະຕິບັດ

ຫົວຂໍ້ທີ 4: ແອັບພລິເຄຊັນທີ່ປອດໄພ ແລະສາມາດໃຊ້ໄດ້ສູງໃນກຸ່ມ
• ນະໂຍບາຍ PodSecurity
• PodDisruptionBudget

ຫົວຂໍ້ #5: Kubernetes. ໃຫ້ເບິ່ງພາຍໃຕ້ hood ໄດ້
•ໂຄງສ້າງຕົວຄວບຄຸມ
• ຜູ້ປະກອບການ ແລະ CRDs
• ປະຕິບັດ

ຫົວຂໍ້ #6: ຄໍາຮ້ອງສະຫມັກຂອງລັດໃນກຸ່ມ
• ການເປີດຕົວກຸ່ມຖານຂໍ້ມູນໂດຍໃຊ້ PostgreSQL ເປັນຕົວຢ່າງ
• ເປີດຕົວກຸ່ມ RabbitMQ
• ປະຕິບັດ

ຫົວຂໍ້ທີ 7: ການຮັກສາຄວາມລັບ
• ການຄຸ້ມຄອງຄວາມລັບໃນ Kubernetes
• ຫ້ອງໂຖງ

ຫົວຂໍ້ #8: Horizontal Pod Autoscaler
• ທິດສະດີ
• ປະຕິບັດ

ຫົວຂໍ້ #9: ການສໍາຮອງແລະການຟື້ນຕົວໄພພິບັດ
• ການ​ສໍາ​ຮອງ​ຂໍ້​ມູນ​ກຸ່ມ​ແລະ​ການ​ຟື້ນ​ຕົວ​ໂດຍ​ການ​ນໍາ​ໃຊ້ Heptio Velero (ໃນ​ເມື່ອ​ກ່ອນ​ແມ່ນ Ark​) ແລະ​ອື່ນໆ​
• ປະຕິບັດ

ຫົວຂໍ້ #10: ການນຳໃຊ້ແອັບພລິເຄຊັນ
• Lint
• ເຄື່ອງມືສ້າງແບບຈໍາລອງ ແລະການນຳໃຊ້
• ຍຸດທະສາດການຈັດຕັ້ງປະຕິບັດ

ຫົວຂໍ້ທີ 11: ວຽກງານພາກປະຕິບັດ
• ການສ້າງ CI/CD ສໍາລັບການນຳໃຊ້ແອັບພລິເຄຊັນ
• ອັບເດດກຸ່ມ

ເວັບໄຊທ໌ MegaSlurm

Docker, Ansible ແລະ Ceph

ການທ່ອງທ່ຽວປະຫວັດສາດ

Slurm ທໍາອິດແມ່ນການທົດລອງ. ລໍາໂພງໄດ້ສໍາເລັດການນໍາສະເຫນີຂອງເຂົາເຈົ້າຢ່າງແທ້ຈິງຢູ່ໃນເວທີ, ແລະໃນການສົນທະນາໄດ້ນັ່ງຜູ້ບໍລິຫານລະດັບດັ່ງກ່າວວ່າມັນເຖິງເວລາທີ່ຈະເຊື້ອເຊີນໃຫ້ເຂົາເຈົ້າເປັນລໍາໂພງ.

ຫຼັກສູດພື້ນຖານທີ່ແທ້ຈິງໄດ້ຈັດຂຶ້ນຢູ່ທີ່ Slurm ທີສອງ: 80% ຂອງຜູ້ເຂົ້າຮ່ວມໄດ້ເຫັນ Kubernetes ເປັນຄັ້ງທໍາອິດ, ແລະຫນຶ່ງໃນສາມບໍ່ເຄີຍເຮັດວຽກກັບ Docker.
ມັນເປັນທີ່ຊັດເຈນວ່າມັນເປັນການຍາກປານໃດສໍາລັບຄົນທີ່ຈະຟັງການບັນຍາຍກ່ຽວກັບ Docker ໃນຕອນເຊົ້າແລະເຮັດວຽກກັບມັນໃນຮູບແບບການຕໍ່ສູ້ໃນຕອນແລງ.
Ceph ເຮັດໃຫ້ເກີດຄວາມຫຍຸ້ງຍາກຫຼາຍ. ຍິ່ງໄປກວ່ານັ້ນ, ມີ 20 ຄົນໃນຜູ້ຊົມທີ່ຕ້ອງການອະທິບາຍ Ceph, ແລະອີກ 60 ຄົນທີ່ບໍ່ຕ້ອງການ Ceph ເລີຍ.

ສໍາລັບ Slurm ທີສາມ, ພວກເຮົາໄດ້ຍ້າຍ Docker ແລະ Ansible ເຂົ້າໄປໃນ webinars ແຍກຕ່າງຫາກ, ເຮັດໃຫ້ເວລາເພີ່ມເຕີມສໍາລັບ Kubernetes. ການແກ້ໄຂໄດ້ກາຍເປັນການປະຕິບັດໃນຄວາມສໍາຄັນແລະຍັງບໍ່ໄດ້ຮັບການພັດທະນາໃນການປະຕິບັດ: ການບັນຍາຍບໍ່ຫນ້າສົນໃຈກັບຜູ້ຊາຍທີ່ມີປະສົບການ, ແລະການສົນທະນາແມ່ນບໍ່ຫນ້າສົນໃຈກັບຜູ້ເລີ່ມຕົ້ນ.

ສໍາລັບ Slurm ທີສີ່, ພວກເຮົາໄດ້ເຮັດຫຼັກສູດອອນໄລນ໌ກ່ຽວກັບ Docker, Ansible ແລະ Ceph. ແນວຄວາມຄິດແມ່ນງ່າຍດາຍ: ຜູ້ທີ່ຕ້ອງການຈະປະຕິບັດຫຼັກສູດຢ່າງລະມັດລະວັງ, ຜູ້ທີ່ບໍ່ຕ້ອງການມັນຈະບໍ່ສົນໃຈມັນຢ່າງສະຫງົບ. ການຕັດສິນໂດຍກຸ່ມຜູ້ທົດສອບ, ຫຼັກສູດ Docker ໃຊ້ເວລາ 6-8 ຊົ່ວໂມງ. Ansible ແລະ Ceph ຍັງບໍ່ໄດ້ໂມງເທື່ອ.

ຄຳ ປະຕິເສດ:

• ຫຼັກສູດທົດລອງ. ການຕັດສິນໃຈບາງຢ່າງອາດຈະເຮັດໃຫ້ບໍ່ປະສົບຜົນສໍາເລັດ.
• ເວທີ (Stepik.org) ແມ່ນຂີ້ຮ້າຍ, ແລະພວກເຮົາບໍ່ເຄີຍເຮັດວຽກກັບມັນມາກ່ອນ. ອາດ​ຈະ​ມີ​ຮອຍ​ແຕກ​ແລະ​ຮອຍ​ແຕກ.
• ຫຼັກສູດໄດ້ຖືກທົດສອບພຽງແຕ່ພະນັກງານ Southbridge. ແນ່ນອນເຈົ້າຈະຕ້ອງສໍາເລັດບາງສິ່ງບາງຢ່າງໃນຂະນະທີ່ເຈົ້າໄປ.

ພຽງແຕ່ໃນມື້ອື່ນໃນການສົນທະນາຂອງ Slurm ທໍາອິດພວກເຂົາຈື່ວ່າມັນເຢັນແລະມ່ວນຊື່ນ, ເຖິງວ່າຈະມີຄວາມຢ້ານຂອງອົງການຈັດຕັ້ງທັງຫມົດ. ຄົນທຳອິດທີ່ໄດ້ຮັບຄວາມປະທັບໃຈທີ່ສົດໃສທີ່ສຸດ. ຂໍໃຫ້ເບິ່ງສິ່ງທີ່ເກີດຂື້ນກັບນັກຮຽນທໍາອິດຂອງຫຼັກສູດອອນໄລນ໌. 🙂

ແຫຼ່ງຂໍ້ມູນ: www.habr.com