{"id":39249,"date":"2019-10-31T22:28:41","date_gmt":"2019-10-31T19:28:41","guid":{"rendered":"https:\/\/prohoster.info\/blog\/cse-kubernetes-dlya-teh-kto-v-vcloud-e\/"},"modified":"2019-10-31T22:28:41","modified_gmt":"2019-10-31T19:28:41","slug":"cse-kubernetes-dlya-teh-kto-v-vcloud-e","status":"publish","type":"post","link":"https:\/\/prohoster.info\/nl\/blog\/administrirovanie\/cse-kubernetes-dlya-teh-kto-v-vcloud-e","title":{"rendered":"CSE: Kubernetes voor degenen die in de vCloud zijn","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"CSE:
\nHallo allemaal!<\/b><\/p>\n

Het heeft zich zo ontwikkeld dat ons kleine team, niet recentelijk en zeker niet plotseling, klaar is om enkele (en in de toekomst mogelijk alle) producten naar Kubernetes te migreren. <\/p>\n

Er waren veel redenen hiervoor, maar onze geschiedenis gaat niet over de controverse.<\/p>\n

Wat betreft de infrastructuur was onze keuze beperkt. vCloud Director en vCloud Director. We hebben de nieuwere gekozen en besloten om te beginnen. <\/p>\n

Na nogmaals door 'The Hard Way' te bladeren, kwam ik zeer snel tot de conclusie dat een tool voor het automatiseren van ten minste basisprocessen, zoals deployment en sizing, al gisteren nodig was. Een diepe duik in Google onthulde een product genaamd VMware Container Service Extension (CSE) \u2014 een open-source product dat het mogelijk maakt om de creatie en sizing van k8s-clusters te automatiseren voor degenen die met vCloud werken.
\n<\/a><\/noindex><\/p>\n

Disclaimer: CSE heeft zijn beperkingen, maar voor onze doeleinden was het perfect. Ook moet de oplossing ondersteund worden door de cloudprovider, maar aangezien de serverzijde ook open-source is, eis het beschikbaarheid bij uw dichtstbijzijnde manager \ud83d\ude42<\/p><\/blockquote>\n

Voor het gebruik is een beheerdersaccount in de vCloud-organisatie nodig en een vooraf aangemaakte routed netwerk voor het cluster (tijdens de deployment is toegang tot internet vanuit dit netwerk vereist, vergeet niet om de Firewall\/NAT in te stellen). De adressering doet er niet toe. In dit voorbeeld nemen we 10.0.240.0\/24.<\/p>\n

\"CSE:<\/p>\n

Aangezien het cluster na creatie op een of andere manier beheerd moet worden, is het aan te raden om een VPN met routing naar het aangemaakte netwerk te hebben. We gebruiken een standaard SSL-VPN, ingesteld op de Edge Gateway van onze organisatie.<\/p><\/blockquote>\n

Vervolgens moet de CSE-client daar worden ge\u00efnstalleerd vanaf waar de k8s-clusters zullen worden beheerd. In mijn geval is dit mijn werk laptop en een paar goed verborgen containers die de automatisering aansteken. <\/p>\n

De client vereist dat Python versie 3.7.3 of hoger is ge\u00efnstalleerd en de module vcd-cli<\/a><\/noindex>, dus laten we dat en het een en ander installeren.<\/p>\n

pip3 install vcd-cli\n\npip3 install container-service-extension\n<\/code><\/pre>\n
\nNa de installatie controleren we de versie van CSE en krijgen we het volgende:<\/p>\n
# vcd cse version\nError: No such command \"cse\".\n<\/code><\/pre>\n
\nOnverwacht, maar oplosbaar. Blijkbaar moet CSE als een module aan vcd-cli worden gekoppeld.
\nHiervoor moet je eerst inloggen met vcd-cli in onze organisatie:<\/p>\n
# vcd login MyCloud.provider.com org-dev admin\nPassword: \nadmin logged in, org: 'org-dev', vdc: 'org-dev_vDC01'\n<\/code><\/pre>\n
\nDaarna zal vcd-cli een configuratiebestand aanmaken ~\/.vcd-cli\/profiles.yaml<\/i>
\nAan het einde moet je het volgende toevoegen:<\/p>\n
extensions:\n  - container_service_extension.client.cse\n<\/code><\/pre>\n
\nDaarna verifi\u00ebren we opnieuw:<\/p>\n
# vcd cse version\nCSE, Container Service Extension for VMware vCloud Director, version 2.5.0\n<\/code><\/pre>\n
\nDe installatie van de klant is voltooid. Laten we proberen de eerste cluster uit te rollen.
\nCSE heeft verschillende sets parameters die allemaal kunnen worden bekeken. hier.<\/a><\/noindex><\/p>\n
Laten we beginnen met het aanmaken van sleutels voor wachtwoordloze toegang tot de toekomstige cluster. Dit is belangrijk, omdat de toegang met een wachtwoord op de knooppunten standaard is uitgeschakeld. Als er geen sleutels worden ingesteld, kan er veel werk via de consoles van virtuele machines worden gedaan, wat niet bepaald handig is.<\/p>\n
# ssh-keygen\nGenerating public\/private rsa key pair.\nEnter file in which to save the key (\/root\/.ssh\/id_rsa): \nCreated directory '\/root\/.ssh'.\nEnter passphrase (empty for no passphrase): \nEnter same passphrase again: \nYour identification has been saved in \/root\/.ssh\/id_rsa.\nYour public key has been saved in \/root\/.ssh\/id_rsa.pub.\n<\/code><\/pre>\n
\nWe proberen de cluster te maken:<\/p>\n
vcd cse cluster create MyCluster --network k8s_cluster_net --ssh-key ~\/.ssh\/id_rsa.pub --nodes 3 --enable-nfs<\/code><\/pre>\n
\nAls we een fout krijgen Error: Sessie is verlopen of gebruiker niet ingelogd. Log opnieuw in.<\/i> \u2014 log opnieuw in met vcd-cli in vCloud zoals hierboven beschreven en probeer het opnieuw.<\/p>\n
Deze keer ging alles goed en de taak om de cluster te maken is gestart.<\/p>\n
cluster operatie: Cluster vApp 'MyCluster' (38959587-54f4-4a49-8f2e-61c3a3e879e0) aanmaken vanuit template 'photon-v2_k8-1.12_weave-2.3.0' (herziening 1)\n<\/code><\/pre>\n
\nHet zal ongeveer 20 minuten duren om de taak te voltooien; in de tussentijd bekijken we de belangrijkste parameters voor het starten.<\/p>\n
\u2014netwerk \u2014 het netwerk dat we eerder hebben gemaakt.
\n\u2014ssh-key \u2014 de sleutels die we hebben aangemaakt, zullen op de knooppunten van het cluster worden opgeslagen.
\n\u2014nodes n \u2014 aantal Worker knooppunten in het cluster. Er zal altijd maar \u00e9\u00e9n Master zijn, dat is een beperking van CSE.
\n\u2014enable-nfs \u2014 een extra knooppunt cre\u00ebren voor de NFS-share voor persistent volumes. Een beetje een geavanceerde optie, we zullen later terugkomen op de configuratie van wat het doet.\n<\/p><\/blockquote>\n
 In de tussentijd kan de voortgang van het maken van de cluster visueel worden gevolgd in vCloud.
\n\"CSE:
\n
\nZodra de taak voor het maken van de cluster is voltooid, is deze klaar voor gebruik.<\/p>\n
Laten we de juistheid van de deployment controleren met het commando. vcd cse cluster info MyCluster<\/i><\/p>\n
\"CSE:
\n
\nVervolgens moeten we de configuratie van de cluster verkrijgen voor gebruik. kubectl<\/i><\/p>\n
# vcd cse cluster config MyCluster > .\/.kube\/config\n<\/code><\/pre>\n
\nEn we kunnen de status van de cluster nu met behulp hiervan controleren:<\/p>\n
\"CSE:
\n
\nOp dit moment kan de cluster voorwaardelijk als operationeel worden beschouwd, ware het niet om de kwestie van persistent volumes. Aangezien we in vCloud zijn, is het niet mogelijk om de vSphere Provider te gebruiken. De optie \u2014enable-nfs<\/i> is bedoeld om deze ongemakken glad te strijken, maar het is niet helemaal gelukt. Handmatige aanpassing is vereist.<\/p>\n
Eerst moet onze knooppunt een aparte onafhankelijke schijf in vCloud aanmaken. Dit garandeert dat onze gegevens niet verdwijnen bij het verwijderen van de cluster, mocht deze verwijderd worden. Laten we ook de schijf aansluiten op NFS. <\/p>\n
# vcd disk create nfs-shares-1 100g --description 'Kubernetes NFS shares'\n# vcd vapp attach mycluster nfsd-9604 nfs-shares-1\n<\/code><\/pre>\n
\nDaarna gaan we via ssh (je hebt toch echt de sleutels aangemaakt?) naar onze NFS-knooppunt en sluiten we de schijf definitief aan:<\/p>\n
root@nfsd-9604:~# parted \/dev\/sdb\n(parted) mklabel gpt\nWaarschuwing: Het bestaande schijflabel op \/dev\/sdb wordt vernietigd en alle gegevens op deze schijf gaan verloren. Wilt u doorgaan?\nJa\/Nee? ja\n(parted) unit GB\n(parted) mkpart primary 0 100\n(parted) print\nModel: VMware Virtual disk (scsi)\nSchijf \/dev\/sdb: 100GB\nSector grootte (logisch\/fysiek): 512B\/512B\nPartitietabel: gpt\nSchijfvlaggen:\n\nNummer  Start   Eind    Grootte   Besturingssysteem  Naam     Vlaggen\n 1      0.00GB  100GB  100GB               primary\n\n(parted) quit\nroot@nfsd-9604:~# mkfs -t ext4 \/dev\/sdb1\nBestandssysteem aan het aanmaken met 24413696 4k blokken en 6111232 inodes\nBestandssysteem UUID: 8622c0f5-4044-4ebf-95a5-0372256b34f0\nBack-ups van het superblok zijn opgeslagen op blokken:\n\t32768, 98304, 163840, 229376, 294912, 819200, 884736, 1605632, 2654208,\n\t4096000, 7962624, 11239424, 20480000, 23887872\n\nGroepstabellen toewijzen: gedaan\nInode-tabellen schrijven: gedaan\nJournals aanmaken (32768 blokken): gedaan\nSuperblokken en informatie over het bestandssysteem schrijven: gedaan\n<\/code><\/pre>\n
\nWe maken een directory aan voor gegevens en monteren daar de nieuwe partitie:<\/p>\n
mkdir \/export\necho '\/dev\/sdb1  \/export   ext4  defaults   0 0' >> \/etc\/fstab\nmount -a\n<\/code><\/pre>\n
\nLaten we vijf testpartities aanmaken en ze delen voor de cluster:<\/p>\n
>cd \/export\n>mkdir vol1 vol2 vol3 vol4 vol5\n>vi \/etc\/exports\n#Voeg dit toe aan het einde van het bestand\n\/export\/vol1 *(rw,sync,no_root_squash,no_subtree_check)\n\/export\/vol2 *(rw,sync,no_root_squash,no_subtree_check)\n\/export\/vol3 *(rw,sync,no_root_squash,no_subtree_check)\n\/export\/vol4 *(rw,sync,no_root_squash,no_subtree_check)\n\/export\/vol5 *(rw,sync,no_root_squash,no_subtree_check)\n#:wq! ;)\n#Verder - exporteer de partities\n>exportfs -r\n<\/code><\/pre>\n
\nNa al deze magie kunnen we een PV en PVC in onze cluster maken, ongeveer zo:
\nPV:<\/p>\n
cat <<EOF | kubectl apply -f -\napiVersion: v1\nkind: PersistentVolume\nmetadata:\n  name: nfs-vol1\nspec:\n  capacity:\n    storage: 10Gi\n  accessModes:\n    - ReadWriteMany\n  nfs:\n    # Zelfde IP als de NFS-host waar we eerder naar ssh'ten.\n    server: 10.150.200.22\n    path: "\/export\/vol1"\nEOF\n<\/code><\/pre>\n
\nPVC:<\/p>\n
cat <<EOF | kubectl apply -f -\napiVersion: v1\nkind: PersistentVolumeClaim\nmetadata:\n  name: nfs-pvc\nspec:\n  accessModes:\n    - ReadWriteMany\n  storageClassName: ""\n  resources:\n    requests:\n      storage: 10Gi\nEOF\n<\/code><\/pre>\n
\nHier eindigt het verhaal van het cre\u00ebren van een cluster en begint het verhaal van de levenscyclus ervan. Als bonus - nog twee handige CSE-commando's die soms behoorlijk kunnen besparen of kosten:<\/p>\n
#\u0423\u0432\u0435\u043b\u0438\u0447\u0438\u0432\u0430\u0435\u043c \u0440\u0430\u0437\u043c\u0435\u0440 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430 \u0434\u043e 8 \u0432\u043e\u0440\u043a\u0435\u0440 \u043d\u043e\u0434\n>cse cluster resize MyCluster --network k8s_cluster_net --nodes 8\n\n#\u0412\u044b\u0432\u043e\u0434\u0438\u043c \u043d\u0435\u043d\u0443\u0436\u043d\u044b\u0435 \u043d\u043e\u0434\u044b \u0438\u0437 \u043a\u043b\u0430\u0441\u0442\u0435\u0440\u0430 \u0441 \u0438\u0445 \u043f\u043e\u0441\u043b\u0435\u0434\u0443\u044e\u0449\u0438\u043c \u0443\u0434\u0430\u043b\u0435\u043d\u0438\u0435\u043c\n>vcd cse node delete MyCluster node-1a2v node-6685 --yes\n<\/code><\/pre>\n
\nIedereen bedankt voor de tijd, als er vragen zijn - stel ze in de opmerkingen.
\n
Bron: habr.com<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"
\u0412\u0441\u0435\u043c \u043f\u0440\u0438\u0432\u0435\u0442! \u0422\u0430\u043a \u0441\u043b\u043e\u0436\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u043d\u0430\u0448\u0430 \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u0430\u044f \u043a\u043e\u043c\u0430\u043d\u0434\u0430, \u043d\u0435 \u0441\u043a\u0430\u0437\u0430\u0442\u044c, \u0447\u0442\u043e\u0431\u044b \u043d\u0435\u0434\u0430\u0432\u043d\u043e, \u0438 \u0443\u0436 \u0442\u043e\u0447\u043d\u043e \u043d\u0435 \u0432\u043d\u0435\u0437\u0430\u043f\u043d\u043e, \u0434\u043e\u0440\u043e\u0441\u043b\u0430 \u0434\u043e \u043f\u0435\u0440\u0435\u043d\u043e\u0441\u0430 \u043d\u0435\u043a\u043e\u0442\u043e\u0440\u044b\u0445 (\u0430 \u0432 \u043f\u0435\u0440\u0441\u043f\u0435\u043a\u0442\u0438\u0432\u0435 \u0438 \u0432\u0441\u0435\u0445) \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432 \u0432 Kubernetes. \u041f\u0440\u0438\u0447\u0438\u043d \u0442\u043e\u043c\u0443 \u0431\u044b\u043b\u043e \u043c\u043d\u043e\u0436\u0435\u0441\u0442\u0432\u043e, \u043d\u043e \u043d\u0430\u0448\u0430 \u0438\u0441\u0442\u043e\u0440\u0438\u044f \u043d\u0435 \u043f\u0440\u043e \u0445\u043e\u043b\u0438\u0432\u0430\u0440. \u0418\u0437 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u043d\u043e\u0439 \u043e\u0441\u043d\u043e\u0432\u044b \u0432\u044b\u0431\u043e\u0440 \u0443 \u043d\u0430\u0441 \u0431\u044b\u043b \u043d\u0435\u0431\u043e\u043b\u044c\u0448\u043e\u0439. vCloud Director \u0438 vCloud Director. \u0412\u044b\u0431\u0440\u0430\u043b\u0438 \u0442\u043e\u0442, \u0447\u0442\u043e […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":29455,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-39249","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47CSE: Kubernetes voor degenen die in vCloud zitten | ProHoster","description":"Hallo iedereen! Het is zo gegaan dat onze.","canonical_url":"https:\/\/prohoster.info\/nl\/blog\/administrirovanie\/cse-kubernetes-dlya-teh-kto-v-vcloud-e","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"nl_NL","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47CSE: Kubernetes \u0434\u043b\u044f \u0442\u0435\u0445 \u043a\u0442\u043e \u0432 vCloud-\u0435 | ProHoster","og:description":"\u0412\u0441\u0435\u043c \u043f\u0440\u0438\u0432\u0435\u0442! \u0422\u0430\u043a \u0441\u043b\u043e\u0436\u0438\u043b\u043e\u0441\u044c, \u0447\u0442\u043e \u043d\u0430\u0448\u0430.","og:url":"https:\/\/prohoster.info\/nl\/blog\/administrirovanie\/cse-kubernetes-dlya-teh-kto-v-vcloud-e","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2019-10-31T19:28:41+00:00","article:modified_time":"2019-10-31T19:28:41+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"39249","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":"2026-01-24 01:28:19","breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-03-01 00:53:37","updated":"2026-01-24 01:28:19","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/posts\/39249","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/comments?post=39249"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/posts\/39249\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/media\/29455"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/media?parent=39249"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/categories?post=39249"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/tags?post=39249"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}