🥇Toyuq və ya yumurta: parçalanan IaC

Əvvəlcə nə gəldi - toyuq və ya yumurta? Infrastructure-as-Code haqqında məqalə üçün olduqca qəribə başlanğıcdır, elə deyilmi?

Yumurta nədir?

Çox vaxt İnfrastructure-as-Code (IaC) infrastrukturu təmsil etməyin deklarativ üsuludur. Orada biz hardware hissəsindən başlayaraq proqram konfiqurasiyasına qədər nail olmaq istədiyimiz vəziyyəti təsvir edirik. Beləliklə, IaC aşağıdakılar üçün istifadə olunur:

Resurs Təminatı. Bunlar VM-lər, S3, VPC və s. İş üçün əsas alətlər: Terraform и CloudFormation.
Proqram Konfiqurasiyası. Əsas alətlər: Yoxdur, aşpaz və s.

İstənilən kod git depolarındadır. Və gec-tez komanda rəhbəri qərar verəcək ki, onları qaydaya salmaq lazımdır. Və o, refaktor edəcək. Və müəyyən struktur yaradacaq. Və bunun yaxşı olduğunu görəcək.

Onun artıq mövcud olması da yaxşıdır GitLab и Github-Terraform üçün provayder (və bu Proqram Konfiqurasiyasıdır). Onların köməyi ilə siz bütün layihəni idarə edə bilərsiniz: komanda üzvləri, CI/CD, git-flow və s.

Yumurta haradan gəldi?

Beləliklə, biz tədricən əsas suala yaxınlaşırıq.

İlk növbədə, özünüz də daxil olmaqla, digər depoların strukturunu təsvir edən bir depodan başlamalısınız. Və əlbəttə ki, GitOps-un bir hissəsi olaraq, dəyişikliklərin avtomatik yerinə yetirilməsi üçün CI əlavə etməlisiniz.

Git hələ yaradılmayıbsa?

Onu Git-də necə saxlamaq olar?
CI-ni necə quraşdırmaq olar?
Gitlab'ı IaC-dən istifadə edərək və hətta Kubernetes-də yerləşdirsək?
GitLab Runner də Kubernetes-də?
Bulud provayderindəki Kubernetes haqqında nə demək olar?

Əvvəlcə nə gəldi: kodumu yükləyəcəyim GitLab, yoxsa mənə hansı GitLab lazım olduğunu təsvir edən kod?

Yumurta ilə toyuq

«Oyakodon3 dinozavrla" [src]

Bulud provayderi kimi istifadə edərək yeməyi bişirməyə çalışaq İdarə olunan Kubernetes Selectel.

TL; DR

Bir anda bir komandaya qoşulmaq mümkündürmü?

$ export MY_SELECTEL_TOKEN=<token>
$ curl https://gitlab.com/chicken-or-egg/mks/make/-/snippets/2002106/raw | bash

Tərkibi:

my.selectel.ru saytından hesab;
Hesab işarəsi;
Kubernetes bacarıqları;
Dəbilqə Bacarıqları;
Terraform bacarıqları;
GitLab çarxı;
GitLab Runner çarxı.

Tarif:

Paneldən MY_SELECTEL_TOKEN əldə edin my.selectel.ru.
Hesab işarəsini ona köçürməklə Kubernetes klasteri yaradın.
Yaradılmış klasterdən KUBECONFIG əldə edin.
GitLab-ı Kubernetes-də quraşdırın.
İstifadəçi üçün yaradılmış GitLab-dan GitLab-token alın kök.
GitLab-token istifadə edərək GitLab-da layihə strukturu yaradın.
Mövcud kodu GitLab-a itələyin.
?
Mənfəət!

1 addım. Tokeni bölmədə əldə etmək olar API açarları.

2 addım. Terraformumuzu 2 qovşaqdan ibarət çoxluğu “bişirmək” üçün hazırlayırıq. Hər şey üçün kifayət qədər resursunuz olduğuna əminsinizsə, o zaman avtomatik kvotaları aktivləşdirə bilərsiniz:

provider "selectel" {
 token = var.my_selectel_token
}

variable "my_selectel_token" {}
variable "username" {}
variable "region" {}


resource "selectel_vpc_project_v2" "my-k8s" {
 name = "my-k8s-cluster"
 theme = {
   color = "269926"
 }
 quotas {
   resource_name = "compute_cores"
   resource_quotas {
     region = var.region
     zone = "${var.region}a"
     value = 16
   }
 }
 quotas {
   resource_name = "network_floatingips"
   resource_quotas {
     region = var.region
     value = 1
   }
 }
 quotas {
   resource_name = "load_balancers"
   resource_quotas {
     region = var.region
     value = 1
   }
 }
 quotas {
   resource_name = "compute_ram"
   resource_quotas {
     region = var.region
     zone = "${var.region}a"
     value = 32768
   }
 }
 quotas {
   resource_name = "volume_gigabytes_fast"
   resource_quotas {
     region = var.region
     zone = "${var.region}a"
     # (20 * 2) + 50 + (8 * 3 + 10)
     value = 130
   }
 }
}

resource "selectel_mks_cluster_v1" "k8s-cluster" {
 name         = "k8s-cluster"
 project_id   = selectel_vpc_project_v2.my-k8s.id
 region       = var.region
 kube_version = "1.17.9"
}

resource "selectel_mks_nodegroup_v1" "nodegroup_1" {
 cluster_id        = selectel_mks_cluster_v1.k8s-cluster.id
 project_id        = selectel_mks_cluster_v1.k8s-cluster.project_id
 region            = selectel_mks_cluster_v1.k8s-cluster.region
 availability_zone = "${var.region}a"
 nodes_count       = 2
 cpus              = 8
 ram_mb            = 16384
 volume_gb         = 15
 volume_type       = "fast.${var.region}a"
 labels            = {
   "project": "my",
 }
}

Layihəyə istifadəçi əlavə edin:

resource "random_password" "my-k8s-user-pass" {
 length = 16
 special = true
 override_special = "_%@"
}

resource "selectel_vpc_user_v2" "my-k8s-user" {
 password = random_password.my-k8s-user-pass.result
 name = var.username
 enabled  = true
}

resource "selectel_vpc_keypair_v2" "my-k8s-user-ssh" {
 public_key = file("~/.ssh/id_rsa.pub")
 user_id    = selectel_vpc_user_v2.my-k8s-user.id
 name = var.username
}

resource "selectel_vpc_role_v2" "my-k8s-role" {
 project_id = selectel_vpc_project_v2.my-k8s.id
 user_id    = selectel_vpc_user_v2.my-k8s-user.id
}

Çıxış:

output "project_id" {
 value = selectel_vpc_project_v2.my-k8s.id
}

output "k8s_id" {
 value = selectel_mks_cluster_v1.k8s-cluster.id
}

output "user_name" {
 value = selectel_vpc_user_v2.my-k8s-user.name
}

output "user_pass" {
 value = selectel_vpc_user_v2.my-k8s-user.password
}

Biz işə salırıq:

$ env 
TF_VAR_region=ru-3 
TF_VAR_username=diamon 
TF_VAR_my_selectel_token=<token> 
terraform plan -out planfile

$ terraform apply -input=false -auto-approve planfile

3 addım. Biz kub konfiqurasiyasını alırıq.

KUBECONFIG-i proqramlı şəkildə yükləmək üçün OpenStack-dən token əldə etməlisiniz:

openstack token issue -c id -f value > token

Və bu işarə ilə Managed Kubernetes Selectel API-yə sorğu göndərin. k8s_id verir terraform:

curl -XGET -H "x-auth-token: $(cat token)" "https://ru-3.mks.selcloud.ru/v1/clusters/$(cat k8s_id)/kubeconfig" -o kubeConfig.yaml

Cupconfig-ə panel vasitəsilə də daxil olmaq olar.

4 addım. Salkım bişdikdən və ona əlimiz çatdıqdan sonra dadmaq üçün üstünə yaml əlavə edə bilərik.

Mən əlavə etməyi üstün tuturam:

ad sahəsi
saxlama sinfi
pod təhlükəsizlik siyasəti və s.

Saxlama sinfi Selectel üçün götürülə bilər rəsmi depo.

Əvvəlcə zonada bir klaster seçdim ru-3a, onda mənə bu zonadan Storage Class lazımdır.

kind: StorageClass
apiVersion: storage.k8s.io/v1
metadata:
 name: fast.ru-3a
 annotations:
   storageclass.kubernetes.io/is-default-class: "true"
provisioner: cinder.csi.openstack.org
parameters:
 type: fast.ru-3a
 availability: ru-3a
allowVolumeExpansion: true

5 addım. Yük balanslaşdırıcısını quraşdırın.

Çoxları üçün standartdan istifadə edəcəyik nginx-ingress. Quraşdırmaq üçün artıq çoxlu təlimatlar var, ona görə də bunun üzərində dayanmayacağıq.

$ helm repo add nginx-stable https://helm.nginx.com/stable
$ helm upgrade nginx-ingress nginx-stable/nginx-ingress -n ingress --install -f ../internal/K8S-cluster/ingress/values.yml

Təxminən 3-4 dəqiqə xarici IP almasını gözləyirik:

Xarici IP qəbul edildi:

6 addım. GitLab quraşdırın.

$ helm repo add gitlab https://charts.gitlab.io
$ helm upgrade gitlab gitlab/gitlab -n gitlab  --install -f gitlab/values.yml --set "global.hosts.domain=gitlab.$EXTERNAL_IP.nip.io"

Yenə bütün podların qalxmasını gözləyirik.

kubectl get po -n gitlab
NAME                                      	READY   STATUS  	RESTARTS   AGE
gitlab-gitaly-0                           	0/1 	Pending 	0      	0s
gitlab-gitlab-exporter-88f6cc8c4-fl52d    	0/1 	Pending 	0      	0s
gitlab-gitlab-runner-6b6867c5cf-hd9dp     	0/1 	Pending 	0      	0s
gitlab-gitlab-shell-55cb6ccdb-h5g8x       	0/1 	Init:0/2	0      	0s
gitlab-migrations.1-2cg6n                 	0/1 	Pending 	0      	0s
gitlab-minio-6dd7d96ddb-zd9j6             	0/1 	Pending 	0      	0s
gitlab-minio-create-buckets.1-bncdp       	0/1 	Pending 	0      	0s
gitlab-postgresql-0                       	0/2 	Pending 	0      	0s
gitlab-prometheus-server-6cfb57f575-v8k6j 	0/2 	Pending 	0      	0s
gitlab-redis-master-0                     	0/2 	Pending 	0      	0s
gitlab-registry-6bd77b4b8c-pb9v9          	0/1 	Pending 	0      	0s
gitlab-registry-6bd77b4b8c-zgb6r          	0/1 	Init:0/2	0      	0s
gitlab-shared-secrets.1-pc7-5jgq4         	0/1 	Completed   0      	20s
gitlab-sidekiq-all-in-1-v1-54dbcf7f5f-qbq67   0/1 	Pending 	0      	0s
gitlab-task-runner-6fd6857db7-9x567       	0/1 	Pending 	0      	0s
gitlab-webservice-d9d4fcff8-hp8wl         	0/2 	Pending 	0      	0s
Waiting gitlab
./wait_gitlab.sh ../internal/gitlab/gitlab/.pods
waiting for pod...
waiting for pod...
waiting for pod...

Göbələklər yüksəldi:

7 addım. GitLab-token alırıq.

Əvvəlcə giriş parolunu tapın:

kubectl get secret -n gitlab gitlab-gitlab-initial-root-password -o jsonpath='{.data.password}' | base64 --decode

İndi daxil olaq və token əldə edək:

python3 get_gitlab_token.py root $GITLAB_PASSWORD http://gitlab.gitlab.$EXTERNAL_IP.nip.io

8 addım. Gitlab Provayderindən istifadə edərək Git depolarının düzgün iyerarxiyaya gətirilməsi.

cd ../internal/gitlab/hierarchy && terraform apply -input=false -auto-approve planfile

Təəssüf ki, terraform GitLab provayderində üzən var səhv. Sonra tf.state-in düzəldilməsi üçün ziddiyyətli layihələri əl ilə silməli olacaqsınız. Sonra “$hamısını düzəlt” əmrini yenidən yerinə yetirin

9 addım. Yerli depoları serverə köçürürük.

$ make push

[master (root-commit) b61d977]  Initial commit
 3 files changed, 46 insertions(+)
 create mode 100644 .gitignore
 create mode 100644 values.yml
Enumerating objects: 5, done.
Counting objects: 100% (5/5), done.
Delta compression using up to 8 threads
Compressing objects: 100% (5/5), done.
Writing objects: 100% (5/5), 770 bytes | 770.00 KiB/s, done.
Total 5 (delta 0), reused 0 (delta 0)

Done:

Nəticə

Yerli maşınımızdan hər şeyi deklarativ şəkildə idarə edə bildiyimizə nail olduq. İndi bütün bu tapşırıqları CI-yə köçürmək və sadəcə düymələri sıxmaq istəyirəm. Bunun üçün yerli ştatlarımızı (Terraform dövləti) CI-yə köçürməliyik. Bunu necə etmək növbəti hissədə.

Bizim kanalımıza abunə olun blogyeni məqalələrin buraxılışını qaçırmamaq üçün!

Mənbə: www.habr.com

Toyuq və ya yumurta: parçalanma IaC