Распоредување на дистрибуирани услуги во Yandex.Cloud користејќи Grafana како пример

Здраво на сите! Како дел од мојата работа на курсот, ги истражував можностите на таква домашна облак платформа како Yandex.Cloud. Платформата нуди различни услуги за решавање на практични проблеми. Сепак, понекогаш треба да поставите своја сопствена апликација за облак со прилично обемна инфраструктура базирана на овие услуги. Во оваа статија сакам да го споделам моето искуство во распоредувањето на таква апликација.

Што сакате да добиете?

Графана — моќна алатка за решавање на аналитички проблеми или проблеми за следење на кој било систем. Во својата основна конфигурација, ова е виртуелна машина со Grafana веб-сервер, како и база на податоци (ClickHouse, InfluxDB итн.) со база на податоци на која ќе се базира аналитиката.

Откако ќе стартувате виртуелна машина со веб-сервер, можете да отидете кај нејзиниот домаќин и да добиете прекрасен интерфејс, да наведете бази на податоци како извори за понатамошна работа, да креирате контролни табли и графикони.

Основната верзија има еден значаен недостаток - воопшто не е толерантна за грешки. Односно, целата функционалност на апликацијата зависи од одржливоста на една виртуелна машина. Ако одбие или 10 луѓе го отворат корисничкиот интерфејс во исто време, тогаш ќе се појават проблеми.

Тие можат да се решат едноставно: само треба да... распоредите многу идентични виртуелни машини со веб-сервер и да ги ставите под балансерот L3. Но, тука не е сè толку јасно. Grafana ги складира корисничките поставки (патеки до бази на податоци, контролни табли, графикони итн.) директно на дискот на својата виртуелна машина. Така, ако смениме некои поставки во интерфејсот, овие промени ќе се одразат само на виртуелната машина каде што ни испрати балансерот. Ова ќе доведе до неконзистентни поставки за нашата апликација, предизвикувајќи проблеми со стартувањето и користењето.

Овде друга база на податоци ќе дојде на помош, на пример, MySQL или нејзиниот еквивалент. На Графана и кажуваме дека треба да ги зачува корисничките поставки во оваа „резервна“ база на податоци. После тоа, ќе биде доволно еднаш на секоја машина да ја одредите патеката до оваа база и да ги уредите сите други кориснички поставки на која било од виртуелните машини; тие ќе се прошират на другите.

Еве дијаграм на конечната инфраструктура за апликација:

Да научиме да креваме со раце

MySQL и ClickHouse

Пред да се распореди таква апликација со кликнување на копче, неопходно беше да се научи како да се ракува со секоја нејзина компонента и да се интегрираат едни со други.

Овде Yandex.Cloud ќе ни помогне, кој обезбедува L3 balancers, ClickHouse и MySQL како управувани услуги. Корисникот треба само да ги наведе параметрите и да почека додека платформата не донесе сè во работна состојба.

Се регистрирав, создадов облак и сметка за плаќање. После тоа, отидов во облакот и ги поставив кластерите MySQL и ClickHouse со минимални поставки. Чекав додека не се активираат.

Исто така, треба да запомните да креирате база на податоци во секој кластер и да го конфигурирате пристапот до него користејќи најава и лозинка. Овде нема да навлегувам во детали - сè е сосема очигледно во интерфејсот.

Неочигледниот детал беше дека овие бази на податоци имаат многу хостови, кои обезбедуваат нивна толеранција на грешки. Сепак, Grafana бара точно еден хост за секоја база на податоци со која работи. Долго читање документација Облаците ме доведоа до одлука. Излегува дека домаќинот на видот c-<cluster_id>.rw.mdb.yandexcloud.net мапирано на тековниот активен главен домаќин на кластерот со соодветниот ID. Еве што ќе и подариме на Графана.

Веб сервер

Сега е до веб-серверот. Ајде да подигнеме обична виртуелна машина со Linux и рачно да ја конфигурираме Grafana на неа.

Ајде да се поврземе преку ssh и да ги инсталираме потребните пакети.

sudo apt-get install -y apt-transport-https software-properties-common wget
wget -q -O - https://packages.grafana.com/gpg.key | sudo apt-key add -
sudo add-apt-repository "deb https://packages.grafana.com/enterprise/deb stable main"
sudo apt-get update
sudo apt-get install -y grafana-enterprise 

После тоа, ајде да ја извршиме Grafana под systemctl и да го инсталираме додатокот за работа со ClickHouse (да, не е испорачан во основниот пакет).

sudo systemctl start grafana-server
sudo systemctl enable grafana-server
sudo grafana-cli plugins install vertamedia-clickhouse-datasource

Тоа е тоа, после тоа со едноставна команда

sudo service grafana-server start

ќе го стартуваме веб-серверот. Сега можете да ја внесете надворешната IP адреса на виртуелната машина во прелистувачот, да ја наведете портата 3000 и да го видите прекрасниот Grafana UI.

Но, не брзајте, пред да ја поставите Grafana, мора да запомните да му ја кажете патеката до MySQL за да ги зачувате поставките таму.

Целата конфигурација на веб-серверот Grafana е во датотеката /etc/grafana/grafana.ini. Потребната линија изгледа вака:

;url =

Го поставивме домаќинот во кластерот MySQL. Истата датотека ги содржи најавата и лозинката за пристап до Графана на сликата погоре, кои стандардно и двете се еднакви admin.

Можете да користите sed команди:

sudo sed -i "s#.*;url =.*#url = mysql://${MYSQL_USERNAME}:${MYSQL_PASSWORD}@${MYSQL_CLUSTER_URI}#" /etc/grafana/grafana.ini
sudo sed -i "s#.*;admin_user =.*#admin_user = ${GRAFANA_USERNAME}#" /etc/grafana/grafana.ini
sudo sed -i "s#.*;admin_password =.*#admin_password = ${GRAFANA_PASSWORD}#" /etc/grafana/grafana.ini

Време е да го рестартирате веб-серверот!

sudo service grafana-server restart

Сега во Grafana UI ќе го одредиме ClickHouse како DataSource.

Успеав да постигнам работна конфигурација со следниве поставки:

Јас наведов како URL https://c-<cluster_id>.rw.mdb.yandexcloud.net:8443

Сите! Имаме една работна виртуелна машина со веб-сервер поврзан на CH и MySQL. Веќе можете да ја поставите базата на податоци во ClickHouse и да изградите контролни табли. Сепак, сè уште не сме ја постигнале нашата цел и не сме распоредиле целосна инфраструктура.

Пакувач

Yandex.Cloud ви овозможува да креирате слика на дискот на постоечка виртуелна машина, и врз основа на тоа - кој било број на машини идентични едни на други. Ова е токму она што ќе го користиме. За удобно составување на сликата, земете ја алатката Пакувач од HashiCorp. Како влез зема json датотека со инструкции за составување на сликата.

Нашата датотека json ќе се состои од два блока: градители и обезбедувачи. Првиот блок ги опишува параметрите на самата слика како ентитет, а вториот блок опишува инструкции за нејзино пополнување со потребната содржина.

Градежни

{
"builders": [
    {
      "type": "yandex",
      "endpoint": "{{user `endpoint`}}",
      "folder_id": "<folder_id>",
      "subnet_id": "{{user `subnet_id`}}",
      "zone": "{{user `zone`}}",
      "labels": {},
      "use_ipv4_nat": true,
      "use_internal_ip": false,
      "service_account_key_file": "<service_account_key_file>",
      "image_name": "grafana-{{timestamp}}",
      "image_family": "grafana",
      "image_labels": {},
      "image_description": "GRAFANA",
      "source_image_family": "ubuntu-1804-lts",
      "disk_size_gb": 3,
      "disk_type": "network-hdd",
      "ssh_username": "ubuntu"
    }
  ],
...
}

Во овој шаблон, треба да го поставите идентификаторот на делот во облакот каде што сакате да ја креирате сликата, како и патеката до датотеката со копчињата од сметката на услугата претходно креирана во овој дел. Можете да прочитате повеќе за креирање сервисни сметки и клучеви во форма на датотека во соодветниот дел документација.

Оваа конфигурација вели дека сликата на дискот ќе биде изградена врз основа на платформата ubuntu-1804-lts, сместен во соодветниот кориснички дел во семејството на слики GRAFANA под името grafana-{{timestamp}}.

Обезбедувачи

Сега доаѓа поинтересниот дел од конфигурацијата. Ќе ја опише низата дејства што ќе треба да се извршат на виртуелната машина пред да се замрзне нејзината состојба во слика на дискот.

{
...,
"provisioners": [
    {
            "type": "shell",
            "pause_before": "5s",
            "scripts": [
                "prepare-ctg.sh"
            ]
        },
    {
            "type": "file",
            "source": "setup.sh",
            "destination": "/opt/grafana/setup.sh"
        },
        {
            "type": "shell",
        "execute_command": "sudo {{ .Vars }} bash '{{ .Path }}'",
            "pause_before": "5s",
            "scripts": [
                "install-packages.sh",
                "grafana-setup.sh",
                "run-setup-at-reboot.sh"
        ]
        }
  ]
}

Тука сите дејства се поделени во 3 фази. Во првата фаза, се извршува едноставна скрипта која создава помошен директориум.

подготви-ctg.sh:

#!/bin/bash
sudo mkdir -p /opt/grafana
sudo chown -R ubuntu:ubuntu /opt/grafana

Во следната фаза, поставуваме скрипта во овој директориум, која ќе треба да се стартува веднаш по стартувањето на виртуелната машина. Оваа скрипта ќе ги стави корисничките променливи што треба да се регистрираат во конфигурацијата Grafana и ќе го рестартира веб-серверот.

setup.sh:

#!/bin/bash
CLUSTER_ID="<cluster_id>"
USERNAME="<username>"
PASSWORD="<password>"
sudo sed -i "s#.*;url =.*#url = mysql://${USERNAME}:${PASSWORD}@c-${CLUSTER_ID}.rw.mdb.yandexcloud.net#" /etc/grafana/grafana.ini
sudo sed -i "s#.*;admin_user =.*#admin_user = ${USERNAME}#" /etc/grafana/grafana.ini
sudo sed -i "s#.*;admin_password =.*#admin_password = ${PASSWORD}#" /etc/grafana/grafana.ini
sudo service grafana-server restart

После ова, остануваат уште 3 работи што треба да ги направите:
1) инсталирајте пакети
2) стартувајте ја Grafana под systemctl и инсталирајте го приклучокот ClickHouse
3) ставете ја скриптата setup.sh во редот за стартување веднаш по вклучувањето на виртуелната машина.

install-packages.sh:

#!/bin/bash
sudo systemd-run --property='After=apt-daily.service apt-daily-upgrade.service' --wait /bin/true
sudo apt-get install -y apt-transport-https
sudo apt-get install -y software-properties-common wget
wget -q -O - https://packages.grafana.com/gpg.key | sudo apt-key add -
sudo add-apt-repository "deb https://packages.grafana.com/enterprise/deb stable main"
sudo apt-get update
sudo apt-get install -y grafana-enterprise 

grafana-setup.sh:

#!/bin/bash
sudo systemctl start grafana-server
sudo systemctl enable grafana-server
sudo grafana-cli plugins install vertamedia-clickhouse-datasource

run-setup-at-reboot.sh:

#!/bin/bash
chmod +x /opt/grafana/setup.sh
cat > /etc/cron.d/first-boot <<EOF
PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games
@reboot root /bin/bash /opt/grafana/setup.sh > /var/log/yc-setup.log 2>&1
EOF
chmod +x /etc/cron.d/first-boot;

Сега останува само да се изврши Packer и да се добие излезната слика поставена во наведениот дел. Кога креирате виртуелна машина, можете да ја изберете како диск за подигање и по стартувањето ќе добиете готов веб-сервер Графана.

Група на пример и балансер

Откако ќе имаме слика на дискот што ни овозможува да создадеме многу идентични веб-сервери на Grafana, можеме да создадеме група за примероци. На платформата Yandex.Cloud, овој термин се однесува на сојузот на виртуелни машини кои ги имаат истите карактеристики. При креирање на група на примери, се конфигурира прототипот на сите машини во оваа група, а потоа и карактеристиките на самата група (на пример, минималниот и максималниот број на активни машини). Ако тековниот број не ги исполнува овие критериуми, тогаш самата група на примери ќе ги отстрани непотребните машини или ќе создаде нови според сопствената слика.

Како дел од нашата задача, ќе создадеме примерна група на веб-сервери кои ќе бидат генерирани од претходно креираната слика на дискот.

Она што е навистина извонредно е последното поставување на групата. Целната група во интеграција со Load Balancer ќе ви помогне да конфигурирате балансер L3 на врвот на виртуелните машини од оваа група со кликнување на неколку копчиња.

При поставувањето на балансерот, имплементирав две важни точки:

1. Го натерав балансерот да го прифати корисничкиот сообраќај на портата 80 и да го пренасочи кон портата 3000 од виртуелните машини, токму таму каде што живее Графана.
2. Поставив проверка на одржливоста на машините со тоа што ги пингирав до портата 3000.

Мини резиме

Конечно, можевме рачно да ја распоредиме саканата апликациска инфраструктура и сега имаме многу еластична услуга Grafana. Треба само да ја знаете IP адресата на балансерот како влезна точка во апликацијата и домаќин на кластерот ClickHouse за да ја вчитате базата на податоци во неа.

Дали изгледа како победа? Да, победа. Но сепак нешто ме збунува. Целиот процес погоре бара многу рачни чекори и воопшто не е скалабилен; би сакал да го автоматизирам ако е можно. Ова е она на што ќе биде посветен следниот дел.

Тераформна интеграција

Повторно ќе користиме алатка од HashiCorp наречена Terraform. Ќе ви помогне да ја распоредите целата апликациска инфраструктура со кликнување на копче, врз основа на неколку променливи пренесени од корисникот. Ајде да напишеме рецепт што може да се работи повеќе пати во различни делови на различни корисници.

Целата работа со Terraform се сведува на пишување конфигурациска датотека (*.tf) и врз основа на тоа создавање инфраструктура.

Променливи

На самиот почеток на датотеката, ќе вклучиме променливи кои одредуваат каде и како ќе биде распоредена идната инфраструктура.

variable "oauth_token" {
    type = string
    default = "<oauth-token>"
}
variable "cloud_id" {
    type = string
    default = "<cloud-id>"
}
variable "folder_id" {
    type = string
    default = "<folder_id>"
}
variable "service_account_id" {
    type = string
    default = "<service_account_id>"
}
variable "image_id" {
    type = string
    default = "<image_id>"
}
variable "username" {
    type = string
    default = "<username>"
}
variable "password" {
    type = string
    default = "<password>"
}
variable "dbname" {
    type = string
    default = "<dbname>"
}
variable "public_key_path" {
    type = string
    default = "<path to ssh public key>"
}

Целиот процес на распоредување на апликацијата ќе се сведе на создавање слика на дискот и поставување на овие променливи. Дозволете ми да објаснам за што се одговорни:

oauth_token — токен за пристап до облакот. Може да се добие од линк.
cloud_id — облак идентификатор каде ќе ја распоредиме апликацијата
folder_id — идентификатор на секција каде ќе ја распоредиме апликацијата
service_account_id — идентификатор на услужна сметка во соодветниот дел од облакот.
image_id — идентификатор на сликата на дискот добиена со помош на Packer
корисничко име и лозинка — корисничко име и лозинка за пристап до базите на податоци и до веб-серверот Grafana
dbname — име на базата на податоци во кластерите CH и MySQL
јавен_клуч_пат — патека до датотеката со вашиот јавен ssh клуч, кој можете да го користите за да се поврзете под името ubuntu на виртуелни машини со веб-сервери

Поставување на провајдер

Сега треба да го конфигурирате провајдерот Terraform - во нашиот случај, Yandex:

provider "yandex" {
  token     = var.oauth_token
  cloud_id  = var.cloud_id
  folder_id = var.folder_id
  zone      = "ru-central1-a"
}

Ќе забележите дека овде ги користиме променливите дефинирани погоре.

Мрежа и кластери

Сега ќе создадеме мрежа во која елементите на нашата инфраструктура ќе комуницираат, три подмрежи (по една во секој регион) и ќе ги подигне CH и MySQL кластерите.

resource "yandex_vpc_network" "grafana_network" {}

resource "yandex_vpc_subnet" "subnet_a" {
  zone           = "ru-central1-a"
  network_id     = yandex_vpc_network.grafana_network.id
  v4_cidr_blocks = ["10.1.0.0/24"]
}

resource "yandex_vpc_subnet" "subnet_b" {
  zone           = "ru-central1-b"
  network_id     = yandex_vpc_network.grafana_network.id
  v4_cidr_blocks = ["10.2.0.0/24"]
}

resource "yandex_vpc_subnet" "subnet_c" {
  zone           = "ru-central1-c"
  network_id     = yandex_vpc_network.grafana_network.id
  v4_cidr_blocks = ["10.3.0.0/24"]
}

resource "yandex_mdb_clickhouse_cluster" "ch_cluster" {
  name        = "grafana-clickhouse"
  environment = "PRODUCTION"
  network_id  = yandex_vpc_network.grafana_network.id

  clickhouse {
    resources {
      resource_preset_id = "s2.micro"
      disk_type_id       = "network-ssd"
      disk_size          = 16
    }
  }

  zookeeper {
    resources {
      resource_preset_id = "s2.micro"
      disk_type_id       = "network-ssd"
      disk_size          = 10
    }
  }

  database {
    name = var.dbname
  }

  user {
    name     = var.username
    password = var.password
    permission {
      database_name = var.dbname
    }
  }

  host {
    type      = "CLICKHOUSE"
    zone      = "ru-central1-a"
    subnet_id = yandex_vpc_subnet.subnet_a.id
  }

  host {
    type      = "CLICKHOUSE"
    zone      = "ru-central1-b"
    subnet_id = yandex_vpc_subnet.subnet_b.id
  }

  host {
    type      = "CLICKHOUSE"
    zone      = "ru-central1-c"
    subnet_id = yandex_vpc_subnet.subnet_c.id
  }

  host {
    type      = "ZOOKEEPER"
    zone      = "ru-central1-a"
    subnet_id = yandex_vpc_subnet.subnet_a.id
  }

  host {
    type      = "ZOOKEEPER"
    zone      = "ru-central1-b"
    subnet_id = yandex_vpc_subnet.subnet_b.id
  }

  host {
    type      = "ZOOKEEPER"
    zone      = "ru-central1-c"
    subnet_id = yandex_vpc_subnet.subnet_c.id
  }
}

resource "yandex_mdb_mysql_cluster" "mysql_cluster" {
  name        = "grafana_mysql"
  environment = "PRODUCTION"
  network_id  = yandex_vpc_network.grafana_network.id
  version     = "8.0"

  resources {
    resource_preset_id = "s2.micro"
    disk_type_id       = "network-ssd"
    disk_size          = 16
  }

  database {
    name = var.dbname
  }

  user {
    name     = var.username
    password = var.password
    permission {
      database_name = var.dbname
      roles         = ["ALL"]
    }
  }

  host {
    zone      = "ru-central1-a"
    subnet_id = yandex_vpc_subnet.subnet_a.id
  }
  host {
    zone      = "ru-central1-b"
    subnet_id = yandex_vpc_subnet.subnet_b.id
  }
  host {
    zone      = "ru-central1-c"
    subnet_id = yandex_vpc_subnet.subnet_c.id
  }
}

Како што можете да видите, секој од двата кластери е создаден доста толерантен на грешки бидејќи се наоѓа во три зони на достапност.

Веб сервери

Се чинеше дека можеме да продолжиме во истиот дух, но наидов на тешкотии. Пред ова, прво подигнав MySQL кластер и дури потоа, знаејќи го неговиот ID, собрав слика на дискот со потребната конфигурација, каде што го наведов домаќинот на кластерот. Но, сега не го знаеме ID на кластерот пред да го лансираме Terraform, вклучително и во времето на градење на сликата. Затоа, морав да прибегнам кон следново трик.

Користејќи ја услугата за метаподатоци на Amazon, ќе пренесеме некои параметри на виртуелната машина, кои таа ќе ги прифати и обработи. Потребно ни е машината да отиде до метаподатоците зад кластерот MySQL и лозинката за корисничко име, што корисникот ги наведе во датотеката Terraform, по стартувањето. Ајде малку да ја промениме содржината на датотеката setup.sh, кој работи кога виртуелната машина е вклучена.

setup.sh:

#!/bin/bash
CLUSTER_URI="$(curl -H 'Metadata-Flavor:Google' http://169.254.169.254/computeMetadata/v1/instance/attributes/mysql_cluster_uri)"
USERNAME="$(curl -H 'Metadata-Flavor:Google' http://169.254.169.254/computeMetadata/v1/instance/attributes/username)"
PASSWORD="$(curl -H 'Metadata-Flavor:Google' http://169.254.169.254/computeMetadata/v1/instance/attributes/password)"
sudo sed -i "s#.*;url =.*#url = mysql://${USERNAME}:${PASSWORD}@${CLUSTER_URI}#" /etc/grafana/grafana.ini
sudo sed -i "s#.*;admin_user =.*#admin_user = ${USERNAME}#" /etc/grafana/grafana.ini
sudo sed -i "s#.*;admin_password =.*#admin_password = ${PASSWORD}#" /etc/grafana/grafana.ini
sudo service grafana-server restart

Група на инстанци и балансер

Откако изградивме нова слика на дискот, конечно можеме да ја додадеме нашата датотека за Terraform.

Ајде да покажеме дека сакаме да користиме постоечка слика на дискот:

data "yandex_compute_image" "grafana_image" {
  image_id = var.image_id
}

Сега ајде да создадеме група за примери:

resource "yandex_compute_instance_group" "grafana_group" {
  name               = "grafana-group"
  folder_id          = var.folder_id
  service_account_id = var.service_account_id
  instance_template {
    platform_id = "standard-v1"
    resources {
      memory = 1
      cores  = 1
    }
    boot_disk {
      mode = "READ_WRITE"
      initialize_params {
        image_id = data.yandex_compute_image.grafana_image.id
        size     = 4
      }
    }
    network_interface {
      network_id = yandex_vpc_network.grafana_network.id
      subnet_ids = [yandex_vpc_subnet.subnet_a.id, yandex_vpc_subnet.subnet_b.id, yandex_vpc_subnet.subnet_c.id]
      nat = "true"
    }
    metadata = {
      mysql_cluster_uri = "c-${yandex_mdb_mysql_cluster.mysql_cluster.id}.rw.mdb.yandexcloud.net:3306/${var.dbname}"
      username = var.username
      password = var.password
      ssh-keys = "ubuntu:${file("${var.public_key_path}")}"
    }
    network_settings {
      type = "STANDARD"
    }
  }

  scale_policy {
    fixed_scale {
      size = 6
    }
  }

  allocation_policy {
    zones = ["ru-central1-a", "ru-central1-b", "ru-central1-c"]
  }

  deploy_policy {
    max_unavailable = 2
    max_creating    = 2
    max_expansion   = 2
    max_deleting    = 2
  }

  load_balancer {
    target_group_name = "grafana-target-group"
  }
}

Вреди да се обрне внимание на тоа како го префрливме во метаподатоците cluster_uri, username и password. Токму тие виртуелната машина ќе ги извади при стартување и ќе ги стави во конфигурацијата Grafana.

Тоа е до балансерот.

resource "yandex_lb_network_load_balancer" "grafana_balancer" {
  name = "grafana-balancer"

  listener {
    name = "grafana-listener"
    port = 80
    target_port = 3000
    external_address_spec {
      ip_version = "ipv4"
    }
  }

  attached_target_group {
    target_group_id = yandex_compute_instance_group.grafana_group.load_balancer.0.target_group_id

    healthcheck {
      name = "healthcheck"
      tcp_options {
        port = 3000
      }
    }
  }
}

Малку шеќер

Остана само малку. Откако ќе се распореди инфраструктурата, ќе мора да отидете во Grafana UI и рачно да го додадете CH кластерот (чиј ID сè уште треба да се добие) како извор на податоци. Но, Terraform го знае ID на кластерот. Да му довериме да ја доведе работата до реализација.

Ајде да додадеме нов провајдер - Графана и да и ја дадеме IP адресата на балансерот како домаќин. Сите промени што ги прави Terraform на машината каде што ја одредува нејзиниот балансер ќе растат во MySQL, а со тоа и на сите други машини.

provider "grafana" {
  url  = "http://${[for s in yandex_lb_network_load_balancer.grafana_balancer.listener: s.external_address_spec.0.address].0}"
  auth = "${var.username}:${var.password}"
}

resource "grafana_data_source" "ch_data_source" {
  type          = "vertamedia-clickhouse-datasource"
  name          = "grafana"
  url           = "https://c-${yandex_mdb_clickhouse_cluster.ch_cluster.id}.rw.mdb.yandexcloud.net:8443"
  basic_auth_enabled = "true"
  basic_auth_username = var.username
  basic_auth_password = var.password
  is_default = "true"
  access_mode = "proxy"
}

Ајде да ја исчешламе косата

Ајде да ја прикажеме IP адресата на балансерот и домаќинот на кластерот ClickHouse

output "grafana_balancer_ip_address" {
  value = [for s in yandex_lb_network_load_balancer.grafana_balancer.listener: s.external_address_spec.0.address].0
}

output "clickhouse_cluster_host" {
  value = "https://c-${yandex_mdb_clickhouse_cluster.ch_cluster.id}.rw.mdb.yandexcloud.net:8443"
}

Може да трча

Сите! Нашата конфигурациска датотека е подготвена и можеме, со поставување на променливите, да му кажеме на Terraform да го подигне сето она што го опишавме погоре. Целиот процес ми траеше околу 15 минути.
На крајот можете да видите убава порака:

Apply complete! Resources: 9 added, 0 changed, 0 destroyed.
Outputs:

clickhouse_cluster_host = https://c-c9q14ipa2ngadqsbp2iq.rw.mdb.yandexcloud.net:8443
grafana_balancer_ip_address = 130.193.50.25

И во облакот ќе бидат видливи елементи на подигната инфраструктура:

Сумира

Сега, користејќи ја Grafana како пример, секој од вас може да распореди апликации со широка архитектура на облак на платформата Yandex.Cloud. Корисните алатки од HashiCorp како Packer и Terraform можат да ви помогнат во ова. Се надевам дека некој ќе ја најде оваа статија корисна :)

П.С. Подолу ќе прикачам врска до складиштето каде што можете да најдете готови рецепти за Packer и Terraform, фрагменти од кои дадов во оваа статија.

складиште

Извор: www.habr.com