Vodič za početnike: kako stvoriti DevOps cijev

Ako ste novajlija u DevOps-u, pogledajte ovaj vodič za izradu vašeg prvog konvejera u pet koraka.

Vodič za početnike: kako stvoriti DevOps cijev

DevOps je postao standardno rešenje za ispravljanje sporih, razjedinjenih ili nefunkcionalnih procesa razvoja softvera. Problem je što, ako ste novajlija u DevOps-u i ne znate odakle da krenete, možda vam nedostaje razumevanje ovih metoda. U ovom članku ćemo definisati DevOps konvejer, kao i ponuditi vodič za njegovu izradu u pet koraka. Iako ovaj vodič nije sveobuhvatan, trebao bi vam dati osnovu da započnete svoje putovanje i proširite svoje znanje u budućnosti. Ali hajde da počnemo sa istorijom.

Moje putovanje kroz DevOps

Ranije sam radio u oblaku Citi Group, razvijajući web aplikaciju Infrastructure-as-a-Service (IaaS) za upravljanje cloud infrastrukturom Citi-ja, ali me uvek zanimala ideja kako učiniti proces razvoja efikasnijim i doneti pozitivne kulturne promene u tim programera. Odgovor sam pronašao u knjizi koju je preporučio Greg Lavender, tehnički direktor Citi-ja za cloud arhitekturu i infrastrukturu. Knjiga se zvala "Projekt Feniks" (The Phoenix Project), a objašnjava principe DevOps-a, pri čemu se čita kao roman.

U tabeli na poleđini knjige prikazano je koliko često različite kompanije implementiraju svoje sisteme u okruženju za objavljivanje izdanja:

Amazon: 23 000 dnevno
Google: 5 500 dnevno
Netflix: 500 dnevno
Facebook: jednom dnevno
Twitter: 3 puta nedeljno
Tipična kompanija: jednom svakih 9 meseci

Kako su uopšte moguće frekvencije kao što su Amazon, Google i Netflix? Sve zato što su ove kompanije osmisleli kako da naprave gotovo savršen DevOps konvejer.

Bili smo daleko od ovoga dok nismo implementirali DevOps u Citi. Tada su u mom timu postojala različita okruženja, ali je implementacija na razvojnom serveru bila potpuno ručna. Svi programeri su imali pristup samo jednom razvoju serveru zasnovanom na IBM WebSphere Application Server Community Edition. Problem je bio što se server gašio svaki put kada su nekoliko korisnika istovremeno pokušavali da izvrše implementaciju, pa su programeri morali da obaveštavaju jedni druge o svojim namerama, što je bilo prilično bolno. Pored toga, postojali su problemi sa niskim nivoom pokrivenosti testa kodova, otežanim ručnim procesima implementacije i nedostatkom mogućnosti praćenja implementacije koda povezanog sa određenim zadatkom ili korisničkom pričom.

Shvatio sam da treba nešto da uradim i pronašao sam kolegu sa sličnim mišljenjem. Odlučili smo da sarađujemo na kreiranju početnog DevOps cevovoda – on je postavio virtuelnu mašinu i Tomcat aplikacioni server, dok sam ja radio na Jenkinsu, integrisao Atlassian Jira i BitBucket, kao i radio na pokrivenosti testa koda. Ovaj sporedni projekat bio je veoma uspešan: gotovo smo potpuno automatizovali mnoge procese, postigli skoro 100% funkcionalnosti našeg razvojnog servera, obezbedili praćenje i poboljšali pokrivenost testa koda, kao i dodali mogućnost povezivanja grana u Gitu sa zadacima u Jiri ili implementacijama. Većina alata koje smo koristili za izgradnju našeg DevOps cevovoda bili su otvoreni izvor.

Sada shvatam koliko je naš DevOps cevovod bio jednostavan: nismo koristili dodatke poput Jenkins fajlova ili Ansibla. Ipak, ovaj jednostavan cevovod je dobro funkcionisao, verovatno zahvaljujući Pareto principu (poznatom i kao pravilo 80/20).

Kratak uvod u DevOps i CI/CD cevovod

Ako pitate nekoliko ljudi: "Šta je DevOps?", verovatno ćete dobiti nekoliko različitih odgovora. DevOps, slično Agileu, razvijao se kako bi obuhvatio mnoge različite discipline, ali se većina ljudi slaže oko nekih stvari: DevOps je praksa razvoja softvera ili životni ciklus razvoja softvera (SDLC), čiji je centralni princip promena kulture u kojoj programeri i ne-programeri postoje u okruženju u kojem:

Automatizovane su operacije koje su se ranije obavljale ručno;
Svako radi ono što najbolje zna;
Broj implementacija u određenom vremenskom periodu se povećava; Povećava se propusnost;
Povećava se fleksibilnost razvoja.

Iako prisustvo pravih softverskih alata nije jedino što je potrebno za stvaranje DevOps okruženja, neki alati su neophodni. Ključni alat je kontinuirana integracija i kontinuirano isporučivanje (CI/CD). U ovom okviru okruženja postoje različite faze (npr. DEV, INT, TST, QA, UAT, STG, PROD), mnoge operacije su automatizovane, a programeri mogu pisati visokokvalitetan kod, ostvariti fleksibilnost razvoja i visoku učestalost isporuka.

U ovom članku opisuje se petstopenjski pristup stvaranju DevOps cilindra, sličnog onom prikazanom na sledećem dijagramu, koristeći alate otvorenog koda.

Korak 1: Metode CI/CD

Prvo što vam treba je alat za CI/CD. Jenkins, alat otvorenog koda zasnovan na Javi, licenciran pod MIT, je sredstvo koje je popularizovalo DevOps pristup i postalo de facto standard.

Šta je zapravo Jenkins? Smatrajte ga kao neki magični univerzalni daljinski upravljač koji može komunicirati sa raznim uslugama i alatima i organizovati ih. Sam po sebi, CI/CD alat kao što je Jenkins, je beskoristan, ali postaje moćniji kako se povezuje sa različitim alatima i uslugama.

Jenkins je samo jedan od mnogih alata otvorenog koda za CI/CD koje možete koristiti za izgradnju DevOps toka.

Jenkins: Creative Commons i MIT
Travis CI: MIT
CruiseControl: BSD
Buildbot: GPL
Apache Gump: Apache 2.0
Cabie: GNU

Evo kako izgledaju DevOps procesi s CI/CD alatom:

Vodič za početnike: kako stvoriti DevOps cijev

Imate CI/CD alat koji radi na vašem localhostu, ali trenutno ne možete mnogo učiniti. Pređimo na sljedeću fazu putovanja u svijet DevOps-a.

Korak 2: Upravljanje sistemima za kontrolu verzija

Najbolji (a možda i najjednostavniji) način da testirate može li vaš CI/CD alat napraviti čuda – integrirati se sa sistemom za kontrolu verzija (SCM). Zašto vam je potrebna kontrola verzija? Pretpostavimo da razvijate aplikaciju. Svaki put kada radite na aplikaciji, programirate, bez obzira da li koristite Java, Python, C++, Go, Ruby, JavaScript ili neki od bezbroj programskih jezika. Kod koji pišete zove se izvorni kod. Na početku, posebno kada radite sami, verovatno možete sve smjestiti u lokalni direktorij. Međutim, kada projekat postane veći i pozovete druge ljude da saradjuju, potreban vam je način da izbjegnete sukobe dok efikasno dijelite modifikacije. Također vam je potreban način za vraćanje na prethodne verzije, jer pravljenje sigurnosnih kopija i kopiranje/zalijepiti u njih više nije savremeno. Vama (i vašim saradnicima) potrebno je nešto bolje.

Tada sistem za kontrolu verzija postaje gotovo neophodan. Ovaj alat čuva vaš kod u repozitorijima, prati verzije i koordinira rad članova projekta.

Iako postoji mnogo alata za kontrolu verzija, Git je standard, i to je tačno. Toplo preporučujem korištenje Gita, iako, ako želite, postoje i druge open-source opcije.

Git: GPLv2 i LGPL v2.1
Subversion: Apache 2.0
Concurrent Versions System (CVS): GNU
Vesta: LGPL
Mercurial: GNU GPL v2+

Evo kako izgleda DevOps pipeline s dodatkom alata za kontrolu verzija.

Vodič za početnike: kako stvoriti DevOps cijev

CI/CD alat može automatizirati procese provjere, preuzimanja izvornog koda i suradnje među članovima. Nije loše? Ali kako dobiti funkcionalnu aplikaciju koju milijarde ljudi mogu koristiti i cijeniti?

Korak 3: Izrada alata za automatizaciju gradnje

Odlično! Možete provjeravati kod i unositi promjene u sustav kontrole izvornog koda, kao i pozivati svoje prijatelje da surađuju u razvoju. No, još niste stvorili aplikaciju. Da biste napravili web aplikaciju, potrebno je da je kompajlirate i zapakirate u format paketa koji se može implementirati ili pokrenete kao izvršnu datoteku. (Imajte na umu da interpretirani programski jezici poput JavaScript-a ili PHP-a ne zahtijevaju kompajliranje).

Iskoristite alat za automatizaciju izgradnje. Bez obzira na to koji alat za automatizaciju izgradnje odlučite koristiti, svi oni imaju isti cilj: prikupiti izvorni kod u neki željeni format i automatizirati zadatke čišćenja, kompajliranja, testiranja i implementacije u određenom okruženju. Alati za izgradnju će se razlikovati ovisno o vašem programskom jeziku, ali evo nekoliko općih opcija s otvorenim izvorom.

Naziv
Licenca
Programski jezik

Maven
Apache 2.0
Java

Ant
Apache 2.0
Java

Gradle
Apache 2.0
Java

Bazel
Apache 2.0
Java

Make
GNU
N/A

Grunt
MIT
JavaScript

Gulp
MIT
JavaScript

Buildr
Apache
Ruby

Rake
MIT
Ruby

A-A-P
GNU
Python

SCons
MIT
Python

BitBake
GPLv2
Python

Cake
MIT
C#

ASDF
Expat (MIT)
LISP

Cabal
BSD
Haskell

Super! Možete smjestiti datoteke konfiguracije alata za automatizaciju izgradnje u sustav upravljanja izvorom i dopustiti vašem CI/CD alatu da sve spoji.

Vodič za početnike: kako stvoriti DevOps cijev

Sve je u redu, zar ne? Ali gdje implementirati vašu aplikaciju?

Korak 4: Poslužitelj za web aplikacije

Za sada imate pakiranu datoteku koja može biti ili izvršna ili instalacijska. Da bi bilo koja aplikacija bila zaista korisna, ona mora pružati neku uslugu ili sučelje, ali vam treba kontejner za smještaj vaše aplikacije.

Poslužitelj za web aplikacije je upravo taj kontejner. Poslužitelj pruža okolinu u kojoj se može definirati logika implementiranog paketa. Također, poslužitelj pruža sučelje i nudi web usluge otvarajući sokete za vanjski svijet. Potreban vam je HTTP poslužitelj, kao i izvjesno okruženje (npr., virtualna mašina) za njegovu instalaciju. A dok ste ovdje, pretpostavimo da ćete u međuvremenu više saznati o tome (iako ću ispod govoriti o kontejnerima).

Postoji nekoliko poslužitelja za web aplikacije s otvorenim izvorom.

Naziv
Licenca
Programski jezik

Tomcat
Apache 2.0
Java

Jetty
Apache 2.0
Java

WildFly
GNU Lesser Public
Java

GlassFish
CDDL & GNU Less Public
Java

Django
3-Clause BSD
Python

Tornado
Apache 2.0
Python

Gunicorn
MIT
Python

Python
MIT
Python

Rails
MIT
Ruby

Node.js
MIT
Javascript

Vaš DevOps pipeline je skoro spreman za korišćenje. Dobar posao!

Vodič za početnike: kako stvoriti DevOps cijev

Iako možete stati ovde i nastaviti sa integracijom samostalno, kvalitet koda je važan za programere aplikacija i o tome treba brinuti.

Korak 5: Pokrivenost testiranja koda

Implementacija testova može biti još jedan zahtev, ali programeri moraju uhvatiti sve greške u aplikaciji u ranoj fazi i poboljšati kvalitet koda kako bi osigurali zadovoljstvo krajnjih korisnika. Na sreću, postoji mnogo alata sa otvorenim kodom za testiranje vašeg koda i davanje preporuka za poboljšanje njegovog kvaliteta. Još bolje je to što se većina CI/CD alata može povezati sa ovim alatima i automatizovati proces.

Testiranje koda se sastoji od dva dela: okviri za testiranje koda koji pomažu da se napišu i pokrenu testovi, i alati za generisanje predloga koji pomažu u unapređenju kvaliteta koda.

Sistemi testiranja koda

Naziv
Licenca
Programski jezik

JUnit
Eclipse Public License
Java

EasyMock
Apache
Java

Mockito
MIT
Java

PowerMock
Apache 2.0
Java

Pytest
MIT
Python

Hypothesis
Mozilla
Python

Tox
MIT
Python

Sistemi preporuka za poboljšanje koda

Naziv
Licenca
Programski jezik

Cobertura
GNU
Java

CodeCover
Eclipse Public (EPL)
Java

Coverage.py
Apache 2.0
Python

Emma
Common Public License
Java

JaCoCo
Eclipse Public License
Java

Hypothesis
Mozilla
Python

Tox
MIT
Python

Jasmine
MIT
JavaScript

Karma
MIT
JavaScript

Mocha
MIT
JavaScript

Jest
MIT
JavaScript

Obratite pažnju da su većina alata i okvira pomenutih iznad napisani za Java, Python i JavaScript, dok su C++ i C# vlasnički programski jezici (iako GCC ima otvoren kod).

Sada kada ste implementirali alate za pokrivenost koda testovima, vaš DevOps pipeline bi trebao izgledati kao dijagram prikazan na početku ovog vodiča.

Dodatni koraci

Kontejneri

Kao što sam već rekao, možete hostovati svoj server na virtuelnoj mašini ili serveru, ali kontejneri su popularno rešenje.

Šta su kontejneri? Kratko objašnjenje je da virtuelna mašina zahteva ogroman deo memorije operativnog sistema koji prelazi veličinu aplikacije, dok kontejneru treba samo nekoliko biblioteka i konfiguracija za pokretanje aplikacije. Očigledno je da virtuelne mašine i dalje imaju važne primene, ali kontejner je lagano rešenje za hostovanje aplikacije, uključujući servere aplikacija.

Iako postoje i druge opcije kontejnera, najpopularniji su Docker i Kubernetes.

Docker: Apache 2.0
Kubernetes: Apache 2.0

Alati za automatizaciju posrednika

Naš DevOps pipeline uglavnom je usmjeren na zajedničko stvaranje i implementaciju aplikacija, ali postoje mnoge druge stvari koje se mogu raditi pomoću DevOps alata. Jedna od njih je korištenje alata infrastrukture kao koda (IaC), koji su također poznati kao alati za posredničku automatizaciju. Ovi alati pomažu automatizaciji instalacije, upravljanja i drugih zadataka za posrednički softver. Na primjer, alat za automatizaciju može izvući aplikacije kao što su server web aplikacija, baze podataka i alati za praćenje, s ispravnim konfiguracijama i implementirati ih na serveru aplikacija.

Evo nekoliko alata za posredničku automatizaciju s otvorenim kodom:

Ansible: GNU Public
SaltStack: Apache 2.0
Chef: Apache 2.0
Puppet: Apache ili GPL

Vodič za početnike: kako stvoriti DevOps cijev

Saznajte više o tome kako steći traženu profesiju od nule ili napredovati u vještinama i plati pohađanjem plaćenih online kurseva SkillFactory:

još kurseva

Koristno

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster