प्रोहोस्टर > Блог > प्रशासन > मावेन सेंट्रलवर जावा प्रकल्प अपलोड करण्यासाठी GitLab CI सेट करत आहे
मावेन सेंट्रलवर जावा प्रकल्प अपलोड करण्यासाठी GitLab CI सेट करत आहे
हा लेख जावा डेव्हलपर्ससाठी आहे ज्यांना त्यांची उत्पादने सोनाटाइप आणि/किंवा मॅवेन सेंट्रल रिपॉझिटरीजमध्ये GitLab वापरून प्रकाशित करण्याची आवश्यकता आहे. या लेखात मी या समस्येचे निराकरण करण्यासाठी gitlab-runner, gitlab-ci आणि maven-plugin सेट करण्याबद्दल बोलेन.
पूर्वतयारी:
mvn आणि GPG की चे सुरक्षित स्टोरेज.
सार्वजनिक CI कार्यांची सुरक्षित अंमलबजावणी.
सार्वजनिक भांडारांमध्ये कलाकृती (रिलीझ/स्नॅपशॉट) अपलोड करणे.
Sonatype OSS Repository Hosting Service द्वारे Maven Central मध्ये कलाकृती प्रकाशित करण्याच्या यंत्रणेचे तपशीलवार वर्णन आधीच केले गेले आहे. हा लेख वापरकर्ता Googolplex, म्हणून मी योग्य ठिकाणी या लेखाचा संदर्भ देईन.
साठी पूर्व-नोंदणी करा सोनाटाइप जिरा आणि भांडार उघडण्यासाठी तिकीट उघडा (अधिक तपशीलांसाठी विभाग वाचा Sonatype JIRA वर तिकीट तयार करा). रेपॉजिटरी उघडल्यानंतर, JIRA कडील लॉगिन/पासवर्ड जोडी (यापुढे Sonatype खाते म्हणून संबोधले जाते) Sonatype nexus वर कलाकृती अपलोड करण्यासाठी वापरली जाईल.
तुम्ही GPG की (gnupg/gnupg2) व्युत्पन्न करण्यासाठी लिनक्स कन्सोल वापरत असल्यास, तुम्हाला इन्स्टॉल करणे आवश्यक आहे. आरएनजी-साधने एन्ट्रॉपी निर्माण करण्यासाठी. अन्यथा, की निर्मितीला खूप वेळ लागू शकतो.
सर्व प्रथम, आपल्याला एक प्रकल्प तयार करणे आणि कॉन्फिगर करणे आवश्यक आहे ज्यामध्ये आर्टिफॅक्ट्स तैनात करण्यासाठी पाइपलाइन संग्रहित केली जाईल. मी माझ्या प्रकल्पाला सोप्या आणि सहजतेने नाव दिले - तैनात करणे
रेपॉजिटरी तयार केल्यानंतर, तुम्हाला रेपॉजिटरी बदलण्यासाठी प्रवेश प्रतिबंधित करणे आवश्यक आहे.
प्रकल्पावर जा -> सेटिंग्ज -> भांडार -> संरक्षित शाखा. आम्ही सर्व नियम हटवतो आणि वाइल्डकार्ड * सह एकच नियम जोडतो आणि पुश करण्याचा आणि विलीन करण्याचा अधिकार फक्त मेंटेनरची भूमिका असलेल्या वापरकर्त्यांसाठी आहे. हा नियम या प्रकल्पाच्या सर्व वापरकर्त्यांसाठी आणि हा प्रकल्प ज्या गटाशी संबंधित आहे त्यांच्यासाठी कार्य करेल.
जर तेथे अनेक देखभाल करणारे असतील, तर सर्वोत्तम उपाय म्हणजे तत्त्वतः प्रकल्पात प्रवेश मर्यादित करणे.
प्रकल्पावर जा -> सेटिंग्ज -> सामान्य -> दृश्यमानता, प्रकल्प वैशिष्ट्ये, परवानग्या आणि प्रकल्प दृश्यमानता यावर सेट करा खाजगी.
माझ्याकडे सार्वजनिकरित्या प्रवेश करण्यायोग्य प्रकल्प आहे, कारण मी माझा स्वतःचा GitLab रनर वापरतो आणि फक्त माझ्याकडे रेपॉजिटरी बदलण्यासाठी प्रवेश आहे. खरे तर, सार्वजनिक पाइपलाइन लॉगमध्ये खाजगी माहिती दाखवणे माझ्या हिताचे नाही.
भांडार बदलण्याचे नियम कडक करणे
प्रकल्पावर जा -> सेटिंग्ज -> रेपॉजिटरी -> पुश नियम आणि कमिटर प्रतिबंध सेट करा, लेखक GitLab वापरकर्ता फ्लॅग आहे की नाही ते तपासा. मी सेट करण्याची देखील शिफारस करतो स्वाक्षरी करा, आणि स्वाक्षरी न केलेले कमिट ध्वज नाकारणे सेट करा.
पुढे तुम्हाला कार्ये लाँच करण्यासाठी ट्रिगर कॉन्फिगर करणे आवश्यक आहे
प्रोजेक्टवर जा -> सेटिंग्ज -> CI / CD -> पाइपलाइन ट्रिगर आणि नवीन ट्रिगर-टोकन तयार करा
हे टोकन प्रकल्पांच्या गटासाठी व्हेरिएबल्सच्या सामान्य कॉन्फिगरेशनमध्ये त्वरित जोडले जाऊ शकते.
गट -> सेटिंग्ज -> CI / CD -> व्हेरिएबल्स वर जा आणि व्हेरिएबल जोडा DEPLOY_TOKEN ट्रिगर-टोकन मूल्यासह.
हा विभाग तुमचा स्वतःचा (विशिष्ट) आणि सार्वजनिक (सामायिक) धावपटू वापरून उपयोजित कार्ये चालवण्यासाठी कॉन्फिगरेशनचे वर्णन करतो.
विशिष्ट धावपटू
मी माझे स्वतःचे धावपटू वापरतो कारण, सर्व प्रथम, ते सोयीस्कर, जलद आणि स्वस्त आहे.
धावपटूसाठी, मी 1 CPU, 2 GB RAM, 20 GB HDD सह Linux VDS ची शिफारस करतो. इश्यू किंमत प्रति वर्ष ~3000₽ आहे.
माझा धावपटू
धावपटूसाठी मी VDS 4 CPU, 4 GB RAM, 50 GB SSD घेतले. किंमत ~11000₽ आणि कधीही खेद वाटला नाही.
माझ्याकडे एकूण 7 मशीन आहेत. अरुबा वर 5 आणि ihor वर 2.
त्यामुळे आमच्याकडे धावपटू आहे. आता आपण ते कॉन्फिगर करू.
आम्ही SSH द्वारे मशीनवर जातो आणि java, git, maven, gnupg2 स्थापित करतो.
Runtime platform arch=amd64 os=linux pid=17594 revision=3001a600 version=11.10.0
Running in system-mode.
Please enter the gitlab-ci coordinator URL (e.g. https://gitlab.com/):
https://gitlab.com/
Please enter the gitlab-ci token for this runner:
REGISTRATION_TOKEN
Please enter the gitlab-ci description for this runner:
[ih1174328.vds.myihor.ru]: Deploy Runner
Please enter the gitlab-ci tags for this runner (comma separated):
deploy
Registering runner... succeeded runner=ZvKdjJhx
Please enter the executor: docker-ssh, parallels, virtualbox, docker-ssh+machine, kubernetes, docker, ssh, docker+machine, shell:
shell
Runner registered successfully. Feel free to start it, but if it's running already the config should be automatically reloaded!
आम्ही तपासतो की धावपटू नोंदणीकृत आहे. gitlab.com या वेबसाइटवर जा -> deploy-project -> Settings -> CI/CD -> Runners -> Specific Runners -> Runers सक्रिय या प्रकल्पासाठी
पडदा
जोडा वेगळा सेवा /etc/systemd/system/gitlab-deployer.service
आम्ही प्रश्नांची उत्तरे देऊन एक की व्युत्पन्न करतो. मी माझे स्वतःचे नाव आणि ईमेल वापरले.
की साठी पासवर्ड निर्दिष्ट करणे सुनिश्चित करा. या की सह कलाकृतींवर स्वाक्षरी केली जाईल.
gpg --gen-key
तपासत आहे
gpg --list-keys -a
/home/gitlab-deployer/.gnupg/pubring.gpg
----------------------------------------
pub 4096R/00000000 2019-04-19
uid Petruha Petrov <[email protected]>
sub 4096R/11111111 2019-04-19
आमची सार्वजनिक की की सर्व्हरवर अपलोड करत आहे
gpg --keyserver keys.gnupg.net --send-key 00000000
gpg: sending key 00000000 to hkp server keys.gnupg.net
मॅवेन निर्देशिका तयार करा भांडार आणि कॅशेशी लिंक करा (कोणतीही चूक करू नका)
तुम्ही एकाच मशीनवर अनेक धावपटू चालवण्याची योजना नसल्यास तुम्ही हा मुद्दा वगळू शकता.
डिप्लॉय प्रोजेक्टच्या रूटमध्ये .gitlab-ci.yml फाइल जोडा
स्क्रिप्ट दोन परस्पर अनन्य उपयोजन कार्ये सादर करते. अनुक्रमे विशिष्ट धावपटू किंवा सामायिक धावपटू.
.gitlab-ci.yml
stages:
- deploy
Specific Runner:
extends: .java_deploy_template
# Задача будет выполняться на вашем shell-раннере
tags:
- deploy
Shared Runner:
extends: .java_deploy_template
# Задача будет выполняться на публичном docker-раннере
tags:
- docker
# Образ из раздела GitLab Runner -> Shared Runner -> Docker
image: registry.gitlab.com/group/deploy-project:latest
before_script:
# Импортируем GPG ключ
- printf "${GPG_SECRET_KEY}" | gpg --batch --import
# Сохраняем maven конфигурацию
- printf "${SETTINGS_SECURITY_XML}" > ~/.m2/settings-security.xml
- printf "${SETTINGS_XML}" > ~/.m2/settings.xml
.java_deploy_template:
stage: deploy
# Задача сработает по триггеру, если передана переменная DEPLOY со значением java
only:
variables:
- $DEPLOY == "java"
variables:
# отключаем клонирование текущего проекта
GIT_STRATEGY: none
script:
# Предоставляем возможность хранения пароля в незашифрованном виде
- git config --global credential.helper store
# Сохраняем временные креды пользователя gitlab-ci-token
# Токен работает для всех публичных проектов gitlab.com и для проектов группы
- echo "https://gitlab-ci-token:${CI_JOB_TOKEN}@gitlab.com" >> ~/.git-credentials
# Полностью чистим текущую директорию
- rm -rf .* *
# Клонируем проект который, будем деплоить в Sonatype Nexus
- git clone ${DEPLOY_CI_REPOSITORY_URL} .
# Переключаемся на нужный коммит
- git checkout ${DEPLOY_CI_COMMIT_SHA} -f
# Если хоть один pom.xml содержит параметр autoReleaseAfterClose валим сборку.
# В противном случае есть риск залить сырые артефакты в maven central
- >
for pom in $(find . -name pom.xml); do
if [[ $(grep -q autoReleaseAfterClose "$pom" && echo $?) == 0 ]]; then
echo "File $pom contains prohibited setting: <autoReleaseAfterClose>";
exit 1;
fi;
done
# Если параметр DEPLOY_CI_COMMIT_TAG пустой, то принудительно ставим SNAPSHOT-версию
- >
if [[ "${DEPLOY_CI_COMMIT_TAG}" != "" ]]; then
mvn versions:set -DnewVersion=${DEPLOY_CI_COMMIT_TAG}
else
VERSION=$(mvn -q -Dexec.executable=echo -Dexec.args='${project.version}' --non-recursive exec:exec)
if [[ "${VERSION}" == *-SNAPSHOT ]]; then
mvn versions:set -DnewVersion=${VERSION}
else
mvn versions:set -DnewVersion=${VERSION}-SNAPSHOT
fi
fi
# Запускаем задачу на сборку и деплой артефактов
- mvn clean deploy -DskipTests=true
जर तुमच्याकडे मल्टी-मॉड्यूल प्रोजेक्ट असेल आणि तुम्हाला रेपॉजिटरीमध्ये विशिष्ट मॉड्यूल अपलोड करण्याची आवश्यकता नसेल, तर तुम्हाला जोडणे आवश्यक आहे. nexus-staging-maven-plugin ध्वजासह skipNexusStagingDeployMojo
डाउनलोड केल्यानंतर, स्नॅपशॉट/रिलीज आवृत्त्या उपलब्ध आहेत स्टेजिंग रेपॉजिटरीज
<repositories>
<repository>
<id>SonatypeNexus</id>
<url>https://oss.sonatype.org/content/groups/staging/</url>
<!-- Не надо указывать флаги snapshot/release для репозитория -->
</repository>
</repositories>
अधिक pluses
नेक्सस रेपॉजिटरीसह कार्य करण्यासाठी लक्ष्यांची एक अतिशय समृद्ध यादी (mvn help:describe -Dplugin=org.sonatype.plugins:nexus-staging-maven-plugin).
मॅवेन सेंट्रलवर अपलोड करण्यासाठी स्वयंचलित प्रकाशन तपासणी
जेव्हा टॅग स्थापित केला जातो, तेव्हा उपयोजित प्रकल्पातील संबंधित कार्य आपोआप रिलीझ आवृत्ती नेक्ससवर डाउनलोड करण्यासाठी ट्रिगर केले जाते (उदाहरण).
सर्वात चांगला भाग असा आहे की नेक्ससमध्ये क्लोज रिलीझ स्वयंचलितपणे ट्रिगर केले जाते.
[INFO] Performing remote staging...
[INFO]
[INFO] * Remote staging into staging profile ID "9043b43f77dcc9"
[INFO] * Created staging repository with ID "orgtouchbit-1037".
[INFO] * Staging repository at https://oss.sonatype.org:443/service/local/staging/deployByRepositoryId/orgtouchbit-1037
[INFO] * Uploading locally staged artifacts to profile org.touchbit
[INFO] * Upload of locally staged artifacts finished.
[INFO] * Closing staging repository with ID "orgtouchbit-1037".
Waiting for operation to complete...
.........
[INFO] Remote staged 1 repositories, finished with success.
[INFO] ------------------------------------------------------------------------
[INFO] Reactor Summary:
[INFO]
[INFO] Shields4J 1.0.0 .................................... SUCCESS [ 9.603 s]
[INFO] test-core .......................................... SUCCESS [ 3.419 s]
[INFO] Shields4J client ................................... SUCCESS [ 9.793 s]
[INFO] TestNG listener 1.0.0 .............................. SUCCESS [01:23 min]
[INFO] ------------------------------------------------------------------------
[INFO] BUILD SUCCESS
[INFO] ------------------------------------------------------------------------
[INFO] Total time: 01:47 min
[INFO] Finished at: 2019-04-21T04:05:46+03:00
[INFO] ------------------------------------------------------------------------
आणि जर काही चूक झाली तर, कार्य निश्चितपणे अयशस्वी होईल
[INFO] Performing remote staging...
[INFO]
[INFO] * Remote staging into staging profile ID "9043b43f77dcc9"
[INFO] * Created staging repository with ID "orgtouchbit-1038".
[INFO] * Staging repository at https://oss.sonatype.org:443/service/local/staging/deployByRepositoryId/orgtouchbit-1038
[INFO] * Uploading locally staged artifacts to profile org.touchbit
[INFO] * Upload of locally staged artifacts finished.
[INFO] * Closing staging repository with ID "orgtouchbit-1038".
Waiting for operation to complete...
.......
[ERROR] Rule failure while trying to close staging repository with ID "orgtouchbit-1039".
[ERROR]
[ERROR] Nexus Staging Rules Failure Report
[ERROR] ==================================
[ERROR]
[ERROR] Repository "orgtouchbit-1039" failures
[ERROR] Rule "signature-staging" failures
[ERROR] * No public key: Key with id: (1f42b618d1cbe1b5) was not able to be located on <a href=http://keys.gnupg.net:11371/>http://keys.gnupg.net:11371/</a>. Upload your public key and try the operation again.
...
[ERROR] Cleaning up local stage directory after a Rule failure during close of staging repositories: [orgtouchbit-1039]
[ERROR] * Deleting context 9043b43f77dcc9.properties
[ERROR] Cleaning up remote stage repositories after a Rule failure during close of staging repositories: [orgtouchbit-1039]
[ERROR] * Dropping failed staging repository with ID "orgtouchbit-1039" (Rule failure during close of staging repositories: [orgtouchbit-1039]).
[ERROR] Remote staging finished with a failure: Staging rules failure!
[INFO] ------------------------------------------------------------------------
[INFO] Reactor Summary:
[INFO]
[INFO] Shields4J 1.0.0 .................................... SUCCESS [ 4.073 s]
[INFO] test-core .......................................... SUCCESS [ 2.788 s]
[INFO] Shields4J client ................................... SUCCESS [ 3.962 s]
[INFO] TestNG listener 1.0.0 .............................. FAILURE [01:07 min]
[INFO] ------------------------------------------------------------------------
[INFO] BUILD FAILURE
[INFO] ------------------------------------------------------------------------
परिणामी, आमच्याकडे फक्त एकच पर्याय उरतो. एकतर ही आवृत्ती हटवा किंवा प्रकाशित करा.
प्रकाशनानंतर, काही काळानंतर कलाकृती आत असतील
विषया व्यतिरिक्त
मावेन इतर सार्वजनिक भांडारांना अनुक्रमित करतो हा माझ्यासाठी एक शोध होता.
मला robots.txt जोडावे लागले कारण ते माझे जुने भांडार अनुक्रमित करते.
जावा प्रकल्प बांधण्यासाठी/चाचणी/प्रकाशनासाठी सामान्य पाइपलाइन.
GitLab CI सेट करणे हा पहिल्या दृष्टीक्षेपात दिसतो तितका क्लिष्ट विषय नाही. दोन वेळा टर्न-की आधारावर सीआय सेट करणे पुरेसे आहे आणि आता आपण या प्रकरणात हौशीपासून दूर आहात. शिवाय, GitLab दस्तऐवजीकरण खूप निरर्थक आहे. पहिले पाऊल उचलण्यास घाबरू नका. चालणार्या व्यक्तीच्या पायर्याखाली रस्ता दिसतो (कोण म्हणाले ते आठवत नाही :)
फीडबॅक मिळाल्यास मला आनंद होईल.
तुमच्याकडे फक्त एक शेल रनर असल्यास स्पर्धात्मकरित्या (डॉकर-कंपोज वापरून चाचणी अंतर्गत सेवा चालवणे) स्पर्धात्मकपणे एकीकरण चाचण्यांसह कार्ये चालवण्यासाठी GitLab CI कसे कॉन्फिगर करावे याबद्दल मी पुढील लेखात बोलेन.