प्रोहोस्टर > Блог > प्रशासन > मावेन सेन्ट्रलमा जाभा प्रोजेक्ट अपलोड गर्न GitLab CI सेटअप गर्दै
मावेन सेन्ट्रलमा जाभा प्रोजेक्ट अपलोड गर्न GitLab CI सेटअप गर्दै
यो लेख जाभा विकासकर्ताहरूको लागि हो जसले GitLab प्रयोग गरेर सोनाटाइप र/वा माभेन केन्द्रीय भण्डारहरूमा आफ्ना उत्पादनहरू द्रुत रूपमा प्रकाशित गर्न आवश्यक छ। यस लेखमा, म यो समस्या समाधान गर्न gitlab-runner, gitlab-ci र maven-plugin सेटअप बारे कुरा गर्नेछु।
आवश्यकताहरु:
mvn र GPG कुञ्जीहरूको सुरक्षित भण्डारण।
सार्वजनिक CI कार्यहरूको सुरक्षित कार्यान्वयन।
सार्वजनिक भण्डारहरूमा कलाकृतिहरू (रिलिज/स्न्यापसट) अपलोड गर्दै।
माभेन सेन्ट्रलमा प्रकाशनको लागि रिलीज संस्करणहरूको स्वचालित जाँच।
बहु परियोजनाहरूको लागि भण्डारमा कलाकृतिहरू अपलोड गर्नको लागि सामान्य समाधान।
सोनाटाइप ओएसएस रिपोजिटरी होस्टिंग सेवा मार्फत माभेन सेन्ट्रलमा कलाकृतिहरू प्रकाशित गर्ने संयन्त्रको विस्तृत विवरण पहिले नै वर्णन गरिएको छ। यो लेख प्रयोगकर्ता गुगलप्लेक्स, त्यसैले म यस लेखलाई सही ठाउँहरूमा सन्दर्भ गर्नेछु।
मा पूर्व दर्ता गर्नुहोस् Sonatype JIRA र भण्डार खोल्न टिकट सुरु गर्नुहोस् (थप विवरणहरूको लागि, खण्ड पढ्नुहोस् Sonatype JIRA टिकट सिर्जना गर्नुहोस्)। रिपोजिटरी खोलिसकेपछि, JIRA लगइन/पासवर्ड जोडी (यसपछि सोनाटाइप खाता भनिन्छ) सोनाटाइप नेक्ससमा कलाकृतिहरू अपलोड गर्न प्रयोग गरिनेछ।
यदि तपाइँ GPG कुञ्जी (gnupg/gnupg2) उत्पन्न गर्न लिनक्स कन्सोल प्रयोग गर्दै हुनुहुन्छ भने, तपाइँ स्थापना गर्न आवश्यक छ। rng- उपकरणहरू एन्ट्रोपी उत्पन्न गर्न। अन्यथा, कुञ्जी पुस्ताले धेरै समय लिन सक्छ।
सबै भन्दा पहिले, तपाईंले एक परियोजना सिर्जना र कन्फिगर गर्न आवश्यक छ जसमा पाइपलाइन कलाकृतिहरूको तैनातीको लागि भण्डारण गरिनेछ। मैले मेरो परियोजनालाई सरल र जटिल भनियो - तैनात गर्नुहोस्
भण्डार सिर्जना गरेपछि, तपाईंले भण्डार परिवर्तन गर्न पहुँच प्रतिबन्धित गर्न आवश्यक छ।
परियोजनामा जानुहोस् -> सेटिङ्हरू -> भण्डार -> संरक्षित शाखाहरू। हामी सबै नियमहरू मेटाउँछौं र वाइल्डकार्ड * को साथ एकल नियम थप्छौं र मर्जरको भूमिका भएका प्रयोगकर्ताहरूका लागि मात्र पुश र मर्ज गर्ने अधिकार। यो नियमले यो परियोजना र यो परियोजना सम्बन्धित समूह दुवैका सबै प्रयोगकर्ताहरूका लागि काम गर्नेछ।
यदि त्यहाँ धेरै रखरखावकर्ताहरू छन् भने, त्यसपछि उत्तम समाधान सिद्धान्तमा परियोजनामा पहुँच प्रतिबन्धित हुनेछ।
परियोजनामा जानुहोस् -> सेटिङ्हरू -> सामान्य -> दृश्यता, परियोजना सुविधाहरू, अनुमतिहरू र परियोजना दृश्यता सेट गर्नुहोस्। निजी.
मसँग सार्वजनिक पहुँचमा एउटा परियोजना छ, किनकि म आफ्नै GitLab धावक प्रयोग गर्छु र केवल मसँग भण्डार परिमार्जन गर्न पहुँच छ। खैर, वास्तवमा सार्वजनिक पाइपलाइन लगहरूमा निजी जानकारी देखाउन मेरो रुचिमा छैन।
भण्डार परिवर्तन गर्नका लागि नियमहरू कडा गर्दै
परियोजनामा जानुहोस् -> सेटिङ्हरू -> भण्डार -> पुश नियमहरू र फ्ल्यागहरू कमिटर प्रतिबन्ध सेट गर्नुहोस्, लेखक GitLab प्रयोगकर्ता हो कि छैन भनेर जाँच गर्नुहोस्। म पनि सेटिङ सिफारिस गर्छु हस्ताक्षर गर्ने प्रतिबद्धता, र अस्वीकार अहस्ताक्षरित प्रतिबद्धता झण्डा सेट गर्नुहोस्।
अर्को, तपाईंले कार्यहरू चलाउनको लागि ट्रिगर कन्फिगर गर्न आवश्यक छ
परियोजनामा जानुहोस् -> सेटिङ्हरू -> CI / CD -> पाइपलाइन ट्रिगरहरू र नयाँ ट्रिगर-टोकन सिर्जना गर्नुहोस्
यो टोकन परियोजनाहरूको समूहको लागि चरहरूको सामान्य कन्फिगरेसनमा तुरुन्तै थप्न सकिन्छ।
समूहमा जानुहोस् -> सेटिङ्हरू -> CI / CD -> भेरिएबलहरू र एउटा चर थप्नुहोस् DEPLOY_TOKEN मानमा ट्रिगर-टोकनको साथ।
यो खण्डले नेटिभ (विशिष्ट) र सार्वजनिक (साझेदार) धावक प्रयोग गरेर डिप्लोयमा कार्यहरू चलाउनको लागि कन्फिगरेसन वर्णन गर्दछ।
विशिष्ट धावक
म मेरो आफ्नै धावकहरू प्रयोग गर्छु, किनभने सबै भन्दा पहिले यो सुविधाजनक, छिटो, सस्तो छ।
धावकको लागि म 1 CPU, 2 GB RAM, 20 GB HDD संग Linux VDS सिफारिस गर्छु। जारी मूल्य ~ 3000₽ प्रति वर्ष।
मेरो धावक
धावकको लागि मैले VDS 4 CPU, 4 GB RAM, 50 GB SSD लिएँ। यसको लागत ~11000₽ छ र यसलाई कहिल्यै पछुताउनु पर्दैन।
मसँग जम्मा ७ वटा मेसिन छन् । अरुबामा ५ र इहोरमा २।
त्यसोभए, हामीसँग एक धावक छ। अब हामी यसलाई सेट अप गर्नेछौं।
हामी SSH मार्फत मेसिनमा जान्छौं र java, git, maven, gnupg2 स्थापना गर्छौं।
maven क्यासको लागि डाइरेक्टरी सिर्जना गर्नुहोस् र समूह अधिकारहरू असाइन गर्नुहोस् runner
यदि तपाइँ एउटै मेसिनमा धेरै धावकहरू चलाउने योजना बनाउनुहुन्न भने तपाइँ यो चरण छोड्न सक्नुहुन्छ।
Runtime platform arch=amd64 os=linux pid=17594 revision=3001a600 version=11.10.0
Running in system-mode.
Please enter the gitlab-ci coordinator URL (e.g. https://gitlab.com/):
https://gitlab.com/
Please enter the gitlab-ci token for this runner:
REGISTRATION_TOKEN
Please enter the gitlab-ci description for this runner:
[ih1174328.vds.myihor.ru]: Deploy Runner
Please enter the gitlab-ci tags for this runner (comma separated):
deploy
Registering runner... succeeded runner=ZvKdjJhx
Please enter the executor: docker-ssh, parallels, virtualbox, docker-ssh+machine, kubernetes, docker, ssh, docker+machine, shell:
shell
Runner registered successfully. Feel free to start it, but if it's running already the config should be automatically reloaded!
धावक दर्ता भएको जाँच गर्नुहोस्। gitlab.com मा जानुहोस् -> डिप्लोय-प्रोजेक्ट -> सेटिङ्हरू -> CI/CD -> धावकहरू -> विशिष्ट धावकहरू -> यस परियोजनाको लागि सक्रिय धावकहरू
स्क्रिन
थप्नुहोस् अलग सेवा /etc/systemd/system/gitlab-deployer.service
हामी प्रश्नहरूको जवाफ दिएर कुञ्जी उत्पन्न गर्छौं। मैले आफ्नै नाम र इमेल प्रयोग गरें।
कुञ्जीको लागि पासवर्ड निर्दिष्ट गर्न निश्चित हुनुहोस्। कलाकृतिहरू यो कुञ्जीसँग हस्ताक्षर गरिनेछ।
gpg --gen-key
जाँच गर्दै
gpg --list-keys -a
/home/gitlab-deployer/.gnupg/pubring.gpg
----------------------------------------
pub 4096R/00000000 2019-04-19
uid Petruha Petrov <[email protected]>
sub 4096R/11111111 2019-04-19
किसर्भरमा हाम्रो सार्वजनिक कुञ्जी अपलोड गर्दै
gpg --keyserver keys.gnupg.net --send-key 00000000
gpg: sending key 00000000 to hkp server keys.gnupg.net
एक maven निर्देशिका सिर्जना गर्नुहोस् भण्डार र क्याससँग लिङ्क गर्नुहोस् (कुनै गल्ती नगर्नुहोस्)
यदि तपाइँ एउटै मेसिनमा धेरै धावकहरू चलाउने योजना बनाउनुहुन्न भने यो चरण छोड्न सकिन्छ।
डिप्लोय प्रोजेक्टको रूटमा फाइल .gitlab-ci.yml थप्नुहोस्
लिपिले दुई पारस्परिक रूपमा विशेष परिनियोजन कार्यहरू प्रस्तुत गर्दछ। विशिष्ट धावक वा साझा धावक क्रमशः।
gitlab-ci.yml
stages:
- deploy
Specific Runner:
extends: .java_deploy_template
# Задача будет выполняться на вашем shell-раннере
tags:
- deploy
Shared Runner:
extends: .java_deploy_template
# Задача будет выполняться на публичном docker-раннере
tags:
- docker
# Образ из раздела GitLab Runner -> Shared Runner -> Docker
image: registry.gitlab.com/group/deploy-project:latest
before_script:
# Импортируем GPG ключ
- printf "${GPG_SECRET_KEY}" | gpg --batch --import
# Сохраняем maven конфигурацию
- printf "${SETTINGS_SECURITY_XML}" > ~/.m2/settings-security.xml
- printf "${SETTINGS_XML}" > ~/.m2/settings.xml
.java_deploy_template:
stage: deploy
# Задача сработает по триггеру, если передана переменная DEPLOY со значением java
only:
variables:
- $DEPLOY == "java"
variables:
# отключаем клонирование текущего проекта
GIT_STRATEGY: none
script:
# Предоставляем возможность хранения пароля в незашифрованном виде
- git config --global credential.helper store
# Сохраняем временные креды пользователя gitlab-ci-token
# Токен работает для всех публичных проектов gitlab.com и для проектов группы
- echo "https://gitlab-ci-token:${CI_JOB_TOKEN}@gitlab.com" >> ~/.git-credentials
# Полностью чистим текущую директорию
- rm -rf .* *
# Клонируем проект который, будем деплоить в Sonatype Nexus
- git clone ${DEPLOY_CI_REPOSITORY_URL} .
# Переключаемся на нужный коммит
- git checkout ${DEPLOY_CI_COMMIT_SHA} -f
# Если хоть один pom.xml содержит параметр autoReleaseAfterClose валим сборку.
# В противном случае есть риск залить сырые артефакты в maven central
- >
for pom in $(find . -name pom.xml); do
if [[ $(grep -q autoReleaseAfterClose "$pom" && echo $?) == 0 ]]; then
echo "File $pom contains prohibited setting: <autoReleaseAfterClose>";
exit 1;
fi;
done
# Если параметр DEPLOY_CI_COMMIT_TAG пустой, то принудительно ставим SNAPSHOT-версию
- >
if [[ "${DEPLOY_CI_COMMIT_TAG}" != "" ]]; then
mvn versions:set -DnewVersion=${DEPLOY_CI_COMMIT_TAG}
else
VERSION=$(mvn -q -Dexec.executable=echo -Dexec.args='${project.version}' --non-recursive exec:exec)
if [[ "${VERSION}" == *-SNAPSHOT ]]; then
mvn versions:set -DnewVersion=${VERSION}
else
mvn versions:set -DnewVersion=${VERSION}-SNAPSHOT
fi
fi
# Запускаем задачу на сборку и деплой артефактов
- mvn clean deploy -DskipTests=true
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-javadoc-plugin</artifactId>
<executions>
<execution>
<goals>
<goal>jar</goal>
</goals>
<!-- Генерация javadoc должна быть после фазы генерации ресурсов -->
<phase>prepare-package</phase>
<configuration>
<!-- Очень помогает в публичных проектах -->
<failOnError>true</failOnError>
<failOnWarnings>true</failOnWarnings>
<!-- Убирает ошибку поиска документации в target директории -->
<detectOfflineLinks>false</detectOfflineLinks>
</configuration>
</execution>
</executions>
</plugin>
यदि तपाइँसँग जाभा समावेश नभएको मोड्युल छ (उदाहरणका लागि मात्र स्रोतहरू)
वा तपाइँ सिद्धान्तमा javadoc उत्पन्न गर्न चाहनुहुन्न, त्यसपछि मद्दत गर्न maven-jar-plugin
यदि तपाइँसँग बहु-मोड्युल परियोजना छ, र तपाइँले भण्डारमा एक विशेष मोड्युल अपलोड गर्न आवश्यक छैन भने, तपाइँले यो मोड्युलको pom.xml मा थप्न आवश्यक छ। nexus-staging-maven-plugin झण्डा संग skipNexusStagingDeployMojo
<repositories>
<repository>
<id>SonatypeNexus</id>
<url>https://oss.sonatype.org/content/groups/staging/</url>
<!-- Не надо указывать флаги snapshot/release для репозитория -->
</repository>
</repositories>
जब ट्याग सेट हुन्छ, डिप्लोय प्रोजेक्टमा सम्बन्धित कार्य स्वचालित रूपमा नेक्ससमा रिलीज संस्करण अपलोड गर्न ट्रिगर हुन्छ (एक उदाहरण).
सबैभन्दा राम्रो पक्ष यो हो कि निकट रिलीज स्वचालित रूपमा नेक्ससमा ट्रिगर हुन्छ।
[INFO] Performing remote staging...
[INFO]
[INFO] * Remote staging into staging profile ID "9043b43f77dcc9"
[INFO] * Created staging repository with ID "orgtouchbit-1037".
[INFO] * Staging repository at https://oss.sonatype.org:443/service/local/staging/deployByRepositoryId/orgtouchbit-1037
[INFO] * Uploading locally staged artifacts to profile org.touchbit
[INFO] * Upload of locally staged artifacts finished.
[INFO] * Closing staging repository with ID "orgtouchbit-1037".
Waiting for operation to complete...
.........
[INFO] Remote staged 1 repositories, finished with success.
[INFO] ------------------------------------------------------------------------
[INFO] Reactor Summary:
[INFO]
[INFO] Shields4J 1.0.0 .................................... SUCCESS [ 9.603 s]
[INFO] test-core .......................................... SUCCESS [ 3.419 s]
[INFO] Shields4J client ................................... SUCCESS [ 9.793 s]
[INFO] TestNG listener 1.0.0 .............................. SUCCESS [01:23 min]
[INFO] ------------------------------------------------------------------------
[INFO] BUILD SUCCESS
[INFO] ------------------------------------------------------------------------
[INFO] Total time: 01:47 min
[INFO] Finished at: 2019-04-21T04:05:46+03:00
[INFO] ------------------------------------------------------------------------
र यदि केहि गलत भयो भने, कार्य असफल हुनेछ
[INFO] Performing remote staging...
[INFO]
[INFO] * Remote staging into staging profile ID "9043b43f77dcc9"
[INFO] * Created staging repository with ID "orgtouchbit-1038".
[INFO] * Staging repository at https://oss.sonatype.org:443/service/local/staging/deployByRepositoryId/orgtouchbit-1038
[INFO] * Uploading locally staged artifacts to profile org.touchbit
[INFO] * Upload of locally staged artifacts finished.
[INFO] * Closing staging repository with ID "orgtouchbit-1038".
Waiting for operation to complete...
.......
[ERROR] Rule failure while trying to close staging repository with ID "orgtouchbit-1039".
[ERROR]
[ERROR] Nexus Staging Rules Failure Report
[ERROR] ==================================
[ERROR]
[ERROR] Repository "orgtouchbit-1039" failures
[ERROR] Rule "signature-staging" failures
[ERROR] * No public key: Key with id: (1f42b618d1cbe1b5) was not able to be located on <a href=http://keys.gnupg.net:11371/>http://keys.gnupg.net:11371/</a>. Upload your public key and try the operation again.
...
[ERROR] Cleaning up local stage directory after a Rule failure during close of staging repositories: [orgtouchbit-1039]
[ERROR] * Deleting context 9043b43f77dcc9.properties
[ERROR] Cleaning up remote stage repositories after a Rule failure during close of staging repositories: [orgtouchbit-1039]
[ERROR] * Dropping failed staging repository with ID "orgtouchbit-1039" (Rule failure during close of staging repositories: [orgtouchbit-1039]).
[ERROR] Remote staging finished with a failure: Staging rules failure!
[INFO] ------------------------------------------------------------------------
[INFO] Reactor Summary:
[INFO]
[INFO] Shields4J 1.0.0 .................................... SUCCESS [ 4.073 s]
[INFO] test-core .......................................... SUCCESS [ 2.788 s]
[INFO] Shields4J client ................................... SUCCESS [ 3.962 s]
[INFO] TestNG listener 1.0.0 .............................. FAILURE [01:07 min]
[INFO] ------------------------------------------------------------------------
[INFO] BUILD FAILURE
[INFO] ------------------------------------------------------------------------
फलस्वरूप, हामीसँग एउटै विकल्प बाँकी छ। वा यो संस्करण मेटाउनुहोस् वा प्रकाशित गर्नुहोस्।
रिलिज पछि, केहि समय पछि, कलाकृतिहरू भित्र हुनेछन्
बिषय बाहिर
यो मेरो लागि एक खुलासा थियो कि maven अन्य सार्वजनिक भण्डार अनुक्रमणिका।
मैले robots.txt अपलोड गर्नुपर्यो किनभने यसले मेरो पुरानो भण्डारलाई अनुक्रमित गरेको छ।
एउटा छुट्टै डिप्लोय प्रोजेक्ट जसमा तपाईंले विभिन्न विकास भाषाहरूको लागि सार्वजनिक भण्डारहरूमा कलाकृतिहरू अपलोड गर्नका लागि धेरै CI कार्यहरू लागू गर्न सक्नुहुन्छ।
परिनियोजन परियोजना बाहिरी हस्तक्षेपबाट अलग छ र मालिक र मर्मतकर्ता भूमिका भएका प्रयोगकर्ताहरूद्वारा मात्र परिमार्जन गर्न सकिन्छ।
Отдельный Specific Runner с "горячим" кэшем для запуска только deploy задач.
सार्वजनिक भण्डारमा स्न्यापसट/रिलिज संस्करणहरूको प्रकाशन।
मावेन केन्द्रीयमा प्रकाशनको लागि तत्परताको लागि रिलीज संस्करणको स्वचालित जाँच।
Защита от автоматической публикации "сырых" версий в maven central.
Сборка и публикация snapshot версий "по клику".
स्न्यापसट/रिलिज संस्करणहरू प्राप्त गर्नको लागि एकल भण्डार।
जाभा परियोजना निर्माण / परीक्षण / प्रकाशनको लागि सामान्य पाइपलाइन।
Настройка GitLab CI не такая сложная тема как кажется на первый взгляд. Достаточно пару раз настроить CI "под ключ" и вот, ты уже далеко не дилетант в этом деле. Тем более GitLab документация весьма избыточна. Не бойтесь делать первый шаг. Дорога возникает под шагами идущего (не помню кто сказал 🙂 ).
प्रतिक्रिया दिन खुसी हुनेछु।
अर्को लेखमा, म तपाइँलाई एकीकरण परीक्षण कार्यहरू प्रतिस्पर्धात्मक रूपमा चलाउन GitLab CI कसरी सेटअप गर्ने भनेर देखाउनेछु (डकर-कम्पोजको साथ परीक्षण सेवाहरू चलिरहेको छ) यदि तपाइँसँग केवल एक शेल धावक छ भने।