repository rpm ງ່າຍດາຍໂດຍໃຊ້ Inotify ແລະ webdav

ໃນບົດຂຽນນີ້, ພວກເຮົາຈະເບິ່ງການເກັບຮັກສາ artifact rpm ໂດຍໃຊ້ສະຄິບງ່າຍໆທີ່ມີ inotify + createrepo. ການອັບໂຫລດຂອງປອມແມ່ນດໍາເນີນຜ່ານ webdav ໂດຍໃຊ້ apache httpd. ເປັນຫຍັງ apache httpd ຈະຖືກຂຽນໄປໃນຕອນທ້າຍຂອງການຕອບ.

ດັ່ງນັ້ນ, ການແກ້ໄຂຕ້ອງຕອບສະຫນອງຄວາມຕ້ອງການຕໍ່ໄປນີ້ສໍາລັບການຈັດຕັ້ງການເກັບຮັກສາ RPM ເທົ່ານັ້ນ:

• ບໍ່ເສຍຄ່າ

• ຄວາມພ້ອມຂອງແພັກເກດຢູ່ໃນບ່ອນເກັບມ້ຽນສອງສາມວິນາທີຫຼັງຈາກອັບໂຫຼດໃສ່ບ່ອນເກັບຂໍ້ມູນປອມ.

• ງ່າຍທີ່ຈະຕິດຕັ້ງແລະຮັກສາ

• ຄວາມ​ສາ​ມາດ​ເຮັດ​ໃຫ້​ມີ​ສູງ​

  ເປັນ​ຫຍັງ​ບໍ່ SonaType Nexus ຫຼື Pulp:

• ການເກັບຮັກສາໃນ SonaType Nexus ຫຼື Pulp ຫຼາຍປະເພດຂອງການປອມນໍາໄປສູ່ຄວາມຈິງທີ່ວ່າ SonaType Nexus ຫຼື Pulp ກາຍເປັນຈຸດດຽວຂອງຄວາມລົ້ມເຫລວ.

• ມີຄວາມພ້ອມສູງໃນ SonaType Nexus ແມ່ນຈ່າຍ.

• Pulp ເບິ່ງຄືວ່າຂ້ອຍເປັນການແກ້ໄຂທີ່ສັບສົນຫຼາຍ.

• ສິ່ງປະດິດໃນ SonaType Nexus ຖືກເກັບໄວ້ໃນ blob. ຖ້າມີໄຟຟ້າທັນທີທັນໃດ, ທ່ານຈະບໍ່ສາມາດຟື້ນຟູ blob ໄດ້ຖ້າຫາກວ່າທ່ານບໍ່ມີສໍາຮອງຂໍ້ມູນ. ພວກເຮົາມີຂໍ້ຜິດພາດນີ້: ERROR [ForkJoinPool.commonPool-worker-2] *SYSTEM [com.orientechnologies.orient.core.storage](http://com.orientechnologies.orient.core.storage/).fs.OFileClassic - $ANSI{green {db=security}} Error during data read for file 'privilege_5.pcl' 1-th attempt [java.io](http://java.io/).IOException: Bad address. Blob ບໍ່​ເຄີຍ​ໄດ້​ຮັບ​ການ​ຟື້ນ​ຟູ​.

ລະຫັດແຫຼ່ງຂໍ້ມູນ

→ລະຫັດແຫຼ່ງແມ່ນຕັ້ງຢູ່ ທີ່ນີ້

script ຕົ້ນຕໍເບິ່ງຄືວ່ານີ້:

#!/bin/bash

source /etc/inotify-createrepo.conf
LOGFILE=/var/log/inotify-createrepo.log

function monitoring() {
    inotifywait -e close_write,delete -msrq --exclude ".repodata|.olddata|repodata" "${REPO}" | while read events 
    do
      echo $events >> $LOGFILE
      touch /tmp/need_create
    done
}

function run_createrepo() {
  while true; do
    if [ -f /tmp/need_create ];
    then
      rm -f /tmp/need_create
      echo "start createrepo $(date --rfc-3339=seconds)"
      /usr/bin/createrepo --update "${REPO}"
      echo "finish createrepo $(date --rfc-3339=seconds)"
    fi
    sleep 1
  done
}

echo "Start filesystem monitoring: Directory is $REPO, monitor logfile is $LOGFILE"
monitoring >> $LOGFILE &
run_createrepo >> $LOGFILE &

ການຕັ້ງຄ່າ

Inotify-createrepo ເຮັດວຽກຢູ່ໃນ CentOS 7 ຫຼືສູງກວ່າເທົ່ານັ້ນ. ບໍ່ສາມາດໃຫ້ມັນເຮັດວຽກຢູ່ໃນ CentOS 6 ໄດ້.

yum -y install yum-plugin-copr
yum copr enable antonpatsev/inotify-createrepo
yum -y install inotify-createrepo
systemctl start inotify-createrepo

ການຕັ້ງຄ່າ

ໂດຍຄ່າເລີ່ມຕົ້ນ, inotify-createrepo ຕິດຕາມໄດເລກະທໍລີ /var/www/repos/rpm-repo/.

ທ່ານສາມາດປ່ຽນໄດເລກະທໍລີນີ້ຢູ່ໃນໄຟລ໌ /etc/inotify-createrepo.conf.

ການນໍາໃຊ້

ເມື່ອເພີ່ມໄຟລ໌ໃດໆໃສ່ໄດເລກະທໍລີ /var/www/repos/rpm-repo/ inotifywait ຈະສ້າງໄຟລ໌ /tmp/need_create. ຟັງຊັນ run_createrepo ດໍາເນີນການໃນ loop ທີ່ບໍ່ມີທີ່ສິ້ນສຸດແລະຕິດຕາມກວດກາໄຟລ໌ /tmp/need_create. ຖ້າໄຟລ໌ມີຢູ່, ມັນດໍາເນີນການ createrepo --update.

ລາຍການຈະປາກົດຢູ່ໃນໄຟລ໌:

/var/www/repos/rpm-repo/ CREATE nginx-1.16.1-1.el7.ngx.x86_64.rpm
start createrepo 2020-03-02 09:46:21+03:00
Spawning worker 0 with 1 pkgs
Spawning worker 1 with 0 pkgs
Spawning worker 2 with 0 pkgs
Spawning worker 3 with 0 pkgs
Workers Finished
Saving Primary metadata
Saving file lists metadata
Saving other metadata
Generating sqlite DBs
Sqlite DBs complete
finish createrepo 2020-03-02 09:46:22+03:00

ຄວາມ​ສາ​ມາດ​ເຮັດ​ໃຫ້​ມີ​ສູງ​

ເພື່ອເຮັດໃຫ້ຄວາມສາມາດໃຊ້ໄດ້ສູງອອກຈາກການແກ້ໄຂທີ່ມີຢູ່ແລ້ວ, ຂ້າພະເຈົ້າຄິດວ່າທ່ານສາມາດນໍາໃຊ້ 2 ເຄື່ອງແມ່ຂ່າຍ, Keepalived ສໍາລັບ HA ແລະ Lsyncd ສໍາລັບການ synchronizing ປອມ. Lsyncd - daemon ທີ່ຕິດຕາມການປ່ຽນແປງໃນໄດເລກະທໍລີທ້ອງຖິ່ນ, ລວບລວມພວກມັນ, ແລະຫຼັງຈາກເວລາທີ່ແນ່ນອນ rsync ເລີ່ມ synchronize ພວກມັນ. ລາຍ​ລະ​ອຽດ​ແລະ​ການ​ຕັ້ງ​ຄ່າ​ແມ່ນ​ອະ​ທິ​ບາຍ​ໃນ​ການ​ຕອບ ".synchronization ໄວຂອງຫຼາຍຕື້ໄຟລ໌".

webdav

ທ່ານສາມາດອັບໂຫລດໄຟລ໌ໃນຫຼາຍວິທີ: SSH, NFS, WebDav. WebDav ເບິ່ງຄືວ່າເປັນທາງເລືອກທີ່ທັນສະໄຫມແລະງ່າຍດາຍ.

ສໍາລັບ WebDav ພວກເຮົາຈະໃຊ້ Apache httpd. ເປັນຫຍັງ Apache httpd ໃນປີ 2020 ແລະບໍ່ແມ່ນ nginx?

ຂ້ອຍຢາກໃຊ້ເຄື່ອງມືອັດຕະໂນມັດສໍາລັບການກໍ່ສ້າງ Nginx + modules (ຕົວຢ່າງ, Webdav).

ມີໂຄງການສ້າງ Nginx + ໂມດູນ - Nginx-builder. ຖ້າທ່ານໃຊ້ nginx + wevdav ເພື່ອອັບໂຫລດໄຟລ໌, ທ່ານຕ້ອງການໂມດູນ nginx-dav-ext-module. ໃນເວລາທີ່ພະຍາຍາມສ້າງແລະນໍາໃຊ້ Nginx ກັບ nginx-dav-ext-module ໂດຍການຊ່ວຍເຫຼືອ Nginx-builder ພວກ​ເຮົາ​ຈະ​ໄດ້​ຮັບ​ຄວາມ​ຜິດ​ພາດ​ ໃຊ້ໂດຍ http_dav_module ແທນ nginx-dav-ext-module. ແມງໄມ້ດຽວກັນໄດ້ຖືກປິດໃນລະດູຮ້ອນ nginx: [ເກີດ] ຄໍາສັ່ງທີ່ບໍ່ຮູ້ຈັກ dav_methods.

ຂ້ອຍໄດ້ຮ້ອງຂໍການດຶງ ເພີ່ມການກວດສອບ git_url ສໍາລັບການຝັງ, refactored —with-{}_module и ຖ້າໂມດູນ == "http_dav_module" ເພີ່ມເຕີມ --with. ແຕ່ພວກເຂົາບໍ່ໄດ້ຮັບການຍອມຮັບ.

ຕັ້ງຄ່າ webdav.conf

DavLockDB /var/www/html/DavLock
<VirtualHost localhost:80>
    ServerAdmin webmaster@localhost
    DocumentRoot /var/www/html
    ErrorLog /var/log/httpd/error.log
    CustomLog /var/log/httpd/access.log combined

    Alias /rpm /var/www/repos/rpm-repo
    <Directory /var/www/repos/rpm-repo>
        DAV On
        Options Indexes FollowSymlinks SymLinksifOwnerMatch IncludesNOEXEC
        IndexOptions NameWidth=* DescriptionWidth=*
        AllowOverride none
        Require all granted
    </Directory>
</VirtualHost>

ຂ້າພະເຈົ້າຄິດວ່າທ່ານສາມາດເຮັດສ່ວນທີ່ເຫຼືອຂອງ Apache httpd ການຕິດຕັ້ງຕົວທ່ານເອງ.

Nginx ກ່ອນ Apache httpd

ບໍ່ຄືກັບ Apache, Nginx ໃຊ້ຮູບແບບການປະມວນຜົນການຮ້ອງຂໍທີ່ອີງໃສ່ເຫດການ, ເຊິ່ງຕ້ອງການພຽງແຕ່ຂະບວນການ HTTP ດຽວສໍາລັບລູກຄ້າຈໍານວນຫນຶ່ງ. ທ່ານສາມາດນໍາໃຊ້ nginx ແລະຫຼຸດຜ່ອນການໂຫຼດໃນເຄື່ອງແມ່ຂ່າຍ.

ຕັ້ງຄ່າ nginx-front.conf. ຂ້າພະເຈົ້າຄິດວ່າທ່ານສາມາດເຮັດສ່ວນທີ່ເຫຼືອຂອງການຕິດຕັ້ງ nginx ຕົວທ່ານເອງ.

upstream nginx_front {
    server localhost:80;
}

server {
    listen 443 ssl;
    server_name ваш-виртуальных-хост;
    access_log /var/log/nginx/nginx-front-access.log main;
    error_log /var/log/nginx/nginx-front.conf-error.log warn;

    location / {
        proxy_pass http://nginx_front;
    }
}

ການອັບໂຫລດໄຟລ໌ຜ່ານ WebDav

ການໂຫຼດ rpm ແມ່ນງ່າຍດາຍຫຼາຍ.

curl -T ./nginx-1.16.1-1.el7.ngx.x86_64.rpm https://ваш-виртуальный-хост/rpm/

ແຫຼ່ງຂໍ້ມູນ: www.habr.com