ഹേ ഹബർ!

ആധുനിക യാഥാർത്ഥ്യത്തിൽ, വികസന പ്രക്രിയകളിൽ കണ്ടെയ്‌നറൈസേഷന്റെ വർദ്ധിച്ചുവരുന്ന പങ്ക് കാരണം, കണ്ടെയ്‌നറുകളുമായി ബന്ധപ്പെട്ട വിവിധ ഘട്ടങ്ങളുടെയും എന്റിറ്റികളുടെയും സുരക്ഷ ഉറപ്പാക്കുന്നതിനുള്ള പ്രശ്‌നം ഏറ്റവും പ്രധാനപ്പെട്ട പ്രശ്‌നമല്ല. മാനുവൽ പരിശോധനകൾ നടത്തുന്നത് സമയമെടുക്കുന്നതാണ്, അതിനാൽ ഈ പ്രക്രിയ ഓട്ടോമേറ്റ് ചെയ്യുന്നതിനുള്ള പ്രാരംഭ നടപടികളെങ്കിലും എടുക്കുന്നത് നല്ലതാണ്.

ഈ ലേഖനത്തിൽ, നിരവധി ഡോക്കർ സെക്യൂരിറ്റി യൂട്ടിലിറ്റികൾ നടപ്പിലാക്കുന്നതിനുള്ള റെഡിമെയ്ഡ് സ്ക്രിപ്റ്റുകളും ഈ പ്രക്രിയ പരിശോധിക്കുന്നതിനായി ഒരു ചെറിയ ഡെമോ സ്റ്റാൻഡ് എങ്ങനെ വിന്യസിക്കണമെന്നതിനുള്ള നിർദ്ദേശങ്ങളും ഞാൻ പങ്കിടും. ഡോക്കർഫൈൽ ചിത്രങ്ങളുടെയും നിർദ്ദേശങ്ങളുടെയും സുരക്ഷ പരിശോധിക്കുന്ന പ്രക്രിയ എങ്ങനെ സംഘടിപ്പിക്കാമെന്ന് പരീക്ഷിക്കാൻ നിങ്ങൾക്ക് മെറ്റീരിയലുകൾ ഉപയോഗിക്കാം. എല്ലാവരുടെയും വികസനവും നടപ്പാക്കലും അടിസ്ഥാന സൗകര്യങ്ങൾ വ്യത്യസ്തമാണെന്ന് വ്യക്തമാണ്, അതിനാൽ താഴെ ഞാൻ സാധ്യമായ നിരവധി ഓപ്ഷനുകൾ നൽകും.

സുരക്ഷാ പരിശോധന യൂട്ടിലിറ്റികൾ

ഡോക്കർ ഇൻഫ്രാസ്ട്രക്ചറിന്റെ വിവിധ വശങ്ങളിൽ പരിശോധന നടത്തുന്ന വിവിധ സഹായ ആപ്ലിക്കേഷനുകളും സ്ക്രിപ്റ്റുകളും ധാരാളം ഉണ്ട്. അവയിൽ ചിലത് മുമ്പത്തെ ലേഖനത്തിൽ വിവരിച്ചിട്ടുണ്ട് (https://habr.com/ru/company/swordfish_security/blog/518758/#docker-security), ഈ മെറ്റീരിയലിൽ അവയിൽ മൂന്നെണ്ണത്തിൽ ശ്രദ്ധ കേന്ദ്രീകരിക്കാൻ ഞാൻ ആഗ്രഹിക്കുന്നു, അത് വികസന പ്രക്രിയയിൽ നിർമ്മിച്ച ഡോക്കർ ചിത്രങ്ങളുടെ സുരക്ഷാ ആവശ്യകതകളുടെ ഭൂരിഭാഗവും ഉൾക്കൊള്ളുന്നു. കൂടാതെ, സുരക്ഷാ പരിശോധനകൾ നടത്താൻ ഈ മൂന്ന് യൂട്ടിലിറ്റികളെയും ഒരു പൈപ്പ്ലൈനിലേക്ക് എങ്ങനെ ബന്ധിപ്പിക്കാം എന്നതിന്റെ ഒരു ഉദാഹരണവും ഞാൻ കാണിക്കും.

ഹാഡോലിന്റ്
https://github.com/hadolint/hadolint

ഡോക്കർഫിൽ നിർദ്ദേശങ്ങളുടെ കൃത്യതയും സുരക്ഷിതത്വവും (ഉദാഹരണത്തിന്, അംഗീകൃത ഇമേജ് രജിസ്ട്രികൾ മാത്രം ഉപയോഗിക്കുന്നതോ സുഡോ ഉപയോഗിക്കുന്നതോ) ആദ്യ ഏകദേശമെന്ന നിലയിൽ, വളരെ ലളിതമായ ഒരു കൺസോൾ യൂട്ടിലിറ്റി.

ഡോക്കിൾ
https://github.com/goodwithtech/dockle

ഒരു ഇമേജിനൊപ്പം (അല്ലെങ്കിൽ ഒരു ഇമേജിന്റെ സംരക്ഷിച്ച ടാർ ആർക്കൈവിനൊപ്പം) പ്രവർത്തിക്കുന്ന ഒരു കൺസോൾ യൂട്ടിലിറ്റി, അത് ഒരു പ്രത്യേക ചിത്രത്തിന്റെ കൃത്യതയും സുരക്ഷയും പരിശോധിക്കുന്നു, അതിന്റെ ലെയറുകളും കോൺഫിഗറേഷനും വിശകലനം ചെയ്യുന്നു - ഏത് ഉപയോക്താക്കളാണ് സൃഷ്ടിച്ചത്, ഏത് നിർദ്ദേശങ്ങളാണ് ഉപയോഗിക്കുന്നത്, ഏത് വോള്യങ്ങൾ മൗണ്ട് ചെയ്‌തിരിക്കുന്നു, ശൂന്യമായ പാസ്‌വേഡിന്റെ സാന്നിദ്ധ്യം മുതലായവ. ഡി. ഇതുവരെയുള്ള ചെക്കുകളുടെ എണ്ണം വളരെ വലുതല്ല, മാത്രമല്ല ഞങ്ങളുടെ സ്വന്തം ചെക്കുകളുടെയും ശുപാർശകളുടെയും അടിസ്ഥാനത്തിലാണ് CIS (സെന്റർ ഫോർ ഇന്റർനെറ്റ് സെക്യൂരിറ്റി) ബെഞ്ച്മാർക്ക് ഡോക്കറിന്.


ട്രിവി
https://github.com/aquasecurity/trivy

രണ്ട് തരത്തിലുള്ള കേടുപാടുകൾ കണ്ടെത്തുന്നതിനാണ് ഈ യൂട്ടിലിറ്റി ലക്ഷ്യമിടുന്നത് - OS ബിൽഡുകളിലെ പ്രശ്നങ്ങൾ (Alpine, RedHat (EL), CentOS, Debian GNU, Ubuntu പിന്തുണയ്ക്കുന്നു), ഡിപൻഡൻസികളിലെ പ്രശ്നങ്ങൾ (Gemfile.lock, Pipfile.lock, composer.lock, പാക്കേജ് -lock.json , yarn.lock, cargo.lock). ട്രിവിക്ക് റിപ്പോസിറ്ററിയിലെ ഒരു ചിത്രവും ഒരു പ്രാദേശിക ചിത്രവും സ്കാൻ ചെയ്യാൻ കഴിയും, കൂടാതെ ഡോക്കർ ഇമേജ് ഉപയോഗിച്ച് കൈമാറ്റം ചെയ്ത .tar ഫയലിനെ അടിസ്ഥാനമാക്കി സ്കാൻ ചെയ്യാനും കഴിയും.

യൂട്ടിലിറ്റികൾ നടപ്പിലാക്കുന്നതിനുള്ള ഓപ്ഷനുകൾ

വിവരിച്ച ആപ്ലിക്കേഷനുകൾ ഒരു ഒറ്റപ്പെട്ട പരിതസ്ഥിതിയിൽ പരീക്ഷിക്കുന്നതിന്, കുറച്ച് ലളിതമായ പ്രക്രിയയിൽ എല്ലാ യൂട്ടിലിറ്റികളും ഇൻസ്റ്റാൾ ചെയ്യുന്നതിനുള്ള നിർദ്ദേശങ്ങൾ ഞാൻ നൽകും.

ഡവലപ്‌മെന്റ് സമയത്ത് സൃഷ്‌ടിച്ച ഡോക്കർഫയലുകളുടെയും ഡോക്കർ ചിത്രങ്ങളുടെയും സ്വയമേവയുള്ള ഉള്ളടക്ക പരിശോധന എങ്ങനെ നടപ്പിലാക്കാം എന്ന് കാണിക്കുക എന്നതാണ് പ്രധാന ആശയം.

ചെക്ക് തന്നെ ഇനിപ്പറയുന്ന ഘട്ടങ്ങൾ ഉൾക്കൊള്ളുന്നു:

1. ഒരു ലിന്റർ യൂട്ടിലിറ്റി ഉപയോഗിച്ച് Dockerfile നിർദ്ദേശങ്ങളുടെ കൃത്യതയും സുരക്ഷയും പരിശോധിക്കുന്നു ഹാഡോലിന്റ്
2. ഒരു യൂട്ടിലിറ്റി ഉപയോഗിച്ച് അന്തിമ, ഇന്റർമീഡിയറ്റ് ചിത്രങ്ങളുടെ കൃത്യതയും സുരക്ഷിതത്വവും പരിശോധിക്കുന്നു ഡോക്കിൾ
3. അടിസ്ഥാന ഇമേജിൽ പൊതുവായി അറിയപ്പെടുന്ന കേടുപാടുകളുടെ (CVE) സാന്നിധ്യവും നിരവധി ഡിപൻഡൻസികളും പരിശോധിക്കുന്നു - യൂട്ടിലിറ്റി ഉപയോഗിച്ച് ട്രിവി

ഈ ഘട്ടങ്ങൾ നടപ്പിലാക്കുന്നതിനുള്ള മൂന്ന് ഓപ്ഷനുകൾ ലേഖനത്തിൽ പിന്നീട് ഞാൻ നൽകും:
ഒരു ഉദാഹരണമായി GitLab ഉപയോഗിച്ച് CI/CD പൈപ്പ്ലൈൻ കോൺഫിഗർ ചെയ്യുകയാണ് ആദ്യത്തേത് (ഒരു ടെസ്റ്റ് ഇൻസ്റ്റൻസ് ഉയർത്തുന്ന പ്രക്രിയയുടെ വിവരണത്തോടെ).
രണ്ടാമത്തേത് ഒരു ഷെൽ സ്ക്രിപ്റ്റ് ഉപയോഗിക്കുന്നു.
ഡോക്കർ ഇമേജുകൾ സ്കാൻ ചെയ്യുന്നതിനായി ഒരു ഡോക്കർ ഇമേജ് നിർമ്മിക്കുന്നത് മൂന്നാമത്തേതിൽ ഉൾപ്പെടുന്നു.
നിങ്ങൾക്ക് ഏറ്റവും അനുയോജ്യമായ ഓപ്ഷൻ തിരഞ്ഞെടുക്കാനും അത് നിങ്ങളുടെ ഇൻഫ്രാസ്ട്രക്ചറിലേക്ക് മാറ്റാനും നിങ്ങളുടെ ആവശ്യങ്ങൾക്ക് അനുയോജ്യമാക്കാനും കഴിയും.

ആവശ്യമായ എല്ലാ ഫയലുകളും അധിക നിർദ്ദേശങ്ങളും ശേഖരത്തിൽ സ്ഥിതിചെയ്യുന്നു: https://github.com/Swordfish-Security/docker_cicd

GitLab CI/CD-യിലേക്കുള്ള സംയോജനം

ആദ്യ ഓപ്ഷനിൽ, ഉദാഹരണമായി GitLab റിപ്പോസിറ്ററി സിസ്റ്റം ഉപയോഗിച്ച് നിങ്ങൾക്ക് എങ്ങനെ സുരക്ഷാ പരിശോധനകൾ നടപ്പിലാക്കാമെന്ന് ഞങ്ങൾ നോക്കും. ഇവിടെ ഞങ്ങൾ ഘട്ടങ്ങളിലൂടെ കടന്നുപോകുകയും ആദ്യം മുതൽ GitLab ഉപയോഗിച്ച് ഒരു ടെസ്റ്റ് എൻവയോൺമെന്റ് എങ്ങനെ ഇൻസ്റ്റാൾ ചെയ്യാം, ഒരു സ്കാനിംഗ് പ്രക്രിയ സൃഷ്ടിക്കുകയും ടെസ്റ്റ് Dockerfile, ഒരു റാൻഡം ഇമേജ് എന്നിവ പരിശോധിക്കുന്നതിനുള്ള യൂട്ടിലിറ്റികൾ സമാരംഭിക്കുകയും ചെയ്യും - JuiceShop ആപ്ലിക്കേഷൻ.

GitLab ഇൻസ്റ്റാൾ ചെയ്യുന്നു
1. ഡോക്കർ ഇൻസ്റ്റാൾ ചെയ്യുക:

sudo apt-get update && sudo apt-get install docker.io

2. നിലവിലെ ഉപയോക്താവിനെ ഡോക്കർ ഗ്രൂപ്പിലേക്ക് ചേർക്കുക, അതുവഴി നിങ്ങൾക്ക് സുഡോ ഉപയോഗിക്കാതെ ഡോക്കറുമായി പ്രവർത്തിക്കാൻ കഴിയും:

sudo addgroup <username> docker

3. നിങ്ങളുടെ ഐപി കണ്ടെത്തുക:

ip addr

4. കണ്ടെയ്‌നറിൽ GitLab ഇൻസ്റ്റാൾ ചെയ്‌ത് സമാരംഭിക്കുക, ഹോസ്റ്റ് നെയിമിലെ IP വിലാസം നിങ്ങളുടെ സ്വന്തം ഉപയോഗിച്ച് മാറ്റിസ്ഥാപിക്കുക:

docker run --detach 
--hostname 192.168.1.112 
--publish 443:443 --publish 80:80 
--name gitlab 
--restart always 
--volume /srv/gitlab/config:/etc/gitlab 
--volume /srv/gitlab/logs:/var/log/gitlab 
--volume /srv/gitlab/data:/var/opt/gitlab 
gitlab/gitlab-ce:latest

ആവശ്യമായ എല്ലാ ഇൻസ്റ്റലേഷൻ നടപടിക്രമങ്ങളും GitLab പൂർത്തിയാക്കുന്നത് വരെ ഞങ്ങൾ കാത്തിരിക്കുന്നു (ലോഗ് ഫയൽ ഔട്ട്പുട്ട് വഴി നിങ്ങൾക്ക് പ്രക്രിയ നിരീക്ഷിക്കാൻ കഴിയും: ഡോക്കർ ലോഗുകൾ -f gitlab).

5. ബ്രൗസറിൽ നിങ്ങളുടെ പ്രാദേശിക IP തുറന്ന് റൂട്ട് ഉപയോക്താവിനുള്ള പാസ്‌വേഡ് മാറ്റാൻ ആവശ്യപ്പെടുന്ന ഒരു പേജ് കാണുക:

ഒരു പുതിയ പാസ്‌വേഡ് സജ്ജീകരിച്ച് GitLab-ലേക്ക് പോകുക.

6. ഒരു പുതിയ പ്രോജക്‌റ്റ് സൃഷ്‌ടിക്കുക, ഉദാഹരണത്തിന് cicd-ടെസ്റ്റ്, ആരംഭ ഫയൽ ഉപയോഗിച്ച് അത് ആരംഭിക്കുക README.md:

7. ഇപ്പോൾ നമ്മൾ GitLab Runner ഇൻസ്റ്റാൾ ചെയ്യേണ്ടതുണ്ട്: അഭ്യർത്ഥന പ്രകാരം ആവശ്യമായ എല്ലാ പ്രവർത്തനങ്ങളും പ്രവർത്തിപ്പിക്കുന്ന ഒരു ഏജന്റ്.
ഏറ്റവും പുതിയ പതിപ്പ് ഡൗൺലോഡ് ചെയ്യുക (ഈ സാഹചര്യത്തിൽ, Linux 64-ബിറ്റിനായി):

sudo curl -L --output /usr/local/bin/gitlab-runner https://gitlab-runner-downloads.s3.amazonaws.com/latest/binaries/gitlab-runner-linux-amd64

8. ഇത് എക്സിക്യൂട്ടബിൾ ആക്കുക:

sudo chmod +x /usr/local/bin/gitlab-runner

9. റണ്ണറിനായി ഒരു OS ഉപയോക്താവിനെ ചേർത്ത് സേവനം ആരംഭിക്കുക:

sudo useradd --comment 'GitLab Runner' --create-home gitlab-runner --shell /bin/bash
sudo gitlab-runner install --user=gitlab-runner --working-directory=/home/gitlab-runner
sudo gitlab-runner start

ഇത് ഇതുപോലെയായിരിക്കണം:

local@osboxes:~$ sudo gitlab-runner install --user=gitlab-runner --working-directory=/home/gitlab-runner
Runtime platform arch=amd64 os=linux pid=8438 revision=0e5417a3 version=12.0.1
local@osboxes:~$ sudo gitlab-runner start
Runtime platform arch=amd64 os=linux pid=8518 revision=0e5417a3 version=12.0.1

10. ഇപ്പോൾ ഞങ്ങൾ റണ്ണറെ രജിസ്റ്റർ ചെയ്യുന്നു, അതുവഴി അതിന് ഞങ്ങളുടെ GitLab ഉദാഹരണവുമായി സംവദിക്കാൻ കഴിയും.
ഇത് ചെയ്യുന്നതിന്, Settings-CI/CD പേജ് തുറക്കുക (http://OUR_IP_ADDRESS/root/cicd-test/-/settings/ci_cd) റണ്ണേഴ്സ് ടാബിൽ URL ഉം രജിസ്ട്രേഷൻ ടോക്കണും കണ്ടെത്തുക:

11. URL, രജിസ്ട്രേഷൻ ടോക്കൺ എന്നിവ മാറ്റി റണ്ണർ രജിസ്റ്റർ ചെയ്യുക:

sudo gitlab-runner register 
--non-interactive 
--url "http://<URL>/" 
--registration-token "<Registration Token>" 
--executor "docker" 
--docker-privileged 
--docker-image alpine:latest 
--description "docker-runner" 
--tag-list "docker,privileged" 
--run-untagged="true" 
--locked="false" 
--access-level="not_protected"

തൽഫലമായി, ഞങ്ങൾക്ക് ഒരു റെഡിമെയ്ഡ് വർക്കിംഗ് GitLab ലഭിക്കുന്നു, അതിൽ ഞങ്ങളുടെ യൂട്ടിലിറ്റികൾ ആരംഭിക്കുന്നതിന് നിർദ്ദേശങ്ങൾ ചേർക്കേണ്ടതുണ്ട്. ഈ ഡെമോയിൽ ആപ്ലിക്കേഷൻ നിർമ്മിക്കുന്നതിനും അത് കണ്ടെയ്‌നറൈസ് ചെയ്യുന്നതിനുമുള്ള ഘട്ടങ്ങളൊന്നും ഞങ്ങൾക്കില്ല, എന്നാൽ യഥാർത്ഥ പരിതസ്ഥിതിയിൽ ഇവ സ്കാനിംഗ് ഘട്ടങ്ങൾക്ക് മുമ്പായി ചിത്രങ്ങളും വിശകലനത്തിനായി ഒരു ഡോക്കർഫയലും സൃഷ്ടിക്കും.

പൈപ്പ്ലൈൻ കോൺഫിഗറേഷൻ

1. റിപ്പോസിറ്ററിയിലേക്ക് ഫയലുകൾ ചേർക്കുക mydockerfile.df (ഇത് ഞങ്ങൾ പരിശോധിക്കുന്ന ഒരു ടെസ്റ്റ് ഡോക്കർഫയലും) GitLab CI/CD പ്രോസസ് കോൺഫിഗറേഷൻ ഫയലും .gitlab-cicd.yml, ഇത് സ്കാനറുകൾക്കുള്ള നിർദ്ദേശങ്ങൾ പട്ടികപ്പെടുത്തുന്നു (ഫയൽ നാമത്തിലെ ഡോട്ട് ശ്രദ്ധിക്കുക).

YAML കോൺഫിഗറേഷൻ ഫയലിൽ മൂന്ന് യൂട്ടിലിറ്റികൾ (ഹാഡോലിന്റ്, ഡോക്കിൾ, ട്രിവി) പ്രവർത്തിപ്പിക്കുന്നതിനുള്ള നിർദ്ദേശങ്ങൾ അടങ്ങിയിരിക്കുന്നു, അത് തിരഞ്ഞെടുത്ത ഡോക്കർഫയലും ഡോക്കർഫൈൽ വേരിയബിളിൽ വ്യക്തമാക്കിയ ചിത്രവും വിശകലനം ചെയ്യും. ആവശ്യമായ എല്ലാ ഫയലുകളും ശേഖരത്തിൽ നിന്ന് എടുക്കാം: https://github.com/Swordfish-Security/docker_cicd/

എന്നതിൽ നിന്നുള്ള ഉദ്ധരണി mydockerfile.df (ഇത് യൂട്ടിലിറ്റിയുടെ പ്രവർത്തനം പ്രകടമാക്കാൻ മാത്രം ഒരു കൂട്ടം അനിയന്ത്രിതമായ നിർദ്ദേശങ്ങളുള്ള ഒരു അമൂർത്ത ഫയലാണ്). ഫയലിലേക്കുള്ള നേരിട്ടുള്ള ലിങ്ക്: mydockerfile.df

mydockerfile.df-ന്റെ ഉള്ളടക്കം

FROM amd64/node:10.16.0-alpine@sha256:f59303fb3248e5d992586c76cc83e1d3700f641cbcd7c0067bc7ad5bb2e5b489 AS tsbuild
COPY package.json .
COPY yarn.lock .
RUN yarn install
COPY lib lib
COPY tsconfig.json tsconfig.json
COPY tsconfig.app.json tsconfig.app.json
RUN yarn build
FROM amd64/ubuntu:18.04@sha256:eb70667a801686f914408558660da753cde27192cd036148e58258819b927395
LABEL maintainer="Rhys Arkins <[email protected]>"
LABEL name="renovate"
...
COPY php.ini /usr/local/etc/php/php.ini
RUN cp -a /tmp/piik/* /var/www/html/
RUN rm -rf /tmp/piwik
RUN chown -R www-data /var/www/html
ADD piwik-cli-setup /piwik-cli-setup
ADD reset.php /var/www/html/
## ENTRYPOINT ##
ADD entrypoint.sh /entrypoint.sh
ENTRYPOINT ["/entrypoint.sh"]
USER root

YAML കോൺഫിഗറേഷൻ ഇതുപോലെ കാണപ്പെടുന്നു (ഫയൽ തന്നെ ഇവിടെ നേരിട്ടുള്ള ലിങ്ക് വഴി കണ്ടെത്താനാകും: .gitlab-ci.yml):

.gitlab-ci.yml-ന്റെ ഉള്ളടക്കം

variables:
    DOCKER_HOST: "tcp://docker:2375/"
    DOCKERFILE: "mydockerfile.df" # name of the Dockerfile to analyse   
    DOCKERIMAGE: "bkimminich/juice-shop" # name of the Docker image to analyse
    # DOCKERIMAGE: "knqyf263/cve-2018-11235" # test Docker image with several CRITICAL CVE
    SHOWSTOPPER_PRIORITY: "CRITICAL" # what level of criticality will fail Trivy job
    TRIVYCACHE: "$CI_PROJECT_DIR/.cache" # where to cache Trivy database of vulnerabilities for faster reuse
    ARTIFACT_FOLDER: "$CI_PROJECT_DIR"
 
services:
    - docker:dind # to be able to build docker images inside the Runner
 
stages:
    - scan
    - report
    - publish
 
HadoLint:
    # Basic lint analysis of Dockerfile instructions
    stage: scan
    image: docker:git
 
    after_script:
    - cat $ARTIFACT_FOLDER/hadolint_results.json
 
    script:
    - export VERSION=$(wget -q -O - https://api.github.com/repos/hadolint/hadolint/releases/latest | grep '"tag_name":' | sed -E 's/.*"v([^"]+)".*/1/')
    - wget https://github.com/hadolint/hadolint/releases/download/v${VERSION}/hadolint-Linux-x86_64 && chmod +x hadolint-Linux-x86_64
     
    # NB: hadolint will always exit with 0 exit code
    - ./hadolint-Linux-x86_64 -f json $DOCKERFILE > $ARTIFACT_FOLDER/hadolint_results.json || exit 0
 
    artifacts:
        when: always # return artifacts even after job failure       
        paths:
        - $ARTIFACT_FOLDER/hadolint_results.json
 
Dockle:
    # Analysing best practices about docker image (users permissions, instructions followed when image was built, etc.)
    stage: scan   
    image: docker:git
 
    after_script:
    - cat $ARTIFACT_FOLDER/dockle_results.json
 
    script:
    - export VERSION=$(wget -q -O - https://api.github.com/repos/goodwithtech/dockle/releases/latest | grep '"tag_name":' | sed -E 's/.*"v([^"]+)".*/1/')
    - wget https://github.com/goodwithtech/dockle/releases/download/v${VERSION}/dockle_${VERSION}_Linux-64bit.tar.gz && tar zxf dockle_${VERSION}_Linux-64bit.tar.gz
    - ./dockle --exit-code 1 -f json --output $ARTIFACT_FOLDER/dockle_results.json $DOCKERIMAGE   
     
    artifacts:
        when: always # return artifacts even after job failure       
        paths:
        - $ARTIFACT_FOLDER/dockle_results.json
 
Trivy:
    # Analysing docker image and package dependencies against several CVE bases
    stage: scan   
    image: docker:git
 
    script:
    # getting the latest Trivy
    - apk add rpm
    - export VERSION=$(wget -q -O - https://api.github.com/repos/knqyf263/trivy/releases/latest | grep '"tag_name":' | sed -E 's/.*"v([^"]+)".*/1/')
    - wget https://github.com/knqyf263/trivy/releases/download/v${VERSION}/trivy_${VERSION}_Linux-64bit.tar.gz && tar zxf trivy_${VERSION}_Linux-64bit.tar.gz
     
    # displaying all vulnerabilities w/o failing the build
    - ./trivy -d --cache-dir $TRIVYCACHE -f json -o $ARTIFACT_FOLDER/trivy_results.json --exit-code 0 $DOCKERIMAGE    
    
    # write vulnerabilities info to stdout in human readable format (reading pure json is not fun, eh?). You can remove this if you don't need this.
    - ./trivy -d --cache-dir $TRIVYCACHE --exit-code 0 $DOCKERIMAGE    
 
    # failing the build if the SHOWSTOPPER priority is found
    - ./trivy -d --cache-dir $TRIVYCACHE --exit-code 1 --severity $SHOWSTOPPER_PRIORITY --quiet $DOCKERIMAGE
         
    artifacts:
        when: always # return artifacts even after job failure
        paths:
        - $ARTIFACT_FOLDER/trivy_results.json
 
    cache:
        paths:
        - .cache
 
Report:
    # combining tools outputs into one HTML
    stage: report
    when: always
    image: python:3.5
     
    script:
    - mkdir json
    - cp $ARTIFACT_FOLDER/*.json ./json/
    - pip install json2html
    - wget https://raw.githubusercontent.com/shad0wrunner/docker_cicd/master/convert_json_results.py
    - python ./convert_json_results.py
     
    artifacts:
        paths:
        - results.html

ആവശ്യമെങ്കിൽ, നിങ്ങൾക്ക് ഒരു .tar ആർക്കൈവിന്റെ രൂപത്തിൽ സംരക്ഷിച്ച ചിത്രങ്ങൾ സ്കാൻ ചെയ്യാനും കഴിയും (എന്നിരുന്നാലും, YAML ഫയലിലെ യൂട്ടിലിറ്റികൾക്കായി നിങ്ങൾ ഇൻപുട്ട് പാരാമീറ്ററുകൾ മാറ്റേണ്ടതുണ്ട്)

NB: Trivy ഇൻസ്റ്റാൾ ചെയ്യേണ്ടതുണ്ട് ആർപിഎം и ജിറ്റിനെ. അല്ലെങ്കിൽ, RedHat-അധിഷ്‌ഠിത ഇമേജുകൾ സ്കാൻ ചെയ്യുമ്പോഴും ദുർബലത ഡാറ്റാബേസിലേക്കുള്ള അപ്‌ഡേറ്റുകൾ സ്വീകരിക്കുമ്പോഴും ഇത് പിശകുകൾ സൃഷ്ടിക്കും.

2. റിപ്പോസിറ്ററിയിലേക്ക് ഫയലുകൾ ചേർത്ത ശേഷം, ഞങ്ങളുടെ കോൺഫിഗറേഷൻ ഫയലിലെ നിർദ്ദേശങ്ങൾ അനുസരിച്ച്, GitLab യാന്ത്രികമായി ബിൽഡ്, സ്കാൻ പ്രക്രിയ ആരംഭിക്കും. CI/CD → പൈപ്പ് ലൈനുകൾ ടാബിൽ നിങ്ങൾക്ക് നിർദ്ദേശങ്ങളുടെ പുരോഗതി കാണാൻ കഴിയും.

തൽഫലമായി, ഞങ്ങൾക്ക് നാല് ജോലികളുണ്ട്. അവയിൽ മൂന്നെണ്ണം സ്കാനിംഗുമായി നേരിട്ട് ഇടപെടുന്നു, അവസാനത്തേത് (റിപ്പോർട്ട്) സ്കാനിംഗ് ഫലങ്ങളുള്ള ചിതറിക്കിടക്കുന്ന ഫയലുകളിൽ നിന്ന് ഒരു ലളിതമായ റിപ്പോർട്ട് ശേഖരിക്കുന്നു.

ഡിഫോൾട്ടായി, ചിത്രത്തിലോ ഡിപൻഡൻസിയിലോ ഗുരുതരമായ കേടുപാടുകൾ കണ്ടെത്തിയാൽ ട്രിവി പ്രവർത്തിക്കുന്നത് നിർത്തുന്നു. അതേ സമയം, ഹാഡോലിന്റ് എല്ലായ്പ്പോഴും ഒരു വിജയ കോഡ് നൽകുന്നു, കാരണം അത് എല്ലായ്പ്പോഴും അഭിപ്രായങ്ങളിൽ കലാശിക്കുന്നു, ഇത് ബിൽഡ് നിർത്തുന്നതിന് കാരണമാകുന്നു.

നിങ്ങളുടെ നിർദ്ദിഷ്ട ആവശ്യകതകളെ ആശ്രയിച്ച്, നിങ്ങൾക്ക് ഒരു എക്സിറ്റ് കോഡ് കോൺഫിഗർ ചെയ്യാൻ കഴിയും, അതുവഴി ഈ യൂട്ടിലിറ്റികൾ ഒരു നിശ്ചിത നിർണായകതയുടെ പ്രശ്നങ്ങൾ കണ്ടെത്തുമ്പോൾ, അവ നിർമ്മാണ പ്രക്രിയയും നിർത്തുന്നു. ഞങ്ങളുടെ കാര്യത്തിൽ, SHOWSTOPPER വേരിയബിളിൽ ഞങ്ങൾ വ്യക്തമാക്കിയ ക്രിട്ടിക്കലിറ്റി ഉപയോഗിച്ച് Trivy ഒരു അപകടസാധ്യത കണ്ടെത്തിയാൽ മാത്രമേ ബിൽഡ് നിർത്തുകയുള്ളൂ. .gitlab-ci.yml.


ഓരോ യൂട്ടിലിറ്റിയുടെയും ഫലം ഓരോ സ്‌കാനിംഗ് ടാസ്‌ക്കിന്റെയും ലോഗിലോ, ആർട്ടിഫാക്‌ട്‌സ് വിഭാഗത്തിലെ json ഫയലുകളിലോ, അല്ലെങ്കിൽ ലളിതമായ ഒരു HTML റിപ്പോർട്ടിലോ (താഴെയുള്ളതിൽ കൂടുതൽ):


3. യൂട്ടിലിറ്റി റിപ്പോർട്ടുകൾ കുറച്ച് കൂടുതൽ മനുഷ്യർക്ക് വായിക്കാൻ കഴിയുന്ന രൂപത്തിൽ അവതരിപ്പിക്കുന്നതിന്, മൂന്ന് JSON ഫയലുകളെ ഒരു എച്ച്ടിഎംഎൽ ഫയലായി പരിവർത്തനം ചെയ്യാൻ ഒരു ചെറിയ പൈത്തൺ സ്ക്രിപ്റ്റ് ഉപയോഗിക്കുന്നു.
ഈ സ്‌ക്രിപ്റ്റ് ഒരു പ്രത്യേക റിപ്പോർട്ട് ടാസ്‌ക് മുഖേനയാണ് സമാരംഭിച്ചത്, അതിന്റെ അന്തിമ ആർട്ടിഫാക്റ്റ് ഒരു റിപ്പോർട്ടുള്ള ഒരു HTML ഫയലാണ്. സ്‌ക്രിപ്റ്റ് ഉറവിടവും ശേഖരത്തിലുണ്ട്, നിങ്ങളുടെ ആവശ്യങ്ങൾക്കും നിറങ്ങൾക്കും മറ്റും അനുയോജ്യമാക്കാൻ കഴിയും.

ഷെൽ സ്ക്രിപ്റ്റ്

CI/CD സിസ്റ്റത്തിന് പുറത്തുള്ള ഡോക്കർ ഇമേജുകൾ പരിശോധിക്കേണ്ടിവരുമ്പോൾ അല്ലെങ്കിൽ ഹോസ്റ്റിൽ നേരിട്ട് നടപ്പിലാക്കാൻ കഴിയുന്ന ഒരു ഫോമിൽ നിങ്ങൾക്ക് എല്ലാ നിർദ്ദേശങ്ങളും ഉണ്ടായിരിക്കേണ്ട സന്ദർഭങ്ങളിൽ രണ്ടാമത്തെ ഓപ്ഷൻ അനുയോജ്യമാണ്. ഒരു വൃത്തിയുള്ള വെർച്വൽ (അല്ലെങ്കിൽ യഥാർത്ഥമായത് പോലും) മെഷീനിൽ പ്രവർത്തിപ്പിക്കാൻ കഴിയുന്ന ഒരു റെഡിമെയ്ഡ് ഷെൽ സ്ക്രിപ്റ്റ് ഈ ഐച്ഛികം ഉൾക്കൊള്ളുന്നു. മുകളിൽ വിവരിച്ച ഗിറ്റ്‌ലാബ്-റണ്ണറിന്റെ അതേ നിർദ്ദേശങ്ങൾ സ്‌ക്രിപ്റ്റ് നടപ്പിലാക്കുന്നു.

സ്ക്രിപ്റ്റ് വിജയകരമായി പ്രവർത്തിക്കുന്നതിന്, സിസ്റ്റത്തിൽ ഡോക്കർ ഇൻസ്റ്റാൾ ചെയ്യുകയും നിലവിലെ ഉപയോക്താവ് ഡോക്കർ ഗ്രൂപ്പിൽ ഉണ്ടായിരിക്കുകയും വേണം.

സ്ക്രിപ്റ്റ് തന്നെ ഇവിടെ കാണാം: docker_sec_check.sh

ഫയലിന്റെ തുടക്കത്തിൽ, ഏത് ഇമേജാണ് സ്കാൻ ചെയ്യേണ്ടതെന്നും ഏത് ക്രിട്ടാലിറ്റി വൈകല്യങ്ങൾ ട്രിവി യൂട്ടിലിറ്റിയെ നിർദ്ദിഷ്ട പിശക് കോഡിനൊപ്പം പുറത്തുകടക്കുമെന്നും വേരിയബിളുകൾ വ്യക്തമാക്കുന്നു.

സ്ക്രിപ്റ്റ് എക്സിക്യൂഷൻ സമയത്ത്, എല്ലാ യൂട്ടിലിറ്റികളും ഡയറക്ടറിയിലേക്ക് ഡൗൺലോഡ് ചെയ്യപ്പെടും ഡോക്കർ_ടൂളുകൾ, അവരുടെ ജോലിയുടെ ഫലങ്ങൾ ഡയറക്ടറിയിലാണ് docker_tools/json, റിപ്പോർട്ടിനൊപ്പം HTML ഫയലിലുണ്ടാകും results.html.

ഉദാഹരണ സ്ക്രിപ്റ്റ് ഔട്ട്പുട്ട്

~/docker_cicd$ ./docker_sec_check.sh

[+] Setting environment variables
[+] Installing required packages
[+] Preparing necessary directories
[+] Fetching sample Dockerfile
2020-10-20 10:40:00 (45.3 MB/s) - ‘Dockerfile’ saved [8071/8071]
[+] Pulling image to scan
latest: Pulling from bkimminich/juice-shop
[+] Running Hadolint
...
Dockerfile:205 DL3015 Avoid additional packages by specifying `--no-install-recommends`
Dockerfile:248 DL3002 Last USER should not be root
...
[+] Running Dockle
...
WARN    - DKL-DI-0006: Avoid latest tag
        * Avoid 'latest' tag
INFO    - CIS-DI-0005: Enable Content trust for Docker
        * export DOCKER_CONTENT_TRUST=1 before docker pull/build
...
[+] Running Trivy
juice-shop/frontend/package-lock.json
=====================================
Total: 3 (UNKNOWN: 0, LOW: 1, MEDIUM: 0, HIGH: 2, CRITICAL: 0)

+---------------------+------------------+----------+---------+-------------------------+
|       LIBRARY       | VULNERABILITY ID | SEVERITY | VERSION |             TITLE       |
+---------------------+------------------+----------+---------+-------------------------+
| object-path         | CVE-2020-15256   | HIGH     | 0.11.4  | Prototype pollution in  |
|                     |                  |          |         | object-path             |
+---------------------+------------------+          +---------+-------------------------+
| tree-kill           | CVE-2019-15599   |          | 1.2.2   | Code Injection          |
+---------------------+------------------+----------+---------+-------------------------+
| webpack-subresource | CVE-2020-15262   | LOW      | 1.4.1   | Unprotected dynamically |
|                     |                  |          |         | loaded chunks           |
+---------------------+------------------+----------+---------+-------------------------+

juice-shop/package-lock.json
============================
Total: 20 (UNKNOWN: 0, LOW: 1, MEDIUM: 6, HIGH: 8, CRITICAL: 5)

...

juice-shop/package-lock.json
============================
Total: 5 (CRITICAL: 5)

...
[+] Removing left-overs
[+] Making the output look pretty
[+] Converting JSON results
[+] Writing results HTML
[+] Clean exit ============================================================
[+] Everything is done. Find the resulting HTML report in results.html

എല്ലാ യൂട്ടിലിറ്റികളുമുള്ള ഡോക്കർ ചിത്രം

ഒരു മൂന്നാം ബദലായി, സുരക്ഷാ യൂട്ടിലിറ്റികളുള്ള ഒരു ഇമേജ് സൃഷ്ടിക്കാൻ ഞാൻ രണ്ട് ലളിതമായ ഡോക്കർഫയലുകൾ സമാഹരിച്ചു. ഒരു ശേഖരത്തിൽ നിന്ന് ഒരു ചിത്രം സ്കാൻ ചെയ്യുന്നതിനുള്ള ഒരു സെറ്റ് നിർമ്മിക്കാൻ ഒരു ഡോക്കർഫിൽ സഹായിക്കും, രണ്ടാമത്തേത് (Dockerfile_tar) ഒരു ഇമേജ് ഉപയോഗിച്ച് ഒരു ടാർ ഫയൽ സ്കാൻ ചെയ്യുന്നതിനായി ഒരു സെറ്റ് നിർമ്മിക്കാൻ സഹായിക്കും.

1. റിപ്പോസിറ്ററിയിൽ നിന്ന് അനുബന്ധ ഡോക്കർ ഫയലും സ്ക്രിപ്റ്റുകളും എടുക്കുക https://github.com/Swordfish-Security/docker_cicd/tree/master/Dockerfile.
2. അസംബ്ലിക്കായി ഞങ്ങൾ ഇത് സമാരംഭിക്കുന്നു:

docker build -t dscan:image -f docker_security.df .

3. അസംബ്ലി പൂർത്തിയാക്കിയ ശേഷം, ചിത്രത്തിൽ നിന്ന് ഞങ്ങൾ ഒരു കണ്ടെയ്നർ ഉണ്ടാക്കുന്നു. അതേ സമയം, ഞങ്ങൾ താൽപ്പര്യമുള്ള ചിത്രത്തിന്റെ പേരിനൊപ്പം DOCKERIMAGE എൻവയോൺമെന്റ് വേരിയബിൾ കൈമാറുകയും ഞങ്ങളുടെ മെഷീനിൽ നിന്ന് ഫയലിലേക്ക് വിശകലനം ചെയ്യാൻ ആഗ്രഹിക്കുന്ന Dockerfile മൌണ്ട് ചെയ്യുകയും ചെയ്യുന്നു. /ഡോക്കർഫിൽ (ഈ ഫയലിലേക്കുള്ള സമ്പൂർണ്ണ പാത ആവശ്യമാണെന്ന് ശ്രദ്ധിക്കുക):

docker run --rm -v $(pwd)/results:/results -v $(pwd)/docker_security.df:/Dockerfile -e DOCKERIMAGE="bkimminich/juice-shop" dscan:image

[+] Setting environment variables
[+] Running Hadolint
/Dockerfile:3 DL3006 Always tag the version of an image explicitly
[+] Running Dockle
WARN    - DKL-DI-0006: Avoid latest tag
        * Avoid 'latest' tag
INFO    - CIS-DI-0005: Enable Content trust for Docker
        * export DOCKER_CONTENT_TRUST=1 before docker pull/build
INFO    - CIS-DI-0006: Add HEALTHCHECK instruction to the container image
        * not found HEALTHCHECK statement
INFO    - DKL-LI-0003: Only put necessary files
        * unnecessary file : juice-shop/node_modules/sqlite3/Dockerfile
        * unnecessary file : juice-shop/node_modules/sqlite3/tools/docker/architecture/linux-arm64/Dockerfile
        * unnecessary file : juice-shop/node_modules/sqlite3/tools/docker/architecture/linux-arm/Dockerfile
[+] Running Trivy
...
juice-shop/package-lock.json
============================
Total: 20 (UNKNOWN: 0, LOW: 1, MEDIUM: 6, HIGH: 8, CRITICAL: 5)
...
[+] Making the output look pretty
[+] Starting the main module ============================================================
[+] Converting JSON results
[+] Writing results HTML
[+] Clean exit ============================================================
[+] Everything is done. Find the resulting HTML report in results.html

ഫലങ്ങൾ

ഡോക്കർ ആർട്ടിഫാക്‌റ്റുകൾ സ്കാൻ ചെയ്യുന്നതിനുള്ള ഒരു അടിസ്ഥാന യൂട്ടിലിറ്റികൾ മാത്രമാണ് ഞങ്ങൾ നോക്കിയത്, എന്റെ അഭിപ്രായത്തിൽ, ഇമേജ് സുരക്ഷാ ആവശ്യകതകളുടെ മാന്യമായ ഒരു ഭാഗം വളരെ ഫലപ്രദമായി ഉൾക്കൊള്ളുന്നു. ഒരേ പരിശോധനകൾ നടത്താനോ മനോഹരമായ റിപ്പോർട്ടുകൾ വരയ്ക്കാനോ കൺസോൾ മോഡിൽ പൂർണ്ണമായി പ്രവർത്തിക്കാനോ കണ്ടെയ്‌നർ മാനേജ്‌മെന്റ് സംവിധാനങ്ങൾ മുതലായവയ്‌ക്കെല്ലാം കഴിയുന്ന പണമടച്ചതും സൗജന്യവുമായ ടൂളുകളും ധാരാളം ഉണ്ട്. ഈ ടൂളുകളുടെ ഒരു അവലോകനവും അവ എങ്ങനെ സംയോജിപ്പിക്കാം എന്നതും കുറച്ച് കഴിഞ്ഞ് ദൃശ്യമായേക്കാം. .

ലേഖനത്തിൽ വിവരിച്ചിരിക്കുന്ന ഉപകരണങ്ങളുടെ കൂട്ടത്തെക്കുറിച്ചുള്ള നല്ല കാര്യം, അവയെല്ലാം ഓപ്പൺ സോഴ്‌സ് കോഡിലാണ് നിർമ്മിച്ചിരിക്കുന്നത്, നിങ്ങളുടെ ആവശ്യകതകൾക്കും അടിസ്ഥാന സൗകര്യ സവിശേഷതകൾക്കും അനുയോജ്യമായവ കണ്ടെത്തുന്നതിന് അവയും സമാനമായ മറ്റ് ഉപകരണങ്ങളും ഉപയോഗിച്ച് നിങ്ങൾക്ക് പരീക്ഷിക്കാം. തീർച്ചയായും, കണ്ടെത്തിയ എല്ലാ കേടുപാടുകളും നിർദ്ദിഷ്ട വ്യവസ്ഥകളിൽ പ്രയോഗക്ഷമതയ്ക്കായി പഠിക്കേണ്ടതാണ്, എന്നാൽ ഇത് ഭാവിയിലെ വലിയ ലേഖനത്തിനുള്ള വിഷയമാണ്.

ഈ ഗൈഡും സ്‌ക്രിപ്റ്റുകളും യൂട്ടിലിറ്റികളും നിങ്ങളെ സഹായിക്കുമെന്നും കണ്ടെയ്‌നറൈസേഷൻ മേഖലയിൽ കൂടുതൽ സുരക്ഷിതമായ ഇൻഫ്രാസ്ട്രക്ചർ സൃഷ്ടിക്കുന്നതിനുള്ള ഒരു ആരംഭ പോയിന്റായി മാറുമെന്നും ഞാൻ പ്രതീക്ഷിക്കുന്നു.

അവലംബം: www.habr.com