CI અથવા ટેસ્ટ પર્યાવરણ માટે Docker-in-Docker નો ઉપયોગ કરતા પહેલા કાળજીપૂર્વક વિચારો

ડોકર-ઇન-ડોકર એ વર્ચ્યુઅલાઈઝ્ડ ડોકર ડિમન એન્વાયર્નમેન્ટ છે જે કન્ટેનરની અંદર જ કન્ટેનર ઈમેજો બનાવવા માટે ચાલે છે. ડોકર-ઇન-ડોકર બનાવવાનો મુખ્ય હેતુ ડોકરને જ વિકસાવવામાં મદદ કરવાનો હતો. જેનકિન્સ સીઆઈ ચલાવવા માટે ઘણા લોકો તેનો ઉપયોગ કરે છે. આ શરૂઆતમાં સામાન્ય લાગે છે, પરંતુ પછી સમસ્યાઓ ઊભી થાય છે જે જેનકિન્સ CI કન્ટેનરમાં ડોકર ઇન્સ્ટોલ કરીને ટાળી શકાય છે. આ લેખ તમને કહે છે કે આ કેવી રીતે કરવું. જો તમને વિગતો વિના અંતિમ ઉકેલમાં રસ હોય, તો ફક્ત લેખનો છેલ્લો વિભાગ વાંચો, "સમસ્યાનું નિરાકરણ."

ડોકર-ઇન-ડોકર: "સારું"

બે વર્ષથી વધુ પહેલાં મેં ડોકરમાં મૂક્યું ધ્વજ - વિશેષાધિકૃત અને લખ્યું ડીંડનું પ્રથમ સંસ્કરણ. ધ્યેય મુખ્ય ટીમને ડોકરને ઝડપથી વિકસાવવામાં મદદ કરવાનો હતો. ડોકર-ઇન-ડોકર પહેલાં, લાક્ષણિક વિકાસ ચક્ર આના જેવું દેખાતું હતું:

• હેકીટી હેક;
• બાંધવું
• ચાલતા ડોકર ડિમનને રોકવું;
• નવું ડોકર ડિમન લોન્ચ કરી રહ્યું છે;
• પરીક્ષણ
• ચક્ર પુનરાવર્તન કરો.

જો તમે સુંદર, પુનઃઉત્પાદનક્ષમ એસેમ્બલી (એટલે ​​​​કે કન્ટેનરમાં) બનાવવા માંગતા હો, તો તે વધુ જટિલ બન્યું:

• હેકીટી હેક;
• ખાતરી કરો કે ડોકરનું કાર્યકારી સંસ્કરણ ચાલી રહ્યું છે;
• જૂના ડોકર સાથે નવું ડોકર બનાવો;
• ડોકર ડિમન રોકો;
• નવું ડોકર ડિમન શરૂ કરો;
• પરીક્ષણ
• નવા ડોકર ડિમનને રોકો;
• પુનરાવર્તન

ડોકર-ઇન-ડોકરના આગમન સાથે, પ્રક્રિયા સરળ બની છે:

• હેકીટી હેક;
• એસેમ્બલી + એક તબક્કામાં લોંચ;
• ચક્ર પુનરાવર્તન કરો.

તે આ રીતે વધુ સારું નથી?

ડોકર-ઇન-ડોકર: "ખરાબ"

જો કે, લોકપ્રિય માન્યતાથી વિપરીત, ડોકર-ઇન-ડોકર 100% સ્ટાર્સ, ટટ્ટુ અને યુનિકોર્ન નથી. મારો કહેવાનો મતલબ એ છે કે ત્યાં ઘણી સમસ્યાઓ છે કે જેના વિશે વિકાસકર્તાને જાગૃત રહેવાની જરૂર છે.

તેમાંથી એક એલએસએમ (લિનક્સ સિક્યુરિટી મોડ્યુલ્સ) જેવી કે એપઆર્મર અને સેલિનક્સની ચિંતા કરે છે: જ્યારે કન્ટેનર ચલાવી રહ્યા હોય, ત્યારે "આંતરિક ડોકર" સુરક્ષા પ્રોફાઇલ્સ લાગુ કરવાનો પ્રયાસ કરી શકે છે જે "બાહ્ય ડોકર" ને સંઘર્ષ કરશે અથવા મૂંઝવણમાં મૂકશે. -પ્રિવિલેજ્ડ ધ્વજના મૂળ અમલીકરણને મર્જ કરવાનો પ્રયાસ કરતી વખતે આ ઉકેલવા માટેની સૌથી મુશ્કેલ સમસ્યા છે. મારા ફેરફારો કામ કરે છે અને તમામ પરીક્ષણો મારા ડેબિયન મશીન અને ઉબુન્ટુ ટેસ્ટ VM પર પસાર થશે, પરંતુ તે માઈકલ ક્રોસબીના મશીન પર ક્રેશ થઈ જશે અને બળી જશે (મને યાદ છે તેમ તેની પાસે ફેડોરા હતી). મને સમસ્યાનું ચોક્કસ કારણ યાદ નથી, પરંતુ એવું બની શકે છે કારણ કે માઈક એક સમજદાર વ્યક્તિ છે જે SELINUX=enforce (મેં AppArmor નો ઉપયોગ કર્યો છે) સાથે કામ કરે છે અને મારા ફેરફારો SELinux પ્રોફાઇલ્સને ધ્યાનમાં લેતા નથી.

ડોકર-ઇન-ડોકર: "એવિલ"

બીજો મુદ્દો ડોકર સ્ટોરેજ ડ્રાઇવરોનો છે. જ્યારે તમે ડોકર-ઇન-ડોકર ચલાવો છો, ત્યારે બાહ્ય ડોકર નિયમિત ફાઇલ સિસ્ટમની ટોચ પર ચાલે છે (EXT4, BTRFS, અથવા તમારી પાસે ગમે તે હોય) અને આંતરિક ડોકર કૉપિ-ઑન-રાઇટ સિસ્ટમ (AUFS, BTRFS, ઉપકરણ મેપર) ની ટોચ પર ચાલે છે. , વગેરે). , બાહ્ય ડોકરનો ઉપયોગ કરવા માટે શું ગોઠવેલ છે તેના આધારે). આ ઘણા સંયોજનો બનાવે છે જે કામ કરશે નહીં. ઉદાહરણ તરીકે, તમે AUFS ની ટોચ પર AUFS ચલાવવા માટે સમર્થ હશો નહીં.

જો તમે BTRFS ની ટોચ પર BTRFS ચલાવો છો, તો તે પહેલા કામ કરવું જોઈએ, પરંતુ એકવાર નેસ્ટેડ સબવોલ્યુમ્સ હોય, તો પેરેંટ સબવોલ્યુમ કાઢી નાખવાનું નિષ્ફળ જશે. ઉપકરણ મેપર મોડ્યુલ પાસે કોઈ નેમસ્પેસ નથી, તેથી જો એક જ મશીન પર બહુવિધ ડોકર દાખલાઓ તેને ચલાવી રહ્યાં હોય, તો તે બધા એકબીજા પર અને કન્ટેનર બેકઅપ ઉપકરણો પરની છબીઓ જોઈ શકશે (અને પ્રભાવિત) કરી શકશે. આ ખરાબ છે.

આમાંની ઘણી સમસ્યાઓના ઉકેલ માટે ઉકેલો છે. ઉદાહરણ તરીકે, જો તમે આંતરિક ડોકરમાં AUFS નો ઉપયોગ કરવા માંગતા હો, તો ફક્ત /var/lib/docker ફોલ્ડરને વોલ્યુમમાં ફેરવો અને તમે ઠીક થઈ જશો. ડોકરે ઉપકરણ મેપરના લક્ષ્ય નામોમાં કેટલાક બેઝ નેમસ્પેસ ઉમેર્યા છે જેથી જો એક જ મશીન પર બહુવિધ ડોકર કૉલ્સ ચાલી રહ્યા હોય, તો તેઓ એકબીજા પર પગ મૂકશે નહીં.

જો કે, આવા સેટઅપ બિલકુલ સરળ નથી, જેમ કે આમાંથી જોઈ શકાય છે લેખો GitHub પર ડીન્ડ રીપોઝીટરીમાં.

ડોકર-ઇન-ડોકર: તે વધુ ખરાબ થાય છે

બિલ્ડ કેશ વિશે શું? આ પણ તદ્દન મુશ્કેલ હોઈ શકે છે. લોકો મને વારંવાર પૂછે છે કે "જો હું ડોકર-ઇન-ડોકર ચલાવી રહ્યો છું, તો હું મારા આંતરિક ડોકરમાં બધું પાછું ખેંચવાને બદલે મારા હોસ્ટ પર હોસ્ટ કરેલી છબીઓનો ઉપયોગ કેવી રીતે કરી શકું"?

કેટલાક સાહસિક લોકોએ /var/lib/docker ને હોસ્ટમાંથી Docker-in-Docker કન્ટેનર સાથે જોડવાનો પ્રયાસ કર્યો છે. કેટલીકવાર તેઓ બહુવિધ કન્ટેનર સાથે /var/lib/docker શેર કરે છે.

શું તમે તમારો ડેટા દૂષિત કરવા માંગો છો? કારણ કે આ બરાબર તમારા ડેટાને નુકસાન પહોંચાડશે!

ડોકર ડિમન સ્પષ્ટપણે /var/lib/docker માટે વિશિષ્ટ ઍક્સેસ મેળવવા માટે રચાયેલ છે. આ ફોલ્ડરમાં સ્થિત કોઈપણ ડોકર ફાઇલોને બીજું કંઈપણ "ટચ, પોક અથવા પ્રોડ" કરવું જોઈએ નહીં.

આવું કેમ છે? કારણ કે આ ડોટક્લાઉડ વિકસાવતી વખતે શીખેલા સૌથી મુશ્કેલ પાઠમાંથી એકનું પરિણામ છે. ડોટક્લાઉડ કન્ટેનર એન્જીન /var/lib/dotcloud ને એકસાથે એક્સેસ કરવાની બહુવિધ પ્રક્રિયાઓ દ્વારા ચાલી રહ્યું છે. અણુ ફાઇલ રિપ્લેસમેન્ટ (ઇન-પ્લેસ એડિટિંગને બદલે), એડવાઇઝરી અને ફરજિયાત તાળાઓ સાથે પેપરિંગ કોડ અને SQLite અને BDB જેવી સુરક્ષિત સિસ્ટમો સાથેના અન્ય પ્રયોગો જેવી ઘડાયેલ યુક્તિઓ હંમેશા કામ કરતી ન હતી. જ્યારે અમે અમારા કન્ટેનર એન્જિનને ફરીથી ડિઝાઇન કરી રહ્યા હતા, જે આખરે ડોકર બની ગયું હતું, ત્યારે તમામ કન્ટેનર કામગીરીને એક જ ડિમન હેઠળ એકીકૃત કરવાનો એક મોટો નિર્ણય હતો.

મને ખોટો ન સમજો: બહુવિધ પ્રક્રિયાઓ અને આધુનિક સમાંતર નિયંત્રણ સમાવિષ્ટ કંઈક સારું, વિશ્વસનીય અને ઝડપી બનાવવું સંપૂર્ણપણે શક્ય છે. પરંતુ અમને લાગે છે કે માત્ર પ્લેયર તરીકે ડોકરનો ઉપયોગ કરીને કોડ લખવા અને જાળવવાનું સરળ અને સરળ છે.

આનો અર્થ એ છે કે જો તમે /var/lib/docker ડિરેક્ટરી બહુવિધ ડોકર દાખલાઓ વચ્ચે શેર કરો છો, તો તમને સમસ્યાઓ થશે. અલબત્ત, આ કામ કરી શકે છે, ખાસ કરીને પરીક્ષણના પ્રારંભિક તબક્કામાં. "સાંભળો, મા, હું ડોકર તરીકે ઉબુન્ટુ ચલાવી શકું છું!" પરંતુ કંઈક વધુ જટિલ કરવાનો પ્રયાસ કરો, જેમ કે બે અલગ-અલગ ઉદાહરણોમાંથી એક જ છબી ખેંચવી, અને તમે જોશો કે વિશ્વ બળી જશે.

આનો અર્થ એ છે કે જો તમારી CI સિસ્ટમ બિલ્ડ અને રિબિલ્ડ કરે છે, તો દર વખતે જ્યારે તમે તમારા ડોકર-ઇન-ડોકર કન્ટેનરને પુનઃપ્રારંભ કરો છો, ત્યારે તમે તેના કેશમાં ન્યુક મૂકવાનું જોખમ લો છો. આ બિલકુલ સરસ નથી!

મુશ્કેલીનિવારણ

ચાલો એક પગલું પાછળ લઈએ. શું તમને ખરેખર ડોકર-ઇન-ડોકરની જરૂર છે અથવા શું તમે ફક્ત ડોકર ચલાવવા અને તમારી CI સિસ્ટમમાંથી કન્ટેનર અને છબીઓ બનાવવા અને ચલાવવા માટે સક્ષમ બનવા માંગો છો જ્યારે તે CI સિસ્ટમ પોતે કન્ટેનરમાં હોય?

હું શરત લગાવું છું કે મોટાભાગના લોકો પછીનો વિકલ્પ ઇચ્છે છે, એટલે કે તેઓ ઇચ્છે છે કે જેનકિન્સ જેવી CI સિસ્ટમ કન્ટેનર ચલાવવા માટે સક્ષમ હોય. અને આ કરવાનો સૌથી સહેલો રસ્તો એ છે કે તમારા CI કન્ટેનરમાં ડોકર સોકેટ દાખલ કરો અને તેને -v ફ્લેગ સાથે સાંકળો.

સરળ શબ્દોમાં કહીએ તો, જ્યારે તમે તમારું CI કન્ટેનર (જેનકિન્સ અથવા અન્ય) ચલાવો છો, ત્યારે ડોકર-ઇન-ડોકર સાથે કંઈક હેક કરવાને બદલે, તેને લાઇનથી શરૂ કરો:

docker run -v /var/run/docker.sock:/var/run/docker.sock ...

આ કન્ટેનર હવે ડોકર સોકેટની ઍક્સેસ ધરાવશે અને તેથી કન્ટેનર ચલાવવા માટે સક્ષમ હશે. તે સિવાય "ચાઈલ્ડ" કન્ટેનર ચલાવવાને બદલે, તે "ભાઈ" કન્ટેનર લોંચ કરશે.

સત્તાવાર ડોકર ઇમેજનો ઉપયોગ કરીને આનો પ્રયાસ કરો (જેમાં ડોકર બાઈનરી છે):

docker run -v /var/run/docker.sock:/var/run/docker.sock 
           -ti docker

તે ડોકર-ઇન-ડોકરની જેમ દેખાય છે અને કાર્ય કરે છે, પરંતુ તે ડોકર-ઇન-ડોકર નથી: જ્યારે આ કન્ટેનર વધારાના કન્ટેનર બનાવે છે, ત્યારે તે ઉચ્ચ-સ્તરના ડોકરમાં બનાવવામાં આવશે. તમે નેસ્ટિંગની આડઅસરોનો અનુભવ કરશો નહીં અને એસેમ્બલી કેશ બહુવિધ કૉલ્સમાં શેર કરવામાં આવશે.

નોંધ: આ લેખના અગાઉના સંસ્કરણોએ ડોકર બાઈનરીને હોસ્ટથી કન્ટેનર સાથે લિંક કરવાની સલાહ આપી હતી. આ હવે અવિશ્વસનીય બની ગયું છે કારણ કે ડોકર એન્જિન હવે સ્થિર અથવા નજીક-સ્થિર પુસ્તકાલયોને આવરી લેતું નથી.

તેથી, જો તમે જેનકિન્સ સીઆઈમાંથી ડોકરનો ઉપયોગ કરવા માંગતા હો, તો તમારી પાસે 2 વિકલ્પો છે:
મૂળભૂત ઇમેજ પેકેજિંગ સિસ્ટમનો ઉપયોગ કરીને ડોકર CLI ઇન્સ્ટોલ કરવું (એટલે ​​​​કે જો તમારી છબી ડેબિયન પર આધારિત છે, તો .deb પેકેજોનો ઉપયોગ કરો), Docker API નો ઉપયોગ કરીને.

કેટલીક જાહેરાતો 🙂

અમારી સાથે રહેવા બદલ આભાર. શું તમને અમારા લેખો ગમે છે? વધુ રસપ્રદ સામગ્રી જોવા માંગો છો? ઓર્ડર આપીને અથવા મિત્રોને ભલામણ કરીને અમને ટેકો આપો, $4.99 થી વિકાસકર્તાઓ માટે ક્લાઉડ VPS, એન્ટ્રી-લેવલ સર્વર્સનું એક અનન્ય એનાલોગ, જેની શોધ અમારા દ્વારા તમારા માટે કરવામાં આવી છે: VPS (KVM) E5-2697 v3 (6 Cores) 10GB DDR4 480GB SSD 1Gbps વિશેનું સંપૂર્ણ સત્ય $19 થી અથવા સર્વર કેવી રીતે શેર કરવું? (RAID1 અને RAID10 સાથે ઉપલબ્ધ, 24 કોરો સુધી અને 40GB DDR4 સુધી).

એમ્સ્ટરડેમમાં ઇક્વિનિક્સ ટાયર IV ડેટા સેન્ટરમાં ડેલ R730xd 2 ગણું સસ્તું? માત્ર અહીં 2 x ઇન્ટેલ ટેટ્રાડેકા-કોર Xeon 2x E5-2697v3 2.6GHz 14C 64GB DDR4 4x960GB SSD 1Gbps 100 ટીવી $199 થી નેધરલેન્ડમાં! Dell R420 - 2x E5-2430 2.2Ghz 6C 128GB DDR3 2x960GB SSD 1Gbps 100TB - $99 થી! વિશે વાંચો ઇન્ફ્રાસ્ટ્રક્ચર કોર્પોરેશન કેવી રીતે બનાવવું. ડેલ R730xd E5-2650 v4 સર્વર્સના ઉપયોગ સાથેનો વર્ગ એક પેની માટે 9000 યુરોના મૂલ્યના છે?

સોર્સ: www.habr.com