Windows 10 પર Apache Airflow ઇન્સ્ટોલ કરવાનો અનુભવ કરો

પ્રસ્તાવના: ભાગ્યની ઇચ્છાથી, શૈક્ષણિક વિજ્ઞાન (દવા) ની દુનિયામાંથી મેં મારી જાતને માહિતી તકનીકની દુનિયામાં શોધી છે, જ્યાં મારે પ્રયોગ બનાવવાની પદ્ધતિ અને પ્રાયોગિક ડેટાનું વિશ્લેષણ કરવા માટેની વ્યૂહરચના વિશેના મારા જ્ઞાનનો ઉપયોગ કરવો પડશે, જો કે, લાગુ પડે છે. એક ટેકનોલોજી સ્ટેક જે મારા માટે નવું છે. આ તકનીકોમાં નિપુણતા મેળવવાની પ્રક્રિયામાં, મને ઘણી મુશ્કેલીઓનો સામનો કરવો પડે છે, જે, સદભાગ્યે, અત્યાર સુધી દૂર કરવામાં આવી છે. કદાચ આ પોસ્ટ તે લોકો માટે ઉપયોગી થશે જેઓ પણ અપાચે પ્રોજેક્ટ્સ સાથે કામ કરવાનું શરૂ કરી રહ્યા છે.

તેથી, બિંદુ સુધી. પ્રેરિત લેખો યુરી એમેલિયાનોવ વિશ્લેષણાત્મક પ્રક્રિયાઓના ઓટોમેશનના ક્ષેત્રમાં અપાચે એરફ્લોની ક્ષમતાઓ વિશે, હું મારા કાર્યમાં પુસ્તકાલયોના સૂચિત સેટનો ઉપયોગ કરવાનું શરૂ કરવા માંગતો હતો. જેઓ હજુ સુધી અપાચે એરફ્લોથી બિલકુલ પરિચિત નથી તેઓ ટૂંકી ઝાંખીમાં રસ ધરાવી શકે છે લેખ રાષ્ટ્રીય પુસ્તકાલયની વેબસાઇટ પર. N. E. Bauman.

કારણ કે એરફ્લો ચલાવવા માટેની સામાન્ય સૂચનાઓ Windows પર્યાવરણમાં લાગુ પડતી નથી, આ સમસ્યાને ઉકેલવા માટે તેનો ઉપયોગ કરો ડોકર મારા કિસ્સામાં તે નિરર્થક હશે, મેં અન્ય ઉકેલો શોધવાનું શરૂ કર્યું. સદભાગ્યે મારા માટે, હું આ માર્ગ પર પ્રથમ ન હતો, તેથી હું એક અદ્ભુત શોધવામાં સફળ રહ્યો વિડિઓ સૂચનાઓ ડોકરનો ઉપયોગ કર્યા વિના Windows 10 પર અપાચે એરફ્લો કેવી રીતે ઇન્સ્ટોલ કરવું. પરંતુ, ઘણી વાર થાય છે, જ્યારે ભલામણ કરેલ પગલાંને અનુસરવામાં આવે છે, ત્યારે મુશ્કેલીઓ ઊભી થાય છે, અને, હું માનું છું કે માત્ર મારા માટે જ નહીં. તેથી, હું અપાચે એરફ્લો ઇન્સ્ટોલ કરવાના મારા અનુભવ વિશે વાત કરવા માંગુ છું, કદાચ તે કોઈને થોડો સમય બચાવશે.

ચાલો સૂચનાઓના પગલાઓમાંથી પસાર થઈએ (સ્પોઈલર - 5મા પગલા પર બધું બરાબર થઈ ગયું):

1. Linux વિતરણોના અનુગામી સ્થાપન માટે Linux માટે Windows સબસિસ્ટમ ઇન્સ્ટોલ કરવું

આ સૌથી ઓછી સમસ્યાઓ છે, જેમ કે તેઓ કહે છે:

કંટ્રોલ પેનલ → પ્રોગ્રામ્સ → પ્રોગ્રામ્સ અને ફીચર્સ → વિન્ડોઝ ફીચર્સ ચાલુ અથવા બંધ કરો → Linux માટે વિન્ડોઝ સબસિસ્ટમ

2. તમારી પસંદનું Linux વિતરણ ઇન્સ્ટોલ કરો

મેં એપ્લિકેશનનો ઉપયોગ કર્યો ઉબુન્ટુ.

3. ઇન્સ્ટોલેશન અને અપડેટ પીપ

sudo apt-get install software-properties-common
sudo apt-add-repository universe
sudo apt-get update
sudo apt-get install python-pip

4. અપાચે એરફ્લો ઇન્સ્ટોલ કરી રહ્યું છે

export SLUGIFY_USES_TEXT_UNIDECODE=yes
pip install apache-airflow

5. ડેટાબેઝ આરંભ

અને અહીંથી મારી નાની મુશ્કેલીઓ શરૂ થઈ. સૂચનાઓ માટે તમારે આદેશ દાખલ કરવાની જરૂર છે airflow initdb અને આગલા પગલા પર આગળ વધો. જો કે, મને હંમેશા જવાબ મળ્યો airflow: command not found. એવું માનવું તાર્કિક છે કે અપાચે એરફ્લોના ઇન્સ્ટોલેશન દરમિયાન મુશ્કેલીઓ ઊભી થઈ હતી અને જરૂરી ફાઇલો ખાલી ઉપલબ્ધ નથી. બધું જ્યાં હોવું જોઈએ ત્યાં હતું તેની ખાતરી કર્યા પછી, મેં એરફ્લો ફાઇલનો સંપૂર્ણ માર્ગ સ્પષ્ટ કરવાનો પ્રયાસ કરવાનું નક્કી કર્યું (તે આના જેવું દેખાવું જોઈએ: Полный/путь/до/файла/airflow initdb). પણ ચમત્કાર થયો નહિ અને જવાબ એક જ હતો airflow: command not found. મેં ફાઇલના સંબંધિત પાથનો ઉપયોગ કરવાનો પ્રયાસ કર્યો (./.local/bin/airflow initdb), જે નવી ભૂલ તરફ દોરી જાય છે ModuleNotFoundError: No module named json'જે પુસ્તકાલયને અપડેટ કરીને દૂર કરી શકાય છે સાધન (મારા કિસ્સામાં સંસ્કરણ 0.15.4 સુધી):

pip install werkzeug==0.15.4

તમે werkzeug વિશે વધુ વાંચી શકો છો અહીં.

આ સરળ મેનીપ્યુલેશન પછી આદેશ ./.local/bin/airflow initdb સફળતાપૂર્વક પૂર્ણ થયું હતું.

6. એરફ્લો સર્વર લોંચ કરવું

આ એરફ્લોને ઍક્સેસ કરવામાં મુશ્કેલીઓનો અંત નથી. આદેશ ચલાવી રહ્યા છીએ ./.local/bin/airflow webserver -p 8080 ભૂલમાં પરિણમ્યું No such file or directory. સંભવતઃ, અનુભવી ઉબુન્ટુ વપરાશકર્તા આદેશનો ઉપયોગ કરીને ફાઇલને ઍક્સેસ કરવામાં આવી મુશ્કેલીઓ દૂર કરવાનો પ્રયાસ કરશે. export PATH=$PATH:~/.local/bin/ (એટલે ​​​​કે, હાલના PATH એક્ઝિક્યુટેબલ સર્ચ પાથમાં /.local/bin/ ઉમેરવું), પરંતુ આ પોસ્ટ એવા લોકો માટે છે જેઓ મુખ્યત્વે Windows સાથે કામ કરે છે અને તેઓને આ ઉકેલ સ્પષ્ટ નથી લાગતું.

ઉપર વર્ણવેલ મેનીપ્યુલેશન પછી, આદેશ ./.local/bin/airflow webserver -p 8080 સફળતાપૂર્વક પૂર્ણ થયું હતું.

7.URL: લોકલહોસ્ટ: 8080 /

જો અગાઉના તબક્કામાં બધું બરાબર ચાલ્યું હોય, તો પછી તમે વિશ્લેષણાત્મક શિખરો પર વિજય મેળવવા માટે તૈયાર છો.

હું આશા રાખું છું કે વિન્ડોઝ 10 પર અપાચે એરફ્લો ઇન્સ્ટોલ કરવામાં ઉપર વર્ણવેલ અનુભવ શિખાઉ વપરાશકર્તાઓ માટે ઉપયોગી થશે અને આધુનિક વિશ્લેષણ સાધનોના બ્રહ્માંડમાં તેમના પ્રવેશને ઝડપી બનાવશે.

આગલી વખતે હું વિષય ચાલુ રાખવા માંગુ છું અને મોબાઇલ એપ્લિકેશન્સના વપરાશકર્તા વર્તનનું વિશ્લેષણ કરવાના ક્ષેત્રમાં અપાચે એરફ્લોનો ઉપયોગ કરવાના અનુભવ વિશે વાત કરીશ.

સોર્સ: www.habr.com