Windows 10 मा Apache Airflow स्थापना गर्ने अनुभव लिनुहोस्

प्रस्तावना: भाग्यको इच्छाले, अकादमिक विज्ञान (चिकित्सा) को संसारबाट मैले आफूलाई सूचना प्रविधिको संसारमा भेट्टाएँ, जहाँ मैले प्रयोगात्मक डेटाको विश्लेषणको लागि प्रयोग र रणनीतिहरू निर्माण गर्ने विधिको मेरो ज्ञान प्रयोग गर्नुपर्छ, तथापि, लागू गर्नुहोस्। एउटा टेक्नोलोजी स्ट्याक जुन मेरो लागि नयाँ छ। यी प्रविधिहरूमा महारत हासिल गर्ने प्रक्रियामा, मैले धेरै कठिनाइहरूको सामना गर्छु, जुन, सौभाग्यवश, अहिलेसम्म पार भएको छ। सायद यो पोष्ट तिनीहरूका लागि उपयोगी हुनेछ जसले Apache परियोजनाहरूसँग काम गर्न थालेका छन्।

त्यसैले, बिन्दुमा। प्रेरित लेख युरी Emelyanov विश्लेषणात्मक प्रक्रियाहरु को स्वचालन को क्षेत्र मा Apache Airflow को क्षमताहरु को बारे मा, म मेरो काम मा पुस्तकालयहरु को प्रस्तावित सेट को उपयोग शुरू गर्न चाहन्थे। Apache Airflow सँग परिचित नभएका व्यक्तिहरूलाई छोटो सिंहावलोकनमा रुचि हुन सक्छ लेख राष्ट्रिय पुस्तकालयको वेबसाइटमा। एन ई बाउमन।

एयरफ्लो चलाउनको लागि सामान्य निर्देशनहरू Windows वातावरणमा लागू हुने देखिँदैन, यो समस्या समाधान गर्न यसलाई प्रयोग गर्नुहोस् डकर मेरो मामला मा यो अनावश्यक हुनेछ, मैले अन्य समाधान खोज्न थाले। सौभाग्यवश मेरो लागि, म यस मार्गमा पहिलो थिएन, त्यसैले मैले एउटा अद्भुत फेला पार्न सफल भएँ भिडियो निर्देशन डकर प्रयोग नगरी Windows 10 मा Apache Airflow कसरी स्थापना गर्ने। तर, प्राय जसो हुन्छ, सिफारिस गरिएका चरणहरू पछ्याउँदा, कठिनाइहरू उत्पन्न हुन्छन्, र, म विश्वास गर्छु, मेरो लागि मात्र होइन। त्यसकारण, म Apache Airflow स्थापना गर्ने मेरो अनुभवको बारेमा कुरा गर्न चाहन्छु, हुनसक्छ यसले कसैलाई थोरै समय बचाउनेछ।

निर्देशनहरूको चरणहरू मार्फत जाऔं (स्पोइलर - 5 औं चरणमा सबै ठीक भयो):

1. लिनक्स वितरणको पछिल्लो स्थापनाको लागि लिनक्सको लागि विन्डोज सबसिस्टम स्थापना गर्दै

यो सबैभन्दा कम समस्या हो, तिनीहरू भन्छन्:

कन्ट्रोल प्यानल → प्रोग्रामहरू → प्रोग्राम र सुविधाहरू → विन्डोज सुविधाहरू खोल्नुहोस् वा बन्द गर्नुहोस् → लिनक्सका लागि विन्डोज सबसिस्टम

2. आफ्नो रोजाइको लिनक्स वितरण स्थापना गर्नुहोस्

मैले अनुप्रयोग प्रयोग गरें Ubuntu.

3. स्थापना र अपडेट पाइप

sudo apt-get install software-properties-common
sudo apt-add-repository universe
sudo apt-get update
sudo apt-get install python-pip

4. Apache Airflow स्थापना गर्दै

export SLUGIFY_USES_TEXT_UNIDECODE=yes
pip install apache-airflow

5. डाटाबेस प्रारम्भिकरण

र मेरो साना कठिनाइहरू यहीँबाट सुरु भयो। निर्देशनहरूले तपाईंलाई आदेश प्रविष्ट गर्न आवश्यक छ airflow initdb र अर्को चरणमा जानुहोस्। तर, मैले सधैं जवाफ पाएँ airflow: command not found। यो तर्कसंगत छ कि अपाचे एयरफ्लोको स्थापनाको क्रममा कठिनाइहरू उत्पन्न भयो र आवश्यक फाइलहरू मात्र उपलब्ध छैनन्। सबै कुरा जहाँ हुनु पर्छ भन्ने कुरा सुनिश्चित गरेपछि, मैले एयरफ्लो फाइलको पूर्ण मार्ग निर्दिष्ट गर्ने प्रयास गर्ने निर्णय गरें (यो यस्तो देखिन्छ: Полный/путь/до/файла/airflow initdb)। तर चमत्कार भएन र जवाफ एउटै थियो airflow: command not found। मैले फाइलमा सापेक्ष मार्ग प्रयोग गर्ने प्रयास गरें (./.local/bin/airflow initdb), जसले नयाँ त्रुटि निम्त्यायो ModuleNotFoundError: No module named json'जुन पुस्तकालय अपडेट गरेर हटाउन सकिन्छ उपकरण (मेरो मामलामा संस्करण ०.१५.४ सम्म):

pip install werkzeug==0.15.4

तपाईं werkzeug बारे थप पढ्न सक्नुहुन्छ यहाँ.

यो सरल हेरफेर आदेश पछि ./.local/bin/airflow initdb सफलतापूर्वक सम्पन्न भयो।

6. एयरफ्लो सर्भर सुरु गर्दै

यो हावा प्रवाह पहुँच संग कठिनाइहरु को अन्त छैन। आदेश चलाउँदै ./.local/bin/airflow webserver -p 8080 त्रुटिको कारण भयो No such file or directory। सम्भवतः, एक अनुभवी Ubuntu प्रयोगकर्ताले तुरुन्तै आदेश प्रयोग गरेर फाइल पहुँच गर्न यस्तो कठिनाइहरू हटाउन प्रयास गर्नेछ। export PATH=$PATH:~/.local/bin/ (अर्थात्, /.local/bin/ लाई अवस्थित PATH कार्यान्वयनयोग्य खोज मार्गमा थप्दै), तर यो पोष्ट तिनीहरूका लागि हो जसले मुख्य रूपमा विन्डोजसँग काम गर्छन् र यो समाधान स्पष्ट छ भन्ने सोच्दैनन्।

माथि वर्णन गरिएको हेरफेर पछि, आदेश ./.local/bin/airflow webserver -p 8080 सफलतापूर्वक सम्पन्न भयो।

7.URL: लोकलहोस्ट: १8080 /

यदि अघिल्लो चरणहरूमा सबै कुरा राम्ररी गयो भने, तपाईं विश्लेषणात्मक शिखरहरू जित्न तयार हुनुहुन्छ।

मलाई आशा छ कि Windows 10 मा Apache Airflow स्थापना गर्दा माथि वर्णन गरिएको अनुभव नौसिखिया प्रयोगकर्ताहरूको लागि उपयोगी हुनेछ र आधुनिक एनालिटिक्स उपकरणहरूको ब्रह्माण्डमा उनीहरूको प्रवेशलाई गति दिनेछ।

अर्को पटक म विषय जारी राख्न चाहन्छु र मोबाइल अनुप्रयोगहरूको प्रयोगकर्ता व्यवहार विश्लेषणको क्षेत्रमा Apache Airflow प्रयोग गर्ने अनुभवको बारेमा कुरा गर्न चाहन्छु।

स्रोत: www.habr.com