फेसबुक ने सिंडर को ओपन सोर्स किया, जो इंस्टाग्राम द्वारा उपयोग किया जाने वाला सीपीथॉन का एक कांटा है

फेसबुक ने प्रोजेक्ट सिंडर के लिए स्रोत कोड प्रकाशित किया है, जो सीपीथॉन 3.8.5 का एक कांटा है, जो पायथन प्रोग्रामिंग भाषा का मुख्य संदर्भ कार्यान्वयन है। इंस्टाग्राम को पावर देने के लिए फेसबुक के प्रोडक्शन इंफ्रास्ट्रक्चर में सिंडर का उपयोग किया जाता है और इसमें प्रदर्शन को बेहतर बनाने के लिए अनुकूलन शामिल हैं।

कोड को मुख्य सीपीथॉन ढांचे में तैयार अनुकूलन को पोर्ट करने की संभावना पर चर्चा करने और सीपीथॉन प्रदर्शन में सुधार करने में शामिल अन्य परियोजनाओं की सहायता के लिए प्रकाशित किया गया है। फेसबुक एक अलग ओपन सोर्स प्रोजेक्ट के रूप में सिंडर का समर्थन करने का इरादा नहीं रखता है और कोड को उस रूप में प्रस्तुत किया जाता है जिसमें इसका उपयोग कंपनी के बुनियादी ढांचे में किया जाता है, बिना अतिरिक्त जांच और दस्तावेज़ीकरण के। वे सीपीथॉन के विकल्प के रूप में सिंडर को बढ़ावा देने की कोशिश भी नहीं करते हैं - विकास का मुख्य लक्ष्य सीपीथॉन को बेहतर बनाने की इच्छा है।

सिंडर कोड को काफी विश्वसनीय माना जाता है और उत्पादन परिवेश में इसका परीक्षण किया जाता है, लेकिन यदि समस्याओं की पहचान की जाती है, तो आपको उन्हें स्वयं हल करना होगा, क्योंकि फेसबुक यह गारंटी नहीं देता है कि यह बाहरी त्रुटि संदेशों और पुल अनुरोधों का जवाब देगा। साथ ही, फेसबुक समुदाय के साथ रचनात्मक सहयोग को बाहर नहीं करता है और सिंडर को और भी तेज कैसे बनाया जाए या सीपीथॉन के मुख्य भाग में तैयार परिवर्तनों के हस्तांतरण को कैसे तेज किया जाए, इस पर विचारों पर चर्चा करने के लिए तैयार है।

सिंडर में कार्यान्वित मुख्य अनुकूलन:

• बाइटकोड की इनलाइन कैशिंग ("शैडो बाइटकोड")। विधि का सार उन स्थितियों की पहचान करना है जहां एक विशिष्ट ऑपकोड निष्पादित किया जाता है जिसे अनुकूलित किया जा सकता है, और ऐसे ऑपकोड को गतिशील रूप से तेज़ विशेष विकल्पों के साथ प्रतिस्थापित करना है (उदाहरण के लिए, अक्सर कॉल किए जाने वाले फ़ंक्शन को बदलना)।
• उत्सुक कोरआउटिन मूल्यांकन। एसिंक फ़ंक्शन कॉल के लिए जिन्हें तुरंत संसाधित किया जाता है (प्रतीक्षा के परिणामस्वरूप प्रतीक्षा नहीं होती है और फ़ंक्शन रिटर्न स्टेटमेंट पर पहले पहुंच जाता है), ऐसे फ़ंक्शन का परिणाम सीधे कोरआउटिन बनाए बिना या इवेंट लूप को शामिल किए बिना प्रतिस्थापित किया जाता है। फेसबुक कोड में जो भारी मात्रा में एसिंक/वेट का उपयोग करता है, अनुकूलन के परिणामस्वरूप लगभग 5% की गति होती है।
• व्यक्तिगत तरीकों और कार्यों के स्तर पर चयनात्मक जेआईटी संकलन (एक समय में विधि)। "-X जिट" विकल्प या PYTHONJIT=1 पर्यावरण चर के माध्यम से सक्षम और आपको कई प्रदर्शन परीक्षणों के निष्पादन को 1.5-4 गुना तक तेज करने की अनुमति देता है। चूँकि JIT संकलन केवल बार-बार निष्पादित कार्यों के लिए प्रासंगिक है, इसलिए इसे शायद ही कभी उपयोग किए जाने वाले कार्यों के लिए उपयोग करने की सलाह नहीं दी जाती है, जिसका संकलन ओवरहेड केवल प्रोग्राम निष्पादन को धीमा कर सकता है।

  विकल्प "-X git-list-file=/path/to/gitlist.txt" या पर्यावरण चर "PYTHONJITLISTFILE=/path/to/gitlist.txt" के माध्यम से आप फ़ंक्शंस की सूची के साथ एक फ़ाइल निर्दिष्ट कर सकते हैं जिसके लिए JIT उपयोग किया जा सकता है (पथ प्रारूप .to.module:funcname या path.to.module:ClassName.method_name)। उन कार्यों की सूची जिनके लिए JIT सक्षम किया जाना चाहिए, प्रोफाइलिंग परिणामों के आधार पर निर्धारित की जा सकती है। भविष्य में, फ़ंक्शन कॉल की आवृत्ति के आंतरिक विश्लेषण के आधार पर गतिशील जेआईटी संकलन के लिए समर्थन अपेक्षित है, लेकिन इंस्टाग्राम पर लॉन्चिंग प्रक्रियाओं की बारीकियों को ध्यान में रखते हुए, शुरुआती चरण में जेआईटी संकलन फेसबुक के लिए भी उपयुक्त है।

  जेआईटी पहले पायथन बाइटकोड को एक उच्च-स्तरीय मध्यवर्ती प्रतिनिधित्व (एचआईआर) में परिवर्तित करता है, जो कि पायथन बाइटकोड के काफी करीब है, लेकिन स्टैक-आधारित के बजाय रजिस्टर-आधारित वर्चुअल मशीन का उपयोग करने के लिए डिज़ाइन किया गया है, और प्रकार की जानकारी और अतिरिक्त का भी उपयोग करता है प्रदर्शन-महत्वपूर्ण विवरण (जैसे संदर्भ गणना)। फिर एचआईआर को एसएसए (स्टैटिक सिंगल असाइनमेंट) फॉर्म में परिवर्तित किया जाता है और अनुकूलन चरणों से गुजरता है जो संदर्भ गणना परिणामों और मेमोरी खपत डेटा को ध्यान में रखता है। परिणामस्वरूप, असेंबली भाषा के करीब एक निम्न-स्तरीय मध्यवर्ती प्रतिनिधित्व (एलआईआर) उत्पन्न होता है। एलआईआर-आधारित अनुकूलन के एक और चरण के बाद, एएसएमजीत लाइब्रेरी का उपयोग करके असेंबली निर्देश तैयार किए जाते हैं।

• मॉड्यूल के लिए सख्त मोड. कार्यक्षमता में तीन घटक शामिल हैं: स्ट्रिक्टमॉड्यूल टाइप करें। एक स्थैतिक विश्लेषक जो यह निर्धारित कर सकता है कि किसी मॉड्यूल के निष्पादन का उस मॉड्यूल के बाहर के कोड पर कोई प्रभाव नहीं पड़ता है। एक मॉड्यूल लोडर जो निर्धारित करता है कि मॉड्यूल सख्त मोड में हैं (कोड "आयात __strict__" निर्दिष्ट करता है), अन्य मॉड्यूल के साथ चौराहों की अनुपस्थिति की जांच करता है, और सख्त मॉड्यूल को एक स्ट्रिक्टमॉड्यूल ऑब्जेक्ट के रूप में sys.modules में लोड करता है।
• स्टेटिक पायथन एक प्रायोगिक बाइटकोड कंपाइलर है जो टाइप-विशिष्ट बाइटकोड उत्पन्न करने के लिए टाइप एनोटेशन का उपयोग करता है जो जेआईटी संकलन के लिए तेजी से चलता है। कुछ परीक्षणों में, स्टेटिक पायथन और जेआईटी का संयोजन मानक सीपीथॉन की तुलना में 7 गुना तक प्रदर्शन सुधार प्रदर्शित करता है। कई स्थितियों में, परिणाम MyPyC और साइथॉन कंपाइलर्स का उपयोग करने के करीब होने का अनुमान लगाया गया है।

स्रोत: opennet.ru