सर्गेई लुक्यानोव के साथ साक्षात्कार, ओपनस्टैक सवाना परियोजना के तकनीकी नेता

राफेल नुथ द्वारा साक्षात्कार

हम आपको मिरांटिस ब्लॉग पर ओपनस्टैक पहल के तकनीकी परियोजना प्रबंधकों के साथ बातचीत की एक श्रृंखला में 10 वीं साक्षात्कार प्रस्तुत करते हैं। हमारा लक्ष्य तकनीकी समुदाय के अधिक से अधिक सदस्यों को प्रशिक्षित करना है और यह समझने में मदद करना है कि आप ओपनस्टैक में कैसे योगदान कर सकते हैं और इससे कैसे लाभान्वित हो सकते हैं। बेशक, साक्षात्कारकर्ता का दृष्टिकोण निम्नलिखित है, मिरांटिस का नहीं।

तो, सर्गेई लुक्यानोव के साथ एक साक्षात्कार, ओपनस्टैक सवाना के तकनीकी निदेशक ।

मिरांटिस: कृपया हमें अपने बारे में बताएं।

सर्गेई लुक्यानोव: मैं मिरांटिस इंक में एक वरिष्ठ डेवलपर और तकनीकी प्रबंधक हूं, जहां मैं 3 साल से अधिक समय से काम कर रहा हूं। मैं मुख्य रूप से वास्तुकला डिजाइन और ओपनस्टैक समुदाय के लिए जिम्मेदार हूं। मेरे पास बड़ी मात्रा में डेटा के प्रसंस्करण के लिए परियोजनाओं में भाग लेने और प्रासंगिक प्रौद्योगिकियों के साथ काम करने का अनुभव है - Hadoop, HDFS, Cassandra, Twitter Storm आदि, साथ ही साथ औद्योगिक पैमाने पर परियोजनाओं का विकास। फिलहाल, मैं विभिन्न ओपन-सोर्स प्रोजेक्ट्स में शामिल हूं, जिसमें ट्विटर स्टॉर्म और ओपनस्टैक शामिल हैं।

सवाल: आप ओपनस्टैक में कैसे आए? आप प्रोजेक्ट में क्यों भाग ले रहे हैं?

उत्तर: मैं लगभग एक साल से ओपनस्टैक पर सक्रिय रूप से काम कर रहा हूं, और इससे पहले भी, मैंने डियाब्लो रिलीज के बाद से इसके विकास को देखा था। मेरे लिए सक्रिय विकास की शुरुआत स्विफ्ट क्लाउड स्टोरेज कोड के उस हिस्से को लिखने के साथ हुई, जिससे यह बाहर से सीखना संभव हो गया, जिस पर यह भौतिक मशीनें या डेटा स्थित है (बाद में इसने सवाना के लिए स्थानीय कंप्यूटिंग के कार्यान्वयन में मदद की)। फिर, सीधे, मैंने सवाना परियोजना पर काम करना शुरू कर दिया और उसी समय अन्य ओपनस्टैक प्रोजेक्ट्स के विकास में भाग लिया - ओस्लो, स्विफ्ट, नोवा क्लाइंट, हैकिंग, पीब, जीपिब, आदि। ओपनस्टैक के ढांचे के भीतर मेरा मुख्य कार्य सेवाओं और सुविधाओं की संख्या में वृद्धि करना है जो यह एप्लिकेशन डेवलपर्स के लिए इस प्लेटफॉर्म का उपयोग करने और इसे यथासंभव व्यापक बनाने के लिए इसे और अधिक सुविधाजनक बनाने के लिए प्रदान करता है।

प्रश्न: सवाना परियोजना के तकनीकी प्रबंधक के रूप में आप क्या जिम्मेदार हैं?

उत्तर: मैं मुख्य रूप से परियोजना की देखरेख करता हूं। इसमें लॉन्चपैड पर निगरानी और बग और ब्लूप्रिंट को प्रबंधित करना, जेरिट सिस्टम का उपयोग करके नए कोड की जांच करने पर समन्वय कार्य, हमारी टीम के साथ साप्ताहिक आईआरसी बैठकें आयोजित करना और ओपनस्टैक डिजाइन शिखर सम्मेलन में बैठकें शामिल हैं। यह मुझे प्रतीत होता है कि परियोजना का तकनीकी नेता, सबसे पहले और सबसे महत्वपूर्ण है, वह व्यक्ति जो अपनी परियोजना के ढांचे के भीतर सभी टीमों के काम का समन्वय करता है और यह सुनिश्चित करता है कि उसके विकास की सामान्य दिशा निर्धारित कार्यों और लक्ष्यों के साथ मेल खाती है। इसके अलावा, मैं अपने प्रोजेक्ट में किए गए नए परिवर्तनों की संख्या में पहला स्थान रखता हूं, साथ ही टीम के अन्य सदस्यों से लिखित कोड की जांच की संख्या में भी।

प्रश्न: ओपनस्टैक में सवाना प्रोजेक्ट की क्या भूमिका है? इसका महत्व क्या है?

मेरी दृष्टि में, ओपनस्टैक न केवल इतना है और न ही एक तकनीकी बुनियादी ढांचा है, बल्कि डेवलपर्स का एक व्यापक समुदाय है जो निकट से संबंधित और सक्रिय रूप से विकासशील परियोजनाओं के अविश्वसनीय रूप से बड़े पारिस्थितिकी तंत्र पर काम कर रहा है। और यह सब बिल्कुल वही है जो एक क्लाउड प्लेटफॉर्म का गठन करता है। और यहाँ मैं अन्य ओपन-सोर्स पहल और उन्हें विकसित करने वाले समुदायों के साथ परिचय और एकीकरण करके इस पारिस्थितिकी तंत्र के भविष्य के विकास के लिए एक महान अवसर देखता हूं। और सिर्फ Apache Hadoop के साथ OpenStack का एकीकरण इसका एक बेहतरीन उदाहरण है। उपयोगकर्ता के दृष्टिकोण से, बड़ी मात्रा में डेटा का प्रसंस्करण अंततः अधिकांश ओपनस्टैक पहल परियोजनाओं के लिए उपयोगी हो सकता है।

प्रश्न: सवाना परियोजना में वास्तव में अद्वितीय और नया क्या है?

उत्तर: सवाना प्रोजेक्ट ने डाटा प्रोसेसिंग प्रोग्राम के हिस्से के रूप में हवाना चक्र के अंतिम चरण में आधिकारिक इनक्यूबेट ओपनस्टैक प्रोजेक्ट बनने के लिए आवेदन किया है। आज सवाना निम्नलिखित दो क्षेत्रों में बुनियादी ढाँचा संचालन के कार्यान्वयन को प्रदान करता है:

Hadoonworks डाटा प्रोसेसिंग प्लेटफॉर्म तक पहुँच प्रदान करने के लिए Hadoop वेंडर टूल्स जैसे Apache Ambari पर आधारित Hadoop क्लस्टर्स को सक्षम और प्रबंधित करना;

-हादूप कार्यों का निर्माण और प्रसंस्करण, जिसमें निर्माण, निष्पादन आदि शामिल हैं।

मैं यह भी स्पष्ट करना चाहूंगा कि बड़े डेटा को संसाधित करने के साथ संभावित समस्याओं की एक बहुत लंबी सूची के कारण सवाना किसी भी डेटा एपीआई की पेशकश नहीं करती है। भविष्य में, हम न केवल हाडूप का समर्थन करने की योजना बनाते हैं, बल्कि बड़ी मात्रा में डेटा के प्रसंस्करण के अन्य साधन भी हैं।

प्रश्न: सवाना समुदाय के बारे में बताएं - इस परियोजना में कौन शामिल है?

उत्तर: प्रोजेक्ट की शुरुआत मिरांटिस की एक छोटी टीम के साथ हुई। आज, हवाना चक्र के हिस्से के रूप में लगभग 30 लोग इस पर काम करते हैं, टीम की रीढ़ मिरांटिस, रेड हैट और हॉर्टनवर्क्स के कर्मचारी हैं, शेष प्रतिभागी एचपी, आईबीएम, यूनाइटेडस्टैक और रैकस्पेस के कर्मचारी हैं।

प्रश्न: सवाना समुदाय ने अब तक क्या हासिल किया है?

उत्तर: आज हमारे पास एक ऐसी सेवा है जो ऑपरेशन प्रदान करती है और क्लस्टरिंग के लिए समर्थन के साथ क्लस्टर का प्रबंधन करती है (और बढ़ते और घटते क्लस्टर आकार, जिसमें नए प्रकार के कंप्यूटिंग नोड्स शामिल हैं), एंटी-एफिनिटी (डेटा नोड्स की विश्वसनीयता की गारंटी करने के लिए सहित) ) और कंप्यूटिंग के लिए स्थानीय रूप से संग्रहीत डेटा का उपयोग (अधिक कुशल Hadoop कार्यों के लिए)। क्लस्टर कॉन्फ़िगरेशन डेटा संग्रहीत करने के लिए, हम नोड समूहों और क्लस्टर के टेम्प्लेट का उपयोग करते हैं। हमारी दूसरी और मुख्य कार्यक्षमता, इलास्टिक डेटा प्रोसेसिंग (EDP) के बारे में बात करते हुए, सवाना परियोजना Oozie कार्य अनुसूचक के माध्यम से जार, सुअर और हाइव जैसे कार्यों के सरल निष्पादन का समर्थन करती है, जिसमें डेटा को पढ़ने और लिखने और स्विफ्ट स्टोरेज करने की क्षमता शामिल है। कार्यात्मक क्षमताओं के विस्तार की संभावना के लिए, इस सिद्धांत को प्लग-इन तंत्र की उपस्थिति से सुनिश्चित किया जाता है जिसमें अब Hadoop समूहों तक पहुंचने के लिए दो प्लग-इन शामिल हैं: वेनिला प्लग-इन, जो बस सभी आवश्यक सेवाओं को स्थापित करता है, और Hortonworks Data Platform प्लग-इन, जो स्टार्टअप और ऐप के लिए Apache Ambari स्थापित करता है। Hadoop क्लस्टर कॉन्फ़िगरेशन। और, ज़ाहिर है, ओपनस्टैक डैशबोर्ड के लिए एक प्लगइन, जो हमारी परियोजना की पूर्ण कार्यक्षमता को दर्शाता है।

प्रश्न: ओपनस्टैक आइसहाउस रिलीज़ के हिस्से के रूप में सवाना क्या सुविधाएँ प्रदान करेगी?

उत्तर: मुख्य लक्ष्य अन्य ओपनस्टैक परियोजनाओं और बुनियादी ढांचे के साथ एकीकरण की दक्षता को बढ़ाना है। आइसहाउस रिलीज़ के लिए नियोजित मुख्य परिवर्तन संसाधन प्रबंधन के लिए हीट समर्थन है, ताकि इसे अन्य ओपनस्टैक सेवाओं के माध्यम से प्रत्यक्ष प्रबंधन के साथ प्रतिस्थापित किया जा सके। हम सवाना और डेवस्टैक गेट के एकीकरण पर भी काम कर रहे हैं ताकि परियोजना में नए बदलावों की जांच हो सके (देवस्टैक ने पहले ही सवाना समर्थन लागू कर दिया है), और टेम्पेस्ट में एपीआई और व्यापक परीक्षण के लिए आगे बढ़ें। इसके अलावा, मुझे सवाना स्नोहाउस में तथाकथित अतिथि-एजेंटों को देखने की उम्मीद है जो क्लाउड नियंत्रक और उस पर चलने वाले अतिथि ऑपरेटिंग सिस्टम के बीच सभी मौजूदा एक्सेस समस्याओं को हल करेंगे; सीधे ssh / API को कॉल करने की आवश्यकता नहीं है। ईडीपी कार्यक्षमता के हिस्से के रूप में, हम नए कार्यों, कार्य प्रकारों, डेटा स्रोतों, आदि के लिए समर्थन को लागू करने के लिए सामान्य रूप से कार्य प्रवाह के निष्पादन में सुधार करना चाहते हैं। मुझे यह भी उम्मीद है कि कम से कम एक और नया प्लगइन कार्यान्वित किया जाएगा, जो विक्रेताओं द्वारा समर्थित है, उदाहरण के लिए, IDH (Apache Hadoop प्रोजेक्ट के लिए इंटेल वितरण) पहले से ही विचाराधीन है।

सवाल: आप क्या चाहते हैं कि लोग प्रोजेक्ट के बारे में जानें?

उत्तर: सवाना प्रोजेक्ट का लक्ष्य डेटा प्रोसेसिंग टूल के साथ ओपनस्टैक समुदाय को प्रदान करना है। फिलहाल, हमारा ध्यान Hadoop पारिस्थितिकी तंत्र पर है, लेकिन चर्चा पहले से ही चल रही है और Apache Spark और Twitter तूफान जैसे अन्य उपकरणों का समर्थन करने के लिए अवधारणाओं का विकास किया जा रहा है। यही है, हम वर्तमान में ईडीपी के लिए इच्छाओं को इकट्ठा करने और नई सुविधाओं और डेटा प्रोसेसिंग टूल को जोड़ने पर काम कर रहे हैं।

प्रश्न: क्या सवाना परियोजना के बारे में कोई सामान्य गलत धारणाएं हैं?

उत्तर: हमारी परियोजना में डेटा एपीआई की उपलब्धता पर राय। सवाना के पास डेटा एपीआई नहीं है, लेकिन प्रबंधन एपीआई के दो स्तर हैं: एक क्लस्टर के कामकाज / प्रबंधन प्रदान करता है; अन्य कार्यों को पूरा करने और उनके प्रवाह की प्रक्रिया का प्रबंधन करता है। और फिर से परियोजना के उद्देश्य के बारे में। हम डाटा प्रोसेसिंग के क्षेत्र में व्यापक समाधान और उपकरण की पेशकश करना चाहते हैं, न कि एक बुनियादी ढांचे के लिए एक समय समाधान। हमारी गतिविधि का क्षेत्र डेटा प्रोसेसिंग है।

प्रश्न: सवाना किन मामलों में इस्तेमाल किया जा सकता है?

उत्तर: सवाना परियोजना के कार्यान्वयन के दौरान, हम कई उपयोग के मामलों को ध्यान में रखते हैं। सबसे पहले, डाटा प्रोसेसिंग क्लस्टर (वर्तमान में Hadoop क्लस्टर) का प्रबंधन। क्लाउड प्लेटफ़ॉर्म के लिए एक अन्य एप्लिकेशन है, पीक लोड होने पर निष्क्रिय कंप्यूटिंग शक्ति का उपयोग। डेटा प्रोसेसिंग टूल्स के क्षेत्र में विशेष ज्ञान के बिना कुछ ही क्लिक में डेटा प्रोसेसिंग (पल में विभिन्न Hadoop नौकरियां) के दौरान लोड का प्रबंधन करने की क्षमता।

सवाल: सवाना प्रोजेक्ट के लिए आपका क्या विजन है?

उत्तर: मैं सवाना को एक ऐसी सेवा के रूप में देखता हूं जो डेटा प्रोसेसिंग / क्लस्टर सपोर्ट टूल प्रदान करती है, जिसका मुख्य कार्य लोचदार डेटा प्रोसेसिंग संचालन प्रदान करना है, उदाहरण के लिए, कुछ कार्यों को करने के लिए, आदि।

प्रश्न: सवाना परियोजना के प्रतिभागियों में से आप किसे देखना चाहेंगे?

उत्तर: मैं दो प्रकार के प्रतिभागियों को देखना चाहूंगा। हमें विभिन्न Hadoop वितरण और (विशेषकर) अन्य डेटा प्रोसेसिंग वातावरण को लागू करने में रुचि रखने वाले लोगों की आवश्यकता है। हमें वास्तव में ऑपरेटरों की भी ज़रूरत है - जो लोग सवाना का उपयोग करना शुरू कर देंगे ताकि वे अपने डेटा को संसाधित करने के लिए प्रबंधन कर सकें और परियोजना में सुधार के लिए अपनी टिप्पणी और सुझाव भेजकर हमारी मदद कर सकें।

प्रश्न: अब सुधार और परीक्षण की क्या कार्यक्षमता है?

उत्तर: हीट के साथ एकीकरण के परीक्षण की आवश्यकता है; यह संसाधन प्रबंधन कोड का एक बहुत बड़ा हिस्सा प्रतिस्थापित करेगा। हम टेम्पेस्ट में एकीकृत एकीकरण परीक्षण को पोर्ट करने पर काम कर रहे हैं, और यहां हमें इस प्लेटफ़ॉर्म में पुराने परीक्षण को पोर्ट करने और अन्य लोगों को लिखने में दोनों की मदद की आवश्यकता है। और आपको विभिन्न अतिथि ऑपरेटिंग सिस्टम के संयोजन में विभिन्न ऑपरेटिंग सिस्टम में सवाना का परीक्षण जारी रखने की आवश्यकता है।

प्रश्न: सवाना के साथ लोग कैसे काम करना शुरू कर सकते हैं?

जवाब: मुझे उम्मीद है कि अब यह बहुत मुश्किल नहीं है। स्थापना DevStack का उपयोग करके किया जा सकता है, आपको केवल CDN में उपलब्ध डिस्क-बिल्डर-डिस्क पर आधारित डिस्क छवि लोड करने की आवश्यकता है। Docs.openstack.org/developer/savanna डेवलपर्स, प्रशासकों और उपयोगकर्ताओं के लिए विस्तृत उपयोग गाइड प्रदान करता है। और, निश्चित रूप से, हमारी टीम इस प्रक्रिया को सरल बनाने के लिए काम कर रही है, विशेष रूप से नए प्लगइन्स के डेवलपर्स की अपेक्षाओं को ध्यान में रखते हुए और, परिणामस्वरूप, नए प्रोजेक्ट प्रतिभागी। यदि आपके कोई प्रश्न हैं, तो हमारी टीम freenode.net पर #savanna IRC चैनल पर या ओपनस्टैक-dev@lists.openstack.org ई-न्यूज़लेटर (विषय पंक्ति में [सवाना] उपसर्ग निर्दिष्ट करते हुए) का उपयोग करके पाया जा सकता है।

प्रश्न: आपके समय के लिए धन्यवाद, सर्गेई।

उत्तर: धन्यवाद।