Apache Hadoop के लिए Intel वितरण: बिग डेटा को आरामदायक बनाएं

अपाचे हडोप परियोजना के बारे में बात करने के लिए एक बड़े डेटा उत्साही के लिए यह संभवतः परेशानी के लायक नहीं है। हाल ही में, यह ढांचा विशेष रूप से लोकप्रिय हो गया है और अक्सर इसका उल्लेख हैबे पर किया जाता है।
और एक अच्छे सॉफ्टवेयर सिस्टम को और बेहतर कैसे बनाया जाए? उदाहरण के लिए, इसमें हार्डवेयर घटक जोड़ें। यह ठीक उसी तरह है जैसे इंटेल अपाचे हडोप के लिए इंटेल डिस्ट्रीब्यूशन जारी करने के साथ गया था - इंटेल ज़ेओन प्लेटफॉर्म के तहत "स्थानीयकरण" हैडॉप, अपने प्रबंधन और संचालन को सुविधाजनक बनाने के लिए कई उपयोगी सुविधाओं से लैस है।

मुख्य Apache Hadoop अनुप्रयोगों के अलावा, जैसा कि चित्र में दिखाया गया है, Intel पैकेज में Hadoop Software के लिए Intel Manager का एक अतिरिक्त घटक शामिल है, जो नए अनुप्रयोगों की तैनाती, कॉन्फ़िगरेशन और निगरानी की सुविधा प्रदान करता है। इसके अलावा, Apache Hadoop मॉड्यूल के लिए Intel सक्रिय ट्यूनर स्वचालित रूप से सिस्टम प्रदर्शन मैट्रिक्स को कॉन्फ़िगर करता है। एक अतिरिक्त घटक के रूप में, Apache Hadoop ग्राफिकल रिपोर्टिंग लाइब्रेरी के लिए इंटेल ग्राफ बिल्डर उपलब्ध है।
Intel Xeon प्लेटफॉर्म के लिए रूपरेखा के अनुकूलन ने दो महत्वपूर्ण परिणाम प्राप्त किए हैं:

• इंटेल Xeon प्रोसेसर में एईएस एन्क्रिप्शन एल्गोरिथ्म के हार्डवेयर कार्यान्वयन के कारण एचडीएफएस फाइल सिस्टम में डिस्क संचालन धीमा किए बिना डेटा एन्क्रिप्शन का कार्यान्वयन;
• Hadoop सॉफ्टवेयर और Xeon I / O सबसिस्टम के बीच इष्टतम बातचीत के कारण समग्र प्रणाली के प्रदर्शन में महत्वपूर्ण वृद्धि। इंटेल द्वारा आंतरिक परीक्षण के परिणामों के अनुसार, कंपनी के डेवलपर्स गैर-अनुकूलित संस्करण की तुलना में सिस्टम के पांच गुना ओवरक्लॉकिंग को प्राप्त करने में कामयाब रहे।

इंटेल क्लाउड प्रौद्योगिकियों और भंडारण नेटवर्क से संबंधित कई परियोजनाओं का विकास कर रहा है। इसलिए, अपेक्षाकृत हाल ही में, इंटेल इंटेलिजेंट सिस्टम फ्रेमवर्क जारी किया गया था - अंत उपकरणों से डेटा केंद्रों में जानकारी एकत्र करने, विश्लेषण और संचारित करने के लिए सिस्टम का एक ढांचा। लेकिन एक अन्य परियोजना केवल यात्रा की शुरुआत में है। फरवरी के अंत में, ओपन कॉरपोरेशन के एक विक्रेता इंटेल कॉर्पोरेशन और रूसी कंपनी मिरांटिस ने सॉफ्टवेयर विकास के क्षेत्र में सहयोग पर एक समझौते पर हस्ताक्षर किए। इसका मतलब यह है कि भविष्य में हम इंटेल प्रोसेसर के लिए ओपनस्टैक का अनुकूलन भी देखेंगे, जो कि हादोप के मामले में, निश्चित रूप से एक महत्वपूर्ण लाभ प्रदान करेगा।