मेरा नाम सर्गेई कुबासोव है, मैं Mail.Ru Group का उप तकनीकी निदेशक हूं। हाल ही में, DCDE फ़ोरम में, मैंने अपना डेटा सेंटर बनाने और व्यवस्थित करने के अपने अनुभव के बारे में बात की। अब मैंने अपनी खोजों को हैबर के पाठकों के साथ साझा करने का निर्णय लिया।

कैसा था

अपने स्वयं के डेटा सेंटर के इतिहास की शुरुआत में, हमने पांच सेवा संगठनों के साथ सहयोग किया, जो एयर कंडीशनिंग और वेंटिलेशन, डीजल जनरेटर सेट, निर्बाध बिजली की आपूर्ति, विद्युत स्वचालन और एक गैस आग बुझाने की प्रणाली की सेवा करते थे। उस समय, ऐसा लगता था कि यह सबसे अच्छा समाधान था, क्योंकि "वही लोग" निर्माण और शोषण कर रहे हैं - यानी, वे सिस्टम को जानते हैं और से।

तीन वर्षों तक इस तरह से काम करने के बाद, हमने इस मोड के सबसे गंभीर जोखिमों की सूची तैयार की और उन्हें संकलित किया। पहला ओवरसेल सेवाएं है ; यह तब होता है जब ठेकेदार पांच घंटे के भीतर आपातकाल का जवाब देने का वादा करता है, लेकिन इस समय सीमा का अनुपालन नहीं कर सकता है यदि दुर्घटना उसके किसी ग्राहक के साथ होती है। उदाहरण के लिए, यदि वह तीन सुविधाओं की सेवा कर रहा है और दो में पहले से ही आपातकाल लगा हुआ है, तो वह अनुबंध में निर्दिष्ट समय के दौरान न केवल तीसरे के लिए समय पर होगा, बल्कि किसी भी पर्याप्त समय पर भी। वैसे, मास्को सड़कों की भौगोलिक विशेषताएं और भीड़ यहां अपनी भूमिका निभाती हैं। आप कितनी भी कोशिश कर लें, आप दो घंटे से भी कम समय में दो घंटे की तुलना में तेजी से शहर के बाहरी इलाके में स्थित वस्तु तक नहीं पहुंच सकते।

ठेकेदारों से सेवाओं की पूरी श्रृंखला का उपयोग करते समय दूसरा जोखिम स्पेयर पार्ट्स और उपभोग्य सामग्रियों की आपूर्ति से संबंधित है। जब आप एक ठेकेदार से सेवाओं का पैकेज खरीदते हैं, तो वह निश्चित रूप से लागत का कम से कम 10% जीत जाएगा। हमें बेस प्राइस के 50-100% मार्जिन के साथ सामना किया गया था, जिसके लिए समान भागों को "पास की दुकान" में खरीदा जा सकता है। उसी समय, ठेकेदार ने 4-6 सप्ताह तक डिलीवरी में देरी करके समय पर बचत करने की कोशिश की, जबकि उपभोग्य सामग्रियों की कभी-कभी जरूरत होती थी, या तत्काल स्पेयर पार्ट्स भी "तात्कालिकता" के लिए एक फुलाए हुए मूल्य पर पेश किए जाते थे।

खैर, अंतिम लेकिन कम से कम बिंदु यह नहीं है कि लंबे सहयोग के बाद कुछ कंपनियां आराम करती हैं , और कोई फर्क नहीं पड़ता कि स्थिति कितनी गंभीर है, वे भुगतान के बाद ही प्रतिक्रिया करते हैं। फोर्स मैज्योर हुआ, और ठेकेदार का कहना है कि सेवाओं के लिए धन हस्तांतरित करने के बाद ही वह आपके पास आने के लिए तैयार है और वे खाते में पहुंचते हैं (1-2 बैंकिंग दिनों के भीतर)। एयर कंडीशनिंग या बिजली बैकअप के बिना छोड़ दिए गए उपकरणों के साथ इसका क्या होगा, मुझे लगता है कि हर कोई समझता है।

सभी जोखिमों का आकलन करने के बाद, हमने अपनी खुद की ऑपरेशन सेवा बनाने का फैसला किया।

अब Mail.Ru Group प्रोजेक्ट्स पाँच लीज़्ड डेटा सेंटर और हमारे अपने डेटा सेंटर में स्थित हैं।

स्टफिंग: डेटा सेंटर सेवा

हमारे डेटा सेंटर (कुल क्षेत्रफल - 2100 वर्ग मीटर में, भवन में लगभग 450 रैक हैं, उपकरण, जिस पर 4 मेगावाट बिजली की खपत करने में सक्षम है), हमने अपना डेटा सेंटर सर्विस सिस्टम बनाया है। इसे सशर्त रूप से दो घटकों में विभाजित किया जा सकता है।

इंजीनियरिंग सिस्टम का रखरखाव - ऊर्जा आपूर्ति, वेंटिलेशन, डीजल जनरेटर सेट, यूपीएस, आग बुझाने की प्रणाली और अन्य। दिशा का नेतृत्व एक अग्रणी इलेक्ट्रिकल इंजीनियर करता है, जिसके पास ड्यूटी पर शिफ्ट इंजीनियर होते हैं, साथ ही एक एयर कंडीशनिंग और वेंटिलेशन इंजीनियर होता है जो पूरी सुविधा प्रदान करता है। यह वे लोग हैं जो रोज़ाना प्रदर्शन करते हैं, घटनाओं का जवाब देते हैं, मौके पर दोषों की मरम्मत करते हैं, बिना कॉल किए और पता लगाते हैं कि किसे कॉल करना है और कैसे बचना है। इस प्रकार, हमने किसी भी आपात स्थिति के लिए हमारे डेटा सेंटर की त्वरित प्रतिक्रिया के लिए प्रदान किया। इसके अलावा, कर्मचारी स्वयं निर्धारित कार्य और माप, प्रणाली में सही दोष, और सुविधा के आधुनिकीकरण को सुनिश्चित करते हैं।

सर्वर उपकरण पार्क का रखरखाव । इस दिशा का प्रबंधन हार्डवेयर इंजीनियरों की सेवा के प्रमुख द्वारा किया जाता है। ड्यूटी पर शिफ्ट भी शामिल है। उनका मुख्य कार्य निगरानी करना और एक प्रतिक्रिया प्रदान करना है: दूसरे शब्दों में, यदि वे हरे रंग के संकेत के बजाय लाल देखते हैं, तो उन्हें उपयुक्त निर्देश को खोलने की जरूरत है, यह पता करें कि ऐसी स्थितियों के लिए कौन जिम्मेदार है, और इस व्यक्ति से संपर्क करें।

डेटा सेंटर स्वास्थ्य की गारंटी के रूप में निगरानी

निगरानी की बात कही। डेटा सेंटर के काम में, समय में स्वीकार्य संकेतकों से विचलन का पता लगाना और इसका तुरंत जवाब देना बेहद महत्वपूर्ण है। स्वाभाविक रूप से, सक्षम निगरानी यहां एक प्रमुख भूमिका निभाती है। हमने अपने सिस्टम के सभी महत्वपूर्ण तत्वों की निगरानी का आयोजन किया, जबकि तकनीकी जंगल में भटकने की कोशिश नहीं की, जब खुद निगरानी प्रणाली की सेवा के लिए एक और सेवा की आवश्यकता होती है।

बिजली

हम कई पक्षों से यूपीएस की स्थिति की निगरानी करते हैं, क्योंकि यह पूरे सिस्टम का एक प्रमुख तत्व है। यहां हमारे पास कई नियंत्रण प्रणालियां हैं; उदाहरण के लिए, नेटवर्क की स्थिति में किसी भी बदलाव के साथ, विफलता के बारे में जानकारी ऑपरेशन सेवा की पूरी प्रबंधन टीम तक पहुंच जाएगी। लगभग छह लोगों को समाचार पत्र की सदस्यता दी जाती है, जिनमें से कोई निश्चित रूप से प्रतिक्रिया देगा और खराबी को खत्म करने के लिए उपाय करेगा।

लीड-इन लाइनों की स्थिति की निगरानी करने के लिए, हमने मिसाइल खानों में उपयोग की जाने वाली न्यूफ़ंगल, लेकिन सिद्ध सैन्य तकनीकों का उपयोग नहीं करने का फैसला किया। ये लैंप पर साधारण नियंत्रण पैनल हैं: हरे रंग का दीपक चालू है - सब कुछ ठीक है, लाल चालू है - आपातकालीन। परिष्कृत निगरानी प्रणाली के मामले में, एक स्थिति तब संभव है जब डेटा सेंटर को उड़ा दिया गया हो, और आपको इसके बारे में पता भी न हो, क्योंकि आप सिस्टम को ठीक करने में व्यस्त हैं। और हमारे नियंत्रण कक्ष (कई हजार रूबल की लागत पर) बहुत विश्वसनीय हैं - बस तोड़ने के लिए कुछ भी नहीं है!

तापमान और आर्द्रता

एक अन्य महत्वपूर्ण बिंदु डेटा सेंटर में तापमान और आर्द्रता का नियंत्रण है। हमने इन संकेतकों के लिए एक निगरानी प्रणाली विकसित की, साथ ही सबसे सस्ता समाधान भी लिया - सेंसर जो आंकड़े एकत्र करते हैं और नक्शे पर स्थिति की कल्पना करते हैं। हमने बॉक्सिंग समाधान का उपयोग नहीं किया, लेकिन बस लगभग सौ सेंसर खरीदे और एक प्रणाली को इकट्ठा किया जो लगातार इमारत के किस कोने में दिखाता है कि हमारे पास क्या तापमान है। अनुमेय सीमा में परिवर्तन की स्थिति में, वह उन लोगों को भी एसएमएस भेजती है जो केंद्रीय निगरानी प्रणाली को जिम्मेदार और अलर्ट जारी करते हैं।

बाईपास चेकलिस्ट और सीमा

यदि पहले हमारे पास केवल वर्कअराउंड निर्देश थे, तो अब हमने चेक सूचियां बनाई हैं। एक चेकलिस्ट एक कागज का एक टुकड़ा है जो कहता है कि आपको एक दौरे के दौरान क्या देखना है, और प्रत्येक आइटम के लिए निचली और ऊपरी सीमा को इंगित करता है। एक स्तंभ भी है जो बताता है कि यदि निर्दिष्ट सीमाओं के बाहर मूल्य है तो क्या करें। प्रत्येक निरीक्षण के परिणामों के आधार पर, हम एक पूर्ण चेकलिस्ट भरते हैं; प्रत्येक 4 घंटे में डिटर्जेंट बनाए जाते हैं। पूर्ण किए गए चेकलिस्ट एक जर्नल में दर्ज किए जाते हैं, जिसे आप किसी भी समय देख सकते हैं और पता लगा सकते हैं कि कल क्या स्थिति थी या कहें, पिछले वसंत। हमारी पत्रिका सबसे साधारण, कागज है; हमने डेटा भंडारण के लिए इस विकल्प को चुना क्योंकि जो लोग बिजली के काम में शामिल हैं वे कभी-कभी आईटी प्रौद्योगिकियों से बहुत दूर होते हैं, और उन्हें संकेतकों की जांच करने की आवश्यकता होती है। किसी भी कौशल का व्यक्ति शेल्फ से फ़ोल्डर प्राप्त कर सकता है, आवश्यक जानकारी को खोल सकता है और देख सकता है; हमने आपातकालीन प्रतिक्रिया के लिए एक और अवरोध हटा दिया।

प्रौद्योगिकी छेद प्लेसमेंट रणनीति और अन्य खोजें

दुर्भाग्य से, व्यवहार में, सब कुछ इतनी आसानी से नहीं हुआ। डेटा सेंटर बनाते समय, हमें अपने स्वयं के कड़वे अनुभव पर विशेष रूप से कई बातें पता चलीं। नतीजतन, हम सभी आपातकालीन और अप्रत्याशित स्थितियों को हल करने में कामयाब रहे, लेकिन हम अभी भी एक ही समय में हंसी और कंपकंपी के साथ कुछ मामलों को याद करते हैं।

ऐसे उत्सुक मामले थे जो बहुत गंभीर परिणाम दे सकते थे। उदाहरण के लिए, हमने ठेकेदारों को डाटा सेंटर के लिए एयर कंडीशनर खरीदने का काम सौंपा। जैसा कि बाद में पता चला, ठेकेदारों ने इस बात पर ध्यान केंद्रित किया कि बाजार पर बड़े पैमाने पर क्या प्रस्तुत किया गया था, और एक प्रसिद्ध कंपनी के सरल समाधानों में से एक पर बसे।

अतिरेक के उचित स्तर को सुनिश्चित करने के लिए, हम डबल-सर्किट एयर कंडीशनर का उपयोग करते हैं। एक नियमित जाँच के दौरान, हमें यह जानकर आश्चर्य हुआ कि एक बाष्पीकरण पर प्रशीतक का क्वथनांक सामान्य और अपेक्षित + 3 ° C होता है, और दूसरी ओर यह -0.5 ° C तक गिर जाता है। यही है, हमारे एयर कंडीशनर एक फ्रीजर में बदल गया है। इसके अलावा, यह किसी भी क्षण में नहीं हुआ, लेकिन केवल कुछ निश्चित मौसम स्थितियों के तहत।



यह पता चला कि इंजीनियरों ने हवा के सेवन के उद्घाटन के सापेक्ष बाष्पीकरण के स्थान पर एक गलती की - वे केंद्र से ऑफसेट थे, और परिणामस्वरूप सर्किट के बीच हवा का प्रवाह और गर्मी भार असमान रूप से वितरित किया गया था। परिणामस्वरूप, हमने निर्माता की ओर से इस फ़ाइल को बहुत सरलता से ठीक किया - उन्होंने मामले में एक लापता खिड़की के माध्यम से देखा।

परिणाम

सभी गड़बड़ियों और परिवर्तनों के बाद, हम एक ऐसी सेवा को व्यवस्थित करने में कामयाब रहे जिसे आप केवल पहले का सपना देख सकते थे। हमने घटना के प्रतिक्रिया समय को दो घंटे से घटाकर पांच मिनट कर दिया, स्पेयर पार्ट्स और उपभोग्य सामग्रियों की खरीद को अनुकूलित किया और रखरखाव की लागत को कम किया।

अपने स्वयं के डेटा केंद्र में, हम लगातार इंजीनियरिंग सिस्टम में सुधार कर रहे हैं, निगरानी और प्रेषण प्रणाली के आधुनिकीकरण पर काम कर रहे हैं। चूंकि हम स्वयं सिस्टम को संचालित करते हैं, हमारे पास मौजूदा कमियों का विश्लेषण करने और उन्हें खत्म करने के उपाय करने का अवसर है।

तीन साल तक हमने विशेष रूप से ठेकेदारों के साथ काम किया। दो साल पहले, हमारी अपनी ऑपरेशन सेवा थी, जिससे हम प्रसन्न हैं। बेशक, हम तीसरे पक्ष की सेवाओं का उपयोग करना जारी रखते हैं, लेकिन अब जोखिम में कमी के ढांचे में। हमारे पास अपने स्वयं के इंजीनियर हैं, जो अकेले ही पूरी सुविधा प्रदान करते हैं। इस घटना में कि ऐसा व्यक्ति किसी कारण से ड्यूटी पर नहीं जा सकता है, हमने प्रत्येक सिस्टम के लिए न्यूनतम लागत के साथ एक सेवा अनुबंध पर हस्ताक्षर किए हैं - बस इतना है कि, यदि आवश्यक हो, तो हमारे पास फोन करने और मदद मांगने के लिए कोई था।

एक और बड़ा बोनस यह है कि ठेकेदारों के काम को नियंत्रित करने के लिए अब हमारे पास योग्यता और व्यापक अनुभव है। चूंकि हम खुद अपने डेटा सेंटर की सेवा करते हैं, इसलिए हम तीसरे पक्ष की कंपनियों के काम की गुणवत्ता का मूल्यांकन कर सकते हैं: एकीकृत समाधान से लेकर वेल्ड तक। और, ज़ाहिर है, हमारे पास खुद को ठेकेदार चुनने का अवसर है। हम किसी भी सेवा संगठन से बंधे नहीं हैं: हम समस्या को स्वयं हल कर सकते हैं, लेकिन हम एक तृतीय-पक्ष कंपनी से निरीक्षण और मरम्मत का आदेश दे सकते हैं।

हम किराए के डेटा केंद्रों में संचित अनुभव को लागू करते हैं। मुझे आशा है कि यह आपके लिए भी उपयोगी होगा - या हो सकता है कि आप अपनी टिप्पणी में साझा करना चाहते हों।