मेरे पास 13:30 से सर्वर है, तकनीकी सहायता से कोई प्रतिक्रिया नहीं है। कारणों का पता लगाने के लिए एक मंच भी उपलब्ध नहीं है। जाहिर तौर पर यह उनका बिजनेस कार्ड है, बिना किसी चेतावनी के गिर गया, फिर हम कुछ लेकर आएंगे।

प्रिय clodo.ru कर्मचारी, आप कहां हैं? टिकट पत्र / संदेश / आदि आपकी अपील कहां और क्यों हमें झूठ बोलना चाहिए?

UPDATE 15 जून। मुआवजा।

आज, एक हब्र उपयोगकर्ता ने मुआवजा प्राप्त करने के अपने प्रयास के बारे में एक बहुत ही दिलचस्प संदेश भेजा:

11:55:22 06/14/2011 मैं लिखता हूं:
शुभ दोपहर
VPS 11111-1 हमारे लिए काम नहीं करता है, पहले से ही 4 दिनों के लिए।
क्या समस्या है? सर्वर कब काम करेगा!
11:56:55 06/14/2011 समर्थन सेवा (एलेक्जेंड्रा एम * शुक ***) लिखते हैं:
क्या सर्वर चार दिनों के लिए "अनुरोध प्रसंस्करण" स्थिति में है?
12:01:42 06/14/2011 समर्थन सेवा (एलेक्जेंड्रा एम * शुक ***) लिखते हैं:
अभी जांच करें। Ssh उपलब्ध है, यह काम करता है।
14:23:25 06/14/2011 मैं लिखता हूं:
अब उपलब्ध है। क्या समस्या थी?
14:27:27 06/14/2011 समर्थन सेवा (एलेक्जेंड्रा एम * शुक ***) लिखते हैं:
समस्या हमारी ओर से थी। असुविधा के लिए हम क्षमा चाहते हैं।

तब मुझे मुआवजे के बारे में पता चला:

नमस्ते
23 मई को संशोधित सार्वजनिक प्रस्ताव समझौते के अनुसार, क्लोडो के साथ दोष-सहिष्णु सेवा समझौते के समापन पर ही मुआवजे का भुगतान किया जाता है। दुर्भाग्य से, हम आपको मुआवजा देने से इनकार करने के लिए मजबूर हैं। हमें घटना पर बहुत अफसोस है। हमने सब कुछ किया ताकि भविष्य में ऐसा कुछ भी दोबारा न हो। यदि आप दो डेटा केंद्रों में तैनात उच्च उपलब्धता समाधान में रुचि रखते हैं, तो हम इसे एक महीने के भीतर प्रदान कर सकते हैं।

क्लाउडिया, क्लाउडिया, आप अपने प्रदर्शनों की सूची में हैं, हम कुछ भी नहीं देते हैं, हमारे पास हर चीज के लिए बहाने हैं ... वैसे, अपने वकील को कम से कम 5 कार्य दिवसों की सूचना के साथ आपके ऑफ़र की सेवाओं के प्रावधान के लिए शर्तों को बदलने के लिए कहें, जब तक कि अन्यथा निर्दिष्ट न हो। अनुबंध में। कर्मचारी आप खुद को ऐसे कंपनी में काम करने के लिए शर्मिंदा नहीं हैं?

14 जून को अद्यतन: 4 दिन बीत चुके हैं।

दुर्घटना के लिए स्पष्टीकरण 06/10/2011
जैसा कि आप जानते हैं, क्लोडो क्लस्टर प्रबंधन संरचना को बदलने पर काम कर रहा है। सभी दुखद अनुभवों को देखते हुए, हम उन्हें रात में नेतृत्व करते हैं और उन्हें परमाणु गैर-विनाशकारी कार्यों में तोड़ते हैं।

घटना से पहले की रात, हमारे इंजीनियरों ने क्लस्टर से एक InfiniBand स्विच को बाहर करने का काम किया। एक ओर, यह कार्रवाई प्रारंभिक परीक्षण के अधीन थी, और दूसरी ओर, एक बार पूरा होने के बाद, यह एक बार फिर से सत्यापित किया गया था कि कुछ भी उल्लंघन नहीं किया गया था। उसके बाद भी कोई काम नहीं हुआ।

हालांकि, बहुत लंबे समय के बाद, आभासी मशीनों का पतन शुरू हुआ। हमारे XEN- नोड्स, क्लस्टर नियंत्रक और रिले पर स्थापित Suse Linux Enterprise Server के साथ काम करने में Infiniband ड्राइवर (IPoIB) पर IP की विफलता के कारण समस्या उत्पन्न हुई। दुर्भाग्य से, विफलता काफी घातक थी और आभासी मशीनें अपने आप नहीं बढ़ीं, लेकिन मैन्युअल रूप से। इसके अलावा, आपातकालीन स्टार्टअप स्क्रिप्ट को बनाया जाना था, इसलिए वर्चुअल मशीनों का उदय उतना तेज़ नहीं हुआ जितना हम चाहते हैं। विफलता के परिणामस्वरूप, वर्चुअल मशीन का एक छोटा सा हिस्सा (10-15) वर्चुअल मशीन और डिस्क के बीच का कनेक्शन खो देता है। इन मशीनों के प्रदर्शन को लंबे समय तक बहाल करना पड़ा।

हमारी गलती के कारण विफलता हुई। इसके मुख्य घटक:

ऑपरेशन से पहले अपर्याप्त परीक्षण (विलंबित त्रुटियों को बाहर नहीं किया गया था);
Suse Linux Enterprise Server और Infiniband के बीच अपूर्ण रूप से परीक्षण की गई बातचीत;
एक दुर्घटना के मामले में अधूरी स्टार्टअप स्क्रिप्ट।

ये सभी त्रुटियां मानव कारक का एक परिणाम हैं। अपराधियों को उत्पादन सर्वर पर किसी भी कार्रवाई से रोक दिया जाता है।

छोटे-छोटे सामान्य प्रश्न

समर्थन टीम ने इतनी धीमी प्रतिक्रिया क्यों दी?
उत्तर सरल है: दुर्घटना के समय, तकनीकी सहायता सेवा पर भार कई गुना बढ़ जाता है। सहायता सेवा दुर्घटना के उन्मूलन से जुड़ी थी: पीड़ितों की संकलित सूची, समस्या निवारण के बाद लॉन्च की निगरानी, ​​सिस्टम प्रशासकों को हर तरह से मदद की।

हादसे के दौरान उन्होंने मंच / हबराब्र / ट्विटर पर मुझसे संवाद क्यों नहीं किया और यह नहीं बताया कि क्या हो रहा था
सभी लोग जो सटीक रूप से समझने और समझाने में सक्षम थे कि क्या हो रहा था, परिणाम को खत्म करने में लगे हुए थे। समस्या को हल करने वाले लोगों पर समय बिताना बेहद अव्यवहारिक था।

क्या ऐसा कुछ फिर से होगा?
फिलहाल, सभी काम निलंबित हैं। केवल एक चीज जो की जा रही है वह है कार्य की अवधि के लिए अक्षम की गई कार्यक्षमता की बहाली। काम की तैयारी के लिए एक नई प्रक्रिया को मंजूरी दे दी गई है, जिसमें इसके नोड्स में किसी भी नियोजित परिवर्तन के बाद पूरे सिस्टम के स्वास्थ्य का परीक्षण करना शामिल है।

अपनी ओर से, मैं उन लोगों से माफी मांगना चाहता हूं जिनके लिए मैंने आपके इनबॉक्स में भेजे गए संदेशों का जवाब नहीं दिया। मेरे पास पत्रों की ऐसी धारा को भौतिक रूप से संसाधित करने का समय नहीं है।

क्लोडो के सीईओ,

मैक्सिम डबरेव

मैं अपनी ओर से कहना चाहता हूं, आप वास्तव में मैक्सिम को लगता है कि यह एक योग्य व्याख्या है ... हालांकि मैं किस बारे में बात कर रहा हूं, आप कैसे कर रहे हैं, इसके बारे में बताया गया है। उन्होंने खुद ही बदतर काम किया है।

अद्यतन 19:45: मेरे पास शेष 2 सर्वर विभिन्न खातों पर चल रहे हैं।

अद्यतन 19:15: कहानी जारी है। मैं पहले से ही मुख्य परियोजना के रूप में बाहर चला गया, लेकिन टिप्पणियों से देखते हुए, अभी भी समस्याएं हैं। फिलहाल, क्लाउड फोरम इस तरह दिखता है:

और पिछले 6 घंटों में मेरे एक सर्वर का कार्य कार्यक्रम इस प्रकार है:


आप छोड़ देते हैं और अलविदा भी नहीं कहते हैं?

अद्यतन 07:10: 18 घंटे से अधिक। सभी सर्वर में तेजी आई है। यह स्थानांतरित करने का समय है! जाहिरा तौर पर क्लोडो के कर्मचारी पहले ही काम पर आ चुके हैं, अच्छी तरह से सोए और सर्वर चालू किया :)

अद्यतन 04:30: 15 घंटे से अधिक। तब मैं उपनामों को पतन के लिए जिम्मेदार देखना चाहूंगा। सुबह के लगभग 5 बज रहे हैं, मैं तब तक इंतजार करता हूं जब तक कि सर्वर नवीनतम करंट बैकअप लेने के लिए तैयार नहीं हो जाते। लेकिन कुछ मुझे बताता है कि क्लाउड कर्मचारी लंबे समय से घर पर सो रहे हैं ...

अद्यतन 02:00: 13 घंटे लेट। प्रिय क्लाउड कर्मचारियों, यह ग्राहकों के लिए बहुत ही मजेदार और अपमानजनक है! मुझे उम्मीद है कि इस गिरावट के बाद आप या अधिकांश लोग निकल जाएंगे। सभी सर्वरों पर आपके सभी डाउनटाइम के लिए, आपकी संपूर्ण होस्टिंग लागतों की तुलना में अधिक पैसा खो जाता है! इसके अलावा, एक परियोजना की प्रतिष्ठा, जिसे अब किसी भी पैसे के लिए बहाल नहीं किया जा सकता है, को कम करके आंका गया था, मैंने आपके हर ड्रॉप के लिए अपने उपयोगकर्ताओं को जितना हो सकता था उतना मुआवजा और बोनस दिया। मैं सोच भी नहीं सकता कि अब क्या करना है।
आपकी क्लाउड सेवा की कीमत इस समय से अधिक नहीं है । यह कहने के लिए कि मुझे नफरत है आपको कुछ नहीं कहना है। आपकी गुणवत्ता और दृष्टिकोण के लिए फिर से धन्यवाद।

अद्यतन 23:00: 10 घंटे लेट। नहीं, ठीक है, यह पहले से ही बहुत अधिक सज्जन है। सब कुछ इतना दोष-सहिष्णु है कि आप 10 घंटे नहीं बढ़ा सकते।