नेटएप के लिए चैलेंज के रूप में डेथ स्टार का निर्माण

नेटएप ने डेथ स्टार के निर्माण में भी भाग लिया। :)
डेथस्टार - "डेथ स्टार" - यह लुकासफिल्म, आईएलएम - औद्योगिक लाइट एंड मैजिक के 3 डी-मॉडलिंग डिवीजन द्वारा उपयोग किए जाने वाले कंप्यूटिंग क्लस्टर के लिए ऐतिहासिक नाम है।

2007 के बाद से, नेटएप स्टोरेज सिस्टम का उपयोग पूरे लुकासफिल्म आईटी कॉम्प्लेक्स द्वारा उपयोग किए जाने वाले डेटा को स्टोर करने के लिए किया गया है, जिसमें ILM (इंडस्ट्रियल लाइट एंड मैजिक), उनका 3D मॉडलिंग और रेंडरिंग स्टूडियो, वीडियो प्रोडक्शन और एडिटिंग, LucasArt डिवीजन (वीडियो गेम, और स्टारवार वेबसाइट) शामिल हैं। कॉम।
भंडारण क्षमता आज डेटा के पेटाबाइट्स से अधिक है।


फिल्म निर्माण में काम की लागू तकनीक को कई अलग-अलग उपभोक्ताओं के लिए उपलब्ध सामान्य डेटा के विशाल सरणी तक पहुंच की आवश्यकता होती है। इसलिए, उदाहरण के लिए, एक 3 डी रेंडरिंग फार्म के मामले में, ये मॉडल और बनावट होंगे जो प्रत्येक फ्रेम के लिए कई सैकड़ों द्वारा समानांतर में गणना की जाती हैं, और हजारों प्रोसेसर भी, नॉनलाइन वीडियो संपादन के मामले में, तैयार दृश्यों के विभिन्न टुकड़े। अंत में, Starwars.com वेबसाइट, जो Starwars Universe के बारे में विविध सामग्री का एक विशाल भंडार संग्रहीत करती है, हर दिन दुनिया भर से कई दसियों और सैकड़ों हजारों लुकासफिल्म वेब सर्वरों की सेवा लेती है।

परंपरागत रूप से, इस तरह की समस्या को हल करने के लिए, एनएफएस सर्वर के रूप में ऑपरेटिंग एक वितरित बहु-नोड क्लस्टर का उपयोग किया जाता है। लुकासफिल्म नेटएप स्टोरेज सिस्टम का उपयोग कई वर्षों से कर रहा है (2007 से, और उस समय तक - स्पिननेकर, जिसे 2004 में नेटऐप द्वारा अधिगृहीत किया गया था), और वर्तमान में विभिन्न स्तरों पर केवल ऑनलाइन स्टोरेज की क्षमता एक पेटाबाइट से अधिक है (इसमें संग्रहीत, ऑफ़लाइन शामिल नहीं है) -चुंबकीय तारों पर स्टोर)।
नेटएप नियंत्रक एक समानांतर एनएफएस क्लस्टर के नोड्स के रूप में कार्य करते हैं जो ओएस डेटा ONTAP जीएक्स पर चलते हैं, जो आपको इन सभी अलग-अलग भौतिक नोड्स से संग्रहीत फ़ाइलों के लिए एक एकल "भंडारण क्षेत्र", एक एकल सामान्य "नाम स्थान" बनाने की अनुमति देता है, और डेटा एक्सेस प्रदर्शन सुनिश्चित करता है हमारे समय में, गुणवत्ता पर लगातार बढ़ती मांगों के साथ 3 डी वीडियो, सीजी (कंप्यूटर जनरेट) पात्रों और दृश्यों की संख्या, और उत्पादन की मात्रा, एक फिल्म निर्माण कंपनी के लिए सबसे महत्वपूर्ण कार्यों में से एक है।

मैंने पहले ही इस ब्लॉग में 3D रेंडरिंग और वीडियो प्रोडक्शन के क्षेत्र में काम करने वाली एक और बड़ी कंपनी के समान रिपॉजिटरी के बारे में बात की थी - न्यूजीलैंड विटारा डिजिटल (कुछ और जानकारी ब्लॉग blog.aboutnetapp.ru पर , यहां और यहां के लेखों में पाई जा सकती है, जिसमें बहुत कुछ है वर्षों के लिए, NetApp रिपॉजिटरी का उपयोग उनके कई फिल्मी कामों के लिए किया गया है, जैसे कि त्रयी लॉर्ड ऑफ द रिंग्स, किंग कांग, जिला 9, अवतार, और कई अन्य।

2004 में वापस, लुकासफिल्म ने अपने डेटा सेंटर के लिए एक नेटवर्क बैकबोन (उस समय दुनिया में सबसे बड़ा) बनाया, जो 10Gb / s पर संचालित होता है, ब्रोकेड समाधानों का उपयोग करते हुए, और एक विशाल रेंडर फ़ार्म (Weta के बाद सिनेमा की दुनिया में आकार और शक्ति में दूसरा सबसे बड़ा) को डेटा प्रदान करता है। IBM ब्लेड सर्वर (AMD के लिए पुराने वाले LS22, Intel Xeon के लिए नए HS22, ब्लेड के लिए 32GB RAM) का उपयोग करना।

आज, मुख्य लुकासफिल्म डेटा सेंटर लगभग 1000 वर्ग मीटर क्षेत्र को कवर करता है जहां कंपनी की मुख्य विनिर्माण कंप्यूटिंग सुविधाएं सैन फ्रांसिस्को में स्थित हैं (सिंगापुर में एक लुकासर्ट इकाई भी है जो वीडियो और कंप्यूटर गेम से संबंधित है)।

ऐसे विशाल कंप्यूटिंग संसाधनों को देखते हुए, ऐसा लगता है कि डेटा सेंटर के विकास के अवसर असीमित हैं और आप इसकी लागतों को अनदेखा कर सकते हैं, लेकिन ऐसा नहीं है। पीटर ह्रीक, लुकासफिल्म कहते हैं, "दुर्भाग्य से, हमारे विकल्प फिल्म के बजट द्वारा हमेशा सीमित होते हैं।"

सब कुछ जो डेटा सेंटर साइड लागत के रूप में खर्च करता है, जैसे कि, उदाहरण के लिए, शीतलन, बिजली की आपूर्ति, उत्पादन क्षमताओं से दूर ले जाता है, जो कंपनी स्वयं फिल्म पर खर्च कर सकती है। इसलिए, उपयोग की दक्षता के प्रश्न, अर्थात्, इस तरह की कंपनियों की बड़ी वित्तीय क्षमताओं के बावजूद, खर्च किए गए डॉलर के बजट के लिए हमें कितना मिलता है, इसका अनुपात बहुत तीव्र है। इस तरह की परियोजनाओं की लागत का अंदाजा लगाने के लिए, हम कह सकते हैं कि 2007 में प्रकाशित आंकड़े बताते हैं कि उस समय डेटा सेंटर लुकासफिल्म ने लगभग 2.4 मेगावाट बिजली की खपत की, जिसमें से लगभग आधे ने ही सर्वर, स्टोरेज की सीधे आपूर्ति की। नेटवर्क उपकरण। सैन फ्रांसिस्को, कैलिफोर्निया में बिजली की कीमतों के लिए, यह एक बहुत ही महत्वपूर्ण परिव्यय है।
तुलना के लिए, उदाहरण के लिए, यह लगभग डेढ़ हजार औसत अमेरिकी घरों द्वारा बिजली की खपत है। एक डाटा सेंटर पूरे छोटे शहर की तरह बिजली की खपत करता है!

भंडारण संस्करणों के लिए, फिल्म के बढ़ते बजट के बाद, यह बढ़ना जारी है। इस प्रकार, प्रकाशित आंकड़ों के अनुसार, 2004 में लुकासफिल्म डेटा सेंटर की परिचालन भंडारण क्षमता केवल 32TB थी, जो 2007 तक बढ़कर 300TB हो गई, और आज 1 पेटाबाइट (1000 टेराबाइट्स) से अधिक है, जिसमें से तीन चौथाई उच्च-प्रदर्शन भंडारण हैं, और बाकी के पास है, तो कम प्रदर्शन के साथ ऑनलाइन डेटा है, उदाहरण के लिए SATA डिस्क पर।

डेटा सेंटर लुकासफिल्म के बारे में एक कहानी के साथ एक छोटा वीडियो दौरा हाल ही में ऑल थिंग्स डिजिटल के ऑनलाइन संस्करण में एक पत्रकार एरिक हेसेल्डहल ने प्रकाशित किया।

http://newenterprise.allthingsd.com/20110325/lucasfilms-data-center-and-an-encounter-with-the-real-death-star-video/

दुर्भाग्य से, मैं इस वीडियो को यहां नहीं डाल सकता, लिंक का उपयोग करके साइट पर जाएं। वैसे, वीडियो अंग्रेजी में सबटाइटल्स के साथ है, जो खराब अंग्रेजी सुनने के लिए बहुत सुविधाजनक है।