समानांतर और वितरित कंप्यूटिंग। उन लोगों के लिए यैंडेक्स से व्याख्यान जो लाभ के साथ छुट्टियां बिताना चाहते हैं

त्योहारों का सप्ताह करीब आ रहा है, लेकिन हम उन लोगों के लिए यांडेक्स डेटा एनालिसिस स्कूल से व्याख्यान प्रकाशित करना जारी रखते हैं जो लाभ के साथ समय बिताना चाहते हैं। आज पाठ्यक्रम की बारी है, जिसका महत्व हमारे समय में बहुत कठिन है, "समानांतर और वितरित कम्प्यूटिंग" है।

अंदर क्या है: समानांतर कंप्यूटिंग और वितरित डेटा प्रोसेसिंग और स्टोरेज सिस्टम के साथ परिचित, साथ ही उपयुक्त प्रौद्योगिकियों के व्यावहारिक उपयोग के लिए कौशल विकसित करना। पाठ्यक्रम में चार मुख्य ब्लॉक शामिल हैं: समवर्ती, समानांतर कंप्यूटिंग, बड़े डेटा सरणियों के समानांतर प्रसंस्करण और वितरित कंप्यूटिंग।



सेंटर फॉर ग्रिड टेक्नोलॉजीज एंड डिस्ट्रीब्यूटेड कम्प्यूटिंग, आईएसए आरएएस के वरिष्ठ शोधकर्ता ओलेग विक्टरोविच सुखोरोस्लाव द्वारा व्याख्यान दिए गए हैं। एसोसिएट प्रोफेसर, डिस्ट्रीब्यूटेड कम्प्यूटिंग विभाग, FIVT MIPT। तकनीकी विज्ञान के उम्मीदवार।

कंसीडर (एक साथ)।

स्कोप और समस्याएं। एक साथ सिस्टम, प्रक्रियाओं और थ्रेड्स, सॉफ्टवेयर टूल्स को लागू करने के तरीके। C ++ और जावा के उदाहरण का उपयोग करके बहु-थ्रेडेड प्रोग्रामिंग की मूल बातें। विशिष्ट मल्टीथ्रेडेड प्रोग्रामिंग त्रुटियां। पारस्परिक बहिष्करण और सशर्त तुल्यकालन। मेमोरी मॉडल और निम्न-स्तरीय सिंक्रनाइज़ेशन प्राइमेटीज़। एक साथ कार्यक्रमों के कार्यान्वयन के लिए वैकल्पिक दृष्टिकोण।

• मल्टीथ्रेडेड प्रोग्रामिंग, भाग 1
• मल्टीथ्रेडेड प्रोग्रामिंग, भाग 2

समानांतर कंप्यूटिंग।

स्कोप और समस्याएं। आधुनिक समानांतर कंप्यूटिंग सिस्टम। समानांतर कंप्यूटिंग की सैद्धांतिक नींव। एक समानांतर एल्गोरिदम की गुणवत्ता संकेतक। विकास के सिद्धांत और समानांतर एल्गोरिदम की विशिष्ट संरचनाएं। पीसीएएम पद्धति। समानांतर प्रोग्रामिंग सिस्टम। विशिष्ट प्रोग्रामिंग मॉडल और पैटर्न। एक उदाहरण के रूप में ओपनएमपी तकनीक का उपयोग करके साझा मेमोरी सिस्टम पर समानांतर प्रोग्रामिंग के फंडामेंटल। उदाहरण के रूप में MPI तकनीक का उपयोग करके वितरित मेमोरी सिस्टम पर समानांतर प्रोग्रामिंग की मूल बातें।

• समानांतर कंप्यूटिंग
• समवर्ती प्रोग्रामिंग
• समानांतर प्रोग्रामिंग, भाग 2
• डीजेड नंबर 1 का विश्लेषण

बड़ी मात्रा में डेटा का समानांतर प्रसंस्करण।

बिग डेटा की घटना। MapReduce प्रोग्रामिंग मॉडल। कंप्यूटिंग के समानांतर कार्यान्वयन के सिद्धांत। स्कोप और कार्यों के उदाहरण। क्लस्टर सिस्टम पर MapReduce के वितरित कार्यान्वयन के सिद्धांत। अपाचे Hadoop प्लेटफार्म आवेदन प्रोग्रामिंग इंटरफेस और Hadoop के लिए कार्यक्रमों के कार्यान्वयन। स्थानीय डिबगिंग और क्लस्टर पर प्रोग्राम चलाना। MapReduce कार्यक्रमों के लिए तकनीक और कार्यान्वयन रणनीति। Hadoop के साथ काम करने के लिए उच्च स्तरीय भाषाएं और उपकरण। MapReduce का उपयोग करने के व्यावहारिक उदाहरण। MapReduce मॉडल की सीमाएँ, एक्सटेंशन और वैकल्पिक दृष्टिकोण।

• MapReduce
• MapReduce: ट्रिक्स और कार्यान्वयन रणनीतियाँ
• MapReduce: उपकरण और केस स्टडीज

वितरित सिस्टम और कंप्यूटिंग।

स्कोप्स, विशेषता विशेषताएं और वितरित सिस्टम के प्रकार। वितरित प्रणालियों के निर्माण की समस्याएं। वितरित कंप्यूटिंग की सैद्धांतिक नींव, वितरित एल्गोरिदम के उदाहरण। वितरित प्रक्रियाओं के आदान-प्रदान के तरीके, नेटवर्क प्रोटोकॉल। वितरित प्रोग्रामिंग टेक्नोलॉजीज। एरलंग भाषा के साथ परिचित। वितरित स्टोरेज सिस्टम, डेटा प्रतिकृति, NoSQL-Systems। वितरित कंप्यूटिंग प्रौद्योगिकियां, ग्रिड, स्वैच्छिक कंप्यूटिंग। क्लाउड कंप्यूटिंग सिस्टम।

• वितरित प्रोग्रामिंग डीजेड नंबर 2 का विश्लेषण
• वितरित डेटा वेयरहाउस
• डीजेड नंबर 3.4 का विश्लेषण

अद्यतन: Yandex.Disk पर एक खुले फ़ोल्डर के रूप में समानांतर और वितरित कम्प्यूटिंग पाठ्यक्रम के सभी व्याख्यान ।