मीडिया प्रदर्शन "न्यूरोइंटरग्रम"

हाय, हेबरोज़र्स। इस पोस्ट में मैं आपको एक ऐसे प्रोजेक्ट के बारे में बताना चाहता हूं जो मैं पिछले 4 महीनों से काम कर रहा हूं।

हम एक तकनीकी मीडिया प्रदर्शन के बारे में बात कर रहे हैं, जिसे अलेक्जेंड्रिन्स्की थियेटर के नए चरण के हिस्से के रूप में बनाया गया था। प्रदर्शन के मुख्य पात्र भावनात्मक स्थिति और कलाकार के विचार हैं। शुरुआत के लिए, सामाजिक का आधिकारिक वर्णन। नेटवर्क:

मीडिया प्रदर्शन "न्यूरोइंटरग्रम" एक प्रायोगिक परियोजना है जो आज के घरेलू दृश्य में आधुनिक तकनीक की उपलब्धियों का उपयोग करते हुए और इसका उपयोग करते हुए विज्ञान कला, या वैज्ञानिक कला के एक दुर्लभ क्षेत्र का प्रतिनिधित्व करती है। प्रसिद्ध सेंट पीटर्सबर्ग मीडिया कलाकार यूरी डिडेविच के मार्गदर्शन में बनाया गया प्रदर्शन, सदी के मोड़ की संस्कृति के प्रमुख भूखंडों में से एक की पड़ताल करता है - आदमी और मशीन की बातचीत: उनके बीच एक सांस्कृतिक संवाद स्थापित करने का प्रयास - न्यूरोइंटरग्रम का सुपर-प्लॉट। प्रदर्शन ऑडियो-विज़ुअल स्टेजिंग एल्गोरिदम को नियंत्रित करने के लिए कलाकार के मस्तिष्क (ईईजी) की बायोपोटेक्शंस का उपयोग करता है।

न्यूरोएन्ग्रेटम पहला थिएटर प्रोजेक्ट है जिसे अलेक्जेंड्रिन्स्की थिएटर के न्यू स्टेज मीडिया सेंटर के आधार पर कार्यान्वित किया गया है।

जो लोग रुचि रखते हैं, मैं बिल्ली के नीचे पूछता हूं। विशेष रूप से Habrausers के लिए वर्कफ़्लो की कुछ तस्वीरें होंगी।

दिल

मीडिया का प्रदर्शन "न्यूरोइंटरग्रम" आदमी, कंप्यूटर और इंटरफेस की बातचीत के लिए विकल्पों में से सवाल उठाता है, उनमें से प्रत्येक की भूमिका सीमा।

मंच पर ध्वनि और छवि वास्तविक समय में विशेष रूप से प्रदर्शन के लिए लिखे गए सॉफ़्टवेयर द्वारा उत्पन्न की जाती है। वे एक गतिशील समन्वय प्रणाली को परिभाषित करते हैं जिसके संबंध में घटनाओं, संयोगों, गतिकी और नाटकीयता पर विचार किया जाता है। प्रदर्शन का नियंत्रण तत्व कलाकार की भावनात्मक स्थिति है, जो कंप्यूटर के साथ सूचना और ऊर्जा विनिमय के माध्यम से, ध्वनि और दृश्य मीडिया को नियंत्रित करता है। दृश्य-श्रव्य घटनाओं के लिए कलाकार की प्रतिक्रिया के परिणामस्वरूप, इसका स्रोत स्वयं है, जैविक प्रतिक्रिया होती है।

Neurointegrum क्या दर्शाता है?

कलाकार की भावनात्मक स्थिति को पढ़ने के लिए, तंत्रिका इंटरफ़ेस Emotiv Epoc Research Edition का उपयोग किया जाता है। इसका एसडीके आपको भावनात्मक स्थिति, जैसे भावनात्मक उत्तेजना और हताशा, के साथ-साथ कई मानसिक आज्ञाओं को सीखने की अनुमति देता है जिन्हें किसी भी सिस्टम पैरामीटर को नियंत्रित करने के लिए सौंपा जा सकता है। नेटवर्क पर, आप Google कर सकते हैं, उदाहरण के लिए, एक विकलांग व्यक्ति कैसे सोचा की शक्ति के साथ कुर्सी को नियंत्रित करता है। नीचे दी गई तस्वीर में, कलाकार साशा रुम्यंतसेवा एक प्रशिक्षण के दौरान 3 डी घन चाल बनाती है। इसके अलावा स्क्रीन पर आप वास्तविक समय में ली गई मस्तिष्क की विद्युत क्षमता के रीडिंग के साथ ग्राफ देख सकते हैं।



ग्राफिक प्रोजेक्शन के लिए दृश्य में दो स्क्रीन, 10x4.5 मीटर आकार के होते हैं (क्या मैंने पहले ही कहा है कि हम पहले से रिकॉर्ड किए गए वीडियो का उपयोग नहीं करते हैं और वास्तविक समय में ग्राफिक्स उत्पन्न करते हैं?), अलग से कलाकार, 14 साउंड चैनल, 2 सबवूफ़र्स, आईआर के सिल्हूट पर प्रक्षेपित किया जाता है। -कमेरा, किनेक्ट, और इसमें एक प्रकाश उपकरण क्ले पक्की एल्डा वॉश K20 भी है, जो कि एक दृश्य में साशा के सिर द्वारा अंतःक्रियात्मक रूप से नियंत्रित है। यह सब सामान चार कंप्यूटरों से नियंत्रित होता है: न्यूरल इंटरफ़ेस और किनेक्ट के साथ काम करने के लिए प्रोजेक्शन जेनरेशन के लिए 2 पीसी (फर्श पर, रियर प्रोजेक्शन स्क्रीन पर, और साशा के सिल्हूट पर), 1 पीसी (या विंडोज के साथ iMac स्थापित), साथ ही 1 मैक के लिए। ध्वनि उत्पन्न करना। और हाँ, ध्वनि भी वास्तविक समय में उत्पन्न होती है, जिसमें चारों ओर सामान भी शामिल है।

उपकरण

मैं आपको तकनीकी पक्ष के बारे में कुछ और बताऊंगा। ग्राफिक्स सॉफ्टवेयर OpenFrameworks ढांचे का उपयोग करके C ++ में लिखा गया था। कलाकार के सिल्हूट को उजागर करने से संबंधित कार्यों के लिए, OpenCV का उपयोग किया जाता है, जिसकी सहायता से IR कैमरे से आने वाली छवि को संसाधित किया जाता है। नीचे एक तस्वीर है जहाँ आप एनालॉग कैमरा और IR इल्लुमिनेटर देख सकते हैं:



नीचे आप देख सकते हैं कि सिल्हूट रोशनी कैसे काम करती है। बैकलाइट की असमानता (शरीर के ऊपरी हिस्से को उजागर नहीं किया गया है) इस तथ्य के कारण है कि साशा के "घर" कपड़े खराब अवरक्त विकिरण को दर्शाते हैं। प्रदर्शन के लिए, निश्चित रूप से, एक विशेष पोशाक कपड़े से बना था, जिसे हमने मंजूरी दी थी, अर्थात् प्रोग्रामर।



Kinect का उपयोग कुछ इशारों को पहचानने के लिए किया जाता है:



चलो ध्वनि पर चलते हैं। मैक्स / एमएसपी में बना साउंड सॉफ्टवेयर। यह इंटरैक्टिव ऑडियो-विजुअल एप्लिकेशन बनाने के लिए एक दृश्य प्रोग्रामिंग वातावरण है। मैक्स / एमएसपी का इतिहास 80 के दशक के उत्तरार्ध में प्रसिद्ध पेरिस इंस्टीट्यूट फॉर द स्टडी ऑफ कोऑर्डिनेशन एंड एकाउटिक्स IRCAM (मैंने एक बार इस माध्यम की समीक्षा लिखा था ) में शुरू होता है। न्यूरोइंटरग्रम का ध्वनि पैच कुछ इस तरह दिखता है:



इस पैच से, ऑप्टिक साउंड को RME MADIface के माध्यम से यामाहा M7CL में भेजा जाता है। अगली फोटो में, मैं और माशा, एक बहुत ही समझदार साउंड इंजीनियर अलेक्जेंड्रिंका:



यदि आपने पिछली तस्वीरों में से एक में देखा है, तो स्पीकर भी दृश्य के केंद्र में स्थित हैं। इस "ट्रिक" की जड़ें "एसोसमोनियम" प्रणाली में हैं, जो 70 के दशक में पेरिस जीआरएम सेंटर में पियरे शेफेफर के छात्रों द्वारा विकसित की गई थी (वैसे, जून के अंत में ऑस्ट्रियन अकुसोनियम के लेखक की एक कार्यशाला थॉमस गोर्बाड को एलेक्जेंड्रिंका के मीडिया स्टूडियो में आयोजित करने की योजना है)। यह आपको यह महसूस करने की अनुमति देता है कि ध्वनि दृश्य के केंद्र में जाती है।

इस तथ्य के अलावा कि नाटक में ध्वनि मौलिक रूप से स्थानिक है, यह भी इंटरैक्टिव है। कोई स्टिक और ऑडियो प्लेयर नहीं। इसे प्राप्त करने के लिए, वर्तमान में क्या खींचा जा रहा है, इसके बारे में जानकारी लगातार ग्राफिक प्रोग्राम से प्रेषित की जाती है, और इसके आधार पर, ग्राफिक तत्व पहले से ही आवाज उठाई जाती है। उदाहरण के लिए, मैं आपको एक रहस्य बताऊंगा, पहले दृश्य में बड़ी संख्या में समान ग्राफिक ऑब्जेक्ट तैयार किए गए हैं। और ऐसी प्रत्येक वस्तु के लिए, उसके स्थान और विकास प्रतिशत के बारे में जानकारी नेटवर्क पर प्रसारित की जाती है - यह सब ऐसे प्रत्येक तत्व के लिए अलग से ध्वनि करने के लिए उपयोग किया जाता है और इसे ध्वनि के स्थानिक चित्र में संबंधित बिंदु पर निर्देशित करता है। ध्वनि कलाकार की स्थिति को भी प्रभावित करता है, जो पहले से ही ग्राफिक्स को प्रभावित करता है।

कब और कहां

यह घटना 19:30 से शुरू होती है और इसमें तीन भाग होते हैं: 1) नाटक पर काम करने के बारे में एक फिल्म दिखाना, 2) नाटक स्वयं और 3) खुली चर्चा, जहां आप लेखकों से कोई भी प्रश्न पूछ सकते हैं।

इसके अलावा, नए चरण की लॉबी में 18:00 बजे प्रत्येक कार्यक्रम से पहले तकनीकी कला के विषय पर एक नया व्याख्यान होगा। मुफ्त में व्याख्यान की तरह।

अगला शो 3, 4 और 5 अप्रैल को सेंट पीटर्सबर्ग, नाब के पते पर आयोजित किया जाएगा। पी। फॉन्टंका, 49 ए।

यह पहले से ही ज्ञात है कि 3 नवंबर को लव बुगाएवा " न्यूरोकोइनो और न्यूरो-लिटरेचर " का व्याख्यान होगा। आप दिए गए लिंक का उपयोग करके घटना के लिए पंजीकरण कर सकते हैं।

मैं इस तथ्य पर आपका ध्यान आकर्षित करता हूं कि प्रदर्शन में तेज ध्वनि और स्ट्रोबोस्कोपिक प्रभाव होता है, इसलिए यह अनुशंसा नहीं की जाती है कि एपिलेप्टिक्स घटना में शामिल हों।

सामाजिक में प्रदर्शन समूह। नेटवर्क: वीके , फेसबुक ।

प्रक्रिया फोटो

हैबर के लिए, मैं इस प्रक्रिया की कई तस्वीरें पोस्ट करता हूं।

बाईं ओर मेरे मित्र, कंप्यूटर नेटवर्क के विशेषज्ञ, आर्टनेट इनपुट का उपयोग करके प्रोग्राम को प्रकाश जुड़नार को नियंत्रित करने के लिए एक नेटवर्क सेट करते हैं:











मेरे और लेसा ओलेनिकोव के नीचे। हम बैठते हैं, अपनी चप्पल उतारते हैं, और अपने पैरों को बैटरी पर गर्म करते हैं: