🛂 🤚🏿 🍞 Node.JS पर मेमकेच्ड के साथ काम करने के लिए पुस्तकालयों की तुलना 💖 🏇🏿 🔂

मैं Node.JS में मेमकेड के साथ काम करने के लिए विभिन्न पुस्तकालयों के प्रदर्शन का अध्ययन करने के लिए किए गए काम को साझा करना चाहता हूं। अध्ययन के लिए, 4 उम्मीदवारों का चयन किया गया था।

संक्षिप्त विवरण सीधे स्रोतों से लिए गए हैं और मूल में दिए गए हैं। यहाँ संस्करण और लिंक के साथ परिणामी सूची है।

mc v1.0.6 - Node.js ( mc ) के लिए मेकचे क्लाइंट
नोड-मेमचैच v0.3.0 - नोड के लिए एक शुद्ध-जावास्क्रिप्ट मेमकेच्ड लाइब्रेरी। ( नोड-मेमेचे )
नोड-मेम्च्च्ड v0.2.6 - पूरी तरह से Node.js ( नोड- मेम्केड) के लिए मेमक्लेक्टेड क्लाइंट
memjs v0.8.0 - MemJS एक शुद्ध Node.js ग्राहक पुस्तकालय है जिसमें मेमेकैस का उपयोग किया जाता है। ( मेमज )

अन्य पुस्तकालय हैं, लेकिन इन चार का चयन किया गया था। कारण सरल है: बाकी की तुलना में उनके बारे में नेटवर्क पर अधिक जानकारी और उल्लेख था।
उन्हें लगभग एक साल पहले चुना गया था, और हाथ अब केवल लेख तक पहुंचे। मुझे खुशी होगी अगर आप कुछ और योग्य प्रतिद्वंद्वियों को इंगित करेंगे। उन पर परीक्षण पोस्ट करना सुनिश्चित करें।

बैकस्टोरी से

मैंने Node.JS का अध्ययन करना शुरू किया, इसके साथ प्रयोग किया और वास्तव में लगभग एक साल पहले, अपेक्षाकृत हाल ही में इस पर लिखा। कार्य काफी दिलचस्प था और वास्तव में मंच के लिए कोई आवश्यकता नहीं थी। यह कहा जा सकता है, मैंने व्यक्तिगत रूप से Node.JS को चुना, PHP के रूप में सीखा "दूर और विस्तृत" के रूप में, और मुझे इसके बारे में कोई पछतावा नहीं है। दूसरे शब्दों में, मैं केवल इस तरह के चुनाव के लिए खुश हूं। अब दूसरा प्रोजेक्ट पहले ही लॉन्च किया जा चुका है और Node.JS अपने आप को सही ठहरा रहा है। सच कहूँ तो, जावास्क्रिप्ट भाषा के गहन अध्ययन से मुझे बहुत खुशी मिली। यह मेरे लिए तुरंत स्पष्ट हो गया कि यह बिल्कुल भी ऐसी भाषा नहीं थी जिसे मैं काफी समय से जानता था। और नोड्यूनिट का उपयोग करके यूनिट परीक्षण लिखने की कोशिश से मैं कितना आश्चर्यचकित था, क्योंकि सब कुछ एक ही PHP के विपरीत सुरुचिपूर्ण और संक्षिप्त है।

थोड़ा विषय से भटक गया। बेशक, ये निर्विवाद फायदे हैं, जो पहले से ही यहां के हेबे और अन्य संसाधनों पर वर्णित हैं। लेकिन यह PHP नहीं है, जिस पर हमने बहुत सारे आंतरिक पुस्तकालयों को लिखा है, और सभी अवसरों के लिए बहुत सारे अजनबी हैं। आखिरकार, 10 से अधिक वर्षों के लिए PHP में बदलती जटिलता की परियोजनाओं को लिखने का अनुभव। फिर, मुझे खरोंच से सब कुछ करना पड़ा। जैसा कि एक बार, जब सी ++ से मोती में पहले स्विच किया जाता है, और फिर मोती से पीएचपी तक। फिर मैंने एक बिल्कुल नया, अपरिचित उपकरण भी लिया और किसी तरह इसे अपने लिए अनुकूलित करने की कोशिश की।

यह सीखना आवश्यक था कि कई प्रणालियों के साथ कैसे काम किया जाए, चाहे वह मोंगडॉब या रैबिटएमक्यू के साथ काम कर रहा हो, या एक ही मैसकल के साथ भी। लगभग कुछ भी मानक नहीं है, जैसा कि PHP यहाँ नहीं था। पुस्तकालयों के द्रव्यमान से सबसे उपयुक्त एक को चुनना और मेरी वस्तुओं के साथ मेरी ज़रूरत की कार्यक्षमता को अवरुद्ध करना आवश्यक था। इसलिए, कदम दर कदम, मैंने विभिन्न उपकरणों और पुस्तकालयों की खोज की और कुछ बिंदु पर मुझे मेमकेश मिला।

तो चलिए शुरू करते हैं

प्रयोग की शुद्धता के लिए, मैं इन सभी पुस्तकालयों को एक एकल इंटरफ़ेस के साथ कवर करूंगा, ताकि परीक्षण स्क्रिप्ट में मैं केवल उस विकल्प को इंगित करूं जिसकी मुझे आवश्यकता है, और क्रियाएं सभी विषयों के लिए समान होंगी।

इंटरफ़ेस में 4 विधियाँ शामिल होंगी:

Init (cb) - वस्तु आरंभीकरण
सेट (की, वैल, सीबी) - मान सेट करना
प्राप्त करें (कुंजी, सीबी) - प्राप्त मूल्य
अंत () - सभी सक्रिय कनेक्शन बंद करें

एमसी लाइब्रेरी के लिए इंटरफ़ेस का एक उदाहरण कार्यान्वयन कुछ इस तरह दिखाई देगा:

impl.mc = function(){}; impl.mc.prototype = { Init : function(cb) { var self = this; var Mc = require('mc'); self.mmc = new Mc.Client('<ip>:11211', Mc.Adapter.binary); self.mmc.connect(function() { cb(self); }); }, Set : function(key, val, cb) { this.mmc.set(key, val, {flags: 0, exptime : 100}, cb); }, Get : function(key, cb) { this.mmc.get(key, cb); }, End : function() { this.mmc.disconnect(); } };

हम शेष 3 पुस्तकालयों के लिए एक ही कार्यान्वयन लिखते हैं और उन्हें impl.js. में डालते हैं। मैं तुरंत एक आरक्षण बनाऊंगा ताकि कोड को ढेर न किया जाए जो इतना छोटा नहीं है, मैंने उदाहरण के लिए त्रुटि हैंडलिंग को नहीं जोड़ा। ये सिर्फ परीक्षण हैं और निश्चित रूप से, यह वास्तविक लाइब्रेरी रैपर में ध्यान में रखा गया है।

परीक्षण कैसे होगा।

पहला कदम फॉर्म की कुंजियों के नाम के साथ 1000 यादृच्छिक पूर्णांक मान लिखना है:
__key_ [libName] _ [0 ... 999],
जहाँ libName अध्ययन के तहत पुस्तकालयों में से एक का नाम है (mc, memcached ...)
हम समय को मापते हैं और प्रति सेकंड रिकॉर्ड की संख्या की गणना करते हैं। लाइब्रेरी का नाम कुंजी में जोड़ा जाता है ताकि वे विभिन्न कार्यान्वयनों के बीच परीक्षण में ओवरलैप न करें।

दूसरा चरण - हमारे द्वारा रिकॉर्ड किए जाने के बाद, हम पढ़ना शुरू करते हैं। हम सीमा से यादृच्छिक कुंजी के साथ 100k बार पढ़ते हैं, फिर से, हम समय को नोट करते हैं और प्रति सेकंड रीडिंग की संख्या की गणना करते हैं।

और यहां कोड ही है, जो क्रमिक रूप से सभी विकल्पों को चलाएगा। मैंने कोड को अधिकतम करने की कोशिश की, ठीक है, यह कैसे हुआ।

  var cacheImpl = require('./impl'); //    //    className  ,        function _key(className, i) { return '__key_' + className + '_' + i; } //     className (memjs, memcached, memcache, mc) function testPerform(className, cb) { var impl = new cacheImpl[className](); impl.Init(function(pc) { var keysCount = 1000, // -  getNum = 100000, // -  all = 0, d1, d2; //     var startSet = function (cb) { all = keysCount; for (var i = 0;i < keysCount;i++) { (function(num){ setImmediate(function(){ // ~~(Math.random() * 100000) -       pc.Set(_key(className, num), ~~(Math.random() * 100000), function(err) { if (--all === 0) return cb(); }); }); })(i); }; }; //          var startGet = function (cb) { all = getNum; for (var j = 0;j < getNum;j++) { setImmediate(function(){ pc.Get(_key(className, ~~(Math.random() * 1000)), function(err, res) { if (--all === 0) { cb(); pc.End(); } }); }); }; } //     var start = function (cb) { d1 = Date.now(); startSet(function() { d2 = Date.now(); console.log(className + ' Set qps: ' + Math.round(keysCount / (d2 - d1) * 1000)); d1 = Date.now(); startGet(function() { d2 = Date.now(); console.log(className + ' Get qps: ' + Math.round(getNum / (d2 - d1) * 1000)); cb(); }); }); } start(cb); }); } //         testPerform('memcache', function(){ testPerform('memcached', function(){ testPerform('memjs', function(){ testPerform('mc', function(){}); }); }); });

मुझे जो मुख्य रूप से दिलचस्पी थी, वह रिकॉर्ड की संख्या के पूर्ण मूल्यों और प्रति सेकंड (हालांकि यह भी) नहीं था, अर्थात् सामान्य रूप से कौन सा पुस्तकालय तेज होगा।

एक कामकाजी क्लस्टर पर टेस्ट किए गए थे, लिखने / पढ़ने के लिए एक पड़ोसी सर्वर पर मेमकेड किया गया था। सर्वर वास्तविक ट्रैफ़िक से भरे हुए हैं, इसलिए आप वास्तव में पूर्ण मूल्यों पर ध्यान नहीं दे सकते हैं। सापेक्ष मूल्य महत्वपूर्ण हैं।

कुल, स्क्रिप्ट चलाने के बाद, हमें निम्न परिणाम मिलते हैं:

 memcache सेट qps: 8929
 memcache Get qps: 19444
 मेमसेटेड सेट qps: 6098
 memcached मिल qps: 8924
 memjs सेट qps: 8850
 memjs Get qps: 12857
 mc सेट qps: 14286
 mc get qps: 23207

तुरंत हम एक स्पष्ट नेता देखते हैं, और लिखने और पढ़ने के द्वारा, मैं नेता के प्रतिशत में हस्ताक्षर करूंगा।

Zapsi रेटिंग:

   1.mc 100.00%
   2. मेम्चेश 62.50%
   3. मेमज 61.95%
   4. ज्ञापन 42.69%

पढ़ना रेटिंग:

   1. एमसीबी%
   2. मेमेकैस 83.79%
   3. मेम्स 55.40%
   4. 38.45%

ये दिलचस्प परिणाम हैं। बेशक, पुस्तकालयों को उनकी कार्यक्षमता से अलग किया जाता है, उनके साथ काम करने की सुविधा, मेमर्स के क्लस्टर के साथ काम करने की क्षमता, एक कनेक्शन पूल, आदि। मैं जानबूझकर इन बिंदुओं को याद करता हूं और एक मेमेकैच सर्वर होने पर सबसे आम स्थिति लेता हूं। यदि यह एक के साथ तेजी से काम करता है, तो कई सर्वरों के साथ सापेक्ष परिणाम बहुत भिन्न नहीं होना चाहिए।

परीक्षण काफी संश्लिष्ट होते हैं, क्योंकि केवल पूर्णांक लिखे जाते हैं, पठन केवल मौजूदा कुंजियों पर किया जाता है (ऐसे मामले जिनमें कोई कुंजी नहीं है, उन पर ध्यान नहीं दिया जाता है), आदि। लेकिन, फिर भी, सभी पुस्तकालय एक समान स्तर पर हैं। फिर भी, मुझे आशा है कि परिणाम उपयोगी होंगे।

मुझे खुशी होगी कि अगर किसी ने पुस्तकालय की पसंद पर निर्णय लेने में मदद की, या कम से कम मुझे लगता है कि प्रदर्शन के मामले में सभी पुस्तकालय समान रूप से अच्छे नहीं हैं।

मैंने जो काम किया है उसकी रचनात्मक आलोचना सुनना चाहूंगा: संगति, प्रस्तुति शैली और वह सब जो लेख को बेहतर बनाने में मदद कर सकता है। हम एक साथ अध्ययन करेंगे।

यहाँ इस तरह मेरा "पदार्पण" एक हाब पर हुआ यह तय करना आपके लिए कितना सफल है।

Node.JS पर मेमकेच्ड के साथ काम करने के लिए पुस्तकालयों की तुलना

बैकस्टोरी से

तो चलिए शुरू करते हैं

More articles: