परीक्षणों का समानांतर या एक सिर अच्छा है, और दो सिर बेहतर हैं

कुछ बिंदुओं पर, यदि आप परीक्षण कवरेज को कम से कम 80% कोड रखने के लिए कड़ी मेहनत और प्रयास करते हैं, तो एक पूर्ण परीक्षण सूट चलाने में धूम्रपान से ब्रेक लेने और हैबर के नए लेख पढ़ने में अधिक समय लगेगा। बदले में, यह इस तथ्य की ओर जाता है कि पूरा सेट (सूट) कम और कम लॉन्च किया जाएगा। हडसन टूटी हुई बिल्ड की रिपोर्ट करना शुरू कर देगा, और फिर टूटी हुई खिड़की प्रभाव काम करेगी और एक टूटी हुई बिल्ड मानदंड बन जाएगी।

आप प्रत्येक कमिट से पहले एक पूर्ण रन चलाने का प्रयास कर सकते हैं। लेकिन स्क्रीन पर चलने वाली ककड़ी सुविधाओं के रूप में सिनेमा पर बिताया गया समय, साथ ही साथ धारा से बाहर निकलते समय , डेवलपर्स की दक्षता को कम कर देगा।

हमारी एक परियोजना में, जिसमें, रेडमाइन रिकॉर्ड के अनुसार, हमारी टीम के काम के लगभग 400 घंटे का निवेश किया गया था, समानांतरकरण से पहले परीक्षणों के साथ स्थिति इस तरह दिखती थी (कुछ दिन पहले):
151 scenarios (151 passed)
3997 steps (3997 passed)
17m49.257s


18 मिनट !!!

इस समय के दौरान, डेवलपर कॉफी बना सकता है, सिगरेट पी सकता है, शौचालय जा सकता है, गधे द्वारा एक सुंदर सहयोगी को चुटकी ले सकता है और स्क्रीन पर "मैट्रिक्स" के अंतिम 3 मिनट देखने का समय दे सकता है। यदि आपको प्रत्येक कमिट करने से पहले उसे पूरा चलाने की आवश्यकता है, तो वह केवल "मैट्रिक्स" को देखने के लिए करेगा और पुजारियों को कॉफी पीने के लिए चुटकी देगा ।

लेकिन रन के दौरान प्रोसेसर लोड के विश्लेषण से पता चलता है कि काम में केवल एक ही कोर शामिल है, चाहे कितने भी हों। जैसा कि कहा जाता है, एक दिन खोना बेहतर है, और फिर पांच मिनट में उड़ना। Google में देखने के बाद हमने पाया कि समानांतर_टैस्ट मणि है। अब हम एरलांग समूह में ऐसे ईर्ष्या के साथ नहीं दिखेंगे, जो सेलेल में किराए के क्लाउड मशीनों के क्लस्टर पर अपने परीक्षणों को सुरक्षित रूप से समानांतर कर सकते हैं।

अपने समकक्षों ( हाइड्रा , टेस्टजॉर ) की तुलना में समानांतर_टैस्ट मणि , इस तथ्य से प्रतिष्ठित है कि यह ककड़ी + कैपिबारा + सेलेनियम-वेबड्राइवर के लिए हमारे पसंदीदा एकीकरण परीक्षणों को समानांतर करना संभव बनाता है, जो एक वास्तविक ब्राउज़र के बिना प्रदर्शन नहीं किया जा सकता है, दूसरे शब्दों में लॉन्च किया गया। capybara फ़ायरफ़ॉक्स मणि के माध्यम से। इस मामले में, फ़ायरफ़ॉक्स की कई प्रतियां वास्तव में लॉन्च की जाती हैं, जिस पर लोड अधिक या कम समान रूप से वितरित किया जाता है। इसी समय, htop सभी कोर के पूर्ण भार को प्रदर्शित करता है, चाहे मशीन पर कितने भी हों। और, जो एक महत्वपूर्ण भूमिका निभाता है, इस मणि का उपयोग करने के लिए आवेदन को अपनाना बहुत सरल है।

सबसे पहले, कई परीक्षण ठिकानों के अस्तित्व को सुनिश्चित करना आवश्यक है, एक विशिष्ट मामले में प्रति कोर। रत्न स्टार्टअप पर पर्यावरण चर TEST_ENV_NUMBER सेट करता है, इसलिए आप इसे डेटाबेस में सेट कर सकते हैं। परीक्षण अनुभाग में
test:
database: xxx_test<%= ENV['TEST_ENV_NUMBER'] %>

स्वाभाविक रूप से, आधार को चलने से पहले या माध्यम से हाथ से बनाया जाना चाहिए
rake parallel:create


दूसरे, अतिरिक्त माइग्रेशन या फिर से पुराने के दौरान डेटाबेस योजनाओं के सिंक्रनाइज़ेशन को सुनिश्चित करना आवश्यक है:
rake parallel:prepare


तीसरा, एक रन को अलग तरीके से चलाएं।
rake parallel:features

यह ककड़ी सुविधाओं को चलाने के लिए है। आप rspec और साधारण रेल परीक्षण चला सकते हैं।

हां, मणि, निश्चित रूप से, मणिफाइल में पंजीकृत होना चाहिए और डाल दिया जाना चाहिए
bundle install


परिणामस्वरूप - ये आठ कोर Xelektelovsky Xeonceg पर अंतिम हडसन विधानसभा के परिणाम हैं
Results:
17 scenarios (17 passed)
347 steps (347 passed)
31 scenarios (31 passed)
780 steps (780 passed)
8 scenarios (8 passed)
149 steps (149 passed)
26 scenarios (26 passed)
1363 steps (1363 passed)
26 scenarios (26 passed)
463 steps (463 passed)
17 scenarios (17 passed)
331 steps (331 passed)
6 scenarios (6 passed)
88 steps (88 passed)
19 scenarios (19 passed)
410 steps (410 passed)

Took 338.989782947 seconds
Finished: SUCCESS


हां, हमने चरणों और परिदृश्यों की संख्या कम कर दी है, क्योंकि समानांतर उपयोग के अलावा, परीक्षण कोड में कुछ रिफैक्टिंग से गुजरना पड़ा है। लेकिन 150 151 के खिलाफ - बहुत कम नहीं। लेकिन समय में - 5 और एक आधा मिनट बनाम लगभग 18. यह रिपॉजिटरी, डेटाबेस माइग्रेशन और फ़ायरफ़ॉक्स लॉन्च से ताज़ा खींचने के लिए निरंतर लागत के लगभग 60-70 सेकंड का समय ले रहा है।

परिणाम स्पष्ट है, और इसके परिणामस्वरूप, केवल एक दिन में, हडसन में निर्माण स्थिर हो गया है - पिछले 5 कमिट ने सफलतापूर्वक परीक्षणों के पूर्ण सेट पर काम किया है, जो कि मैं सभी के लिए कामना करता हूं।

UPD: यदि step_definitions समानांतर मोड में नहीं पाए जाते हैं, तो समाधान एल्डर द्वारा पाया जाता है फिर आपको इस तरह परीक्षण चलाने की आवश्यकता है:
parallel:features[2,'','--require features']