कोडेडयूआई या रानोरेक्स? .NET अनुप्रयोगों के कार्यात्मक परीक्षण का स्वचालन

लेख की लेखिका तात्याना कर्नोसोवा है, लेकिन वह किर्गिस्तान के पहाड़ों पर विजय प्राप्त करने के लिए गई थी। इसलिए, इस पोस्ट को प्रकाशित करने का सम्मान मेरे लिए गिर गया।

प्रसिद्ध डेस्कटॉप , मोबाइल और ऑनलाइन अनुप्रयोगों के अलावा, 2GIS कंपनी कई आंतरिक एंटरप्राइज़ उत्पादों को विकसित करती है। ये उत्पाद उपयोगकर्ताओं की आंखों से छिपे हुए हैं, हालांकि, यह उनकी मदद से है कि कार्टोग्राफिक और संदर्भ डेटा के साथ पूरे 2 जीआईएस बुनियादी ढांचे को प्रदान करने के लिए भारी काम किया जा रहा है। इस डेटा का प्रसंस्करण श्रम-गहन है और त्रुटि-मुक्त गणना की आवश्यकता है, इसलिए, "उत्पादों को" काम पर रखने से पहले सभी उत्पादों का अच्छी तरह से परीक्षण किया जाता है।

इस लेख में मैं आपको बताऊंगा कि हमने उपकरण कैसे चुने, हमने उनकी तकनीकी क्षमताओं का विश्लेषण कैसे किया, ताकि वे हमारे बुनियादी ढांचे में फिट हो सकें, और जो कुछ भी हम पर रुके।



एक समय में, हमें उपयोग किए गए उत्पादों के उपयोगकर्ता इंटरफ़ेस के परीक्षण के लिए उपयुक्त पैकेज चुनने के कार्य का सामना करना पड़ा। सब कुछ जो स्वचालन के लिए खुद को उधार देता है, स्वचालित परीक्षणों द्वारा कवर किया जाता है, और जीयूआई कोई अपवाद नहीं है। इसके लिए, जैसा कि आप जानते हैं, उपयोगकर्ता कार्यों को अनुकरण करने के लिए उपकरण हैं।

यह देखते हुए कि परीक्षण के तहत उत्पादों को .NET में लागू किया गया है, और उनके परीक्षक C # प्रोग्रामिंग भाषा से परिचित हैं, यह परीक्षण का विकास C # में भी करने का निर्णय लिया गया। बाजार पर उपकरणों के एक बड़े सेट से, हम दो पर बसे। पहला कोडेडयूआई है, जो माइक्रोसॉफ्ट विजुअल स्टूडियो के साथ आता है, जिसका हम सक्रिय रूप से उपयोग कर रहे हैं। दूसरा Ranorex है, क्योंकि यह Visual Studio के साथ संगत है, इसमें परीक्षकों से एक सुविधाजनक इंटरफ़ेस और सकारात्मक प्रतिक्रिया है।

कोडेड यूआई Microsoft विज़ुअल स्टूडियो प्रीमियम / अल्टीमेट के साथ आने वाले समाधानों में से एक है, जो परीक्षण विकास के लिए पुस्तकालयों तक पहुंच प्रदान करता है।

Ranorex स्वचालन उपकरण एक पूर्ण विकास वातावरण है, साथ ही परीक्षण लिखने के लिए उपकरणों और पुस्तकालयों का एक सेट है।

अगला, हमें इनमें से किसी एक उत्पाद के पक्ष में चुनाव करना था।

तुलना के मापदंड

हमने मुख्य मानदंड तैयार किए जिनके द्वारा पैकेजों की तुलना की गई थी:

1. गतिशील रूप से उत्पन्न ग्राफिकल नियंत्रण (नियंत्रण) के लिए समर्थन
2. कस्टम खोज नियंत्रण प्रणाली
3. डेटा-चालित परीक्षणों के लिए सरल समर्थन (डेटा चालित परीक्षण)
4. अपने स्वयं के मॉड्यूल (चौखटे) विकसित करने और C # में परीक्षण विकसित करते समय उनका उपयोग करने की क्षमता
5. सतत एकीकरण सर्वर पर परीक्षण चलाने के लिए समर्थन (टीमसिटी)
6. परीक्षण चलाने के परिणामों पर सूचनात्मक रिपोर्ट का सृजन
7. परीक्षण प्रबंधन प्रणाली (टीएमएस) के परीक्षण मामलों के साथ परीक्षणों को एकीकृत करने की क्षमता
8. परीक्षकों द्वारा सीखना और उपयोग करना आसान है

टेस्ट लेआउट

क्षमताओं की तुलना करने के लिए, विंडोज प्रेजेंटेशन फाउंडेशन (WPF) पर आधारित GUI के साथ एक परीक्षण एप्लिकेशन विकसित किया गया था। इसमें GUI के सभी प्रमुख तत्व शामिल थे, जो भविष्य में वास्तविक उत्पादों के परीक्षण में भाग ले सकते हैं।

मानदंड द्वारा उत्पाद तुलना

1. गतिशील रूप से उत्पन्न नियंत्रण के लिए समर्थन

CodedUI
कोडेडयूआई यूआईएमपी वर्ग का एक ऑब्जेक्ट प्रदान करता है जो एप्लिकेशन के सभी यूआई तत्वों तक पहुंच को लागू करता है। आप गतिशील रूप से किसी भी इंटरफ़ेस तत्व को प्राप्त कर सकते हैं, उसका नाम जानते हुए, या नेस्टेड तत्वों की एक श्रृंखला से गुजरते हुए, उदाहरण के लिए:

"पहले टैब पर पहला टेक्स्ट बॉक्स"

this.UIViewmodeltitleWindow.UIItemTabList.Tabs[0].GetChildren()[1].GetChildren()[1] 

हालांकि, ऐसा रिकॉर्ड केवल टेस्ट कोड में सीधे बनाया जा सकता है।

Ranorex
Ranorex में, GUI ऑब्जेक्ट रिपोजिटरी UIMap का एक एनालॉग है। XPath भाषा का उपयोग तत्वों को एक्सेस करने के लिए किया जाता है, इसलिए आप बिल्ट-इन रिकॉर्डर का उपयोग करके संबंधित अनुरोध उत्पन्न करके एक तत्व का चयन कर सकते हैं।

"पहले टैब पर पहला टेक्स्ट बॉक्स"

 /form[1]/tabpagelist[1]/tabpage[1]/element[@classname='CardEditView']/text[4] 

CodedUI
Ranorex
इस मानदंड के अनुसार, Ranorex बेहतर लगता है, क्योंकि इसमें नियंत्रणों के साथ काम करने के लिए एक सरल (सीखने में आसान) प्रणाली है।

2. लचीला और अनुकूलन नियंत्रण खोज प्रणाली

CodedUI
CodedUI में, डिफ़ॉल्ट रूप से, XPath खोज नियंत्रणों के लिए प्रदान नहीं किया गया है, लेकिन आप एक विशेष पुस्तकालय कनेक्ट कर सकते हैं।

Ranorex
Ranorex XPath में, अभिव्यक्तियों को RanoreXPath कहा जाता है। यदि किसी तत्व का कोई विशिष्ट नाम नहीं है, तो आप इसे एक कार्रवाई में एक्सेस कर सकते हैं, इसके लिए एक्सपीथ एक्सप्रेशन जान सकते हैं (पिछले पैराग्राफ को देखें)।

CodedUI
Ranorex
डिफ़ॉल्ट रूप से XPath समर्थन के लिए Ranorex के पक्ष में एक अतिरिक्त बिंदु।

3. सरल डेटा संचालित परीक्षण समर्थन

डेटा ड्रिवेन टेस्टिंग एक परीक्षण स्वचालन दृष्टिकोण है जो परीक्षणों के स्रोत कोड से अलग एक रिपॉजिटरी में स्थित परीक्षण डेटा सेट के उपयोग पर आधारित है।

CodedUI
CodedUI परीक्षण विकसित करते समय, परीक्षण संरचना को व्यवस्थित करने और परीक्षण को चलाने के लिए, MSTest ढांचे का उपयोग किया जाता है, जिसमें डेटा ड्रिवन परीक्षण बनाने के लिए कार्यक्षमता होती है। कोई भी परीक्षण CSV, XML फ़ाइल या डेटाबेस चयन से डेटा सेट के लिए बाध्य हो सकता है।

Ranorex
रैनॉरेक्स में डेटा ड्रिवन टेस्ट विकसित करने की क्षमता भी है, लेकिन डेटा के लिए एक्सएमएल प्रारूप को छोड़कर। जाहिर तौर पर, Ranorex के डेवलपर्स को परीक्षक के लिए पर्याप्त मुश्किल लगा।

CodedUI
Ranorex
इस मानदंड के अनुसार, लाभ कोडेडयूआई की तरफ है, क्योंकि हमारे उत्पादों में एक्सएमएल प्रारूप बहुत सामान्य है, और कई मामलों में यह परीक्षक के साथ काम करने के लिए अधिक सुविधाजनक है।

4. परीक्षण चौखटे विकसित करने की क्षमता

परीक्षण स्वचालन में अनुभव से पता चलता है कि जितनी जल्दी या बाद में, किसी भी परीक्षण परियोजना में कुछ बुनियादी कार्यक्षमता आवंटित की जाती है, जिससे परीक्षण कोड को कम करना संभव हो जाता है। यह कार्यक्षमता तब एक छोटे परीक्षण ढांचे में बढ़ती है। इस स्तर पर, इस ढांचे के विभिन्न तरीकों से पहले से ही परीक्षणों का निर्माण किया जा सकता है।

भविष्य में, हम ऐसे उपकरण का उपयोग करने जा रहे हैं जिसे हमने ऐसे ढांचे के ढांचे के भीतर चुना है। उपयोगकर्ता इंटरफ़ेस नियंत्रण तक पहुँचने के लिए आवश्यक कोडेडयूआई या रानोरेक्स के साथ फ्रेमवर्क कार्य को अतिक्रमण करता है, और ऐसी विधियों का एक सेट प्रदान करता है जो उपयोगकर्ता कार्यों से जुड़े हो सकते हैं, उदाहरण के लिए, "एक कार्ड खोलें", "एक फ़ॉर्म भरें"। किसी भी यूआई परीक्षण में ऐसे तरीकों के लिए कॉल का एक सेट होता है और परीक्षण किए गए एप्लिकेशन के डेटा के सही प्रसंस्करण के लिए जांच करता है।

इस मानदंड का उद्देश्य यह समझना है कि यह कितना सुविधाजनक है, एक या किसी अन्य उपकरण को चुनकर, आप एक परीक्षण रूपरेखा विकसित कर सकते हैं।

CodedUI
जब उपयोग किया जाता है, CodedUI परीक्षण C # में Visual Studio में विकसित किए जाते हैं। डेवलपर्स को आकर्षित करने के लिए टेस्ट को पारंपरिक तरीके से अनन्तता तक विस्तारित, संशोधित, परिष्कृत किया जा सकता है।

Ranorex
Ranorex अपना खुद का IDE - Ranorex Studio प्रदान करता है, जो SharpDevelop पर आधारित है और इसलिए इसमें Visual Studio के संचालन का एक समान इंटरफ़ेस और सिद्धांत है। Ranorex में तत्वों का एक सुविधाजनक निरीक्षक और माउस क्लिक के साथ लगभग विशेष रूप से परीक्षण बनाने की क्षमता है। इसके अलावा, अतिरिक्त सॉफ्टवेयर मॉड्यूल विकसित करना संभव है, जो तब अधिक जटिल परीक्षण परिदृश्य बनाने के लिए उपयोग किया जाएगा।

हालांकि, यदि मॉड्यूल एक परीक्षक द्वारा विकसित नहीं किया गया है, लेकिन एक प्रोग्रामर या स्वचालन विशेषज्ञ (जैसा कि हमारे मामले में), तो उसके लिए विजुअल स्टूडियो का उपयोग करना अधिक सुविधाजनक है, क्योंकि इसमें एक अधिक अनुकूलित डिबगिंग सिस्टम, रीशर, आदि है।

CodedUI
Ranorex
ढांचे का विकास, सामान्य रूप से, परीक्षक का कार्य नहीं है, इसलिए उपकरण को विकास के लिए अधिक उपयुक्त होना चाहिए। सामान्य तौर पर, Ranorex स्टूडियो इस संबंध में कोडेडयूआई से नीच है।

5. CI सर्वर पर परीक्षण चलाने के लिए समर्थन

परीक्षण किए गए एप्लिकेशन कंटीन्यूअस इंटीग्रेशन सर्वर (बिल्ड सर्वर) पर तैनात किए जाते हैं, जिसमें टीमसिटी का चयन किया जाता है। टीम के समझौतों के अनुसार, सभी परीक्षण परीक्षण के तहत उत्पाद के भंडार के लिए प्रतिबद्ध हैं। यह हमें एक बिल्ड सर्वर पर एप्लिकेशन और टेस्ट कोड को अपडेट और संकलन करते समय, साझा कोड का उपयोग करने की अनुमति देता है। जीयूआई परीक्षणों के लिए, एक ही योजना बनी रहनी चाहिए।

CodedUI
टीमसिटी आपको MSTest, NUnit चौखटे का उपयोग करके विकसित परीक्षणों को आसानी से जोड़ने की अनुमति देती है।

Ranorex
Ranorex, बदले में, टेस्ट सूट को एक निष्पादन योग्य फ़ाइल में संकलित कर सकता है, जिसे बाद में एक अलग टीम वर्क निर्माण कार्य के रूप में लॉन्च किया जा सकता है।

CodedUI
Ranorex
इस मानदंड से, समान रूप से टूल का उपयोग करना सुविधाजनक है।

6. रन के परिणाम पर सूचनात्मक रिपोर्ट का सृजन

CodedUI
MSTest परिणाम को TRX प्रारूप में प्रिंट करता है। यह एक XML दस्तावेज़ है, लेकिन नग्न आंखों के साथ पढ़ना काफी कठिन है, और यह आवश्यक नहीं है, क्योंकि परीक्षण चलाने के बाद टीमसिटी सीएसवी प्रारूप में एक ही रिपोर्ट प्रदान करती है।

Ranorex
Ranorex IDE चित्र और स्पष्टीकरण के साथ उत्कृष्ट रिपोर्ट प्रदान करता है। हालांकि, इसके लिए, Ranorex Studio की ओर से ही परीक्षण चलाए जाने चाहिए। रन के बाद संकलित परीक्षण एक रनोरेक्स एक्सएमएल रिपोर्ट लौटाते हैं, जिसे बाद में xUnit में परिवर्तित किया जा सकता है।

CodedUI
Ranorex
दोनों मामले परीक्षण रिपोर्ट का अंतिम वांछित दृश्य नहीं देते हैं। हालांकि, हमने पहले से ही एक उपयोगिता लागू की है जो हमारे परीक्षण प्रबंधन प्रणाली (टीएमएस) में परीक्षण रन बना सकती है और पारित स्वचालित परीक्षणों के परिणामों को आयात कर सकती है। इसके अलावा, मूल रिपोर्ट प्रारूप या तो xUnit या CSV हो सकता है। टीएमएस में, रिपोर्ट स्पष्ट, मानव-पठनीय लगती है और फिलहाल परीक्षण की समग्र तस्वीर दिखाती है।

7. टीएमएस परीक्षण मामलों के साथ परीक्षणों को एकीकृत करने की क्षमता

परीक्षण प्रबंधन प्रणाली में परीक्षण के परिणाम आयात करने के अलावा, हम खुद भी परीक्षण मामलों का आयात करते हैं।

यह कैसे होता है:

परीक्षक, एक स्वचालित परीक्षण विकसित कर रहा है, विशेष विशेषताओं का उपयोग करके, परीक्षण वर्ग के कोड में सीधे चरण-दर-चरण विवरण लिखता है। इसके अलावा, विशेषताओं की सहायता से, इंगित करता है कि यह मामला किस सूट और सेक्शन का है। फिर, एक विशेष उपयोगिता का उपयोग करके, परीक्षण परियोजना के सभी मामलों को संबंधित टीएमएस परियोजना में आयात करता है। आयात मैन्युअल रूप से या TeamCity बिल्ड कार्य के भाग के रूप में किया जा सकता है। परीक्षण परियोजना के लिए उपयोगिता फ़ाइल इस उपयोगिता को खिलाया जाता है।

हम जीयूआई परीक्षण विकसित करते समय इस अवसर का उपयोग करना चाहेंगे। तो, आपको अपने पुस्तकालयों को जोड़ने और परीक्षणों को संपादित करने की क्षमता की आवश्यकता है।

CodedUI
विजुअल स्टूडियो में, आप कोडेडयूआई टेस्ट के कोड को देख और संपादित कर सकते हैं, भले ही यह अंतर्निहित रिकॉर्डर का उपयोग करके दर्ज किया गया हो। यह टीएमएस के साथ सिंक्रनाइज़ेशन के लिए आवश्यक विशेषताओं को सेट करना संभव बनाता है। डिफ़ॉल्ट रूप से, परीक्षण प्रोजेक्ट को DLL लाइब्रेरी में इकट्ठा किया जाता है, जिसे बाद में मामलों को आयात करने के लिए उपयोग किया जा सकता है।

Ranorex
Ranorex Studio में, एक परीक्षण परियोजना को एक exe फ़ाइल में इकट्ठा किया जाता है। यही है, हमारी उपयोगिता के वर्तमान कार्यान्वयन के साथ, परीक्षण मामलों के स्रोत के रूप में इसका उपयोग करना संभव नहीं है।

CodedUI
Ranorex
इस प्रकार, कोडेडयूआई का उपयोग करते हुए, हमारे एकीकरण प्रणाली को नए परीक्षणों से बांधना हमारे लिए आसान होगा।

8. परीक्षकों द्वारा सीखने और उपयोग करने में आसान

CodedUI
1. कुछ उदाहरणों को बनाने के बाद, हमारे परीक्षण एप्लिकेशन ने अंतर्निहित रिकॉर्डर के साथ गतिशील नियंत्रण की चेतना से जुड़े कार्यों को रिकॉर्ड करते समय तुरंत समस्याओं का खुलासा किया। जब परीक्षण फिर से शुरू किया गया, तो नियंत्रण का नाम बदल गया और परीक्षण विफल हो गया। इससे बचने और परीक्षणों को अधिक सार्वभौमिक बनाने के लिए, मुझे परीक्षण कोड को मैन्युअल रूप से संपादित करना पड़ा।
2. कोडेडयूआई का उपयोग करना केवल विजुअल स्टूडियो में संभव है। लेकिन गैर-प्रोग्रामर के लिए वीएस एक बहुत ही जटिल और बोझिल उपकरण है।

Ranorex
Ranorex को विशेष रूप से परीक्षक वातावरण के रूप में डिज़ाइन किया गया है। इसकी मदद से परीक्षा परिणाम बनाना, चलाना और देखना सुविधाजनक है। इसके अलावा, जब हमने एक परीक्षण अनुप्रयोग के लिए कई उदाहरण विकसित किए, तो गतिशील तत्वों को खोजने में कभी कोई समस्या नहीं हुई। Ranorex ने भी सफलतापूर्वक .NET WinForms अनुप्रयोगों के साथ काम किया, जिसके लिए CodedUI हम लॉन्च करने में असमर्थ थे।

CodedUI
Ranorex
Ranorex में तत्वों के साथ काम करने के लिए एक परीक्षक-अनुकूल इंटरफेस और सिस्टम है।

निष्कर्ष

निष्कर्ष के रूप में, मैं ऊपर वर्णित मानदंडों के अनुसार एक सारांश तालिका दूंगा:
अवसर लागू किया गया
अवसर लागू नहीं किया गया
अवसर लागू किया गया है और प्रयोग करने में आसान है

मापदंड	CodedUI	Ranorex
गतिशील रूप से उत्पन्न नियंत्रण के लिए समर्थन
कस्टम खोज नियंत्रण प्रणाली
सरल डेटा चालित परीक्षण सहायता
अपने स्वयं के मॉड्यूल विकसित करने की क्षमता
टीमसिटी में परीक्षण चलाने के लिए समर्थन
परीक्षण चलाने के परिणामों पर सूचनात्मक रिपोर्ट का सृजन
टीएमएस परीक्षण मामलों के साथ परीक्षणों को एकीकृत करने की क्षमता
परीक्षकों द्वारा सीखना और उपयोग करना आसान है

हमारे तुलना मानदंडों के अनुसार, Ranorex को उच्च दर्जा दिया गया था, मुख्यतः सुविधा के कारण।

विश्लेषण की प्रक्रिया में, हम छोटे परीक्षण लिपियों के विकास में परीक्षकों को शामिल करते हैं और लगता है कि Ranorex के साथ काम करना अधिक सुविधाजनक और सहज है।
यदि आप एक परीक्षक हैं और आपको स्क्रैच से एक विंडोज एप्लिकेशन का परीक्षण करने की आवश्यकता है और आप कोडेडयूआई या रानोरेक्स समर्थन के साथ विजुअल स्टूडियो का उपयोग करने के लिए लाइसेंस खरीदने के बीच चुनते हैं, तो रानोरेक्स चुनना अधिक तर्कसंगत होगा।

हमारी परियोजनाओं के लिए के रूप में।
परियोजना का परीक्षण शुरू करना, हम उत्पाद को सशर्त रूप से स्वतंत्र भागों में तोड़ते हैं जिसे अलग से परीक्षण किया जा सकता है। उदाहरण के लिए, एप्लिकेशन में एक इंटरफ़ेस है जो डेटाबेस डेटा को एपीआई के माध्यम से संसाधित करता है, एकीकरण सेवाएं अन्य उत्पादों के साथ डेटा को सिंक्रनाइज़ करती हैं, और डेटाबेस स्तर पर संग्रहीत प्रक्रियाएं एक शेड्यूल के अनुसार संसाधित होती हैं और कुछ क्षेत्रों के मूल्यों की गणना करती हैं। और इस तरह के प्रत्येक भाग के लिए, अपने स्वयं के परीक्षण सूट को एक अलग अनुप्रयोग (परीक्षण परियोजना = परीक्षण रूपरेखा उत्पाद परीक्षण की आवश्यकताओं के लिए अनुकूलित + कई परीक्षण सूट में संयुक्त रूप से) के रूप में विकसित किया जा रहा है। सभी परीक्षण परियोजनाएं परीक्षण के तहत संपूर्ण उत्पाद के लिए समाधान का हिस्सा हैं।
हमें इस संरचना में जीयूआई परीक्षण जोड़ने की आवश्यकता थी।

चूंकि Ranorex और CodedUI हमारे लिए महत्वपूर्ण मापदंडों के मामले में बहुत भिन्न नहीं थे, इसलिए हमने परीक्षण के विकास की संभावना के बारे में सोचा।

अंत में, विकल्प एक उपकरण के बीच था जिसमें परीक्षक उत्पाद और डेवलपर्स से अलग से जीयूआई परीक्षण लिखेंगे, और कोडेडयूआई का उपयोग करके त्वरित और सुविधाजनक परीक्षण विकास के लिए आवश्यक (फ्रेमवर्क, प्रलेखन) सब कुछ विकसित करने में बिताया गया समय।

चूंकि दूसरे मामले में ऐसी प्रणाली को अधिक सार्वभौमिक बनाया जा सकता है, इसलिए हमने कोडेडयूआई को चुना। हां, यह विकास के घंटों से अधिक है, लेकिन साथ ही साथ हमारे पास कंपनी के सभी एंटरप्राइज़ उत्पादों के जीयूआई के कार्यात्मक परीक्षण को स्वचालित करने के लिए कुछ सार्वभौमिक समाधान थे।