एक पोकर बॉट की कहानी

अब एक पोकर बॉट लिखने की संभावना अब संदेह में नहीं है (हैकर पत्रिका में लेखों की एक श्रृंखला भी है), लेकिन 2008 में सब कुछ इतना स्पष्ट नहीं था और यह पाया जा सकता है कि अंग्रेजी में एक एकल लेख था जिसमें केवल सामान्य विचारों का वर्णन किया गया था, जो कभी हमारे प्रोजेक्ट के आदी नहीं हुए। लेकिन अब भी, कुछ सफल कहानियों को साझा करेंगे।
इस लेख में, मैं एक बॉट विकसित करने में हमारे अनुभव का वर्णन करूंगा जो वास्तव में वास्तविक पोकर कमरे में परीक्षण किया गया था और यहां तक ​​कि खेलना और हारना नहीं सीखा था। जो लोग अपना बॉट लिखने जा रहे हैं, उन्हें लेख में अपने जीवन को आसान बनाने के लिए दिलचस्प चीजें और तरीके मिलेंगे। कौन परवाह करता है - बिल्ली में आपका स्वागत है।

यह सब कैसे शुरू हुआ

एक बॉट लिखने का विचार मेरे दोस्त ने दौरा किया था, जिसने इसे मेरे और मेरे डॉर्म पड़ोसी के साथ साझा किया था, और वास्तव में दोस्त खुद भी डॉर्म के साथ था।
भूमिकाओं को इस प्रकार विभाजित किया गया था:
• तर्क डेवलपर (विचार के लेखक)
• पार्सर डेवलपर (पड़ोसी)
• आंख और हाथ डेवलपर
लिमिट बॉटम के लिए एक बॉट लिखना तय किया गया था (उस समय के विचार लेखक इस विशेष प्रकार के खेल को खेलने के लिए कुछ पैसा कमा रहे थे)
ऐसी रचना में और इस तरह की भूमिकाओं के साथ, हम लड़ाई में चले गए। नतीजतन, हमें 3-4 महीनों में उनके बीच टूटने के साथ विकास के 3 पुनरावृत्तियां मिलीं, जिन्हें मैं विस्तार से अधिक भूल के बिना याद करने की कोशिश करूंगा।

Iteration 1

क्या समय था तीन हरे छात्र सोचने लगे। हमें उपकरण की आवश्यकता थी, शुरू में यह पसंद थी:
• सी ++ - खेल का तर्क
• VB.Net - सब कुछ
लेकिन विकास के कुछ घंटों के बाद, हमने तय किया कि हमें C # सीखने की जरूरत है और इसे BASIC के बजाय इसका उपयोग करना शुरू किया।
दुर्भाग्य से, मैं उन दिमाग के बारे में कुछ नहीं बता सकता जो C ++ DLL में थे, और कोई भी (सिर्फ किसी को याद नहीं) कर सकता है, मुझे केवल यह याद है कि एक पूर्ण नरक था जिसमें लेखक भी भ्रमित हो गया था और कभी-कभी सोचता था कि कुछ गलती से काम करता है / काम नहीं करता है।
परीक्षण के लिए हमने जो पोकर कमरा चुना, उसमें एक उत्कृष्ट चैट थी, जिसमें से यह विश्लेषण करने के लिए जानकारी लेने का निर्णय लिया गया था कि क्या हो रहा है। यह विश्लेषण मेरे पड़ोसी ने लिया था।
मुझे यह सीखने की ज़रूरत थी कि उसे समय पर कैसे चैट करना है, यह तब समझ में आया जब यह समय पर आता है।
इसलिए, पहले मुद्दों पर ध्यान दिया जाना चाहिए:
• सभी विंडो के बीच आवश्यक सिस्टम कैसे खोजें?
• कैसे समझें कि यह चलने का समय है?
• कैसे चलना है?
• चैट कैसे प्राप्त करें?
नीचे समस्याओं को हल करने के बारे में अधिक (एक भावना है कि यह उस क्रम में था कि मैंने उन्हें तब हल किया था)।

कैसे समझें कि यह चलने का समय है?

मैंने तब WinApi के बारे में कुछ सुना, लेकिन यह किस तरह का जानवर है और इसे कैसे प्रशिक्षित किया जाए - मुझे पता नहीं था। बहुत जल्द मैंने सीखा कि रहस्यमय संभाल से आप खिड़की के बारे में बहुत कुछ सीख सकते हैं और बहुत सारी चीजें कर सकते हैं, मैंने यह भी सीखा कि खिड़की की अच्छी तरह से निगरानी की जा सकती है। स्पाई ++ के साथ सशस्त्र, मैंने खिड़की पर एक क्रॉस को लक्ष्य करके हैंडल की सरल मान्यता को फिर भी दुनिया में डुबो दिया))
स्मोकिंग मैनुल मुझे बताएं कि आप डेस्कटॉप पर एक डॉट का रंग पूछ सकते हैं और आप उस सिस्टम को बता सकते हैं जिसे माउस ने क्लिक किया था।
समस्या का हल स्पष्ट हो गया:
1. हम उस रंग के बिंदुओं की तलाश कर रहे हैं, जिसमें आप यह पता लगा सकते हैं कि बटन क्या दिखाई दिया (यानी चलने का समय)
2. खिड़की के निर्देशांक प्राप्त करें,
3. निर्धारित करने के लिए बिंदु के निर्देशांक के साथ जोड़ें
4. खिड़की को लगातार सक्रिय करें और बिंदु के रंग की जांच करें
5. यदि रंग आवश्यक हो गया है - यह चलने का समय है

चैट कैसे प्राप्त करें?

पहले से ही स्पाई ++ का उपयोग करने का तरीका जानने के बाद, इसे संभालना आसान था। फिर से स्मोक्ड होने के बाद, मैं समझ गया कि विंडो में Ctrl + A, Ctrl + C कैसे भेजा जाए। अगला, C # का उपयोग करते हुए, मुझे बफर की सामग्री प्राप्त हुई। चैट है।

कैसे चलना है

यह निर्धारित करने के लिए कि यह समझने का तरीका है कि चलने का समय था, यह स्पष्ट हो गया कि कैसे चलना है। हम बटन के निर्देशांक की गणना करते हैं, बिंदु पर कर्सर डालते हैं, सिस्टम को बाईं माउस बटन भेजें। वे जैसे थे।

सभी विंडो के बीच आपको जिन प्रणालियों की आवश्यकता है उन्हें कैसे ढूंढें?

यह कार्य सबसे मुश्किल निकला - मैं इसे लंबे समय तक हल नहीं कर सका जब तक कि मैं अपने शिक्षक (धन्यवाद चेरनोसिटोव ए.वी.) को C # / C ++ में बदल नहीं गया और उसने EnumWindowsProc फ़ंक्शन या उसके बाद कुछ भी याद किया। स्पाई ++ का उपयोग करते हुए, मैंने विंडो विशेषताओं की तलाश की, लेकिन अंत में शीर्षक एक ऐसी सुविधा बन गई, जिसे, विंडो हैंडल से भी प्राप्त किया जा सकता है, जिसके बाद EnumChildWindowsProc (सभी चाइल्ड विंडो की गणना) का उपयोग करके एक चैट हुई।

Iteration परिणाम 1

पहली पुनरावृत्ति के बाद, हमें एक बॉट मिला, जिसने लिमिट होल्डम खेला, पता था कि कैसे चलना है, कैसे चलना है। उसके पास कुछ तर्क थे। वह केवल अकेले ही खेल सकता था और पूरी तरह से कंप्यूटर को अवरुद्ध कर सकता था (प्रत्येक क्रिया से पहले खिड़की पर लगातार स्विच करने के कारण) जिस पर उसका परीक्षण किया गया था।

Iteration 2

कुछ महीने बाद, हमने फिर से लिखने का फैसला किया, इस प्रक्रिया को तेज करने के लिए, हमने कंप्यूटरों को एक कमरे में लाने और वहाँ एक साथ काम करने का फैसला किया।
इस पुनरावृत्ति के दौरान, इसे अंजाम दिया गया:
• एक भाषा में जाना - हम पूरी तरह से C # में चले गए।
• एलीम टूर्नामेंट के लिए संक्रमण
• कई तालिकाओं को खराब कर दिया
• यह निर्धारित करने के लिए कि क्या चलने का समय है, सिस्टम हुक का उपयोग करने की कोशिश की
• बेहतर चैट रिसेप्शन
• बेहतर चालन तंत्र

आलिम टूर्नामेंट में बदलाव

तर्क को C # में फिर से लिखा गया था और शुरुआती टेबल का उपयोग Pokerstrategy.com से टूर्नामेंट खेलने के लिए किया गया था, जिससे हमें यथोचित स्वच्छ और समझने योग्य तर्क बनाने की अनुमति मिली। एक तर्क विन्यासकर्ता बनाने का भी प्रयास किया गया था (हम बॉट को किनारे पर बेचना चाहते थे ताकि हर कोई अपना तर्क लिखे), लेकिन हमने फैसला किया कि यह एक यूटोपिया था और विचार विकसित करना बंद कर दिया।

कई टेबल खराब हो गई

नए पारदर्शी तर्क के साथ, उन्होंने कई तालिकाओं पर खेलने की क्षमता को जोड़ा। इस तरह के अवसर का एहसास टेढ़ा था - बदले में, प्रत्येक तालिका अग्रभूमि में है, स्थानांतरित करने की आवश्यकता के लिए रंग की जांच - अगर चलने का समय है, तो हम चलते हैं। हालांकि, इस तरह की योजना ने काम किया, और यह एक जीत थी। लेकिन अब बॉट ने कंप्यूटर को पूरी तरह से और कसकर ब्लॉक कर दिया।

यह निर्धारित करने के लिए कि क्या चलने का समय है, सिस्टम हुक का उपयोग करने की कोशिश की

इस समय तक, मैं विंडोज सिस्टम हुक में खुदाई शुरू करने के लिए पहले से ही काफी मजबूत था। चूंकि आप विंडो पर आने वाले संदेश के लिए C # से सिस्टम हुक लटका नहीं सकते हैं, CodeProject (http://www.codeproject.com/KB/system/WilsonSystemGlobalHooks.aspx) के साथ एक परियोजना का उपयोग किया गया था, जिसमें एक DLL और C # तर्क शामिल हैं जो इस DLL को चलाता है और उससे जानकारी प्राप्त कर रहा है। हुक ने पाठ्यक्रम को निर्धारित करने के लिए खिड़कियों के बीच बहुत अधिक स्विचिंग नहीं करना संभव बना दिया, लेकिन संदेशों के सटीक क्रम को पकड़ने के लिए, जिसके बाद इसके बाद जाना आवश्यक था, इसके अलावा हुक ने सिस्टम को धीमा कर दिया और परिणामस्वरूप हुक से इनकार कर दिया।

बेहतर चैट रिसेप्शन

अगली रातों की नींद हराम होने के दौरान, मैंने स्पाई ++ में जो कमांड्स चैट में आए, उन्हें देखा, और देखा कि कुछ कमांड्स सब कुछ के चयन और कॉपी करने के अनुरूप हैं। इन आदेशों के लिए कोड दर्ज किया गया था, नए आदेशों का उपयोग करने के लिए चैट की प्रतिलिपि फिर से लिखी गई थी, जिसके बाद WinApi आदेशों का उपयोग करके प्रतिलिपि को पूरी तरह से प्रदर्शन किया गया था।

बेहतर चाल तंत्र

यह पता चला कि आप खिड़की पर एक संदेश भेज सकते हैं, कि उन्होंने माउस से उस पर क्लिक किया - इससे हमें क्लिक विंडो पर सीधे संदेश भेजने के लिए प्रचलन को फिर से लिखने की अनुमति मिली। अब कर्सर स्क्रीन के चारों ओर नहीं घूम सकता। कंप्यूटर धीरे-धीरे बॉट से होस्ट =) पर लौट आया।

Iteration 2 परिणाम

इस पुनरावृत्ति के बाद, हमें टूर्नामेंट होल्डम में कई तालिकाओं पर एक पारदर्शी टूर्नामेंट तर्क खेलने वाला बॉट मिला (वैसे, PokerStrategy.com पर दी गई तालिका खो रही है यदि आप इसका पूरी तरह से पालन करते हैं और अब और नहीं सोचते हैं)। बॉट पहले से ही मेजबान कंप्यूटर के लिए काम करने के लिए एक छोटा सा मौका छोड़ सकता है।

Iteration 3

हम में से दो तीसरे पुनरावृत्ति पर पहुंच गए, मेरा पड़ोसी परियोजना से बाहर हो गया और कोड का उसका हिस्सा खरोंच से फिर से लिखा गया (किसी और के कोड को बनाए रखना मुश्किल था, खासकर जब से इसे महत्वपूर्ण रूप से विकसित करना आवश्यक था)। तीसरे पुनरावृत्ति के दौरान, हमने हासिल किया:
• पाठ्यक्रम के समय का निर्धारण करने के लिए एक नए तंत्र का उपयोग करना
• नए चैट इंजन का उपयोग करना
• नए तर्क का उपयोग करना

समय के निर्धारण के लिए एक नए तंत्र का उपयोग करना

मुझे अभी भी आश्चर्य है कि मैंने पहले यह अनुमान क्यों नहीं लगाया कि बिंदु रंग न केवल डेस्कटॉप पर, बल्कि विशेष रूप से विंडो में भी निर्धारित किया जा सकता है। इसे महसूस करते हुए, मैंने पाठ्यक्रम की परिभाषाओं को नए तरीके से लिखा। अब यह समझने के लिए खिड़कियों को लगातार आगे बढ़ाने के लिए आवश्यक नहीं था कि यह चलने का समय था। इस तरह का एक तंत्र महत्वपूर्ण रूप से काम करता है और केवल एक ही मामले में दुर्घटनाग्रस्त हो जाता है - जब गेम टेबल को ट्रे में न्यूनतम करना।

नए चैट इंजन का उपयोग करना

पोकर रूम चैट में InetnetExplolerClass क्लास या ऐसा कुछ था। इस पुनरावृत्ति के लिए, मुझे ऐसी वस्तुओं और VB.Net कोड से पाठ निकालने का एक तरीका मिला जो काम करता था। कोड को C # में फिर से लिखा गया था और अब चैट की रसीद बफर में किसी भी कॉपी के बिना थी और अधिक स्थिर थी।

नए तर्क का उपयोग करना

यह स्पष्ट हो गया कि टूर्नामेंटों के लिए हमें आईसीएम मॉडल की भूमध्य रेखा और गणना की आवश्यकता है, और हमने इसे प्राप्त करने का प्रयास करना शुरू कर दिया। मेरे साथी द्वारा लिखी गई भूमध्य रेखा प्रति सेकंड 5000 खेलों की गणना कर सकती है, जबकि PokerStrategy.com के भूमध्य रेखा समान कॉन्फ़िगरेशन पर 1500000 हो सकती है - यह एक विफलता थी और आपको इसके बारे में कुछ करना था।
एक बार, रात को बैठे, मैं PokerStrategy.com सॉफ्टवेयर फाइल फोल्डर (इक्विलिएटर, ICM ट्रेनर) में गया और पाया कि वे .Net में लिखे गए हैं। इससे मुझे अविश्वसनीय रूप से खुशी हुई और अगले 2 दिन मैंने इस सॉफ़्टवेयर को अपने डिबग के तहत चलाने के लिए बिताए, लेकिन अंत में हम पूरी तरह से देख सकते थे कि इस कंपनी के पुस्तकालयों का उपयोग कैसे किया जाए और सफलतापूर्वक इनका उपयोग कैसे किया जाए।
नतीजतन, इस कदम से पहले हमारे बॉट ने जीतने के अवसरों पर विचार किया, और टूर्नामेंट के चरम चरण में शुद्ध आईसीएम का इस्तेमाल किया, जिसने इसे कुछ फायदे दिए।

Iteration 3 परिणाम

नतीजतन, हमें बहुत सारे गणित का उपयोग करके कई तालिकाओं पर टूर्नामेंट में सूक्ष्म सीमा पर शून्य या बहुत आसान प्लस खेला गया (20 वह आसानी से खेला गया)।

परिणाम

अगले चरण में खिलाड़ियों पर बॉट के आँकड़ों पर शिकंजा कसा जाएगा, जिससे खेल में सुधार होगा।
दुर्भाग्य से, इस समय विकास है और लंबे समय से खड़ा है। हमने बहुत से छोटे जाम छोड़े हैं जो कई घंटों में एक बार हो सकते हैं और ऐसी चीजों को डीबग करना बहुत मुश्किल है।

यदि आपको अपना बॉट लिखने की इच्छा है - मुझे उम्मीद है कि जो समाधान हमने पाया है वह आपको इसे तेजी से लिखने की अनुमति देता है।