👄 👩🏾‍🤝‍👨🏼 🥈 वीके समूहों की गतिविधि की निगरानी करना। हम वीकेस्क्रिप्ट पर डेटा प्रोसेस करते हैं 🕣 🧑🏿‍🤝‍🧑🏾 👩🏻‍🏭

एक प्रसिद्ध सोशल नेटवर्क द्वारा उपयोगकर्ता गतिविधि की निगरानी का कार्य। मेरा कार्य उन उपयोगकर्ताओं की संख्या पर डेटा एकत्र करना था जो किसी विशेष समूह या समुदाय में ऑनलाइन हैं।

उपकरण

चूंकि मैं खुद वेब डेवलपमेंट में लगा हूं, इसलिए जो उपकरण मैंने इस्तेमाल किए हैं

PHP 5 (Zend फ्रेमवर्क)
Vk एपीआई
क्रॉन

मैं अपनी पसंद की व्याख्या करूंगा - Vk API - तथ्य यह है कि आप बिना API के उपयोगकर्ताओं की संख्या ऑनलाइन प्राप्त कर सकते हैं, और एक सामुदायिक फ़िल्टर और ऑनलाइन टैग के साथ उपयोगकर्ता खोज पृष्ठ को चिह्नित करके, हालांकि, मैंने प्राधिकरण और पार्सिंग टैग से परेशान नहीं होना चाहा, लेकिन प्रोग्राम इंटरफ़ेस का उपयोग करना पसंद किया।

आर्किटेक्चर

कार्यान्वयन को सशर्त रूप से 2 भागों में विभाजित किया जा सकता है। पहली एक स्क्रिप्ट है जो समूह आईडी पर ऑनलाइन उपयोगकर्ताओं की संख्या का पता लगाती है और इसे डेटाबेस में लिखती है। दूसरा व्यवस्थापक पैनल है, जो आपको पहले से जोड़े गए समूहों पर निगरानी के लिए नए समूह जोड़ने और आंकड़े देखने की अनुमति देता है।
आँकड़ों के प्रासंगिक होने के लिए, वर्तमान समय में समूह की स्थिति की यथासंभव निगरानी करना आवश्यक है। स्क्रिप्ट क्रोन में लटकाए जाने लायक है, इसे हर 5 मिनट में हमारे साथ बुलाया जाए।

वीके एपीआई अवलोकन

यदि व्यवस्थापक पैनल के साथ सब कुछ अधिक या कम स्पष्ट है, तो आंकड़े एकत्र करने के लिए स्क्रिप्ट के साथ यह पूरी तरह से स्पष्ट नहीं है। एपीआई द्वारा प्रदान किए गए तरीकों से परिचित होने के बाद, मैं पहले समाधान पर आता हूं।

पहला समाधान (गलत)

Group.getMembers , users.get विधियों का उपयोग करके, हम समूह के सदस्यों और उनकी स्थिति की एक सूची प्राप्त करते हैं - ऑनलाइन या ऑफ़लाइन। अगला, हम गिनते हैं कि कितने उपयोगकर्ता ऑनलाइन हैं। सब कुछ सरल है। हालांकि, स्पष्ट सादगी कई समस्याओं का परिणाम है।
यदि आपके पास छोटे समूह हैं (1000 लोगों तक) तो सब कुछ ठीक होगा। अन्यथा, हम एपीआई सीमाओं में चलते हैं - एक समय में आप केवल 1000 उपयोगकर्ताओं के बारे में जानकारी प्राप्त कर सकते हैं। हमारे लिए यह सीमा क्या है - आप विधि को लूप में कह सकते हैं, लेकिन नहीं। API कॉल करना प्रति सेकंड 3 अनुरोधों से अधिक की अनुमति नहीं है।
हम आवश्यक प्रश्नों की अनुमानित संख्या की गणना करेंगे। हब्राह्रा समुदाय Vk को लें। इसके 40,000 से अधिक उपयोगकर्ता हैं, इसलिए, हमें समुदाय के सदस्यों और 40 अनुरोधों को प्राप्त करने के लिए ~ 40 अनुरोधों की आवश्यकता है - उनकी स्थिति।
हम एक नया समाधान खोजने के लिए तैयार हैं।

दूसरा समाधान (सही)

प्रलेखन में निष्पादन विधि खोजें

एक सार्वभौमिक विधि जो आपको अन्य तरीकों का एक क्रम चलाने की अनुमति देती है, मध्यवर्ती परिणामों को संग्रहीत और फ़िल्टर करना।

यह तथाकथित VKScript (जावास्क्रिप्ट के समान) में लिखे गए कोड के साथ एक इनपुट लाइन लेता है। एकमात्र समस्या यह है कि इस पद्धति और भाषा के लिए कोई भी दस्तावेजीकरण नहीं है। संभवतः एक समाधान मिल गया है, इसलिए आप विशेष रूप से वीके एपीआई और वीकेस्क्रिप्ट के अध्ययन में गहराई से जा सकते हैं।

एपीआई के साथ काम करें

डेवलपर्स द्वारा प्रस्तुत एपीआई वर्ग डाउनलोड करें। मैं इसे केवल अधिक स्वीकार्य रूप में लाया, ताकि यह Zend फ्रेमवर्क में प्रयुक्त कोडिंग शैली में फिट हो।

कक्षा आपी

<?php class Vkapi_Model_Api { private $_accessToken = null; private $_apiUrl = 'https://api.vk.com/method/'; public function __construct($accessToken) { $this->_accessToken = $accessToken; } public function api($method, $params = array()) { $params['access_token'] = $this->_accessToken; $query = $this->_apiUrl. $method . '?' . $this->_params($params); $responseStr = file_get_contents($query); if(!is_string($responseStr)){ return null; } $responseObj = json_decode($responseStr); return $responseObj; } private function _params($params) { $pice = array(); foreach($params as $k=>$v) { $pice[] = $k.'='.urlencode($v); } return implode('&',$pice); } }

मैं प्रमाणीकरण और प्राधिकरण का वर्णन नहीं करूंगा, क्योंकि यह OAuth के माध्यम से किया जाता है, इंटरनेट पर बहुत सारी जानकारी और वीके एपीआई पृष्ठ पर।

आइए एपीआई के लिए एक परीक्षण कॉल करें - पहले 20 पदों को हब्बरब्र समूह में प्राप्त करें

  public function wallsAction() { //....... $api = new Vkapi_Model_Api($accessToken); $response = $api->api('wall.get',array('owner_id' => '-20629724')); $this->view->walls = $response->response; }

अब हम वही करेंगे, केवल निष्पादन विधि के माध्यम से

  public function wallsAction() { //....... $api = new Vkapi_Model_Api($accessToken); $code = " var walls = API.wall.get({ owner_id : -20629724 }); return walls; "; $response = $api->api('execute',array('code' => $code )); $this->view->walls = $response->response; }

परिणामस्वरूप, हमें वही परिणाम मिलता है।
एक बुरी बात यह है कि हमने VKScript और PHP कोड को मिलाया। यह बहुत बुरा लगता है। आइए रिफ्लेक्टिंग करते हैं।
यह अच्छा होगा यदि प्रत्येक स्क्रिप्ट को एक अलग फ़ाइल में संग्रहीत किया गया था और आप इसे एक फ़ंक्शन के साथ कह सकते हैं। यह भी प्रदान करना आवश्यक है कि बाद में हमें अभी भी इस स्क्रिप्ट में कुछ डेटा स्थानांतरित करने की आवश्यकता है (अब, उदाहरण के लिए, मालिक_ कोड में हार्ड-कोडित है)।

हम VKScript को अलग-अलग फाइलों में निकालते हैं

हमारे मॉड्यूल की जड़ में, "vkscripts" नामक एक फ़ोल्डर बनाएं, हम अपनी स्क्रिप्ट को इसमें जोड़ देंगे (उदाहरण के लिए, getWalls.vks)। हम application.ini config फाइल में स्क्रिप्ट के लिए रास्ता लिखेंगे

 vkapi.scripts.path = APPLICATION_PATH "/modules/vkapi/vkscripts"

हमें एक ऐसा वर्ग चाहिए जो इस निर्देशिका में स्थित लिपियों को लागू करने के लिए सुविधाजनक हो। हम PHP5 की क्षमताओं का उपयोग करेंगे, अर्थात् जादू __call विधि। कहा विधि के नाम से, हम उस नाम के साथ एक स्क्रिप्ट की तलाश करेंगे।

कक्षा स्रोत

 <?php class Vkapi_Model_Executor { private $_api; public function __construct($api) { $this->_api = $api; } public function __call( $methodName, $arguments ) { $script = $this->_getScript($methodName); if(count($arguments)){ $script = $this->_prepareParams($script, $arguments[0]); } $response = $this->_api->api('execute', array('code' => $script)); if( $error = $this->_getError($response) ){ throw new Exception($error->error_msg, $error->error_code); } return $response->response; } private function _getError($response) { if( isset($response->error) ){ $error = $response->error; return $error; } return null; } private function _getScript( $name ) { $scriptsPath = Zend_Registry::get('vkapi_config')->scripts->path; $filePath = $scriptsPath . '/' . $name . '.vks'; if(is_file($filePath)){ $script = file_get_contents($filePath); return $script; } return null; } }

तो चलिए इस वर्ग के साथ कुछ करते हैं।
Vkscripts फ़ोल्डर में, इस तरह की सामग्री के साथ getWalls.vks फ़ाइल डालें

 var walls = API.wall.get({ owner_id : -20629724 }); return walls;

नियंत्रक में:

  public function wallsAction() { //....... $api = new Vkapi_Model_Api($accessToken); $executor = new Vkapi_Model_Executor($api); $response = $executor->getWalls(); $this->view->walls = $response->response; }

हमें एक ही परिणाम मिला, लेकिन महत्वपूर्ण फायदे हैं: हमने कोड को अलग-अलग फ़ाइलों में विभाजित किया, इसे और अधिक पठनीय बनाया, और निष्पादित करने के लिए कॉल को सरल किया।
अगला कदम हमारी स्क्रिप्ट में मापदंडों को पारित करने की क्षमता को जोड़ना है। हम इसके लिए एक निश्चित प्रतिनिधित्व का उपयोग करेंगे। VKScript कोड में, पहले, यदि आवश्यक हो, तो हम इनपुट को कुछ इस प्रकार लिखेंगे:

 var groupId = %GROUP_ID%; var offset = %OFFSET%; // ....

और हमारी कक्षा में, इस कोड के साथ एपीआई कॉल करने से पहले, हम चर मान के साथ% VAR_NAME% को बदल देंगे।
आइए इस प्रकार से हमारे वर्ग के निष्पादनकर्ता को जोड़ें

संशोधित श्रेणी स्रोत

 <source lang="php"> <?php class Vkapi_Model_Executor { // ...... public function __call( $methodName, $arguments ) { $script = $this->_getScript($methodName); if(count($arguments)){ $script = $this->_prepareParams($script, $arguments[0]); } $response = $this->_api->api('execute', array('code' => $script)); if( $error = $this->_getError($response) ){ throw new Exception($error->error_msg, $error->error_code); } return $response->response; } // ...... private function _prepareParams($script, $params) { foreach ($params as $key => $value){ $script = str_replace('%' . strtoupper($key) . '%', $value, $script); } return $script; } }

नियंत्रक में, यदि पैरामीटर को प्रसारित करना आवश्यक है, तो हम निम्नलिखित लिखते हैं

  public function wallsAction() { //....... $api = new Vkapi_Model_Api($accessToken); $executor = new Vkapi_Model_Executor($api); $response = $executor->getWalls(array( 'group_id' => -20629724, 'offset' => 0 )); $this->view->walls = $response->response; }

जो, तदनुसार, हमारी स्क्रिप्ट में पास किए गए मानों को% GROUP_ID% और% OFFSET% में बदल देगा।
यह मॉड्यूल संरचना जैसा दिखता है

उपयोगकर्ताओं की संख्या ऑनलाइन प्राप्त करें

निष्पादन में एपीआई विधियों को कॉल करने पर प्रतिबंध है। 22 कॉल को सीमित करें (लगभग पाया गया)। वेब पर भी, मुझे जानकारी नहीं मिली कि अन्य ऑपरेटरों (उदाहरण के लिए, इसके अलावा, घटाव) पर प्रतिबंध हैं, लेकिन कुछ हैं। जब से मैं उपयोगकर्ताओं की एक सरणी के माध्यम से चला गया और ऑनलाइन की संख्या को गिना, मुझे अधिक संख्या में परिचालनों के बारे में एक त्रुटि मिली, उपयोगकर्ताओं की पूरी सूची को निष्पादित करने से वापस करने का निर्णय लिया गया, जिसके बाद उनकी संख्या की गणना करने के लिए पहले से ही सर्वर की ओर था।
निष्पादित विधि में एपीआई अनुरोधों की सीमित संख्या के कारण, हमें अभी भी समूह के 10,000 सदस्यों के लिए कम से कम 1 अनुरोध निष्पादित करना होगा, क्योंकि 1,000 को संसाधित करने के लिए 2 अनुरोधों की आवश्यकता होती है।
यहाँ स्क्रिप्ट है जो निकला

 var groupId = %GROUP_ID%; var offset = %OFFSET%; // API call limit var _acl = 22; var members = API.groups.getMembers({ gid : groupId }); _acl = _acl - 1; var count = members.count; var users = []; while( _acl > 1 && offset < count){ var _members = API.groups.getMembers({ gid : groupId, offset : offset }); _acl = _acl - 1; users = users + API.users.get({ uids : members.users, fields : "online" }); _acl = _acl - 1; offset = offset + 1000; } var result = { count : count, offset : offset, users : users@.online }; return result;

मैं अपने कोड पर थोड़ी टिप्पणी करूंगा। _Acl काउंटर - एपीआई के साथ संचालन की सीमा से अधिक होने के कारण त्रुटियों को रोकने के लिए। उपयोगकर्ता @ .online - केवल ऑनलाइन ऑफ़लाइन मूल्यों की सूची [0,1,1,0,0,0,1,0,1] लौटाते हैं।
नियंत्रक में, हम इस स्क्रिप्ट को कहते हैं, क्रमिक रूप से बढ़ती हुई ऑफसेट, जब तक हम समूह के सभी सदस्यों पर नहीं जाते।

  $count = 1; $offset = 0; $nowOnline = 0; while($count > $offset){ $users = $executor->getOnline(array( 'group_id' => $groupId, 'offset' => $offset )); $count = $users->count; $offset = $users->offset; foreach ( $users->users as $online){ if($online){ $nowOnline++; } } }

तो, हम विरोध करेंगे और देखेंगे - एपीआई के माध्यम से प्राप्त डेटा लगभग vk.com के डेटा के साथ मेल खाता है, शायद यह अशुद्धि कैश के कारण है, या किसी अन्य कारण से जो बाहर से दिखाई नहीं देता है।

टिप्पणी

VKScript फ़ंक्शंस, इंक्रीमेंट, डिक्रीमेंट ऑपरेटरों का समर्थन नहीं करता है।

परिणाम

हमने निष्पादन विधि के माध्यम से vk.com एपीआई के साथ काम करने के लिए उपकरण विकसित किए। इसका उपयोग करके, आप सांख्यिकी संग्रह एप्लिकेशन विकसित कर सकते हैं, आदि। और यह बहुत अच्छा लगेगा। यह सब करने के लिए इंटरफ़ेस को पेंच करना पहले से ही एक तुच्छ कार्य है। अंत में, मैं ध्यान देता हूं कि एक अन्य सामाजिक नेटवर्क फेसबुक एफक्यूएल (फेसबुक क्वेरी भाषा, एसक्यूएल के समान) नामक भाषा में लिखे गए कोड के निष्पादन तक पहुंच प्रदान करता है, जिसमें इसकी सभी सीमाओं के साथ वीकेस्क्रिप्ट की तुलना में स्पष्ट रूप से अधिक विशेषताएं हैं।

संदर्भ

वीके एपीआई
निष्पादित विधि, एक संक्षिप्त विवरण और वीकेस्क्रिप्ट का उदाहरण
फेसबुक क्वेरी भाषा

वीके समूहों की गतिविधि की निगरानी करना। हम वीकेस्क्रिप्ट पर डेटा प्रोसेस करते हैं