पकड़ो पार्सिंग लाइब्रेरी डॉक्यूमेंटेशन

मैंने पहले ही ग्रैब के बारे में एक हब पर बात की थी - साइटों की पार्सिंग के लिए एक लाइब्रेरी और स्पाइडर के बारे में - पार्सिंग के लिए एक अतुल्यकालिक मॉड्यूल। खुशी है कि मैं अंत में हड़पने के दस्तावेज लिखना समाप्त कर दिया । मैंने रूसी में सब कुछ लिखने का फैसला किया क्योंकि अंग्रेजी में, मेरे लिए अपने विचारों को व्यक्त करना अधिक कठिन है। वास्तव में, स्क्रिबबल शुरुआत में जितना दिखता था, उससे कहीं अधिक निकला, लेकिन फिर भी मैंने लाइब्रेरी के लगभग सभी कार्यों का वर्णन किया। मैंने यहां केवल सम्मिलित करने का निर्णय लिया, सामग्री की तालिका, एक दिलचस्प अनुभाग पर क्लिक करें और ग्रैब की विशेषताओं के बारे में पढ़ें:

• पकड़ो का परिचय
• ग्रैब लाइब्रेरी स्थापित करें
  • पर निर्भर करता है
  • लिनक्स स्थापना
  • विंडोज इंस्टॉलेशन
• सेटिंग ले लो
  • सेटिंग्स बनाने के तरीके
  • क्लोनिंग
• डिबगिंग क्वेरी
  • लॉगिंग सिस्टम का उपयोग करना
  • अनुरोध नंबर
  • फ़ाइलों के अनुरोध और प्रतिक्रियाओं को सहेजना
• सेटिंग्स की पूरी सूची
  • सेटिंग्स
• HTTP शीर्ष लेख कॉन्फ़िगर करें
  • HTTP शीर्ष लेख बदलें
  • उपयोगकर्ता-एजेंट हैडर कॉन्फ़िगर करें
  • रेफर हेडर सेट करना
• HTTP रिक्वेस्ट मेथड्स
  • विधि चयन
  • पोस्ट अनुरोध
  • फाइलें भेज रहा है
• अन्य विशेषताएं
  • प्रतिक्रिया शरीर को सीमित करें
  • प्रतिक्रिया संपीड़न
  • HTTP प्राधिकरण
  • Pycurl डिस्क्रिप्टर के साथ काम करें
  • 301 और 302 पुनर्निर्देश
  • मेटा रिफ्रेश रीडायरेक्ट
• दस्तावेज़ एन्कोडिंग
  • आपको एन्कोडिंग जानने की आवश्यकता क्यों है
  • एन्कोडिंग डिटेक्शन एल्गोरिथम
  • एनकोडिंग सेटिंग विकल्प
• कुकी के साथ कार्य करना
  • कुकी सेटिंग्स
  • कुकीज़ के साथ काम करें
• नेटवर्क एरर हैंडलिंग, टाइमआउट
  • नेटवर्क त्रुटियों
  • समय समाप्ति
  • रिपीट रिक्वेस्ट मोड
• प्रॉक्सी के साथ काम करें
  • प्रॉक्सी सेटिंग्स
  • प्रॉक्सी सूचियों के साथ काम करें
• उत्तर कार्य
  • पुनरावर्ती वस्तु
• पकड़ो तकनीकी विवरण
  • पुस्तकालयों का इस्तेमाल किया
  • विस्तार संरचना
  • अजगर 3 सपोर्ट
• रूपों के साथ काम करें
  • स्वचालित रूप प्रसंस्करण
  • फार्म जमा करना
  • फाइलें भेज रहा है
• DOM ट्री के साथ काम करें
  • एलएक्सएमएल पुस्तकालय के लिए इंटरफ़ेस
  • डोम का पेड़
  • XPATH विधियाँ
  • सीएसएस तरीके
  • अपवाद हैंडलिंग
• दस्तावेज़ के पाठ में खोजें
  • स्ट्रिंग खोज
  • नियमित अभिव्यक्ति खोज
• अन्य एक्सटेंशन
  • Django एक्सटेंशन
  • PyQuery का विस्तार
  • सुंदरसुपर विस्तार
• नेटवर्क ट्रांसपोर्ट करता है
  • ट्रांसपोर्ट क्या है
  • Pycurl परिवहन
  • उरलीब परिवहन
  • परिवहन सेलेनियम
• उपयोगी उपयोगिताएँ
  • टास्क पूल
  • फ़ाइल लॉक
  • किसी फ़ाइल में लॉगिंग एक्टिविटी
  • किसी फ़ाइल में फ़िल्टरिंग लाइनें
  • HTML प्रसंस्करण
  • एलएक्सएमएल तत्वों के साथ काम करना
  • नियमित अभिव्यक्ति के साथ काम करना
  • पाठ के साथ काम करें

वैसे, मैंने ग्रैब का उपयोग करके स्क्रिप्ट के साथ सामग्री की तालिका के लिए HTML कोड तैयार किया है:

# coding: utf-8 from grab import Grab from lxml.html import tostring g = Grab() g.go('http://grablib.org/docs/') g.tree.make_links_absolute('http://grablib.org/docs') elem = g.xpath(u'//h3[text()=" "]/following-sibling::ul[1]') toc = tostring(elem, encoding='utf-8') print toc 

आधिकारिक हड़प पुस्तकालय वेबसाइट: Grablib.org
स्काइप / जैबर में मुझे हड़पने का उपयोग करने के बारे में प्रश्न लिखना बेहतर नहीं है, लेकिन ईमेल सूची में: group.google.com/group/python-grab
मैं आपको यह भी याद दिलाता हूं कि हम (GrabLab) पार्सिंग साइटों पर ऑर्डर करने के लिए लगे हुए हैं, अगर आपको डेटा एकत्र करने और संसाधित करने की आवश्यकता है, तो कृपया संपर्क करें।

अगला, मैं अतुल्यकालिक मकड़ी मॉड्यूल के प्रलेखन करने की योजना बना रहा हूं।