ओपन डेटा प्रकाशित करने के लिए अपना खुद का हब बनाना

खुली सरकार और खुले आंकड़ों का विषय गति पकड़ रहा है और दुनिया के कई देशों, उनकी सरकारों और संगठनों के बीच लोकप्रियता हासिल कर रहा है। इसके अलावा, खुले डेटा पर एक कानून हाल ही में रूस में अपनाया गया था, जो इस विषय में बढ़ती रुचि को इंगित करता है। यूक्रेन में भी, सरकार खुले आंकड़ों के प्रकाशन की ओर बढ़ रही है। दरअसल, चूंकि यह लोकप्रिय है, आप इस पर पैसा कमा सकते हैं या फैशन आंदोलन में भाग ले सकते हैं। इसके अलावा, प्रतियोगिताओं , त्योहारों और हैकथॉन को खुले डेटा प्रकाशित करने के लिए साइटों और अनुप्रयोगों को बनाने के लिए सालाना आयोजित किया जाता है।

खुला डेटा मशीन-पठनीय रूप में सार्वजनिक रूप से उपलब्ध जानकारी प्रस्तुत करने का एक तरीका है। एक ऐसे रूप में, जिसमें डेवलपर्स उन्हें डेटाबेस में अपलोड कर सकते हैं, विश्लेषण कर सकते हैं और सरकारी सिस्टम में यह किए जाने की तुलना में बहुत अधिक स्पष्ट और समझने योग्य रूप में प्रस्तुत कर सकते हैं।

मैं खुले डेटा प्रकाशित करने के लिए एक साइट बनाने (स्थापित करने) के अपने व्यक्तिगत अनुभव को साझा करना चाहूंगा। मैंने ओपन सोर्स प्लेटफॉर्म CKAN का इस्तेमाल किया। इस तरह से जाना है, किसी अन्य प्लेटफ़ॉर्म का उपयोग करें या अपनी वेबसाइट को स्क्रैच से लिखें - यह आपके ऊपर है। मुझे उम्मीद है कि मेरा लेख आपको सही विकल्प बनाने में मदद करेगा।

CKAN एक डेटा प्रबंधन प्रणाली है जो इसे उनके प्रकाशन, वितरण, पुनर्प्राप्ति और उपयोग को सरल बनाने वाले उपकरणों के माध्यम से सुलभ बनाती है। 50 से अधिक देशों, संगठनों और शहरों ने अपना डेटा प्रकाशित करने के लिए इस प्लेटफ़ॉर्म को चुना है। इनमें यूके, यूएसए, चेक रिपब्लिक, ऑस्ट्रेलिया, ब्राजील और अन्य शामिल हैं। सामान्य तौर पर, सूची प्रभावशाली होती है। मंच खुद अजगर में लिखा है। यहाँ अंग्रेजी में एक विस्तृत लेख है। यहाँ रूसी में एक विस्तृत लेख है।

CKAN स्थापित करें

इस पते में प्लेटफ़ॉर्म के लिए विस्तृत इंस्टॉलेशन निर्देश हैं। सच है, नहीं सब कुछ वहाँ के रूप में सुचारू रूप से काम करता है। मैंने प्लेटफ़ॉर्म को स्थापित करने और स्थापित करने के लिए उचित दिन बिताए। बदले में, डेवलपर्स प्लेटफ़ॉर्म को स्थापित करने, होस्ट करने और बनाए रखने के लिए भुगतान की शर्तें प्रदान करते हैं। पहले, कीमतें उनकी वेबसाइट पर पोस्ट की गई थीं, लेकिन अब वे नहीं हैं। हालांकि, हम एक नि: शुल्क मंच के रूप में सीकेएएन में रुचि रखते हैं। आप चाहें तो इस प्रोजेक्ट को कांटा भी कर सकते हैं। और यह सबसे लोकप्रिय कांटे में से एक है - यूके सरकार खुला डेटा हब ।

प्लेटफ़ॉर्म स्थापित करने के लिए आपको दो तरीके दिए जाते हैं: पैकेज स्थापित करना या स्रोत से इंस्टॉल करना। पहला तरीका आपकी "तंत्रिका" ऊर्जा की एक बड़ी मात्रा को बचाता है। लेकिन यह आपको तभी सूट करेगा जब आपके पास सही सिस्टम होगा। फिलहाल, यह उबंटू 12.04 है (हाल ही में जब तक यह था - 10.04)। यहाँ उस पर, और मैं सुझाव देता हूं कि आप इस मंच को रखें। यदि आप अपनी क्षमताओं में विश्वास रखते हैं या पहले से ही एक अनुकूलित प्रणाली है और इसे छोड़ना नहीं चाहते हैं, तो प्रोजेक्ट विकी आपकी मदद करेगा। मेरा अनुभव OpenVZ Ubuntu 12.04 है।

तो, पहला तरीका एक बैच इंस्टॉलेशन है। मैं ऊपर बताए गए कारण (ओएस संस्करणों की असंगति) के लिए सफल नहीं हुआ। लेकिन यहां मैं आपको कुछ सुझाव दे सकता हूं। चूंकि यह एक वर्चुअल सर्वर (और वास्तव में प्रशासन) को संचालित करने में मेरा पहला अनुभव था, इसलिए मेरी सलाह बच्चों के लिए अनुभवी (दाढ़ी वाले) प्रशासक लग सकते हैं, लेकिन शुरुआती लोगों के लिए, मुझे उम्मीद है, यह उपयोगी होगा।


!!! इंस्टॉल किए गए प्लेटफॉर्म के संस्करण पर ध्यान दें। CKAN वर्तमान में दुनिया की 30 से अधिक भाषाओं में अनुवादित किया जा रहा है, लेकिन सफलता की डिग्री बदलती के साथ। अनुवाद स्वयंसेवकों द्वारा किया जाता है। और प्रत्येक नए संस्करण को अनुवाद के एक अलग सेट के साथ जारी किया गया है। इस पते पर आपके द्वारा इंस्टॉल किए जा रहे संस्करण की अनुवाद स्थिति की जाँच करें। मुझे रूसी और यूक्रेनी स्थानों के अनुवाद में भाग लेना था (पृष्ठ 2.0 - 2.1), क्योंकि अनुवाद तैयार नहीं था। ट्रांसफैक्स वेबसाइट पर अनुवाद किया जाता है। आपके पास एक विकल्प है - या तो नवीनतम संस्करण डालें, जिसमें अनुवाद है, या अनुवाद में भाग लें। रूसी स्थान का अनुवाद स्थिति।

पैकेज से CKAN स्थापित करना

1. CKAN पैकेज स्थापित करें

हम सब कुछ निर्देशों के अनुसार करते हैं। यदि कोई त्रुटि नहीं है, तो हम आगे जाते हैं, यदि कोई त्रुटि है, तो दूसरी विधि पर आगे बढ़ें। यह नियम सभी वस्तुओं के लिए काम करता है। लेकिन पहले त्रुटि का सार जांचें - शायद मामला आप में या सर्वर सेटिंग्स में है।

2. PostgreSQL और Solr स्थापित करें

डेटाबेस को स्थापित करने से पहले, हमें स्वयं को / dev / null स्टैक को अधिलेखित करने का अधिकार देना चाहिए, अन्यथा हमें त्रुटि / dev / null मिल जाएगी: अनुमति अस्वीकृत।
फिक्स सरल है - हमें मूल अधिकार मिलते हैं और इसे ठीक करते हैं:
# rm /dev/null && mknod -m 0666 /dev/null c 1 3
हम जाँच करते हैं:
# ls -la /dev/null
अधिकार इस तरह दिखना चाहिए:
crw-rw-rw-
PostgreSQL स्थापित करने के बाद, आपको स्थानीय और पाठ एन्कोडिंग सेट करना होगा। सिस्टम में भाषाएँ स्थापित करें:
apt-get install language-pack-ru-base (apt-get install language-pack-uk-base)
हम डेटाबेस को रोकते हैं:
pg_dropcluster --stop 9.1 main
और स्वयं लोकेल सेट करें (ध्यान दें कि सभी डेटाबेस में एक स्थान होगा):
pg_createcluster --locale ru_RU.UTF8 9.1 main (pg_createcluster --locale uk_UA.UTF8 9.1 main)
हम रीबूट करते हैं और जांचते हैं - अब डेटाबेस में हमारे लिए आवश्यक स्थान और एन्कोडिंग होनी चाहिए:
reboot
sudo -u postgres psql -l

डेवलपर्स सोल-जेट्टी पैकेज स्थापित करने की सलाह देते हैं। लेकिन, मेरी टिप्पणियों और अनुभव के अनुसार - यह काम नहीं करता है। मुझे पता नहीं क्यों मैंने सब कुछ करने की कोशिश की, लेकिन यह काम नहीं करता है। मुझे चारों ओर जाना था। यदि आप देशी सोरल विधि का उपयोग शुरू करने का प्रबंधन नहीं कर सकते हैं, तो ठीक करें:
जेट्टी के नवीनतम संस्करण का मान असाइन करना:
JETTY_VERSION=7.6.10.v20130312
हम इसे लेते हैं:
wget download.eclipse.org/jetty$JETTY_VERSION/dist/jetty-distribution-$JETTY_VERSION.tar.gz
निकालें:
tar xfz jetty-distribution-$JETTY_VERSION.tar.gz
Sorl का नवीनतम संस्करण लें:
wget apache-mirror.telesys.org.ua/lucene/solr/3.6.2/apache-solr-3.6.2.zip
निकालें:
unzip -q apache-solr-3.6.2.zip
हम चलते हैं:
cd apache-solr-3.6.2/example/
पृष्ठभूमि में शर्बत चलाएँ:
nohup java -jar start.jar&

मैन्युअल रूप से सभी निर्देशों का स्पष्ट रूप से पालन करें, और जल्द ही आप एक कार्य स्थल देखेंगे।

अब दूसरा तरीका, अगर आपके पास उबंटू 12.04 नहीं है
एक बार फिर, मैं CKAN स्थापित करने पर विकि पर ध्यान देता हूँ।

स्रोत से CKAN की स्थापना

1. आवश्यक पैकेज स्थापित करें

हमें पैकेज के निम्नलिखित सेट की पेशकश की जाती है:
sudo apt-get install python-dev postgresql libpq-dev python-pip python-virtualenv git-core solr-jetty openjdk-6-jdk
मैं आपको निम्नलिखित सेट स्थापित करने की सलाह देता हूं (apt-get update और about / dev / null (ऊपर वर्णित)) को न भूलें:
sudo aptitude install python-dev postgresql-9.1 libpq-dev python-pip python-virtualenv git-core openjdk-6-jdk curl nginx gcc bcc tcc

3. एक PostgreSQL डेटाबेस सेटअप करें

+ अतिरिक्त सेटअप ऊपर वर्णित है

5. सेटअप सोलर

ऊपर वर्णित है

9. आप कर रहे हैं!

आपको एक कोड दिया जाता है:
paster serve /etc/ckan/default/development.ini
पृष्ठभूमि में चलने के लिए मेरा सुझाव:
nohup paster serve /etc/ckan/default/development.ini&

स्थानीय मशीन पर परीक्षण के लिए, उठाए गए कदम पर्याप्त हैं। लेकिन अगर आप अपना प्लेटफॉर्म सर्वर पर ट्रांसफर करना चाहते हैं, तो यहां मैं आपको एक सलाह भी दूंगा।

एक सोर्स इंस्टाल करना

मेरी अच्छी सलाह (जिसके लिए ibegtin के लिए बहुत धन्यवाद) इस तरह लगता है - Nginx का उपयोग करें। यह आपकी साइट को बहुत गति देगा। यहाँ एक महान निर्देश है कि कैसे paster + Nginx बंडल स्थापित करें। प्लेटफ़ॉर्म वर्चुअलाइज़ेशन समस्या को हल करने में उसने मेरी बहुत मदद की

बाकी के लिए, बस निर्देशों का पालन करें, और आप सफल होंगे। यदि आपके पास प्रश्न हैं - आप उन्हें मुझसे पूछ सकते हैं या डेवलपर्स को लिख सकते हैं। आप न्यूज़लेटर की सदस्यता भी ले सकते हैं या ट्विटर पर परियोजना के विकास का अनुसरण कर सकते हैं।

उपयोगी संसाधन

Google Refine के लिए CKAN स्टोरेज एक्सटेंशन
CKAN और Drupal का घालमेल

CKAN प्लेटफ़ॉर्म पर साइटें

इस प्लेटफ़ॉर्म पर चलने वाली साइटों की सूची
CKAN पर चलने वाली एक निर्देशिका साइट जो मौजूदा डेटा हब के बारे में डेटा एकत्र करती है।
रूसी संघ में डेटा हब खोलें
कानून प्रवर्तन अधिकारियों की गतिविधियों पर रूसी संघ में खुले डेटा का हब
CKAN प्लेटफॉर्म पर चलने वाला एक अंतरराष्ट्रीय हब । आपको अपना हब बनाने की आवश्यकता नहीं है। आप यहां कोई भी खुला डेटा अपलोड कर सकते हैं और इस संसाधन के लिए एपीआई या लिंक का उपयोग कर सकते हैं। चुनाव आपका है। सौभाग्य है