MarkLogic Server में डेटा [Part1]

MarkLogic Server एक दस्तावेज़-आधारित मूल XML डेटाबेस है। MarkLogic Server में किसी भी दस्तावेज़-उन्मुख DB के साथ, डेटा को फ़ाइल-फ़ोल्डर संरचना के रूप में दर्शाया जा सकता है। वैसे, जब WebDAV के माध्यम से रिपॉजिटरी तक पहुंच है, तो डेटा इस तरह से प्रस्तुत किया गया है। XML के अलावा, MarkLogic सर्वर किसी भी बाइनरी डेटा को फ़ाइलों के रूप में संग्रहीत कर सकता है।

MarkLogic Server में XML डेटा का आंतरिक प्रतिनिधित्व काफी जटिल है और इस पर बाद में चर्चा की जाएगी। अब यह ध्यान देने योग्य है कि आप केवल मार्क - लिजिक सर्वर में अच्छी तरह से गठित XML को रख सकते हैं क्योंकि यह सादे पाठ में संग्रहीत नहीं है, लेकिन XML के डेटा के ऑब्जेक्ट के रूप में। XML डेटा के आंतरिक प्रतिनिधित्व की एन्कोडिंग यूनिकोड है, जो विभिन्न भाषाओं के साथ कई समस्याओं को समाप्त करती है। XML डेटा में सभी इकाई डिजिटल इकाई में तैनात है। यदि केवल दस्तावेज़ में उनका उपयोग किया जाता है, तो इससे कोई समस्या नहीं होगी, अन्यथा MarkLogic Server को सभी प्रयुक्त संस्थाओं के बारे में "पता" होना चाहिए।


दो दिलचस्प सवालों पर विचार करें - MarkLogic Server में दस्तावेजों तक पहुंच और इन बहुत दस्तावेजों के साथ इसे भरना।

इसके अलावा हम इस तथ्य से आगे बढ़ेंगे कि प्रपत्र के दस्तावेज डेटाबेस में संग्रहीत हैं

<horse xmlns=”ns1”> <location>vacuum</location> <geometry>spherical</geometry> </horse> 

और इसे इस तरह स्टोर किया जाएगा

 /horses/ horse1.xml horse2.xml … 

XPath के लिए हम उपसर्ग ns1 = "ns1" का उपयोग करेंगे

सबसे पहले, हम XQuery कोड में एक डेटाबेस से XML दस्तावेज़ प्राप्त करने (पढ़ने) के तरीकों को देखेंगे।

एक दस्तावेज़ को पढ़ने के लिए, आपको fn: doc फ़ंक्शन का उपयोग इस तरह करना चाहिए

 let $id := "horse1" let $uri := fn:concat("/horses/", $id, ".xml") return fn:doc( $uri ) 

दस्तावेज़ के लिए पथ को एक पैरामीटर के रूप में निर्दिष्ट करें और इसकी सामग्री प्राप्त करें

 fn:doc( [$uri as xs:string*] ) as document-node()* 

इस फ़ंक्शन का परिणाम XML दस्तावेज़ दस्तावेज़ () , पाठ दस्तावेज़ के लिए मूल तत्व (टैग) और बाइनरी दस्तावेज़ों के लिए बाइनरी () तत्व है।

किसी भी XPath को इस फ़ंक्शन के XML परिणाम पर लागू किया जा सकता है। ऐसे ही

 fn:doc( $uri )/ns1:horse 

या टैग्स ns1 की एक सूची प्राप्त करें: स्थान

 fn:doc( $uri )/ns1:horse/ns1:location 

या ऐसा ही करते हैं

 fn:doc( $uri )//ns1:location 

MarkLogic Server में दस्तावेजों को विभिन्न निर्देशिकाओं में संग्रहीत करके तार्किक समूहों में बांटा जा सकता है। उदाहरण के लिए, दस्तावेज़ (ऑब्जेक्ट) "घोडे.एनएक्सएल" को निर्देशिका "/ घोड़ों /" में संग्रहीत किया जाता है। लेकिन! अक्सर, आपको दस्तावेजों के अतिव्यापी समूह (संघ) बनाने की आवश्यकता होती है। इन उद्देश्यों के लिए, साथ ही साथ MarkLogic Server में दस्तावेजों तक पहुंच को तेज करने के लिए एक संग्रह तंत्र है। प्रत्येक दस्तावेज़ में एक ही समय में कई संग्रह शामिल हो सकते हैं; इस पर कोई प्रतिबंध नहीं हैं।

अगला, संग्रह से दस्तावेज़ प्राप्त करने की विधि पर विचार करें। मान लीजिए कि हमारे दस्तावेज़ घोड़ों-संग्रह में शामिल हैं, तो संग्रह तक पहुंच निम्नानुसार है

 let $collections := ("horses-collection") return fn:collection($collections) 

जहाँ $ संग्रह उन संग्रह की सूची है जिनके दस्तावेज़ आप प्राप्त करना चाहते हैं

 fn:collection( [$uri as xs:string*] ) as document-node()* 

यह फ़ंक्शन निर्दिष्ट संग्रह में शामिल दस्तावेज़ देता है। Fn का परिणाम : संग्रह दस्तावेजों की एक सूची है।

Fn में $ uri पैरामीटर : संग्रह फ़ंक्शन वैकल्पिक है। इसकी अनुपस्थिति में, fn: संग्रह डेटाबेस में सभी दस्तावेजों की एक सूची देता है। निम्नलिखित अभिव्यक्ति आपको ऐसा करने की अनुमति देती है

 fn:collection() 

यह ध्यान देने योग्य है कि MarkLogic Server में संग्रह को पहले से बनाने या कॉन्फ़िगर करने की आवश्यकता नहीं है। जब कोई दस्तावेज़ किसी भी गैर-संग्रहित संग्रह में जोड़ा जाता है, तो इसे इसके साथ बनाया जाता है और दस्तावेज़ को नए बनाए गए संग्रह में रखा जाता है। यह दृष्टिकोण आपको गतिशील रूप से संग्रह बनाने की अनुमति देता है। यह रिपॉजिटरी में दस्तावेजों के त्वरित उपयोग को व्यवस्थित करते समय आपको और भी अधिक लचीलापन देता है।

XQuery प्रोग्राम के लिए कोड को सरल बनाने के लिए डेवलपर्स द्वारा जोड़े गए दस्तावेजों तक पहुंचने का एक और तरीका है।

 /ns1:horse 

यह अभिव्यक्ति निम्नलिखित के बराबर है

 fn:collection()/ns1:horse 

यही है, रिपॉजिटरी में सभी दस्तावेजों को स्कैन करें और उन दस्तावेजों की सामग्री लौटाएं जिनमें रूट टैग ns1: घोड़ा है ।

यह पता चला है कि XQuery कोड में आप XPath को एक प्रक्षालित तत्व के रूप में लिख सकते हैं और इसे रिपॉजिटरी के सभी दस्तावेजों पर लागू किया जाएगा और इसके निष्पादन का परिणाम वापस किया जाएगा।

डेटाबेस से डेटा प्राप्त करने के लिए इस दृष्टिकोण का सावधानीपूर्वक उपयोग करना बहुत आवश्यक है क्योंकि बड़ी संख्या में दस्तावेजों के साथ इसके लिए महत्वपूर्ण संसाधनों और समय की आवश्यकता हो सकती है।

निम्नलिखित अभिव्यक्ति का परिणाम ns1: घोड़े के दस्तावेजों की एक ही सूची होगी, लेकिन जब इसे निष्पादित किया जाता है, तो डेटाबेस में प्रत्येक टैग को स्कैन किया जाएगा, जो कि बहुत समय लेने वाला कार्य है

 //ns1:horse 

डेटा प्राप्त करने की इस पद्धति का उपयोग केवल तभी उचित है जब सभी टैग्स का चयन करना आवश्यक हो, जिनके XML दस्तावेज़ों में विशिष्ट स्थान ज्ञात नहीं है या हमेशा नहीं होता है। केवल इस मामले में रिपॉजिटरी में सभी टैग को स्कैन करना उचित है। यह भी मत भूलना, कि इस मामले में क्वेरी का प्रदर्शन कम परिमाण का एक क्रम होगा, विशेष रूप से बड़ी संख्या में दस्तावेजों या उनमें टैग के साथ।

कभी-कभी दस्तावेजों को एक संग्रह में संयोजित किए बिना एक निर्देशिका में सहेजा जाता है। लेकिन एक ही समय में, एक ही निर्देशिका के भीतर दस्तावेजों का स्थान कार्यक्रम के तर्क में समझ में आता है और एक एकल इकाई के रूप में इन दस्तावेजों तक पहुंच की आवश्यकता होती है। इस कार्य को करने के लिए, आप निम्न विधि का उपयोग कर सकते हैं

 xdmp:directory("/horses /", "1")/ns1:horse 

Xdmp: निर्देशिका फ़ंक्शन निर्दिष्ट निर्देशिका में सभी दस्तावेज़ लौटाता है

 xdmp:directory( $uri as xs:string*, [$depth as xs:string?] ) as document-node()* 

यहां, एक वैकल्पिक चर दो मान "1" और "अनन्तता" ले सकता है , लेकिन यह दस्तावेजों के घोंसले के शिकार का वर्णन करता है जिन्हें परिणाम में शामिल किया जाएगा। $ गहराई = "1" के मामले में , MarkLogic Server खुद को निर्दिष्ट निर्देशिका में दस्तावेज़ों तक सीमित रखेगा, जबकि "अनंत" इसे दस्तावेजों की तलाश में सभी उपनिर्देशिकाओं को स्कैन करने के लिए मजबूर करेगा।

ऊपर दिए गए सभी एक्सपीथ एक्सप्रेशन सरल हैं, लेकिन उनकी जगह कुछ समान हो सकते हैं।

 //ns1:location[ (fn:starts-with(., “va”) and fn:starts-with(., “m”)) or (. eq “location1”) ] 

परिष्कृत XPath अनुरोध को पूरा करने के लिए आवश्यक संसाधनों को बहुत बढ़ाता है। यदि आवश्यक हो तो साधारण XPath अभिव्यक्तियों का उपयोग करके संग्रह और निर्देशिका जैसे DB का उपयोग करके डेटाबेस से दस्तावेजों की प्राप्ति को व्यवस्थित करना बेहतर है।

दूसरा महत्वपूर्ण मुद्दा आधार का भरना है। मुझे तुरंत यह कहना होगा कि MarkLogic सर्वर XQuery के लिए XQuery अपडेट एक्सटेंशन का समर्थन नहीं करता है और इसके API के माध्यम से दस्तावेज़ हेरफेर फ़ंक्शन प्रदान करता है।

डेटाबेस को भरना कई तरीकों से किया जा सकता है:

1. XQuery कोड से सीधे एक दस्तावेज़ बनाएं। यह कुछ इस तरह से हो जाता है

 declare variable $collections := ("horses"); let $uri := “/horses/horse1.xml” let $horse := <horse xmlns=”ns1”> <location>vacuum</location> <geometry>spherical</geometry> </horse> return xdmp:document-insert( $uri, $horse, xdmp:default-permissions(), $collections ) 

Xdmp: डॉक्यूमेंट-इंसर्ट फंक्शन पैरामीटर इस तरह दिखता है

 xdmp:document-insert( $uri as xs:string, $root as node(), [$permissions as element(sec:permission)*], [$collections as xs:string*], [$quality as xs:int?], [$forest-ids as xs:unsignedLong*] ) as empty-sequence() 

जहाँ $ uri दस्तावेज़ का पता रिपॉजिटरी रूट के सापेक्ष है। MarkLogic Server डेटाबेस की सेटिंग्स में, निर्देशिकाओं के स्वचालित निर्माण को सक्षम करना संभव है और फिर $ uri एक गैर-मौजूद निर्देशिका को संदर्भित कर सकता है और यह तब बनाया जाएगा जब दस्तावेज़ बनाया जाएगा।
$ जड़ - दस्तावेज़ निकाय
$ अनुमतियाँ - दस्तावेज़ एक्सेस सेटिंग्स
$ संग्रह - संग्रह की एक सूची जिसमें दस्तावेज़ को शामिल किया जाना चाहिए।

2. WebDAV के माध्यम से डेटा डाउनलोड करें। यह विधि रिपॉजिटरी में काफी बड़ी मात्रा में डेटा लोड करने के लिए उपयुक्त है। WebDAV के माध्यम से एक्सेस करने के लिए, एक संबंधित (WebDAV) एप्लिकेशन सर्वर को डेटाबेस के लिए मार्कलोगिक सर्वर में एक्सेस किया जाना चाहिए।

3. बड़ी मात्रा में डेटा या बहुत विशिष्ट कार्यों के लिए, आप MarkLogic सर्वर पर दस्तावेज़ अपलोड करने के लिए डिज़ाइन की गई जावा उपयोगिता RecordLoader का उपयोग कर सकते हैं।

4. ऑटोलैडर एक अन्य उपयोगी उपयोगिता है जो आपको फ़ाइल सिस्टम पर परिवर्तनों को ट्रैक करने और स्वचालित रूप से मार्कलोगिक सर्वर पर दस्तावेज़ अपलोड करने की अनुमति देता है। डाउनलोड करने के लिए, उपयोगिता रिकॉर्डलॉडर का उपयोग किया जाता है ।