15 मिनट में सेफ एफएस डिस्ट्रीब्यूटेड फाइल सिस्टम

हमें केवल सिफ एफएस वितरित फ़ाइल सिस्टम को बढ़ाने के लिए कुछ मिनटों की आवश्यकता है

त्वरित संदर्भ

सेफ़ लचीली, आसानी से स्केलेबल पेटाबाइट भंडारण का एक खुला स्रोत विकास है। आधार वस्तु भंडारण में कई दर्जन सर्वरों के डिस्क स्थान का संघ है, जो लचीले एकाधिक छद्म आयामी डेटा पुनर्वितरण के लिए अनुमति देता है। सिफ डेवलपर्स तीन और परियोजनाओं के साथ इस ऑब्जेक्ट स्टोर को पूरक करते हैं:

• RADOS गेटवे - S3- और स्विफ्ट-संगत RESTful इंटरफ़ेस
• आरबीडी - पतली विकास और स्नैपशॉट के समर्थन के साथ एक ब्लॉक डिवाइस
• सीएफएस एफएस - वितरित पोसिक्स-अनुरूप फाइल सिस्टम

उदाहरण वर्णन

मेरे छोटे उदाहरण में, मैं भंडारण के रूप में केवल 3 सर्वरों का उपयोग करता हूं। प्रत्येक सर्वर में, मेरे पास 3 एसएटीए डिस्क हैं: /dev/sda एक प्रणाली के रूप में और /dev/sdb और /dev/sdc लिए सीएफ एफएस फाइल सिस्टम डेटा। इस उदाहरण में ओएस Ubuntu 12.04 LTS होगा। एक अन्य सर्वर फ़ाइल सिस्टम को माउंट करेगा, जो वास्तव में, क्लाइंट के रूप में कार्य करेगा। हम डिफ़ॉल्ट अतिरेक स्तर का उपयोग करते हैं, अर्थात्, एक ही ब्लॉक के दो प्रतिकृतियां।

इस लेखन के समय, डेवलपर्स सरल कॉन्फ़िगरेशन बनाने के लिए दो तरीके पेश कर रहे हैं - पुराने एक का उपयोग करके mkcephfs या नए mkcephfs ceph-deploy । नए संस्करणों के लिए, शाखा 0.6x (कटलफिश) के साथ शुरू करते हुए, पहले से ही ceph-deploy का उपयोग करने की सिफारिश की जाती है। लेकिन इस उदाहरण में, मैं mkcephfs का उपयोग करते हुए mkcephfs शाखा (bobtail) के पहले, स्थिर रिलीज़ का उपयोग कर रहा mkcephfs ।

मुझे आपको तुरंत चेतावनी देनी चाहिए - सेफ एफएस अभी भी पूर्व-उत्पादन की स्थिति में है, लेकिन समुदाय की गतिविधि द्वारा इस परियोजना को सॉफ्टवेयर परिभाषित भंडारण के बीच सबसे हॉट में से एक कहा जाता है।

चलिए शुरू करते हैं।

चरण 0. ओएस स्थापित करना

हम एक न्यूनतम स्थापना करते हैं। इसके अतिरिक्त, आपको ntpdate और अपने पसंदीदा संपादक को स्थापित करने की आवश्यकता है, उदाहरण के लिए vim ।

 aptitude update && aptitude install ntpdate vim 

चरण 1। सेफ पैकेज स्थापित करें

क्लस्टर और क्लाइंट के प्रत्येक नोड पर, सिफ पैकेज स्थापित करें

 wget -q -O- 'https://ceph.com/git/?p=ceph.git;a=blob_plain;f=keys/release.asc' | sudo apt-key add - echo deb http://ceph.com/debian-bobtail/ $(lsb_release -sc) main | tee /etc/apt/sources.list.d/ceph.list aptitude update && aptitude install ceph 

चरण 2. एक कॉन्फ़िगरेशन फ़ाइल बनाएं

प्रत्येक नोड और क्लाइंट पर, एकल कॉन्फ़िगरेशन फ़ाइल /etc/ceph/ceph.conf

 [global] auth cluster required = cephx auth service required = cephx auth client required = cephx [osd] osd journal size = 2000 osd mkfs type = xfs osd mkfs options xfs = -f -i size=2048 osd mount options xfs = rw,noatime,inode64 [mon.a] host = node01 mon addr = 192.168.2.31:6789 [mon.b] host = node02 mon addr = 192.168.2.32:6789 [mon.c] host = node03 mon addr = 192.168.2.33:6789 [osd.0] host = node01 devs = /dev/sdb [osd.1] host = node01 devs = /dev/sdc [osd.2] host = node02 devs = /dev/sdb [osd.3] host = node02 devs = /dev/sdc [osd.4] host = node03 devs = /dev/sdb [osd.5] host = node03 devs = /dev/sdc [mds.a] host = node01 

फ़ाइल को सभी के लिए पठनीय बनाना

 chmod 644 /etc/ceph/ceph.conf 

चरण 3. नोड्स के बीच पासवर्ड रहित प्रविष्टि बनाना

हम एक रूट पासवर्ड सेट करते हैं, पासफ़्रेज़ निर्दिष्ट किए बिना ssh कुंजियाँ बनाते हैं

 passwd root ssh-keygen 

अपने मामले में नोड्स के नाम के अनुसार /root/.ssh/config में ssh उपनाम बनाएँ

 Host node01 Hostname node01.ceph.labspace.studiogrizzly.com User root Host node02 Hostname node02.ceph.labspace.studiogrizzly.com User root Host node03 Hostname node03.ceph.labspace.studiogrizzly.com User root 

सार्वजनिक कुंजी को क्लस्टर के पड़ोसी नोड्स में जोड़ें।

 ssh-copy-id root@node02 ssh-copy-id root@node03 

चरण 4. क्लस्टर का विस्तार करें

सबसे पहले, काम के लिए आवश्यक ड्राइव तैयार करें

 mkfs -t xfs fs-options -f -i size=2048 /dev/sdb mkfs -t xfs fs-options -f -i size=2048 /dev/sdc 

अगला, हम अपने डिजाइन के अनुसार वर्किंग कैटलॉग और माउंट डिस्क तैयार करते हैं

इसलिए नोड 01 के लिए हम करते हैं

 mkdir -p /var/lib/ceph/osd/ceph-0 mkdir -p /var/lib/ceph/osd/ceph-1 mount /dev/sdb /var/lib/ceph/osd/ceph-0 -o noatime,inode64 mount /dev/sdc /var/lib/ceph/osd/ceph-1 -o noatime,inode64 

नोड 02 के लिए

 mkdir -p /var/lib/ceph/osd/ceph-2 mkdir -p /var/lib/ceph/osd/ceph-3 mount /dev/sdb /var/lib/ceph/osd/ceph-2 -o noatime,inode64 mount /dev/sdc /var/lib/ceph/osd/ceph-3 -o noatime,inode64 

और नोड 0 के लिए

 mkdir -p /var/lib/ceph/osd/ceph-4 mkdir -p /var/lib/ceph/osd/ceph-5 mount /dev/sdb /var/lib/ceph/osd/ceph-4 -o noatime,inode64 mount /dev/sdc /var/lib/ceph/osd/ceph-5 -o noatime,inode64 

अंत में, नोड 01 पर, सिफ रिपॉजिटरी निर्माण स्क्रिप्ट चलाएँ

 mkcephfs -a -c /etc/ceph/ceph.conf -k /etc/ceph/ceph.keyring 

और फिर ceph.keyring कुंजी को क्लस्टर के अन्य नोड्स पर कॉपी करें

 scp /etc/ceph/ceph.keyring node02:/etc/ceph/ceph.keyring scp /etc/ceph/ceph.keyring node03:/etc/ceph/ceph.keyring 

और क्लाइंट नोड पर, मेरे मामले में - 192.168.2.39

 scp /etc/ceph/ceph.keyring 192.168.2.39:/etc/ceph/ceph.keyring 

हमने कुंजियों तक पहुंच को सेट किया है

 chmod 644 /etc/ceph/ceph.keyring 

चरण 5. लॉन्च और स्थिति

नोड्स के बीच पासवर्ड रहित प्रविष्टि के लिए धन्यवाद, हम किसी भी नोड से पूरे क्लस्टर को शुरू करते हैं

 service ceph -a start 

वहां हम क्लस्टर स्थिति की जांच करते हैं

 ceph -s 

सामान्य ऑपरेशन के दौरान सबसे अपेक्षित स्थिति HEALTH_OK

क्लाइंट की ओर, आवश्यक स्थान पर एक निर्देशिका बनाएं, उदाहरण के लिए /mnt/cephfs , ceph कर्नेल ceph लिए कुंजी पार्स करें और फ़ाइल सिस्टम को माउंट करें

 mkdir /mnt/cephfs ceph-authtool --name client.admin /etc/ceph/ceph.keyring --print-key | tee /etc/ceph/admin.secret mount -t ceph node01:6789,node02:6789,node03:6789:/ /mnt/cephfs -o name=admin,secretfile=/etc/ceph/admin.secret,noatime 

अंतभाषण

यह है कि हम केवल 15 मिनट में वितरित सीएफएस एफएस फाइल सिस्टम कैसे प्राप्त करते हैं। प्रदर्शन, सुरक्षा और रखरखाव के मुद्दों को अधिक विस्तृत विसर्जन की आवश्यकता होती है और यह सामग्री एक अलग लेख पर है, या यहां तक ​​कि एक भी नहीं है।

पुनश्च

OpenNebula + Ceph बंडल केवल सेफ ऑब्जेक्ट स्टोरेज का उपयोग करके अटक गया , बिना सेफ फाइल सिस्टम के। अधिक पढ़ें हब में मैं पीआर हूं ।