🍞 👨🏾‍🔬 👨🏿‍✈️ Zabbix, अंतिम मील के बंदरगाहों की निगरानी करना और विभाजन का उपयोग करके डेटाबेस के साथ अनुकूलन करना 🌊 👆🏻 ♐️

रूसी संघ के सबसे बड़े प्रदाता के साथ काम करते हुए, मैं एक स्थिति में आया कि एक ग्राहक हाल के दिनों में समस्याओं के बारे में संपर्क कर रहा है, अर्थात। कल सब कुछ खराब था, लेकिन अब यह काम कर गया। इस मामले में क्या करना है? निगरानी प्रणालियों का उपयोग करने के लिए विकल्प हैं जो सभी ग्राहक लाइनों के प्रमुख मापदंडों को इकट्ठा करेंगे और उन्हें थोड़ी देर के लिए संग्रहीत करेंगे, और टीपी ऑपरेटर ऐसी स्थितियों को हल करने के लिए आसानी से इस डेटा तक पहुंच सकता है। इसके अलावा, इन आंकड़ों के होने पर, प्रत्येक ग्राहक लाइन पर एक स्वचालित विशेषज्ञ मूल्यांकन देना संभव है, और यदि वांछित है, तो xDSL पर, स्वचालित रूप से सबसे उपयुक्त प्रोफ़ाइल का चयन करें। एक ही डेटा का उपयोग करना, टीपी से संपर्क करने से पहले ही असंतुष्ट मापदंडों के साथ दोषपूर्ण रेखाओं या रेखाओं की पहचान करना संभव है।
पहली नज़र में, कार्य मुश्किल नहीं है, लेकिन जब उपकरण की संख्या आसानी से हजारों से अधिक एक्सेस नोड्स में कदम रखती है, और ग्राहक पोर्ट की संख्या हजारों में पहुंच सकती है, तो इस तरह के सिस्टम को स्थापित करने और चलाने की कुछ विशेषताएं सब कुछ के अधिकतम स्वचालन के साथ दिखाई देती हैं।
यदि रुचि है, तो कैट में आपका स्वागत है

बोर्ड पर दो प्रोसेसर और 4 कोर के साथ केवल एक एचपी सर्वर था, मेमोरी 10G, RAID5 132G 15000 SAS था।
कॉन्फ़िगरेशन के आधार पर, सब्सक्राइबर पोर्ट्स की मुख्य संख्या विभिन्न DSLAMs पर ADSL पोर्ट्स हैं, दोनों उच्च-क्षमता - 576 पोर्ट्स तक "बास्केट" और लो-पोर्ट्स - 16 से 64 पोर्ट्स।

परिभाषित करें कि हम कैसे ट्रिगर की निगरानी और निर्माण करेंगे

मुझे dslam'a के साथ क्या मिल सकता है? लगभग सब कुछ, एकमात्र सवाल यह है कि यह कैसे करना है। मेरे लिए, सर्प द्वारा मतदान का सबसे सुरक्षित तरीका है। पूरी परेशानी यह थी कि अधिकांश हार्डवेयर के लिए MIB फाइलें केवल नश्वर के लिए सुलभ नहीं होती हैं, क्योंकि निर्माताओं की चाल के कारण अनुबंधों का एक गुच्छा और अन्य बाधाएं हैं जो मुझे स्पष्ट नहीं हैं (huawi mibs के क्रेडिट के लिए) फिर भी विभिन्न अनुबंधों के बिना नहीं भेजे गए, लेकिन एक अन्य आपूर्तिकर्ता के लिए और यह नहीं मिल सकता है) यदि आपकी स्थिति मेरे समान है, तो हम स्नैंपवॉक को अपने हाथों में लेते हैं और हर चीज का विश्लेषण करते हैं जो लोहे का टुकड़ा देता है, और यह बहुत कुछ देगा, टेक्स्ट का मेगाबाइट। प्राप्त ओइड का विश्लेषण एक बहुत समय लेने वाली प्रक्रिया है। यह अच्छा है अगर वहाँ zabbix के लिए तैयार किए गए टेम्पलेट हैं या वहाँ mib है (तो उनसे टेम्पलेट जल्दी और आसानी से बनाया जा सकता है इस विषय को पढ़कर "हम MIB के साथ हार्डवेयर के किसी भी टुकड़े को जोड़ते हैं" habrahabr.ru/blogs-sysadm/85156 )
आपके द्वारा टेम्प्लेट प्राप्त करने के बाद, आपको यह निर्धारित करने की आवश्यकता है कि हम क्या एकत्र करेंगे, किस आवृत्ति और कितने समय तक स्टोर करेंगे। ये सभी पैरामीटर अंततः काम करने वाले टेम्पलेट में सेट किए गए हैं, जिसे हम ग्रंथियों से बांधेंगे।

मेरा सेट बहुत बड़ा नहीं था, उदाहरण के लिए, पहले बंदरगाह से एकत्र किए गए dslam'a उच्च क्षमता मापदंडों के लिए

1.01ifAtucFfrADSL 1.01ifAtucFrADSL
1.01ifAtucLossADSL
1.01ifDownSnrADSL 1.01ifUpSnrADSL
1.01ifDownSpeedADSL 1.01ifUpSpeedADSL
,
1.01ifOperPhysicalStatADSL
1.01ifOperStatADSL

और तत्वों के साथ एक अतिरिक्त टेम्पलेट जो शामिल किया जा सकता है।

1.01ifDownAttenuationADSL 1.01ifUpAttenuationADSL
1.01ifDownOutputPowerADSL 1.01ifUpOutputPowerADSL
1.01ifDownSpeedMaxADSL 1.01ifUpSpeedMaxADSL
1.01ifProfSpeedADSL

यदि आप ऊपर वर्णित डेटा का उपयोग करते हैं, तो आप एक ट्रिगर लिख सकते हैं जो वर्तमान प्रोफ़ाइल को ले जाएगा, अधिकतम गति और वर्तमान गति और इन आंकड़ों के आधार पर, यदि प्रोफ़ाइल द्वारा निर्दिष्ट गति वास्तविक और अधिकतम प्राप्त करने की तुलना में कम है, तो प्रस्ताव को स्वतंत्र रूप से कम गति के साथ दूसरे में बदल दें, और इसके विपरीत। यदि अधिकतम गति वास्तविक एक से अधिक है और प्रोफ़ाइल में एक सेट से अधिक है, तो उच्च गति के साथ प्रोफ़ाइल को दूसरे में बदलने या बदलने की पेशकश करें।

मैं ध्यान देता हूं कि बंदरगाहों पर प्रोफाइल बदलने के लिए सभी सिफारिशों के नोटबंदी के कारण इस तरह के ट्रिगर्स ने मुझे नहीं पकड़ा था, लेकिन मैं इसे स्वचालन के लिए देने से डरता था।

बहुत उपयोगी ट्रिगर्स का एक और विकल्प है, ये शोर की मात्रा के लिए ट्रिगर होते हैं, क्षीणन के लिए, त्रुटियों और सामंजस्य और अन्य खुशियों की संख्या में समय (डेल्टा फ़ंक्शन) में परिवर्तन के लिए जो ~~ग्राहकों को~~ प्राप्त ~~करने के~~ लिए ग्राहकों को बहुत ~~वितरित~~ कर सकते हैं। और फिर, इन ट्रिगर ने उसी कारण से जड़ नहीं ली। यह आपकी आत्मा पर कठिन है जब आपके पास सौ पोर्ट हैं, जिन्हें असंतोषजनक माना जाता है। ;)

FTTx तकनीक का उपयोग करने वाले नोड्स के लिए, एकत्र किए गए पैरामीटर कुछ अलग हैं, अब केवल ग्राहक पोर्ट पर त्रुटियों की संख्या का डेल्टा फ़ंक्शन एकत्र किया गया था, यदि वे कुछ समय के लिए एक निश्चित मूल्य से अधिक हैं, तो हम पोर्ट को ध्यान की सूची में सूचीबद्ध करते हैं।
यहां एक पोर्ट से एकत्र किए गए डेटा का एक उदाहरण है

डेटा को समय के ग्राफ के रूप में दर्शाया जा सकता है

मेरे पास दिलचस्प चीनी एज-कोर स्विच भी थे, जिनसे मुझे हुआवेई के पक्ष में छुटकारा मिला, इसलिए मैंने उनके साथ एक टेम्पलेट बनाया, जिसने ओटीडीआर के साथ सब्सक्राइबर केबल को मापने के परिणामों को प्रदूषित किया और परिणामों का विश्लेषण करते हुए मुझे दोषपूर्ण यूटीपी के साथ बंदरगाहों की एक सूची मिली। ये माप ज़ैबिक्स या एक मुकुट की स्क्रिप्ट का उपयोग करके ग्रंथियों को एक स्नैम्प कमांड भेजकर किया जा सकता है। हुवावे के साथ सभी हेजहोग्स के प्रतिस्थापन के कारण मैंने इस टेम्पलेट को समाप्त नहीं किया।

मुझे लगता है कि निगरानी के लिए समग्र चित्र और दृष्टिकोण स्पष्ट है, यदि कुछ विशिष्ट प्रश्न हैं, कुछ बहुत अच्छी तरह से प्रकाशित बिंदुओं पर नहीं है, तो पूछें, मैं जवाब देने की कोशिश करूंगा।

Zabbix के लिए डेटाबेस सेट करते हैं

फिलहाल, नवीनतम स्थिर शाखा 1.8.5 को आधिकारिक वेबसाइट www.zabbix.com/download.php से डाउनलोड किया जा सकता है
मुझे इसे स्थापित करने और प्रारंभिक सेटअप करने के निर्देश नहीं मिले, क्योंकि यह www.zabbix.com/documentation-start पर उपलब्ध है

मेरे पास Ubuntu सर्वर 10.04 64 बिट पर सब कुछ है। Postgresql 8.4 मूल रूप से डेटाबेस के रूप में उपयोग किया जाता था, फिर 9.0 अब MySQL 5.5 में स्थानांतरित हो गया, जिसे आधिकारिक मैनुअल और एक छोटी फ़ाइल सूई के अनुसार सर्वर पर स्थापित किया गया था। विभाजन विभाजन तालिका के समर्थन का कारण dev.mysql.com/doc/refman/5.5/en/partitioning.html "है (ठीक है, मैं मांसपेशी के रूप में उपवास के रूप में तेजी से काम करने के लिए पोस्टग्रेट्स नहीं कर सकता, मैं इसे पकाने में सक्षम नहीं हूँ, विभाजन तालिका पोस्ट-कांग्रेस में है, लेकिन इसे मांसपेशियों की तुलना में कुछ अलग तरीके से लागू किया जाता है)।

MySQL का कॉन्फ़िगरेशन जटिल नहीं है और मंच पर अच्छी तरह वर्णित है। यहां उस विषय का एक उदाहरण है जिसके द्वारा मैंने MySQL www.zabbix.com/forum/showthread.php?t=12407 कॉन्फ़िगर किया है

मैं एक प्रमुख आवश्यक विकल्प नोट करूंगा

innodb_file_per_table

डिफ़ॉल्ट इंजन को मासूम, utf-8 एन्कोडिंग पर सेट किया जाना चाहिए।
यदि यह बहुत उत्सुक होगा तो मैं एक कॉन्फिगरेशन तैयार करूंगा।

Zabbix डेटाबेस के लिए बहुत सारे मान बचाता है; मुख्य बड़ी टेबल हिस्टरी * और ट्रेंड * हैं
प्रारंभ में, इतिहास की तालिकाओं में, मेरे पास 500 मिलियन तक के रिकॉर्ड थे और इस तालिका में लगभग 40 गिग्स का वजन एक इंडेक्स फ़ाइल के साथ था, जिससे कुछ प्रदर्शन समस्याओं का सामना करना पड़ा।
सब्सक्राइबर पोर्ट से एकत्र किए गए डेटा को औसतन लगभग 3 दिनों तक संग्रहीत किया जाता है। पुराने डेटा को उसके बाद खंडित तालिकाओं को छोड़ कर गृहस्वामी द्वारा हटा दिया जाता है। यह कितना बुरा है, मुझे लगता है, समझाने की जरूरत नहीं है।
इस मामले में क्या करना है? उत्तर समय विभाजन के साथ एक विभाजन तालिका का उपयोग करना है। इसके लिए, मैंने ब्राजील के कॉमरेड zabbixzone.com/zabbix/partition-tables के ब्लॉग से अनुभव का लाभ लिया
वह टेबल को 2 प्रकारों में विभाजित करने का सुझाव देता है: बड़े - दिन से विभाजित, और बहुत बड़े नहीं - महीने से विभाजित।
यहाँ दिन के हिसाब से विभाजन तालिकाएँ हैं:

इतिहास
history_log
history_str
history_text
history_uint

और महीनों से विभाजित:

मानता है
अलर्ट
auditlog
घटनाओं
service_alarms
प्रवृत्तियों
trends_unit

मेरे पास पहले से ही एक कॉन्फ़िगर किया गया निगरानी तंत्र था और मित्र को जो कुछ भी दे रहा था उसे जोड़ने के लिए, निम्नलिखित क्रियाएं करनी थीं (वे ऊपर के ब्लॉग की तरह ही हैं)।

सबसे पहले, प्रत्येक तालिका का एक डंप बनाएं जिसे हम बदलने जा रहे हैं
mysqldump --no-create-info --lock-tables zabbix history_str > 09.06.2011_history_str.sql

हम डेटा से उपरोक्त तालिकाओं को साफ़ करते हैं।
तालिका संरचना को थोड़ा बदलें

ALTER TABLE `acknowledges` DROP PRIMARY KEY , ADD KEY `acknowledgedid` (`acknowledgeid`); ALTER TABLE `alerts` DROP PRIMARY KEY , ADD KEY `alertid` (`alertid`); ALTER TABLE `auditlog` DROP PRIMARY KEY , ADD KEY `auditid` (`auditid`); ALTER TABLE `events` DROP PRIMARY KEY , ADD KEY `eventid` (`eventid`); ALTER TABLE `service_alarms` DROP PRIMARY KEY , ADD KEY `servicealarmid` (`servicealarmid`); ALTER TABLE `history_log` DROP PRIMARY KEY , ADD PRIMARY KEY (`itemid`,`id`,`clock`); ALTER TABLE `history_log` DROP KEY `history_log_2`; ALTER TABLE `history_text` DROP PRIMARY KEY , ADD PRIMARY KEY (`itemid`,`id`,`clock`); ALTER TABLE `history_text` DROP KEY `history_text_2`; * This source code was highlighted with Source Code Highlighter .

2013 तक मासिक विभाजन के साथ एक विभाजन तालिका बनाएं

ALTER TABLE `acknowledges` PARTITION BY RANGE( clock ) ( PARTITION p201105 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-01 00:00:00")), PARTITION p201106 VALUES LESS THAN (UNIX_TIMESTAMP("2011-07-01 00:00:00")), PARTITION p201107 VALUES LESS THAN (UNIX_TIMESTAMP("2011-08-01 00:00:00")), PARTITION p201108 VALUES LESS THAN (UNIX_TIMESTAMP("2011-09-01 00:00:00")), PARTITION p201109 VALUES LESS THAN (UNIX_TIMESTAMP("2011-10-01 00:00:00")), PARTITION p201110 VALUES LESS THAN (UNIX_TIMESTAMP("2011-11-01 00:00:00")), PARTITION p201111 VALUES LESS THAN (UNIX_TIMESTAMP("2011-12-01 00:00:00")), PARTITION p201112 VALUES LESS THAN (UNIX_TIMESTAMP("2012-01-01 00:00:00")), PARTITION p201201 VALUES LESS THAN (UNIX_TIMESTAMP("2012-02-01 00:00:00")), PARTITION p201202 VALUES LESS THAN (UNIX_TIMESTAMP("2012-03-01 00:00:00")), PARTITION p201203 VALUES LESS THAN (UNIX_TIMESTAMP("2012-04-01 00:00:00")), PARTITION p201204 VALUES LESS THAN (UNIX_TIMESTAMP("2012-05-01 00:00:00")), PARTITION p201205 VALUES LESS THAN (UNIX_TIMESTAMP("2012-06-01 00:00:00")), PARTITION p201206 VALUES LESS THAN (UNIX_TIMESTAMP("2012-07-01 00:00:00")), PARTITION p201207 VALUES LESS THAN (UNIX_TIMESTAMP("2012-08-01 00:00:00")), PARTITION p201208 VALUES LESS THAN (UNIX_TIMESTAMP("2012-09-01 00:00:00")), PARTITION p201209 VALUES LESS THAN (UNIX_TIMESTAMP("2012-10-01 00:00:00")), PARTITION p201210 VALUES LESS THAN (UNIX_TIMESTAMP("2012-11-01 00:00:00")), PARTITION p201211 VALUES LESS THAN (UNIX_TIMESTAMP("2012-12-01 00:00:00")), PARTITION p201212 VALUES LESS THAN (UNIX_TIMESTAMP("2013-01-01 00:00:00")) ); ALTER TABLE `alerts` PARTITION BY RANGE( clock ) ( PARTITION p201105 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-01 00:00:00")), PARTITION p201106 VALUES LESS THAN (UNIX_TIMESTAMP("2011-07-01 00:00:00")), PARTITION p201107 VALUES LESS THAN (UNIX_TIMESTAMP("2011-08-01 00:00:00")), PARTITION p201108 VALUES LESS THAN (UNIX_TIMESTAMP("2011-09-01 00:00:00")), PARTITION p201109 VALUES LESS THAN (UNIX_TIMESTAMP("2011-10-01 00:00:00")), PARTITION p201110 VALUES LESS THAN (UNIX_TIMESTAMP("2011-11-01 00:00:00")), PARTITION p201111 VALUES LESS THAN (UNIX_TIMESTAMP("2011-12-01 00:00:00")), PARTITION p201112 VALUES LESS THAN (UNIX_TIMESTAMP("2012-01-01 00:00:00")), PARTITION p201201 VALUES LESS THAN (UNIX_TIMESTAMP("2012-02-01 00:00:00")), PARTITION p201202 VALUES LESS THAN (UNIX_TIMESTAMP("2012-03-01 00:00:00")), PARTITION p201203 VALUES LESS THAN (UNIX_TIMESTAMP("2012-04-01 00:00:00")), PARTITION p201204 VALUES LESS THAN (UNIX_TIMESTAMP("2012-05-01 00:00:00")), PARTITION p201205 VALUES LESS THAN (UNIX_TIMESTAMP("2012-06-01 00:00:00")), PARTITION p201206 VALUES LESS THAN (UNIX_TIMESTAMP("2012-07-01 00:00:00")), PARTITION p201207 VALUES LESS THAN (UNIX_TIMESTAMP("2012-08-01 00:00:00")), PARTITION p201208 VALUES LESS THAN (UNIX_TIMESTAMP("2012-09-01 00:00:00")), PARTITION p201209 VALUES LESS THAN (UNIX_TIMESTAMP("2012-10-01 00:00:00")), PARTITION p201210 VALUES LESS THAN (UNIX_TIMESTAMP("2012-11-01 00:00:00")), PARTITION p201211 VALUES LESS THAN (UNIX_TIMESTAMP("2012-12-01 00:00:00")), PARTITION p201212 VALUES LESS THAN (UNIX_TIMESTAMP("2013-01-01 00:00:00")) ); ALTER TABLE `auditlog` PARTITION BY RANGE( clock ) ( PARTITION p201105 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-01 00:00:00")), PARTITION p201106 VALUES LESS THAN (UNIX_TIMESTAMP("2011-07-01 00:00:00")), PARTITION p201107 VALUES LESS THAN (UNIX_TIMESTAMP("2011-08-01 00:00:00")), PARTITION p201108 VALUES LESS THAN (UNIX_TIMESTAMP("2011-09-01 00:00:00")), PARTITION p201109 VALUES LESS THAN (UNIX_TIMESTAMP("2011-10-01 00:00:00")), PARTITION p201110 VALUES LESS THAN (UNIX_TIMESTAMP("2011-11-01 00:00:00")), PARTITION p201111 VALUES LESS THAN (UNIX_TIMESTAMP("2011-12-01 00:00:00")), PARTITION p201112 VALUES LESS THAN (UNIX_TIMESTAMP("2012-01-01 00:00:00")), PARTITION p201201 VALUES LESS THAN (UNIX_TIMESTAMP("2012-02-01 00:00:00")), PARTITION p201202 VALUES LESS THAN (UNIX_TIMESTAMP("2012-03-01 00:00:00")), PARTITION p201203 VALUES LESS THAN (UNIX_TIMESTAMP("2012-04-01 00:00:00")), PARTITION p201204 VALUES LESS THAN (UNIX_TIMESTAMP("2012-05-01 00:00:00")), PARTITION p201205 VALUES LESS THAN (UNIX_TIMESTAMP("2012-06-01 00:00:00")), PARTITION p201206 VALUES LESS THAN (UNIX_TIMESTAMP("2012-07-01 00:00:00")), PARTITION p201207 VALUES LESS THAN (UNIX_TIMESTAMP("2012-08-01 00:00:00")), PARTITION p201208 VALUES LESS THAN (UNIX_TIMESTAMP("2012-09-01 00:00:00")), PARTITION p201209 VALUES LESS THAN (UNIX_TIMESTAMP("2012-10-01 00:00:00")), PARTITION p201210 VALUES LESS THAN (UNIX_TIMESTAMP("2012-11-01 00:00:00")), PARTITION p201211 VALUES LESS THAN (UNIX_TIMESTAMP("2012-12-01 00:00:00")), PARTITION p201212 VALUES LESS THAN (UNIX_TIMESTAMP("2013-01-01 00:00:00")) ); ALTER TABLE `events` PARTITION BY RANGE( clock ) ( PARTITION p201105 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-01 00:00:00")), PARTITION p201106 VALUES LESS THAN (UNIX_TIMESTAMP("2011-07-01 00:00:00")), PARTITION p201107 VALUES LESS THAN (UNIX_TIMESTAMP("2011-08-01 00:00:00")), PARTITION p201108 VALUES LESS THAN (UNIX_TIMESTAMP("2011-09-01 00:00:00")), PARTITION p201109 VALUES LESS THAN (UNIX_TIMESTAMP("2011-10-01 00:00:00")), PARTITION p201110 VALUES LESS THAN (UNIX_TIMESTAMP("2011-11-01 00:00:00")), PARTITION p201111 VALUES LESS THAN (UNIX_TIMESTAMP("2011-12-01 00:00:00")), PARTITION p201112 VALUES LESS THAN (UNIX_TIMESTAMP("2012-01-01 00:00:00")), PARTITION p201201 VALUES LESS THAN (UNIX_TIMESTAMP("2012-02-01 00:00:00")), PARTITION p201202 VALUES LESS THAN (UNIX_TIMESTAMP("2012-03-01 00:00:00")), PARTITION p201203 VALUES LESS THAN (UNIX_TIMESTAMP("2012-04-01 00:00:00")), PARTITION p201204 VALUES LESS THAN (UNIX_TIMESTAMP("2012-05-01 00:00:00")), PARTITION p201205 VALUES LESS THAN (UNIX_TIMESTAMP("2012-06-01 00:00:00")), PARTITION p201206 VALUES LESS THAN (UNIX_TIMESTAMP("2012-07-01 00:00:00")), PARTITION p201207 VALUES LESS THAN (UNIX_TIMESTAMP("2012-08-01 00:00:00")), PARTITION p201208 VALUES LESS THAN (UNIX_TIMESTAMP("2012-09-01 00:00:00")), PARTITION p201209 VALUES LESS THAN (UNIX_TIMESTAMP("2012-10-01 00:00:00")), PARTITION p201210 VALUES LESS THAN (UNIX_TIMESTAMP("2012-11-01 00:00:00")), PARTITION p201211 VALUES LESS THAN (UNIX_TIMESTAMP("2012-12-01 00:00:00")), PARTITION p201212 VALUES LESS THAN (UNIX_TIMESTAMP("2013-01-01 00:00:00")) ); ALTER TABLE `service_alarms` PARTITION BY RANGE( clock ) ( PARTITION p201105 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-01 00:00:00")), PARTITION p201106 VALUES LESS THAN (UNIX_TIMESTAMP("2011-07-01 00:00:00")), PARTITION p201107 VALUES LESS THAN (UNIX_TIMESTAMP("2011-08-01 00:00:00")), PARTITION p201108 VALUES LESS THAN (UNIX_TIMESTAMP("2011-09-01 00:00:00")), PARTITION p201109 VALUES LESS THAN (UNIX_TIMESTAMP("2011-10-01 00:00:00")), PARTITION p201110 VALUES LESS THAN (UNIX_TIMESTAMP("2011-11-01 00:00:00")), PARTITION p201111 VALUES LESS THAN (UNIX_TIMESTAMP("2011-12-01 00:00:00")), PARTITION p201112 VALUES LESS THAN (UNIX_TIMESTAMP("2012-01-01 00:00:00")), PARTITION p201201 VALUES LESS THAN (UNIX_TIMESTAMP("2012-02-01 00:00:00")), PARTITION p201202 VALUES LESS THAN (UNIX_TIMESTAMP("2012-03-01 00:00:00")), PARTITION p201203 VALUES LESS THAN (UNIX_TIMESTAMP("2012-04-01 00:00:00")), PARTITION p201204 VALUES LESS THAN (UNIX_TIMESTAMP("2012-05-01 00:00:00")), PARTITION p201205 VALUES LESS THAN (UNIX_TIMESTAMP("2012-06-01 00:00:00")), PARTITION p201206 VALUES LESS THAN (UNIX_TIMESTAMP("2012-07-01 00:00:00")), PARTITION p201207 VALUES LESS THAN (UNIX_TIMESTAMP("2012-08-01 00:00:00")), PARTITION p201208 VALUES LESS THAN (UNIX_TIMESTAMP("2012-09-01 00:00:00")), PARTITION p201209 VALUES LESS THAN (UNIX_TIMESTAMP("2012-10-01 00:00:00")), PARTITION p201210 VALUES LESS THAN (UNIX_TIMESTAMP("2012-11-01 00:00:00")), PARTITION p201211 VALUES LESS THAN (UNIX_TIMESTAMP("2012-12-01 00:00:00")), PARTITION p201212 VALUES LESS THAN (UNIX_TIMESTAMP("2013-01-01 00:00:00")) ); * This source code was highlighted with Source Code Highlighter .

एक दैनिक विभाजन तालिका बनाएँ

ALTER TABLE `history_uint` PARTITION BY RANGE( clock ) ( PARTITION p20110603 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-03 00:00:00")), PARTITION p20110604 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-04 00:00:00")), PARTITION p20110605 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-05 00:00:00")), PARTITION p20110606 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-06 00:00:00")), PARTITION p20110607 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-07 00:00:00")), PARTITION p20110608 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-08 00:00:00")), PARTITION p20110609 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-09 00:00:00")), PARTITION p20110610 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-10 00:00:00")), PARTITION p20110611 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-11 00:00:00")) ); ALTER TABLE `history_log` PARTITION BY RANGE( clock ) ( PARTITION p20110603 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-03 00:00:00")), PARTITION p20110604 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-04 00:00:00")), PARTITION p20110605 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-05 00:00:00")), PARTITION p20110606 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-06 00:00:00")), PARTITION p20110607 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-07 00:00:00")), PARTITION p20110608 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-08 00:00:00")), PARTITION p20110609 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-09 00:00:00")), PARTITION p20110610 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-10 00:00:00")), PARTITION p20110611 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-11 00:00:00")) ); ALTER TABLE `history_text` PARTITION BY RANGE( clock ) ( PARTITION p20110603 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-03 00:00:00")), PARTITION p20110604 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-04 00:00:00")), PARTITION p20110605 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-05 00:00:00")), PARTITION p20110606 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-06 00:00:00")), PARTITION p20110607 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-07 00:00:00")), PARTITION p20110608 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-08 00:00:00")), PARTITION p20110609 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-09 00:00:00")), PARTITION p20110610 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-10 00:00:00")), PARTITION p20110611 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-11 00:00:00")) ); ALTER TABLE `history` PARTITION BY RANGE( clock ) ( PARTITION p20110603 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-03 00:00:00")), PARTITION p20110604 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-04 00:00:00")), PARTITION p20110605 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-05 00:00:00")), PARTITION p20110606 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-06 00:00:00")), PARTITION p20110607 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-07 00:00:00")), PARTITION p20110608 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-08 00:00:00")), PARTITION p20110609 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-09 00:00:00")), PARTITION p20110610 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-10 00:00:00")), PARTITION p20110611 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-11 00:00:00")) ); ALTER TABLE `history_str` PARTITION BY RANGE( clock ) ( PARTITION p20110603 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-03 00:00:00")), PARTITION p20110604 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-04 00:00:00")), PARTITION p20110605 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-05 00:00:00")), PARTITION p20110606 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-06 00:00:00")), PARTITION p20110607 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-07 00:00:00")), PARTITION p20110608 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-08 00:00:00")), PARTITION p20110609 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-09 00:00:00")), PARTITION p20110610 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-10 00:00:00")), PARTITION p20110611 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-11 00:00:00")) ); * This source code was highlighted with Source Code Highlighter .

हम प्रत्येक तालिका के डेटा को इस प्रकार पुनर्स्थापित करते हैं (प्रत्येक तालिका की अपनी डंप फ़ाइल नाम के लिए प्रतिस्थापन)
mysql zabbix < 09.06.2011_history_str.sql

अंतिम परिणाम में, डेटा को बहुत आसानी से संग्रहीत किया जाएगा - हर दिन / महीने एक अलग फ़ाइल में, तालिका का एक अलग हिस्सा

ls -l /var/lib/mysql/zabbix/ |grep history_u
-rw-rw---- 1 mysql mysql 8628 2011-06-08 14:00 history_uint.frm
-rw-rw---- 1 mysql mysql 140 2011-06-08 14:00 history_uint.par
-rw-rw---- 1 mysql mysql 457179136 2011-06-07 11:34 history_uint#P#p20110605.ibd
-rw-rw---- 1 mysql mysql 557842432 2011-06-07 11:34 history_uint#P#p20110606.ibd
-rw-rw---- 1 mysql mysql 620756992 2011-06-07 11:34 history_uint#P#p20110607.ibd
-rw-rw---- 1 mysql mysql 629145600 2011-06-08 00:03 history_uint#P#p20110608.ibd
-rw-rw---- 1 mysql mysql 666894336 2011-06-09 00:08 history_uint#P#p20110609.ibd
-rw-rw---- 1 mysql mysql 423624704 2011-06-09 14:55 history_uint#P#p20110610.ibd
-rw-rw---- 1 mysql mysql 114688 2011-06-07 11:09 history_uint#P#p20110611.ibd
-rw-rw---- 1 mysql mysql 114688 2011-06-07 11:44 history_uint#P#p20110612.ibd
-rw-rw---- 1 mysql mysql 114688 2011-06-07 11:44 history_uint#P#p20110613.ibd
-rw-rw---- 1 mysql mysql 114688 2011-06-07 11:44 history_uint#P#p20110614.ibd
-rw-rw---- 1 mysql mysql 114688 2011-06-08 14:00 history_uint#P#p20110615.ibd
-rw-rw---- 1 mysql mysql 8688 2011-05-27 21:30 history_uint_sync.frm
-rw-rw---- 1 mysql mysql 131072 2011-05-27 21:30 history_uint_sync.ibd

पुराने डेटा को साफ करना एक साधारण कमांड के साथ किया जाता है (तालिका की जगह पर आपको 'history_uint`' की जगह चाहिए)
ALTER TABLE `history_uint` DROP PARTITION p20110604;
तालिका का एक नया भाग जोड़ना
ALTER TABLE `history_uint` ADD PARTITION (PARTITION p20110628 VALUES LESS THAN (UNIX_TIMESTAMP("2011-06-29 00:00:00")));

तालिकाओं को साफ करने और नए लोगों को जोड़ने के लिए अपने हाथों का उपयोग करना किसी तरह से दिलचस्प नहीं है, फिर से ब्लॉग पर वे दिनों से टूटी हुई तालिकाओं के लिए एक प्रक्रिया प्रदान करते हैं। कोड को यहां pastebin.com/ijyKkxLh लिया गया है ताकि इसे पोस्टरिटी के लिए सहेजने के लिए मैं इसे यहां बदलाव के बिना पोस्ट करूंगा।

/************************************************************** MySQL Auto Partitioning Procedure for Zabbix 1.8 zabbixzone.com/zabbix/partitioning-tables Author: Ricardo Santos (rsantos at gmail.com) Version: 20110518 **************************************************************/ DELIMITER // DROP PROCEDURE IF EXISTS `zabbix`.`create_zabbix_partitions` // CREATE PROCEDURE `zabbix`.`create_zabbix_partitions` () BEGIN CALL zabbix.create_next_partitions("zabbix","history"); CALL zabbix.create_next_partitions("zabbix","history_log"); CALL zabbix.create_next_partitions("zabbix","history_str"); CALL zabbix.create_next_partitions("zabbix","history_text"); CALL zabbix.create_next_partitions("zabbix","history_uint"); CALL zabbix.drop_old_partitions("zabbix","history"); CALL zabbix.drop_old_partitions("zabbix","history_log"); CALL zabbix.drop_old_partitions("zabbix","history_str"); CALL zabbix.drop_old_partitions("zabbix","history_text"); CALL zabbix.drop_old_partitions("zabbix","history_uint"); END // DROP PROCEDURE IF EXISTS `zabbix`.`create_next_partitions` // CREATE PROCEDURE `zabbix`.`create_next_partitions` (SCHEMANAME varchar (64), TABLENAME varchar (64)) BEGIN DECLARE NEXTCLOCK timestamp ; DECLARE PARTITIONNAME varchar (16); DECLARE CLOCK int ; SET @totaldays = 7; SET @i = 1; createloop: LOOP SET NEXTCLOCK = DATE_ADD(NOW(), INTERVAL @i DAY ); SET PARTITIONNAME = DATE_FORMAT( NEXTCLOCK, 'p%Y%m%d' ); SET CLOCK = UNIX_TIMESTAMP(DATE_FORMAT(DATE_ADD( NEXTCLOCK , INTERVAL 1 DAY ), '%Y-%m-%d 00:00:00' )); CALL zabbix.create_partition( SCHEMANAME, TABLENAME, PARTITIONNAME, CLOCK ); SET @i=@i+1; IF @i > @totaldays THEN LEAVE createloop; END IF ; END LOOP; END // DROP PROCEDURE IF EXISTS `zabbix`.`drop_old_partitions` // CREATE PROCEDURE `zabbix`.`drop_old_partitions` (SCHEMANAME varchar (64), TABLENAME varchar (64)) BEGIN DECLARE OLDCLOCK timestamp ; DECLARE PARTITIONNAME varchar (16); DECLARE CLOCK int ; SET @mindays = 3; SET @maxdays = @mindays+4; SET @i = @maxdays; droploop: LOOP SET OLDCLOCK = DATE_SUB(NOW(), INTERVAL @i DAY ); SET PARTITIONNAME = DATE_FORMAT( OLDCLOCK, 'p%Y%m%d' ); CALL zabbix.drop_partition( SCHEMANAME, TABLENAME, PARTITIONNAME ); SET @i=@i-1; IF @i <= @mindays THEN LEAVE droploop; END IF ; END LOOP; END // DROP PROCEDURE IF EXISTS `zabbix`.`create_partition` // CREATE PROCEDURE `zabbix`.`create_partition` (SCHEMANAME varchar (64), TABLENAME varchar (64), PARTITIONNAME varchar (64), CLOCK int ) BEGIN DECLARE RETROWS int ; SELECT COUNT (1) INTO RETROWS FROM `information_schema`.`partitions` WHERE `table_schema` = SCHEMANAME AND `table_name` = TABLENAME AND `partition_name` = PARTITIONNAME; IF RETROWS = 0 THEN SELECT CONCAT( "create_partition(", SCHEMANAME, ",", TABLENAME, ",", PARTITIONNAME, ",", CLOCK, ")" ) AS msg; SET @ sql = CONCAT( 'ALTER TABLE `' , SCHEMANAME, '`.`' , TABLENAME, '`' , ' ADD PARTITION (PARTITION ' , PARTITIONNAME, ' VALUES LESS THAN (' , CLOCK, '));' ); PREPARE STMT FROM @ sql ; EXECUTE STMT; DEALLOCATE PREPARE STMT; END IF ; END // DROP PROCEDURE IF EXISTS `zabbix`.`drop_partition` // CREATE PROCEDURE `zabbix`.`drop_partition` (SCHEMANAME varchar (64), TABLENAME varchar (64), PARTITIONNAME varchar (64)) BEGIN DECLARE RETROWS int ; SELECT COUNT (1) INTO RETROWS FROM `information_schema`.`partitions` WHERE `table_schema` = SCHEMANAME AND `table_name` = TABLENAME AND `partition_name` = PARTITIONNAME; IF RETROWS = 1 THEN SELECT CONCAT( "drop_partition(", SCHEMANAME, ",", TABLENAME, ",", PARTITIONNAME, ")" ) AS msg; SET @ sql = CONCAT( 'ALTER TABLE `' , SCHEMANAME, '`.`' , TABLENAME, '`' , ' DROP PARTITION ' , PARTITIONNAME, ';' ); PREPARE STMT FROM @ sql ; EXECUTE STMT; DEALLOCATE PREPARE STMT; END IF ; END // DELIMITER ; * This source code was highlighted with Source Code Highlighter .

अब यह हर 3 दिन में ताज पर इस कोड के निष्पादन को जोड़ना है
विन्यास क्राउन में लाइन कुछ इस तरह दिखाई देगी
0 6 */3 * * ___ mysql -B -h localhost -u zabbix -p zabbix -e "CALL create_zabbix_partitions();"

हमने डेटाबेस की स्थापना पूरी कर ली है।

उपकरण पर बोर्डों की संख्या पर टेम्पलेट्स के ऑटो-बाइंडिंग सेट करें

लोहे के मेरे टुकड़े ग्राहकों के बंदरगाहों के साथ बोर्ड जोड़कर काफी बड़े और पैमाने पर हैं। लोहे के टुकड़े में गैर-मौजूदा बंदरगाहों को फिर से पूछताछ न करने के लिए, मैंने सभी टेम्प्लेट को बोर्डों में तोड़ दिया। एक खोज नियम जोड़ा गया है कि दिन में एक बार एक विशिष्ट ओड पर दस्तक दी जाती है। इस ओड से उत्तर आपको यह पता लगाने की अनुमति देता है कि बोर्ड स्लॉट में स्थापित है या नहीं। स्कैनिंग ग्रंथियों के प्रकार की पूरी श्रृंखला पर जाती है।

उन दो क्रियाओं को जोड़ा गया है जो या तो इस कार्ड के टेम्प्लेट को नोड में बाँधती हैं, या टेम्प्लेट को इससे अछूता है, यह पता लगाने पर प्राप्त मान के आधार पर प्रदर्शन करती है।

इस तरह के सरल कार्यों से, हमें एक्सेस नोड्स में स्थापित कार्ड की संख्या को नियंत्रित करने के थकाऊ कार्य से छुटकारा मिलता है।

हमें क्या मिला?

नीचे दिए गए और अन्य विभिन्न ग्राफिक्स लोड हो रहे हैं।
डेटाबेस आकार के ग्राफ पर, आप दो बूंदें देख सकते हैं, पहली बूंद - प्रक्रिया की पहली शुरुआत, एक दिन में दूसरी बूंद - प्रक्रिया का मैनुअल सत्यापन।

संक्षिप्त गुणवत्ता लक्षण

जैसा कि आप देख सकते हैं, संसाधन आपको प्रदर्शन के बहुत नुकसान के बिना भार उठाने की अनुमति देते हैं। मैं घटियापन करता था और वस्तुओं की संख्या को 300,000 और प्रति सेकंड प्राप्त मूल्यों की संख्या को 200 तक लाता था। अब वह सब कुछ जो अतिरेकपूर्ण है और निगरानी से आवश्यक नहीं है हटा दिया गया है।

मामूली बोनस

एफटीटीबी नेटवर्क कार्ड के एक हिस्से का एक उदाहरण

एक कॉर्पोरेट ग्राहक के लिए लिंक नियंत्रण

जारी रखने के लिए यदि विषय दिलचस्प है))

पी एस मैं सामग्री के कुछ गड़बड़ प्रस्तुति के लिए माफी माँगता हूँ।
UPD: वर्तनी और व्याकरण की त्रुटियों का सही हिस्सा।
UPD2: कई और वर्तनी और व्याकरण त्रुटियों को ठीक किया, खोए हुए लिंक को ठीक किया।

Zabbix, अंतिम मील के बंदरगाहों की निगरानी करना और विभाजन का उपयोग करके डेटाबेस के साथ अनुकूलन करना

परिभाषित करें कि हम कैसे ट्रिगर की निगरानी और निर्माण करेंगे

Zabbix के लिए डेटाबेस सेट करते हैं

उपकरण पर बोर्डों की संख्या पर टेम्पलेट्स के ऑटो-बाइंडिंग सेट करें

हमें क्या मिला?

मामूली बोनस

More articles: