संभावित निगरानी, ​​संभावित विफलता अलर्ट

यह पोस्ट पिछले एक की निरंतरता है। पूर्वानुमान निगरानी एक मानक निगरानी विधि नहीं है। इसलिए, सूचनाओं का उपयोग काफी मानक नहीं होना चाहिए। विचार करें कि यह कैसे किया जाता है और बिल्कुल क्यों।

नोटिफिकेशन क्या होना चाहिए

मुझे लगता है कि हर कोई दिलचस्पी रखता है कि कौन अपने दैनिक कार्य में किस निगरानी प्रणाली का उपयोग करता है। हम, उदाहरण के लिए, यार का उपयोग करें। हमने उसे सिखाया कि संपूर्ण बुनियादी ढांचे की निगरानी कैसे की जाए, हमारे लिए सबसे महत्वपूर्ण है - वीओआईपी को पार करना। डिफ़ॉल्ट रूप से दोस्त जानता है कि क्लाइंट एप्लिकेशन के चलने पर मेल और पॉपअप द्वारा अलर्ट कैसे दिया जाए। इसके अलावा, हमने उसे एक बाहरी एप्लिकेशन के साथ एसएमएस भेजने के लिए सिखाया। लेकिन यह उस बारे में नहीं है।
जब मॉनिटरिंग सिस्टम से कोई अलर्ट आता है, तो अलर्ट को स्वयं इंगित करना चाहिए कि किन नोड्स में विफलता हुई थी, और मूल्य के अंतिम माप की निगरानी की जा रही थी। उदाहरण के लिए, आपको एक सूचना प्राप्त हो सकती है कि Router1 पर प्रोसेसर 95 प्रतिशत भरा हुआ है। अपने आप में इस तरह की चेतावनी यह समझने के लिए पर्याप्त है कि आपको इसका जवाब देने की कितनी जल्दी आवश्यकता है। एक और बात यह है कि जब आप पूर्वानुमान विधि का उपयोग करके निगरानी करते हैं और एक ही समय में हजारों मापदंडों की स्थिति की जांच करते हैं।
हां, आप एक चेतावनी में अंतिम माप के परिणाम की रिपोर्ट कर सकते हैं, आप कई हालिया मापों के औसत परिणाम या माप मूल्य भी प्रदर्शित कर सकते हैं जो एक दिन पहले था। लेकिन यह अक्सर पर्याप्त नहीं हो सकता है। इस मामले में सबसे प्रभावी अधिसूचना विधि अधिसूचना है, जो एक निश्चित अवधि के लिए मापा मूल्य का ग्राफ प्रदर्शित करती है। चार्ट पर एक सरल नज़र यह समझने के लिए पर्याप्त होने की संभावना है कि क्या संभावित विफलता महत्वपूर्ण है, और क्या विफलता वास्तव में हुई है, या क्या यह एक झूठी सकारात्मक है।

Rrdtool में कार्यान्वयन विवरण

जैसा कि मैंने पिछले पोस्टों में लिखा था, rrdtool के लिए संभावित विफलताओं की भविष्यवाणी करने और पहचानने के लिए शुरू करने के लिए - aberrations, आपको सही तरीके से rrd डेटाबेस बनाने और बस इसे वर्तमान मानों से भरने की आवश्यकता है। इस कॉन्फ़िगरेशन के साथ, मापा मूल्य के अलावा, आधार स्वचालित रूप से एक और मूल्य - विफलताओं से भरा होता है। FAILURES एक साधारण हैश है जिसका सूचकांक समय (यूनिक्सटाइम) है जिस पर माप लिया गया था। सूचकांक मूल्य मापा मूल्य विपथन की उपस्थिति का संकेत देते हैं। यह सरल है, एक विपथन था, FAILURES का मूल्य 1 है, वहाँ - 0 नहीं था।
हालाँकि, अंतिम माप के बाद केवल फील्‍स मान की जाँच करना काफी नहीं है। तथ्य यह है कि विपथन काफी लंबे समय तक रह सकता है, ग्राफ पर एक नज़र डालें।

सबसे अधिक संभावना है, निगरानी प्रणाली को मूल्य के प्रत्येक माप के बाद चेतावनी नहीं देनी चाहिए जबकि विपथन मौजूद है। हालांकि, कुछ मामलों में, यह भी किया जाना चाहिए। इसके अलावा, अगर उन्मूलन खत्म हो गया है, तो इसका मतलब यह नहीं है कि समस्या ठीक हो गई है, ऐसा हो सकता है कि सिस्टम केवल नए मूल्यों के पूर्वानुमान को समायोजित करता है। वास्तविक उदाहरण नीचे दिए गए आंकड़े में है, धारा के साथ समस्या हल नहीं हुई है, और विपथन पहले ही समाप्त हो गया है।

निगरानी करते समय सबसे सही आईएमएचओ भविष्यवाणी है कि जब यह शुरू हुआ और कब समाप्त हो गया, इस समय एक शेड्यूल के साथ अलर्ट भेजना है।

यह कैसे किया जाता है

दरअसल, स्क्रिप्ट:

#!/usr/bin/env python import os import time import rrdtool import tempfile import smtplib from email.mime.image import MIMEImage from email.mime.multipart import MIMEMultipart COMMASPACE = ', ' # Define params rrdpath = '/usr/rrdmonit/rrd/' pngpath = '/usr/local/share/cacti/rrdmonit/ width = '500' height = '200' mailsender = "alerter@my-domain.com" mailreceip = ["admins@my-domain.com", "support@my-domain.com"] mailserver = 'mx.my-domain.com' # Generate charts for last 48 hours enddate = int(time.mktime(time.localtime())) begdate = enddate - 172800 def send_alert_attached(subject, flist): """ Will send e-mail, attaching png files in the flist. """ msg = MIMEMultipart() msg['Subject'] = subject msg['From'] = mailsender msg['To'] = COMMASPACE.join(mailreceip) for file in flist: png_file = pngpath+file.split('.')[0]+'.png' print png_file fp = open(png_file, 'rb') img = MIMEImage(fp.read()) fp.close() msg.attach(img) mserver = smtplib.SMTP(mailserver) mserver.sendmail(mailsender, mailreceip, msg.as_string()) mserver.quit() def check_aberration(rrdpath,fname): """ This will check for begin and end of aberration in file. Will return: 0 if aberration not found. 1 if aberration begins 2 if aberration ends """ ab_status = 0 rrdfilename = rrdpath+fname info = rrdtool.info(rrdfilename) rrdstep = int(info['step']) lastupdate = info['last_update'] previosupdate = str(lastupdate - rrdstep - 1) graphtmpfile = tempfile.NamedTemporaryFile() # Ready to get FAILURES from rrdfile # will process failures array values for time of 2 last updates values = rrdtool.graph(graphtmpfile.name, 'DEF:f0='+rrdfilename+':val:FAILURES:start='+previosupdate+':end='+str(lastupdate), 'PRINT:f0:MIN:%1.0lf', 'PRINT:f0:MAX:%1.0lf', 'PRINT:f0:LAST:%1.0lf') fmin = int(values[2][0]) fmax = int(values[2][1]) flast = int(values[2][2]) # check if failure value had changed. if (fmin != fmax): if (flast == 1): ab_status = 1 else: ab_status = 2 return ab_status def gen_image(rrdpath, pngpath, fname, width, height, begdate, enddate): """ Generates png file from rrd database: rrdpath - the path where rrd is located pngpath - the path png file should be created in fname - rrd file name, png file will have the same name .png extention width - chart area width height - chart area height begdate - unixtime enddate - unixtime """ # 24 hours before current time, will show on chart using SHIFT option ldaybeg = str(begdate - 86400) ldayend = str(enddate - 86400) # Will show some additional info on chart endd_str = time.strftime("%d/%m/%Y %H:%M:%S",(time.localtime(int(enddate)))).replace(':','\:') begd_str = time.strftime("%d/%m/%Y %H:%M:%S",(time.localtime(int(begdate)))).replace(':','\:') title = 'Chart for: '+fname.split('.')[0] # Files names pngfname = pngpath+fname.split('.')[0]+'.png' rrdfname = rrdpath+fname # Get iformation from rrd file info = rrdtool.info(rrdfname) rrdtype = info['ds[val].type'] # Will use multip variable for calculation of totals, # should be usefull for internet traffic accounting, # or call/minutes count from CDR's. # Do not need logic for DERIVE and ABSOLUTE if rrdtype == 'COUNTER': multip = str(int(enddate) - int(begdate)) else: # if value type is GAUGE should divide time to step value rrdstep = info['step'] multip = str(round((int(enddate) - int(begdate))/int(rrdstep))) # Make png image rrdtool.graph(pngfname, '--width',width,'--height',height, '--start',str(begdate),'--end',str(enddate),'--title='+title, '--lower-limit','0', '--slope-mode', 'COMMENT:From\:'+begd_str+' To\:'+endd_str+'\\c', 'DEF:value='+rrdfname+':val:AVERAGE', 'DEF:pred='+rrdfname+':val:HWPREDICT', 'DEF:dev='+rrdfname+':val:DEVPREDICT', 'DEF:fail='+rrdfname+':val:FAILURES', 'DEF:yvalue='+rrdfname+':val:AVERAGE:start='+ldaybeg+':end='+ldayend, 'SHIFT:yvalue:86400', 'CDEF:upper=pred,dev,2,*,+', 'CDEF:lower=pred,dev,2,*,-', 'CDEF:ndev=dev,-1,*', 'CDEF:tot=value,'+multip+',*', 'CDEF:ytot=yvalue,'+multip+',*', 'TICK:fail#FDD017:1.0:"Failures"\\n', 'AREA:yvalue#C0C0C0:"Yesterday\:"', 'GPRINT:ytot:AVERAGE:"Total\:%8.0lf"', 'GPRINT:yvalue:MAX:"Max\:%8.0lf"', 'GPRINT:yvalue:AVERAGE:"Average\:%8.0lf" \\n', 'LINE3:value#0000ff:"Value \:"', 'GPRINT:tot:AVERAGE:"Total\:%8.0lf"', 'GPRINT:value:MAX:"Max\:%8.0lf"', 'GPRINT:value:AVERAGE:"Average\:%8.0lf" \\n', 'LINE1:upper#ff0000:"Upper Bound "', 'LINE1:pred#ff00FF:"Forecast "', 'LINE1:ndev#000000:"Deviation "', 'LINE1:lower#00FF00:"Lower Bound "') # List of new aberrations begin_ab = [] # List of gone aberrations end_ab = [] # List files and generate charts for fname in os.listdir(rrdpath): gen_image(rrdpath, pngpath, fname, width, height, begdate, enddate) # Now check files for beiaberrations for fname in os.listdir(rrdpath): ab_status = check_aberration(rrdpath,fname) if ab_status == 1: begin_ab.append(fname) if ab_status == 2: end_ab.append(fname) if len(begin_ab) > 0: send_alert_attached('New aberrations detected',begin_ab) if len(end_ab) > 0: send_alert_attached('Abberations gone',end_ab) 

यह पिछली पोस्ट में दी गई स्क्रिप्ट का एक संशोधन है, जिसमें अपकर्षण की जाँच करने और मेल भेजने की प्रक्रियाएँ शामिल हैं।

पीएस मैं अजगर में समाधान की क्षमता और सुंदरता को देखकर चकित नहीं हूं।