ऑन-द-घुटने की निगरानी - जावा अनुप्रयोगों को नियंत्रित करने के लिए कैक्टि का उपयोग करना

यह आलेख एक बड़े जावा अनुप्रयोग के संसाधनों की खपत का विश्लेषण और नियंत्रण करने के कार्य के उदाहरण का उपयोग करके कैक्टि का एक निगरानी समाधान का वर्णन करता है।

मेरा काम एक छोटे से समय में मेमोरी खपत और प्रदर्शन के साथ समस्याओं के साथ एक बड़े त्रि-स्तरीय जावा एप्लिकेशन को स्थिर करने के उपायों का प्रस्ताव करना था। समय, हमेशा की तरह, सब कुछ के लिए 1-2 सप्ताह: छोटा है। कंपनी के पास एक उपयुक्त एप्लिकेशन मॉनिटरिंग इन्फ्रास्ट्रक्चर की कमी थी, और इसे बनाना मेरा काम नहीं था। JConsole का उपयोग करने का विकल्प लंबे समय से खपत का विश्लेषण करने और अनुप्रयोगों के अचानक रिबूट के बाद इसे देखने की आवश्यकता के कारण उपयुक्त नहीं था।

जिन कंपनियों में मैंने काम किया उनमें से एक में, RRD टूल पर आधारित जावा अनुप्रयोगों की निगरानी के लिए एक समाधान सुविधा और सादगी के संदर्भ में प्रभावशाली था। इसमें एक साधारण ऐड-ऑन पर्ल-स्क्रिप्ट शामिल थी जो HTTP के माध्यम से डेटा संग्रह और प्रदर्शन प्रदान करती है और एप्लिकेशन में कई सुधार-डेटा संग्रह एजेंट हैं। मेरे लिए, यह एक समाधान का विचार था, हालांकि, मेरे पास आरआरडी पर बाध्यकारी लिखने का समय नहीं था।

सावधानीपूर्वक खोज करने के बाद, मुझे एक निशुल्क उपकरण मिला, जो ऐड-ऑन को मेरी ज़रूरत है - कैक्टि। कैक्टि अपाचे-PHP-MySql ढांचे में लिखा गया एक आवेदन है जो आपको वेब इंटरफ़ेस के आधार पर निगरानी डेटा के संग्रह और प्रदर्शन को कॉन्फ़िगर करने की अनुमति देता है। बुनियादी ढांचे को ऊपर उठाने, फिर डेटा संग्रह एजेंटों और सभी को जोड़ने के लिए कुछ दिनों के साथ सौदा करना आसान हो गया।

इसके अलावा, लेख में विस्तार से वर्णन किया गया है जो मुझे अपनी समस्या को हल करने की अनुमति देता है और अंत में, कंपनी में आवेदन को सफलतापूर्वक स्थिर करने के लिए।



आपको क्या काम करना है:

• Cacti 0.8.7i (कार्यान्वयन के समय नवीनतम संस्करण)
• अपाचे 2.2.21 (कैक्टि के लिए इंजन)
• PHP 5.3.8 (जिस प्लेटफॉर्म पर Cacti लिखा गया है)
• MySQL 5.5 (कैक्टि सेटिंग संग्रहीत करना)
• RRDTool 1.2.30 (आरेख चित्र और संग्रहण निगरानी डेटा)

(जिन संस्करणों पर निगरानी शुरू की गई थी, वे संकेत कर रहे हैं; कोई भी काम करने वाला Apache-PHP-MySql बंडल करेगा)

मैं कैक्टि पर निगरानी के सिद्धांत का वर्णन करूंगा: विंडोज के "अनुसूचित कार्यों" (या यूनिक्स में क्रोन) का उपयोग करके, डेटा संग्रह एजेंटों का मतदान समय-समय पर शुरू होता है, जो मेरे मामले में थे: जेवीएम खुद (मेमोरी की खपत) और आवेदन में विशेष सुधार। एकत्रित जानकारी को आरआरडी डेटाबेस में रखा गया है - अर्थात फ़ाइलों के रूप में परिपत्र बफ़र्स में। इसके अलावा, आरआरडी से संचित डेटा को कैक्टि वेब इंटरफेस के माध्यम से मिनट, घंटे, दिन, महीने, आदि के संदर्भ में विभिन्न पैमानों पर देखा जा सकता है।

कार्य योजना सभी आवश्यक बुनियादी ढांचे को बढ़ाने, डेटा संग्रह के लिए विश्लेषण किए गए अनुप्रयोगों को अनुकूलित करने और कैक्टि में डेटा के संग्रह और आउटपुट को कॉन्फ़िगर करने के लिए है।

इन्फ्रास्ट्रक्चर सेटअप

पीएचपी

पथ चर के लिए php.exe में पथ जोड़ें, PHPRC चर में एक ही पथ लिखें

Php.ini-production फाइल को php.ini पर कॉपी करें और php.ini को निम्नलिखित बदलाव करें:

Uncomment लाइनें:

 extension_dir = c: \ php \ ext
 एक्सटेंशन = php_mysql.dll
 एक्सटेंशन = php_snmp.dll
 एक्सटेंशन = php_sockets.dll
 cgi.force_redirect = 0
 date.timezone = "यूरोप / मॉस्को"

अपाचे

निम्नलिखित पंक्तियों को conf \ httpd.conf में जोड़ें:

 LoadModule php5_module c: \ php \ php5apache2_2.dll
 AddType एप्लिकेशन / x-httpd-php .php
 DirectoryIndex index.html index.htm index.php

MySql

PATH चर में mysql.exe पथ जोड़ें

एक कैक्टि स्कीमा बनाना:

 mysql --user = root --password cacti बनाता है

कैक्टि स्कीमा डेटा संरचना आयात करें

 mysql --user = root --password cacti <c: \ apache2 \ htdocs \ cacti \ cacti.sql

कैक्टस उपयोगकर्ता बनाएँ:

 mysql --user = root --password 

अगला, MySql कमांड लाइन पर:

 mysql> 'cactiuser' द्वारा उपयोगकर्ता cactiuser @ localhost IDENTIFIED बनाएं
 mysql> Cacti पर सभी प्राप्त करें।
 mysql> फ्लश विशेषाधिकार;

Php-mysql-apache बंडल के त्वरित परीक्षण के लिए, मैंने निम्न php स्क्रिप्ट का उपयोग किया:

 <? php
 mysql_connect ("localhost", "cactiuser", "cactiuser") या die ("कनेक्ट नहीं हो सकता");
 mysql_query ("USE cacti") या मरना ("mysql डेटाबेस का चयन नहीं कर सकता");
 इको "सक्सेस \ n";
 ?>

आपको इसे एक नाम के साथ एक फ़ाइल में डालने की आवश्यकता है, उदाहरण के लिए, testphp.php, इसे Apache निर्देशिका htdocs पर कॉपी करें और लोकलहोस्ट पेज लोड करें: 8080 / testphp.php। शिलालेख "सफलता" दिखाई देनी चाहिए।

Cacti कॉन्फ़िगर करें

अपाचे / htdocs निर्देशिका के लिए कैक्टि वितरण खोलना।
सत्यापित करें कि cacti /include/config.php फ़ाइल में निम्न पंक्तियाँ हैं:

 $ डेटाबेस_डेफ़ॉल्ट = "कैक्टि";
 $ डेटाबेस_होस्टनेम = "लोकलहोस्ट";
 $ database_username = "cactiuser";
 $ डेटाबेस_पासवर्ड = "कैक्टसियर";
 $ डेटाबेस_पोर्ट = "3306";

लोकलहोस्ट पर जाएँ: 8080 / cacti / लॉगिन एडमिन / एडमिन के तहत।

सेटिंग्स में-> पथ सेटिंग्स, बाहरी उपयोगिताओं के लिए पथ सेट करें (यह यूनिक्स-शैली पथ का उपयोग करने के लिए अनुशंसित है, उदाहरण के लिए, c: /php/php.exe)।

Php cacti / poller.php कमांड को हर 5 मिनट (विंडोज़ शेड्यूल किए गए टास्क के माध्यम से) चलाने के लिए कॉन्फ़िगर करें। मैं इसके लिए एक बैच फ़ाइल का उपयोग करता हूं:

 start / MIN php.exe cacti \ poller.php

कैक्टि स्पाइन को कॉन्फ़िगर करना (वैकल्पिक: यह C ++ में लिखा गया एक पोलर है जिसका उपयोग कैक्टी द्वारा अनुशंसित पोलिंग को गति देने के लिए किया जाता है)
सुनिश्चित करने के लिए रीढ़ की हड्डी को आर्काइव को कैक्टि डायरेक्टरी में रखें। सुनिश्चित करें कि निम्नलिखित पंक्तियों में शामिल हैं:

 DB_Host 127.0.0.1 # सख्ती से लोकलहोस्ट नहीं है !!!
 DB_Database cacti
 DB_User कैक्टियस
 DB_Password कैक्टसियर
 DB_Port 3306

डेटा संग्रह का चयन करें और कॉन्फ़िगर करें

मैंने डेटा एकत्र करने के दो तरीके की कोशिश की - एसएनएमपी और जेवीएक्स सर्वर को जेवीएम और एप्लिकेशन के हिस्से के रूप में परागित करना। SNMP Cacti द्वारा समर्थित है और इसका उपयोग करना उचित है यदि आपको केवल JVM मेमोरी उपयोग देखने की आवश्यकता है और आपको इसे बहुत जल्दी करने की आवश्यकता है। मैंने एसएनएमपी के साथ शुरुआत की, लेकिन पहली सफलताओं के बाद मैंने जेएमएक्स पर स्विच किया। कैक्टि जेएमएक्स का समर्थन नहीं करता है, इसलिए आपको अतिरिक्त लचीलेपन के लिए भुगतान करना होगा - यह रिसीवर और जावा में प्रतिक्रिया लिखने का प्रयास करता है।

नीचे इसी कोड है।

मेमोरी की स्थिति के लिए जेवीएम को चुनने के लिए कोड (इसी तरह, कोड को मनमाने ढंग से जेएमएक्स सर्वर के लिए लिखा जाता है):

import java.io.Closeable; import java.io.IOException; import java.lang.management.MemoryMXBean; import java.lang.management.MemoryUsage; import javax.management.JMX; import javax.management.MBeanServerConnection; import javax.management.ObjectName; import javax.management.remote.JMXConnector; import javax.management.remote.JMXConnectorFactory; import javax.management.remote.JMXServiceURL; public class JvmHeapJmxClient { public static void main(String[] args) { JMXConnector jmxc = null; try { String jmxHost = args[0]; String jmxPort = args[1]; String jmxConnectionString = "service:jmx:rmi:///jndi/rmi://" + jmxHost + ":" + jmxPort + "/jmxrmi"; JMXServiceURL url = new JMXServiceURL(jmxConnectionString); jmxc = JMXConnectorFactory.connect(url, null); MBeanServerConnection mbsc = jmxc.getMBeanServerConnection(); ObjectName memoryMBeanName = new ObjectName("java.lang:type=Memory"); MemoryMXBean memoryMBeanProxy = JMX.newMXBeanProxy(mbsc, memoryMBeanName, MemoryMXBean.class, true); MemoryUsage memoryUsage = memoryMBeanProxy.getHeapMemoryUsage(); echo( "used:" + memoryUsage.getUsed() + " " + "committed:" + memoryUsage.getCommitted() + " " + "init:" + memoryUsage.getInit() + " " + "max:" + memoryUsage.getMax()); } catch(Exception e) { e.printStackTrace(); } finally { closeStream(jmxc); } } private static void echo(String msg) { System.out.println(msg); } private static void closeStream(Closeable stream) { try { if (stream != null) { stream.close(); } } catch (IOException e) { e.printStackTrace(); } } } 

जावा कोड को JMX चलाने के लिए। पोर्ट और होस्ट नाम को ठीक करने के लिए इन सभी कठिनाइयों की आवश्यकता होती है, जो एक फ़ायरवॉल के साथ आवश्यक है। प्रत्येक सेवा को 2 पोर्ट की आवश्यकता होती है, जैसा कि कोड से देखा जा सकता है - एक http एक्सेस के लिए, दूसरा आरएमआई के लिए। पोर्ट आवंटन स्पष्ट रूप से अलग तरीके से किया जा सकता है (इस मामले में, RMI पोर्ट = http पोर्ट + 1), जिसमें स्पष्ट रूप से दोनों पोर्ट निर्दिष्ट करना शामिल है। निम्नलिखित शब्दों को एप्लिकेशन लॉन्च लाइन (एजेंट कोड के साथ jmxagent - jar फ़ाइल) में जोड़ना होगा:

 -Djmxagent.port = <SERVER_JMX_PORT> -Djmxagent.host = <SERVER_HOST> -javaagent: jmxagent.jar

 import java.io.IOException; import java.lang.management.ManagementFactory; import java.rmi.registry.LocateRegistry; import java.util.HashMap; import javax.management.MBeanServer; import javax.management.remote.JMXConnectorServer; import javax.management.remote.JMXConnectorServerFactory; import javax.management.remote.JMXServiceURL; public class JmxFirewallAgent { private JmxFirewallAgent() { } public static void premain(String agentArgs) throws IOException { try { final int rmiRegistryPort = Integer.parseInt(System.getProperty("jmxagent.port")); LocateRegistry.createRegistry(rmiRegistryPort); final int rmiServerPort = rmiRegistryPort + 1; MBeanServer mbs = ManagementFactory.getPlatformMBeanServer(); HashMap<String,Object> env = new HashMap<String,Object>(); final String hostname = System.getProperty("jmxagent.host"); JMXServiceURL url = new JMXServiceURL("service:jmx:rmi://" + hostname + ":" + rmiServerPort + "/jndi/rmi://" + hostname + ":" + rmiRegistryPort + "/jmxrmi"); JMXConnectorServer cs = JMXConnectorServerFactory.newJMXConnectorServer(url, env, mbs); cs.start(); } catch (Exception e) { e.printStackTrace(); } } } 

इसके बाद सबसे महत्वपूर्ण कैक्टि सेटिंग्स के स्क्रीनशॉट हैं।

कैक्टि सामान्य सेटिंग्स में पोलिंग सेटअप एक महत्वपूर्ण बिंदु है। मैं स्पाइन का उपयोग करता हूं, हर 5 मिनट में मतदान शुरू होता है, हर 10 सेकंड में डेटा लिया जाता है। Cacti में आगे आरआरडी सेटिंग्स देखें - उन्हें पहले से सोचने की ज़रूरत है, क्योंकि आरआरडी डेटाबेस को अधिलेखित किए बिना आगे परिवर्तन समस्याग्रस्त है। यहाँ इन सेटिंग्स पर सुझावों का एक अच्छा चयन है:



मेरी आरआरडी सेटिंग्स।



एक सेटिंग की उदाहरण सामग्री:



डिवाइस सेटिंग्स के लिए, यह एक आईपी पते वाला सर्वर है, जहां से डेटा एकत्र किया जाएगा। हमारे पास कई सर्वर हैं, उनमें से प्रत्येक में कई जावा सेवाएं चलती हैं।



डेटा इनपुट विधि सेट करें - डेटा संग्रह की विधि सेट करना। मेरे मामले में, यह एक बैच फ़ाइल है जो जावा जेएमएक्स पोलिंग प्रोग्राम लॉन्च करती है (इसके स्रोत कोड ऊपर दिए गए थे।) इसके लिए इनपुट पैरामीटर सर्वर का पता और पोर्ट हैं, अर्थात्। जावा अनुप्रयोगों।



इनपुट पैरामीटर विवरण का एक उदाहरण इस मामले में सर्वर का पता है। पूर्वनिर्धारित कीवर्ड का उपयोग किया जाता है - hostname, जो कैक्टि द्वारा स्वचालित रूप से पॉप्युलेट किया जाता है। दूसरा पैरामीटर प्रत्येक डेटा स्रोत डेटा संग्रह सेटअप के लिए आबाद किया जाएगा, जैसा कि बाद में देखा जाएगा।



आउटपुट पैरामीटर जो बैच फ़ाइल देता है। कैक्टि उन्हें प्रारूप में समझता है:

 key1: value1 key2: value2

मेरा कार्यक्रम 4 आउटपुट मान देता है, यहाँ उनमें से एक को स्थापित करने का एक उदाहरण है (कमिटेड):



अगला, डेटा स्रोत निर्दिष्ट करने के लिए एक डेटा टेम्प्लेट बनाएं मेरी राय में, कैक्टि में सबसे महत्वपूर्ण सेटिंग। टेम्पलेट आरआरडी डेटाबेस के कॉन्फ़िगरेशन के साथ जुड़ा हुआ है, यह डेटाबेस (डेटा स्रोत आइटम) और अतिरिक्त सेटिंग्स में भंडारण के लिए मापदंडों को इंगित करता है, इस मामले में यह जेएमएक्स होस्ट और जेएमएक्स पोर्ट है, पहला, जैसा कि पहले ही उल्लेख किया गया है, स्वचालित रूप से भर जाता है, दूसरा प्रत्येक डेटा स्रोत पर भरा जाएगा। , यानी। डेटा स्रोत एक एकल जावा अनुप्रयोग के अनुरूप होगा।



टेम्पलेट के आधार पर, एक डेटा स्रोत बनाया जाता है - एक डेटा स्रोत जिसे फिर ग्राफ चार्ट पर प्रदर्शित किया जा सकता है। स्रोत उस डिवाइस को इंगित करता है जिससे आप डेटा, स्रोत टेम्पलेट, आरआरडी डेटाबेस का नाम और स्थान एकत्र करना चाहते हैं। मेरे मामले में, आपको एक अतिरिक्त पैरामीटर भी निर्दिष्ट करने की आवश्यकता है - जेएमएक्स पोर्ट। महत्वपूर्ण बिंदु यह है कि डेटा स्रोत या डेटा टेम्पलेट (उदाहरण के लिए, डेटा स्रोत आइटम मापदंडों को हटाने और जोड़ने) में डेटा संग्रह सेटिंग्स के लिए महत्वपूर्ण अपडेट के साथ, आपको आरआरडी डेटाबेस को फिर से बनाना होगा। आप इसे कैक्टि के बाहर अपने हाथों से कर सकते हैं (मैंने अभी तक इसे प्राप्त नहीं किया है) या पिछले सभी डेटा के नुकसान के साथ डेटा स्रोत को फिर से बनाएँ। यह स्पष्ट रूप से कैक्टि-आरआरडी बंडल की सबसे अप्रिय विशेषता है जो मैंने सामना किया है।



हम ग्राफ टेम्पलेट को परिभाषित करके डेटा प्रदर्शित करना शुरू करते हैं। सेटिंग्स मुख्य रूप से यह निर्धारित करती हैं कि डेटा की कल्पना कैसे की जाती है। डेटा टेम्प्लेट से उन मापदंडों को निर्दिष्ट करना आवश्यक है जिन्हें आप चार्ट पर और किस रूप में प्रदर्शित करना चाहते हैं। जहां तक ​​मैं समझता हूं कि ये सभी सेटिंग्स आरआरडी कमांड इंटरफेस पर एक सीधा शेल हैं।



डेटा स्रोत पैरामीटर सेट करने का एक उदाहरण। मैं मेमोरी की खपत को प्रदर्शित करने के लिए आरेख पर 5 तत्वों का उपयोग करता हूं: अधिकतम, न्यूनतम, और ठोस भरण के रूप में वर्तमान खपत (आउटपुट ऑर्डर महत्वपूर्ण है!), फिर दो पैरामीटर - लाइनों के रूप में अधिकतम आवंटित और आरक्षित खपत। उदाहरण, नीचे देखें।



ग्राफ़ चार्ट - एक विशिष्ट डेटा स्रोत और चार्ट टेम्पलेट मापदंडों के बीच टेम्पलेट, सर्वर और पत्राचार सेट करता है:



सभी दिए गए सेटिंग्स का उपयोग करते हुए अंतिम आरेख का एक उदाहरण: यह देखा जा सकता है कि औसत खपत 3 जीबी है, लेकिन अक्सर यह 6 जीबी (-Xmx) की अधिकतम आवंटित सीमा तक पहुंचता है। डेटा को मनमाने ढंग से विवरण (संग्रह के 1 टिक से 2 साल तक, उदाहरण के रूप में और अधिक) के साथ देखा जा सकता है। यह सब आरआरडी डेटाबेस की सेटिंग्स पर निर्भर करता है। अपनी सेटिंग्स के साथ, मुझे खपत के साथ समस्याओं को हल करने के लिए पर्याप्त जानकारी थी।



यह वह जगह है जहाँ मेरे समाधान का वर्णन समाप्त होता है। मैं इस बात पर जोर देता हूं कि समाधान का मुख्य विचार परिणाम की उच्च गुणवत्ता के साथ कार्यान्वयन की गति है। सुधार के लिए प्रश्न और विचारों का स्वागत है।

सेटिंग्स का वह हिस्सा, जो मेरे विशिष्ट प्रदर्शन मापदंडों की चिंता करता है, मैंने नहीं दिया, क्योंकि वे पहले से वर्णित के समान हैं।

आपका ध्यान के लिए धन्यवाद!

निष्कर्ष:

कैक्टि ने मुझे जावा अनुप्रयोगों की निगरानी को जल्दी से स्थापित करने की समस्या को सफलतापूर्वक हल करने की अनुमति दी। यदि आपको जल्दी से खरोंच से निगरानी करने की आवश्यकता है, तो मैं इसे काम करने वाले विकल्पों में से एक के रूप में सुझाता हूं। यदि आपकी योजनाओं में लंबी अवधि की निगरानी का निर्माण करना शामिल है, तो, मेरी राय में, यह निम्नलिखित विकल्पों को देखने के लिए समझ में आता है: नागियोस जैसे शक्तिशाली सिस्टम को लागू करें, या आरआरडी के लिए अपना स्वयं का विशेष ऐड-ऑन लिखें। Cacti के पेशेवरों और विपक्ष:

निर्णय के विपक्ष:

• बड़ी संख्या में वातावरण और जावा एप्लिकेशन सर्वर के मामले में समान सेटिंग्स की संख्या में काफी तेजी से वृद्धि।
• कैक्टि के लिए गैर-देशी जेएमएक्स समाधानों का सीमित प्रदर्शन।

समाधान के लाभ:

• न्यूनतम अतिरिक्त कोडिंग के साथ उच्च तैनाती की गति
• आरेख और उनकी सेटिंग्स को देखने के लिए इंटरफ़ेस की सादगी और सुविधा (आपको कुछ जटिल सीखने की आवश्यकता नहीं है)