FANN का उपयोग करके php में तंत्रिका नेटवर्क का निर्माण, एक उदाहरण कार्यान्वयन

मुझे बड़ी मात्रा में जानकारी का विश्लेषण करने और पैटर्न की पहचान करने के कार्य का सामना करना पड़ा। और पहली बात जो दिमाग में आई वह थी एक तंत्रिका नेटवर्क का उपयोग करके गणितीय मॉडल का निर्माण करना।

चूंकि विश्लेषण के लिए डेटा php में उत्पन्न होता है और यह भाषा अब मेरे सबसे करीब है, इसलिए मैंने php के लिए एक इंटरफ़ेस के साथ एक पुस्तकालय की खोज की। इस संबंध में, मुझे FANN (फास्ट आर्टिफिशियल न्यूरल नेटवर्क) की सिफारिश की गई थी - नेटवर्क के निर्माण के लिए खुला स्रोत सॉफ्टवेयर। इस समाधान में 15 भाषाओं के लिए एपीआई है, इसलिए लगभग हर कोई अपने लिए कुछ चुन सकेगा।

एक उदाहरण है। पृष्ठ पर पाठ की भाषा को पहचानना

एक उदाहरण के रूप में, हम एक आसान काम लेते हैं, लेकिन हमारी वास्तविकता से और गंभीर कार्यों से दूर नहीं। मान लीजिए कि 3 अलग-अलग भाषाओं में 1000 दस्तावेज़ हैं। इसे फ्रेंच, अंग्रेजी और पोलिश होने दो। हमारा काम दस्तावेज़ की भाषा को पहचानने के लिए तंत्रिका नेटवर्क को सिखाना है। इसके लिए हम सबसे सरल आवृत्ति तंत्र का उपयोग करते हैं। फिर भी, इसके परिणाम बुरे नहीं हैं। इसका सार यह है कि पाठ में अलग-अलग आवृत्तियों वाली प्रत्येक भाषा में समान वर्ण होते हैं। हम प्रत्येक भाषा (अंग्रेजी, फ्रेंच, पोलिश) में से प्रत्येक के लिए पाठ के 3 बड़े टुकड़े तैयार करते हैं, प्रत्येक प्रतीक आवृत्ति के लिए गणना करते हैं। हम इस डेटा को तंत्रिका नेटवर्क में संचारित करेंगे, यह दर्शाता है कि किस आवृत्ति का सेट प्रत्येक भाषा का है। इसके अलावा, तंत्रिका नेटवर्क सब कुछ खुद करेगा।

चलिए FANN को इंस्टॉल करके शुरू करते हैं

एक उदाहरण, मैं उबंटू के लिए स्थापना देता हूं।

1) आपको पैकेज libfann1 और libfann1-dev स्थापित करने की आवश्यकता है

apt-get install libfann* 

2) php में fann सपोर्ट जोड़ें
मेरे पास Apache स्थापित है और php5-dev मॉड्यूल स्थापित है, इसलिए मैं ऐसा करता हूं

 # wget http://pecl.php.net/get/fann # tar xvfz fann # cd fann-0.1.1 # phpize # ./configure # make 

यदि संकलन के दौरान त्रुटियाँ दिखाई देती हैं और उनके बीच ऐसा होगा

fann.c:393: error: 'zif_fannOO___set' undeclared (first use in this function)

फिर आपको php_fann.h फ़ाइल को संपादित करना चाहिए और लाइन 28 #define PHP_FANN_OO 1 पर टिप्पणी करनी चाहिए
तब पुनर्मिलन।

नतीजतन, हम ऐसे मॉड्यूल उत्पन्न करते हैं जिन्हें php से कनेक्ट करने की आवश्यकता होती है

 sudo cp -R ./modules/* /usr/lib/php5/20090626+lfs/ 

और php.ini में जोड़ें

 extension=fann.so 

अपाचे को उतारा और जाँच की कि सब कुछ ठीक है

 php -m | grep fann 

समस्या हल करना

ऐसा करने के लिए, 2 चरण करें:
1) ट्रेन नेटवर्क (पहली लिस्टिंग)
2) और वर्गीकरण के लिए तैयार मॉडल का उपयोग करें (दूसरी सूची)

मैं पहले चरण के लिए एक उदाहरण दूंगा और तुरंत प्रलेखन के लिए एक लिंक दिखाऊंगा

मैंने यथासंभव टिप्पणियों के साथ कोड प्रदान किया, ताकि यह स्पष्ट हो जाए कि क्या हो रहा था और इसे अलग से अलग नहीं करना था।

Train.php फ़ाइल

 <?php /* *   . 256 -   ,      , *         ,     . * 128 -      .       . * 3    .     3 ,       * 1.0 - connection_rate -     * 0.7 - learning_rate -    http://www.basegroup.ru/glossary/definitions/learning_rate/ * */ $ann = fann_create(array(256, 128, 3), 1.0, 0.7); /* *   -    ,  -  . *   3  .        . *    ,    ,    ,    *     (array(1, 0, 0) // Outputs).            * generate_frequencies -   . * *  3   * -  -  * -  -  * -     * *   en.txt, fr.txt, pl.txt    -  10000     * */ fann_train($ann, array( array( generate_frequencies(file_get_contents("en.txt")), // Inputs array(1, 0, 0) // Outputs ), array( generate_frequencies(file_get_contents("fr.txt")), // Inputs array(0, 1, 0) // Outputs ), array( generate_frequencies(file_get_contents("pl.txt")), // Inputs array(0, 0, 1) // Outputs ), ), 100000, 0.00001, 1000 ); /* *     .        * */ fann_save($ann,"classify.txt"); /* *    * */ function generate_frequencies($text){ //     $text = preg_replace("/[^\p{L}]/iu", "", strtolower($text)); //      $total = strlen($text); $data = count_chars($text); //     array_walk($data, function (&$item, $key, $total){ $item = round($item/$total, 3); }, $total); return array_values($data); } ?> 

ऊपर दिए गए कोड में, हमने केवल मॉडल तैयार किया है। अब इसे देखते हैं, नीचे दिया गया कोड पाठ का विश्लेषण करता है और किसी विशेष भाषा से संबंधित मूल्यांकन देता है।

फ़ाइल run.php

 <?php /* *    .       . * */ $ann = fann_create("classify.txt"); /* *       3     *   * */ $output = fann_run($ann, generate_frequencies("ANN are slowly adjusted so as to produce the same output as in the examples. The hope is that when the ANN is shown a new X-ray images containing healthy tissues")); var_dump($output); $output = fann_run($ann, generate_frequencies("Voyons, Monsieur, absolument pas, les camions d'aujourd'hui ne se traînent pas, bien au contraire. Il leur arrive même de pousser les voitures. Non, croyez moi, ce qu'il vous faut, c'est un camion ! - Vous croyez ? Si vous le dites. Est-ce que je pourrais l'avoir en rouge ? - Bien entendu cher Monsieur,vos désirs sont des ordres, vous l'aurez dans quinze jours clé en main. Et la maison sera heureuse de vous offrir le porte-clé. Si vous payez comptant. Cela va sans dire, ajouta Monsieur Filou. - Ah, si ce ")); var_dump($output); $output = fann_run($ann, generate_frequencies("tworząc dzieło literackie, pracuje na języku. To właśnie język stanowi tworzywo, dzięki któremu powstaje tekst. Język literacki ( lub inaczej artystyczny) powstaje poprzez wybór odpowiednich środków i przy wykorzystaniu odpowiednich zabiegów technicznych. Kompozycja - jest to układ elementów treściowych i formalnych dzieła dokonanych według określonych zasad konstrukcyjnych. Kształtowanie tworzywa dzieła literackiego jest procesem skomplikowanym i przebiegającym na wielu poziomach. Składa się na nie:")); var_dump($output); ?> generate_frequencies ( "tworząc dzieło literackie, pracuje na języku। करने के लिए właśnie język stanowi tworzywo, dzięki któremu powstaje tekst। Język literacki (artystyczny inaczej लब) powstaje poprzez wybór odpowiednich środków मैं przy wykorzystaniu odpowiednich zabiegów technicznych। <?php /* *    .       . * */ $ann = fann_create("classify.txt"); /* *       3     *   * */ $output = fann_run($ann, generate_frequencies("ANN are slowly adjusted so as to produce the same output as in the examples. The hope is that when the ANN is shown a new X-ray images containing healthy tissues")); var_dump($output); $output = fann_run($ann, generate_frequencies("Voyons, Monsieur, absolument pas, les camions d'aujourd'hui ne se traînent pas, bien au contraire. Il leur arrive même de pousser les voitures. Non, croyez moi, ce qu'il vous faut, c'est un camion ! - Vous croyez ? Si vous le dites. Est-ce que je pourrais l'avoir en rouge ? - Bien entendu cher Monsieur,vos désirs sont des ordres, vous l'aurez dans quinze jours clé en main. Et la maison sera heureuse de vous offrir le porte-clé. Si vous payez comptant. Cela va sans dire, ajouta Monsieur Filou. - Ah, si ce ")); var_dump($output); $output = fann_run($ann, generate_frequencies("tworząc dzieło literackie, pracuje na języku. To właśnie język stanowi tworzywo, dzięki któremu powstaje tekst. Język literacki ( lub inaczej artystyczny) powstaje poprzez wybór odpowiednich środków i przy wykorzystaniu odpowiednich zabiegów technicznych. Kompozycja - jest to układ elementów treściowych i formalnych dzieła dokonanych według określonych zasad konstrukcyjnych. Kształtowanie tworzywa dzieła literackiego jest procesem skomplikowanym i przebiegającym na wielu poziomach. Składa się na nie:")); var_dump($output); ?> 

परिणाम

हमारे मॉडल ने निम्नलिखित पाठ प्रतिक्रियाएं उत्पन्न कीं।
पहले मामले में, मॉडल ने फैसला किया कि अंग्रेजी उसे (98%) सौंप दी गई थी और वह सही थी

 array(3) { [0]=> float(0.98745632171631) [1]=> float(0.0094089629128575) [2]=> float(0) } 

दूसरे पाठ में, उसने फ्रेंच के पक्ष में फैसला किया और फिर से सही साबित हुई

 array(3) { [0]=> float(0) [1]=> float(0.99334162473679) [2]=> float(0) } 

उसने तीसरे पाठ को पोलिश के रूप में भी सही पहचाना

 array(3) { [0]=> float(0.015697015449405) [1]=> float(0) [2]=> float(1) } 

कुछ उपयोगकर्ता शिकायत करते हैं कि तंत्रिका नेटवर्क संभावनाएं देते हैं, विशिष्ट उत्तर नहीं। जो लोग टैंक में हैं, उनके लिए मैं यह जोड़ता हूं कि हमारी दुनिया में सब कुछ संभावनाओं पर आधारित है। सही उत्तर के लिए, आपको उस पर विचार करने की आवश्यकता है जो कम से कम 90% सही है, यदि कम है तो आपको वर्गीकरण में सुधार करने के लिए नेटवर्क को प्रशिक्षित करने की आवश्यकता है।

इतनी सरल प्रणाली के बावजूद, एक तंत्रिका नेटवर्क अच्छा प्रदर्शन देता है। आप एन-ग्राम बना सकते हैं और उन्हें वर्गीकृत कर सकते हैं, यह और भी विश्वसनीय होगा, आप दोनों विकल्पों को जोड़ सकते हैं। तंत्रिका नेटवर्क एक शक्तिशाली उपकरण है, आपको बस यह सीखने की जरूरत है कि उनका उपयोग कैसे किया जाए

FANN वेबसाइट पर जाएं