जियोनीप, अपरंपरागत उपयोग के प्रयास

शाम होने को थी, कुछ करने को नहीं था ...

प्रागितिहास

एक बिंदु पर, मैं गलती से एक पुरानी सेवा पर ठोकर खा गया जो आपको अपनी साइट पर एक तस्वीर लटकाए जाने की अनुमति देता है जो आगंतुकों की भौगोलिक स्थिति को दर्शाता है। कई और अलग हैं।
बात ही इतनी उपयोगी नहीं है, क्योंकि मेरे लिए डेटा पर्याप्त हैं।
लेकिन आगंतुक को यह दिखाने के लिए कि वह एक यादृच्छिक बेवकूफ नहीं है , एक राहगीर एक मृत साइट पर भटक गया है, यह मामला उपयुक्त है।
इसके अलावा, उम्मीद के मुताबिक, उन्होंने अपने दिमाग को इस विषय पर फेंक दिया, लेकिन उन्होंने इसे कैसे किया, यह समझ लिया और इसे शांत किया ...

लेकिन पीड़ादायक सिर हाथों को आराम नहीं देता है, इसलिए अब मैं आपको एक मजेदार और सार्थक प्रयोग दिखाऊंगा।

यह IP-schnicks के सभी संभावित निर्देशांक (गोल से पूर्णांक तक) का चयन है।
हम कह सकते हैं कि यह इंटरनेट टीसीपी / आईपी आवास की एक तस्वीर है

ध्यान दें, लेखक शब्द के अच्छे अर्थों में कोडर नहीं है, इसलिए मैं उन लोगों से पूछता हूं, जो छोड़ने के लिए कॉप्रोकोड से हैरान हैं।


जहां से डेटा प्राप्त करने के लिए, यह तुरंत स्पष्ट हो गया कि यह सभी प्रसिद्ध जियोआईपी है, जिसने हमें एक से अधिक बार मदद की है, क्योंकि जियोलाइट में समन्वय के रूप में इतनी महत्वपूर्ण बात है।
#geoiplookup -f /usr/local/share/GeoIP/GeoLiteCity.dat 90.155.128.74
GeoIP City Edition, Rev 1: RU, 48, Moscow, N/A, 55.752201, 37.615601, 0, 0
सच है, वह मानती है कि मैं बुटोवो से अलेक्जेंडर गार्डन में चली गई। लेकिन कुछ भी नहीं, हमें इस तरह की सटीकता की आवश्यकता नहीं है।

GeoLiteCity.dat फ़ाइल की जांच करने पर पता चला कि यह बहुत ही द्विआधारी वृक्ष की तरह दिखता है, और दुर्भाग्य से मैंने इसे अभी तक स्मोक नहीं किया है, इसे जल्दी और दर्द रहित तरीके से पार्स कैसे करें।
पहले सोचा तुरंत डेटाबेस में अद्वितीय निर्देशांक दर्ज करने में सभी संभव आईपी पते की गणना करने का विकल्प आया।
256 ^ 4 = 4294967296 माइनस बैकअप, लोकल आदि। सभी समान, यह समय के अनुमानों की ओर जाता है, जो किसी भी तरह से कृपया नहीं है। छह महीने में खत्म करो, यह अच्छा है।
पहेली के एक सक्रिय दृष्टिकोण के बाद, मुझे याद आया कि जियोआईपी के पास अपने डेटा को संग्रहीत करने के लिए अन्य विकल्प थे, और सीएसवी बिंगो प्रारूप ने रूसी लोकतंत्र के पिता को बचाया।

उदाहरण फ़ाइल:
5751,"US","NY","Albany","12209",42.6390,-73.7890,532,518
5752,"US","NY","Hillsdale","12529",42.2164,-73.5413,532,518
5753,"US","NY","Albany","12225",42.6706,-73.7791,532,518

कुल 310070 प्रविष्टियाँ।
चूँकि सभी तीन सौ हज़ार अंकों के लिए चित्र बनाना कोषेर नहीं है, इसलिए हम एक स्क्रिप्ट बनाते हैं जो CSV फ़ाइल को पार्स करेगी और डेटाबेस में अद्वितीय गोलाकार पदों को दर्ज करेगी, और फिर डेटाबेस से एक चयन करेगी और एक चित्र बनाएगी।
क्यों गोल किया गया, मुझे उच्च सटीकता की आवश्यकता नहीं थी, इसलिए लंबाई और अक्षांश का बिंदु पर्याप्त था।
यदि आप 1800 तक 3600 के आकार जैसा कुछ करना चाहते हैं, तो पोस्ट को अंत तक पढ़ने के लिए इस प्रयोग को दोहराने से कुछ भी नहीं रोकता है।

साधनों का चुनाव।
MySQL - पहले से ही खड़ा है, पहले से ही हाथ में है। एक तालिका वहाँ बनाई गई है, जिसमें 4 कॉलम (x, y, kol, दो पर्याप्त थे, लेकिन पिछले एक को मैंने यह देखने के लिए जोड़ा है कि सबसे अधिक केंद्रित प्रविष्टियाँ कहाँ हैं)
पर्ल - एक सीएसवी पार्सर लिखने और डेटाबेस में इसे दर्ज करने के लिए, इसके अलावा, इसके अलावा, यह संचारक से एसएसएच के माध्यम से जो में लिखना अधिक सुविधाजनक है। Perlists पेशेवरों कृपया कोड पर ज्यादा मत देखो।
जीडी लाइब्रेरी के साथ PHP , वास्तव में, वास्तविक चित्र उत्पन्न करने के लिए। क्यों? महान अनुभव पीएचडी से जीडी पुस्तकालय के साथ काम कर रहा है।

इसलिए, अंतिम CSV फ़ाइल डाउनलोड करें ।

एक डेटाबेस और एक तालिका बनाएँ:
CREATE DATABASE IF NOT EXISTS `geo`;
CREATE TABLE IF NOT EXISTS `all` (
`x` int(3) NOT NULL,
`y` int(3) NOT NULL,
`kol` int(64) NOT NULL
);

हम एक पार्सर बनाते हैं:
#! / usr / स्थानीय / बिन / पर्ल
मैसकल का उपयोग करें;
"start \ n" प्रिंट करें;
मेरे $ मेजबान = "लोकलहोस्ट";
मेरा $ डेटाबेस = "जियो";
मेरे $ उपयोगकर्ता = "जियो";
मेरी $ तालिका = "सभी";
मेरा $ पासवर्ड = "ओलोलोपावरोलको";
my $ db = Mysql-> कनेक्ट ($ होस्ट, $ डेटाबेस, $ उपयोगकर्ता, $ पासवर्ड);
$ sql = "सेलेक्ट * FROM` $ table`";
$ sth = $ db-> क्वेरी ($ sql);
arr = $ sth-> FetchRow;
मेरे $ vsego = 0;
मेरे $ अनिक = 0;
मेरे $ ठीक = 0;
# फ़ाइल खोलें, डेटा को सरणी में फेंक दें और इसे संसाधित करें।
खुला (जीएल, "/home/klef/geo/GeoLiteCity-Location.csv");
@ भू_र =;
बंद (जीएल);
$ अधिकतम = $ # geo_arr;
के लिए ($ i = 0; $ i <= $ # geo_arr; $ i ++) {
$ vsego ++;
@ geo_a = विभाजित (",", $ geo_arr [$ i]);
अगर ($ # जियो_ ए> 6) {
$ ठीक ++;
$ x = स्प्रिंटफ ("%। 0f", $ geo_a [5]);
$ y = स्प्रिंटफ ("%। 0f", $ जियो_ ए [6]);
# देखें कि क्या ऐसे निर्देशांक हैं
$ sql = "सेलेक्ट * FROM` $ टेबल` जहां x = $ x और y = $ y ";
$ sth = $ db-> क्वेरी ($ sql);
arr = $ sth-> FetchRow;
अगर ($ # गिरफ्तार> = 0) {
# वहाँ है? काउंटर को पूरी तरह से बदल दें
$ nov_s = $ गिरफ्तारी [3] +1;
$ sql = "UPDATE` $ डेटाबेस`.` $ टेबल 'SET` kol` =' $ nov_s 'WHERE` $ तालिका`.`x` = $ x और `$ तालिका`.`y` = $ y और` $ तालिका`.`कोल` = $ गिरफ्तारी [3] सीमा 1 ;;
$ db-> क्वेरी ($ sql);
} {
# कोई बात नहीं, यह निश्चित है
$ sql = "INSERT INTO` $ डेटाबेस`.` $ टेबल '(` x`, `y`,` kol`) VALUES (' $ x ',' $ y ',' 1 '); ";
$ db-> क्वेरी ($ sql);
प्रिंट "नया";
$ यूनिक ++;
}
}
}
# यह इतना है कि अंत में हम खुशी से दिखाएंगे कि कितना
$ vsego_p = sprintf ("%। 2f", $ vsego * 100 / $ अधिकतम);
$ ok_p = स्प्रिंटफ ("%। 2f", $ ठीक * 100 / $ अधिकतम);
$ unik_p = sprintf ("%। 2f", $ unik * 100 / $ max);
$ itog = "\ nObrabotano: $ vsego_p% ($ vsego) \ nNormalnih: $ ok_p% ($ ok) \ nUnikalnih: $ unik_p% ($ unik) \ n";
$ itog प्रिंट;
"END \ n" प्रिंट करें;


और दूर हम जाते हैं, प्रसंस्करण समय में मुख्य समस्या यह नहीं थी कि बहुत अधिक डेटा था, लेकिन तथ्य यह है कि हम मूर्खतापूर्ण और सुंदर समाधान के बिना क्रम में इसे हल करते थे।

चित्र बनाने के लिए php स्क्रिप्ट:
#! / usr / स्थानीय / बिन / php
<? php
$ होस्ट = "लोकलहोस्ट: 3306";
$ उपयोगकर्ता = "जियो";
$ डेटा = "जियो";
$ पास = "फिर से थोड़ा सा";
// जहां तस्वीर को बचाने के लिए
$ पैच = "/ डेटा / वेब / geo.ip.png";
$ z = 0;
// छवि और रंग बनाएँ
$ img = imagecreatetruecolor (600, 400);
$ स्याही = इमेजकोलरॉलेट ($ img, 0, 255, 0);
// डेटाबेस तक पहुँचने और डेटा का चयन करें
$ db = mysql_connect ($ होस्ट, $ उपयोगकर्ता, $ पास) या मर ("बोल्ट MySQL;);
$ db_sel = mysql_select_db ($ डेटा, $ db) या मरना ("बोल्ट बीडी =)";
$ sql = mysql_query ("Select * FROM` all`;") या मर ("बोल्ट ज़ाप्रोस");
$ num_rows = mysql_num_rows ($ sql) या मरना ("बोल्ट न्यूम स्ट्रोक");
$ vib = mysql_num_rows ($ sql) या डाई ("बोल्ट स्ट्रॉकी");
के लिए ($ i = 1; $ i <= $ num_rows; $ i ++) {
$ tmp = mysql_fetch_array ($ sql);
$ y = $ tmp ['x'];
$ x = $ tmp ['y'];
// वांछित समन्वय के साथ बिंदु रखो
imagesetpixel ($ img, 300 + $ x, 200- $ y, $ इंक);
}
mysql_close ($ db);
// अंत में एक निशान लगाएं और फाइल को सेव करें
ImageString ($ img, 2, 10, 5, "जियो आईपी:" .डेट ("YM j H, i")। "कोल्वो:"। $ Num_rows।, $ इंक);
इमेजेट्रूकोलॉर्टेप्लेट ($ img, true, 255);
imagepng ($ img, $ पैच);
imagedestroy ($ img);
?>


पार्सर का परिणाम:
प्रति फ़ाइल कुल 310072 लाइनें
अद्वितीय निर्देशांक (गोलाई के साथ) 8226, जो केवल 2.65% है
टेबल का आकार 384 किलोबाइट है :)
प्रसंस्करण समय:
डेटाबेस भरने के लिए: कुछ घंटों के बारे में।
चित्र के गठन पर, मिलीसेकंड के गलियारों में।

पी.एस.
वांछित डेस्कटॉप रिज़ॉल्यूशन का आकार बदलने पर, हमें एक अच्छा वॉलपेपर मिलता है।

pps ने बाद में 18000 तक 36000 की फाइल बनाने की कोशिश की (क्रमशः दो दशमलव स्थानों पर), लेकिन जीडी के साथ मिलकर php ने इस संकल्प के साथ थोड़ा फाड़ दिया, यह समझने के लिए कि क्यों और क्यों कोई इच्छा या शक्ति नहीं थी।