उबंटू में फ़ाइलों को कॉपी / डाउनलोड करते समय प्रदर्शन में गिरावट को ठीक करें

मुझे याद नहीं है कि फ़ाइलों की प्रतिलिपि बनाते समय प्रदर्शन की समस्याएं शुरू हुई थीं, लेकिन फिर मैंने इसे बहुत अधिक महत्व नहीं दिया क्योंकि मैंने शायद ही कभी फ़ाइलों की प्रतिलिपि बनाई थी। अपेक्षाकृत हाल ही में, मेरे निपटान में एक हाई-स्पीड इंटरनेट कनेक्शन दिखाई दिया और अब मैं अक्सर बड़ी फ़ाइलों को कॉपी / डाउनलोड करता हूं और प्रदर्शन में गिरावट की समस्या मेरे लिए बहुत जरूरी हो गई है।

सतही गुग्गल ने परिणाम नहीं दिए और मैंने गहराई से खुदाई शुरू कर दी, यह पता चला कि कई यूबंटोवोड्स को उच्च सीपीयू लोड की समस्या थी, यदि सभी नहीं, और इस समस्या का कोई त्वरित समाधान नहीं था, इसलिए मैंने एक छोटे से लिखने का फैसला किया कि कैसे उच्च भार को खत्म करने के लिए फाइल कॉपी करते समय प्रोसेसर।

समस्या

हाई-स्पीड डाउनलोडिंग टॉरेंट्स के साथ, डिस्क से डिस्क तक फ्लैश ड्राइव में मल्टी-थ्रेडेड कॉपी, प्रोसेसर लोड 100% से अधिक हो जाता है, एलए तेजी से बढ़ता है।

एक ही समय में, थ्रेड्स की एक छोटी संख्या के साथ फ़ाइल संचालन पर, सब कुछ अच्छी तरह से काम करता है।

सिद्धांत की बिट

ऑपरेटिंग सिस्टम में ऐसी चीजें हैं जिन्हें IO शेड्यूलर्स कहा जाता है, जो ब्लॉक डिवाइसेस और लो-लेवल ड्राइवरों के बीच एक परत है। अनुसूचक का कार्य प्रक्रिया के लिए अनुरोधित डिस्क डिवाइस तक पहुंच प्रदान करना है। हार्ड डिस्क के मामले में, इसका मतलब रीड हेड की गति को कम करना है।
योजनाकारों की गतिविधियाँ निम्न पहलुओं पर आती हैं:

• क्वेरी को पुन: व्यवस्थित और मर्ज करके प्रदर्शन में वृद्धि हुई है
• लिखने से फ्रीज़ और रीड डेटा के ओवरराइटिंग को रोकें
• विभिन्न प्रक्रियाओं तक पहुंच के समय का उचित वितरण

कई योजनाकार हैं और, जैसा कि यह निकला, यह उनके साथ था कि इस पोस्ट द्वारा हल की गई समस्या जुड़ी हुई थी।
संक्षेप में सबसे आम पर विचार करें।

NOOP

सबसे सरल फीफो आधारित अनुसूचक। कोई पुन: क्रम नहीं है, केवल अनुरोध जो पास में कतार में हैं विलय किया जा सकता है। अच्छी तरह से फ्लैश मेमोरी जैसे यादृच्छिक पहुंच वाले उपकरणों के लिए उपयुक्त है।

समय सीमा

एक अनुसूचक जो लिखने के अनुरोधों के बजाय पढ़ने के अनुरोधों को प्राथमिकता देता है। अनुरोधों को पुन: व्यवस्थित किया जाता है, लेकिन अनुरोध प्रसंस्करण समय निर्दिष्ट सीमाओं से अधिक नहीं होना चाहिए (डिफ़ॉल्ट रूप से, पढ़ने के लिए 0.5 एस, लेखन के लिए 5 एस)

कार्यान्वयन के लिए, 4 कतार का उपयोग किया जाता है: 2 sorted-by-start-sector (पढ़ने और लिखने के लिए) और 2 FIFO कतार (पढ़ने और लिखने के लिए भी)। आमतौर पर, अनुरोध सॉर्ट की गई कतारों से लिए जाते हैं, लेकिन यदि FIFO कतार से पहले अनुरोध की समय सीमा (समय समाप्ति) को धकेल दिया जाता है, तो इस तत्व से क्रमबद्ध कतारों पर क्वेरी प्रोसेसिंग जारी रहती है।

डेटाबेस के आयोजन के लिए सबसे उपयुक्त।

सीएफक्यू - पूरी तरह से उचित कतार

इस अनुसूचक का उद्देश्य ईमानदारी से सभी अनुरोधकर्ताओं के संसाधन तक पहुंच का समय आवंटित करना है। सीएफक्यू को प्रक्रियाओं, प्रक्रिया समूहों, उपयोगकर्ताओं को संरेखित करने के लिए कॉन्फ़िगर किया जा सकता है।

कार्यान्वयन के द्वारा, CFQ से अनुरोधकर्ता के प्रति एक FIFO कतार और गोल-रॉबिन कतारों के बीच स्विच होता है।

मुझे नहीं पता कि इस तरह की ईमानदारी की जरूरत है, लेकिन इस अनुसूचक में हार्ड डिस्क के रीड हेड की गति को कम करने के लिए अनुरोधों की कोई पुनरावृत्ति नहीं है।

अग्रिम

प्रमुख विचार - अनुरोधों को संसाधित करने से पहले, आप थोड़ा इंतजार कर सकते हैं, आराम कर सकते हैं। लेकिन इन कुछ मिलीसेकंड में, अग्रिम में जानकारी एकत्र की जाएगी, जो अधिक सूचित निर्णय लेने की अनुमति देगा जिसमें आदेश अनुरोध निष्पादित किए जाते हैं।

प्रतिपक्षी शेड्यूलर डेडलाइन पर आधारित है। डेस्कटॉप के लिए उपयुक्त, के रूप में आउटपुट इनपुट सबसिस्टम की प्रतिक्रिया बनाए रखी जाती है। RAID, TCQ के लिए उपयुक्त नहीं है। उन परिस्थितियों में पूरी तरह से अनुकूल है जहां विभिन्न प्रक्रियाओं द्वारा सिंक्रोनस अनुरोध भेजे जाते हैं।

निर्णय

उबंटू 10.10 में डिफ़ॉल्ट अनुसूचक CFQ है, लेकिन जैसा कि अभ्यास से पता चलता है, यह इस अनुसूचक है जो मल्टीथ्रेडेड नकल के दौरान एक उच्च सीपीयू लोड का कारण बनता है। हम अनुसूचक को एक और एक में बदलते हैं, उदाहरण के लिए, डेडलाइन और वॉयला के लिए - 100% पर अधिक सीपीयू लोडिंग नहीं है।

सामान्य रूप से एसएसडी और फ्लैश मेमोरी के लिए, जैसा कि ऊपर उल्लेख किया गया है, नूप का उपयोग करने की सिफारिश की गई है।

थोड़ा अभ्यास

सक्रिय अनुसूचक जानें

सिस्टम में सभी उपलब्ध अनुसूचियों को देखने और यह पता लगाने के लिए कि कौन सक्रिय है, चलाएं:
$ cat /sys/block/{DEVICE-NAME}/queue/scheduler
यहाँ {DEVICE-NAME} ब्लॉक डिवाइस का नाम है, उदाहरण के लिए sda ।
उदाहरण के लिए, यदि ड्राइव sda , तो आपको चलाने की आवश्यकता है:
$ cat /sys/block/sda/queue/scheduler
आउटपुट इस तरह से एक लाइन है:
noop anticipatory deadline [cfq]
वर्ग कोष्ठक में वर्तमान अनुसूचक को इंगित किया गया है।

मक्खी पर अनुसूचक का परिवर्तन

रिबूट किए बिना वास्तविक समय में अनुसूचक को बदलने के लिए, निम्नलिखित करें:
$ sudo -i
# echo {SCHEDULER-NAME} > /sys/block/{DEVICE-NAME}/queue/scheduler

यहाँ {SCHEDULER-NAME} सिस्टम में मौजूद अनुसूचियों में से एक है, मेरे पास यह है: noop anticipatory deadline cfq । उदाहरण के लिए, deadline निर्धारित करने के लिए, निष्पादित करें
$ sudo -i
# echo deadline > /sys/block/sda/queue/scheduler

शेड्यूलर सेटिंग करें

इसके बाद, हमें उबंटू को रिबूट करने के बाद चुने गए शेड्यूलर का उपयोग करने के लिए मजबूर करना होगा। ऐसा करने के लिए, GRUB_CMDLINE_LINUX_DEFAULT="elevator={SCHEDULER-NAME}" को GRUB 2 विन्यास में जोड़ें।
$ sudo nano /etc/default/grub

UPD: परिवर्तन करने के बाद, आपको ग्रब कॉन्फ़िगरेशन को अद्यतन करने की आवश्यकता है:
$ sudo update-grub

यदि आपके पास grub है, grub2 नहीं है, तो लाइन elevator={SCHEDULER-NAME} को /boot/grub/grub.conf ।

शेड्यूलर चुनने में मदद करें

एक habr पर पहले से ही अनुसूचक की स्वचालित पसंद के बारे में लिखा था । बेशक, एक साधारण रीड स्पीड चेक एक इष्टतम विकल्प के लिए पर्याप्त नहीं है, लेकिन यह कुछ विचार दे सकता है।

उपयोगी लिंक

पोस्ट लिखते समय उपयोग किए जाने वाले लिंक:
लिनक्स पर I / O शेड्यूलर पर प्रस्तुति
लिनक्स Io शेड्यूलर - वाइकाटो लिनक्स उपयोगकर्ता समूह
आई / ओ शेड्यूलर्स की तुलना
लिनक्स I / O शेड्यूलर (लिनक्स कर्नेल io शेड्यूल ऑप्टिमाइज़ेशन ट्यून)
ग्रब 2 की पुस्तक

इस ट्वीक के बारे में दोस्तों को बताने के बाद, वह आश्चर्यचकित था कि कोई भी इसके बारे में नहीं जानता था, उसने इसे हैबर पर पोस्ट करने का फैसला किया, अचानक यह किसी के काम आएगा।

पुनश्च

युपीडी:
इस लेख ने केवल एक के बारे में बात की, वास्तव में सबसे सरल, तथाकथित से जुड़ी समस्या को हल करने का तरीका बग 12309 । इस समस्या को हल करने के लिए अभी भी कुछ सुझाव हैं:
- CFQ शेड्यूलर को न बदलें, बल्कि कॉन्फ़िगर करें
- ज़ेन कोर लगाएं
- स्वैप आक्रामकता कॉन्फ़िगर करें
- हार्डवेयर शेड्यूलर और बहुत सारी रैम के साथ हार्ड ड्राइव खरीदें (ताकि स्वैप में न जाएं)

यह पाठ CC BY-SA के तहत लाइसेंस प्राप्त है
मूल लेखक (समस्या, समाधान) g3n1uss है । सह-लेखक (सिद्धांत, डिजाइन) - आपका विनम्र सेवक।