Android में 1MB से बड़ी फ़ाइलों को पढ़ने में समस्या

शुभ दोपहर

एक ही एंड्रॉइड एप्लिकेशन लिखते समय, मुझे उन परिसंपत्तियों निर्देशिका से फ़ाइलों को डाउनलोड करने की समस्या का सामना करना पड़ा, जिनका आकार 1 एमबी से अधिक है।
मान लीजिए, प्रोजेक्ट फ़ोल्डर में, परिसंपत्तियों में file.dat फ़ाइल निहित है, जिसे मेमोरी में लोड किया जाना चाहिए और इससे डेटा पढ़ना चाहिए।



फ़ाइल खोलें और बफर 8 पहले बाइट्स में पढ़ें

AssetManager am = context.getAssets();
InputStream is = am.open("file.dat", AssetManager.ACCESS_BUFFER);
// Read file
is.read(buffer, 0, 8);

Android 2.2 और उससे कम पर कोड निष्पादन के परिणामस्वरूप, हमें LogCat में एक संदेश मिलता है
06-14 17: 10: 48.554: DEBUG / संपत्ति (382): डेटा UNCOMPRESS_DATA_MAX (1048852 बनाम 1048576) से अधिक है
और IOException
06-14 17: 10: 48.654: WARN / System.err (698): java.io.ioException

हम एंड्रॉइड के स्रोत कोड को देखते हैं। चौखटे / आधार / शामिल / बर्तन / आस्ति.ह फ़ाइल में एक ही स्थिर UNCOMPRESS_DATA_MAX है

enum {
/* data larger than this does not get uncompressed into a buffer */
#ifdef HAVE_ANDROID_OS
UNCOMPRESS_DATA_MAX = 1 * 1024 * 1024
#else
UNCOMPRESS_DATA_MAX = 2 * 1024 * 1024
#endif
};

और चौखटे / आधार / शामिल / बर्तन / Asset.cpp फ़ाइल में , फ़ाइल आकार पर एक जांच की जाती है

if (mUncompressedLen > UNCOMPRESS_DATA_MAX) {
LOGD("Data exceeds UNCOMPRESS_DATA_MAX (%ld vs %d)\n",
(long) mUncompressedLen, UNCOMPRESS_DATA_MAX);
goto bail;
}

जैसा कि आप टिप्पणी से देख सकते हैं, डेटा जो बाइट्स में UNCOMPRESS_DATA_MAX के आकार से अधिक है, .apk फ़ाइल से बफर में अनपैक नहीं किया गया है।

समस्या को हल करने के कई तरीके हैं:
1. सबसे आसान तरीका है file.dat फ़ाइल एक्सटेंशन को इस तरह बदलना कि यह फ़ाइल .apk फ़ाइल में पैक होने पर संकुचित न हो। इन एक्सटेंशनों की सूची Package.cpp में परिभाषित की गई है

/* these formats are already compressed, or don't compress well */
static const char* kNoCompressExt[] = {
".jpg", ".jpeg", ".png", ".gif",
".wav", ".mp2", ".mp3", ".ogg", ".aac",
".mpg", ".mpeg", ".mid", ".midi", ".smf", ".jet",
".rtttl", ".imy", ".xmf", ".mp4", ".m4a",
".m4v", ".3gp", ".3gpp", ".3g2", ".3gpp2",
".amr", ".awb", ".wma", ".wmv"
};

या, आप मैन्युअल रूप से "-0" विकल्प के साथ aapt का उपयोग करके परियोजना को संकलित कर सकते हैं, फ़ाइल एक्सटेंशन निर्दिष्ट कर सकते हैं जिन्हें .apk में संपीड़ित करने की आवश्यकता नहीं है। यदि आप एक्सटेंशन के बजाय एक खाली लाइन का उपयोग करते हैं, तो एक भी फ़ाइल संपीड़ित नहीं होगी।
यह विधि खराब है क्योंकि बाजार से उपयोगकर्ता द्वारा डाउनलोड की गई इंस्टॉलेशन फ़ाइल का आकार काफी बढ़ता है (संपीड़ित और असम्पीडित फ़ाइल के बीच अंतर), और फ़ाइल आकार मोबाइल डिवाइसों के लिए काफी महत्वपूर्ण है। मेरे मामले में, एप्लिकेशन में उपयोग की जाने वाली पाठ जानकारी फ़ाइल में संग्रहीत है। अनपैक्ड रूप में इसे 1MB से थोड़ा अधिक लगता है, और .apk फ़ाइल में यह 40Kb तक संकुचित होता है।
यदि आपकी संपत्ति की फाइलें जिप (मीडिया) में अच्छी तरह से संपीड़ित नहीं होती हैं, तो यह तरीका बहुत अच्छा है।

2. दूसरा तरीका कंसोल से उदाहरण के लिए file.dat को 1MB टुकड़ों में विभाजित करना है:
split file.dat --bytes=1024K

परिणामी फ़ाइलों को संपत्ति में रखा जाना चाहिए, आवेदन के पहले लॉन्च पर, टुकड़ों में "गोंद" और आवेदन के साथ निर्देशिका में रखा जाना चाहिए। इस पद्धति का स्टैकओवरफ़्लो पर अच्छी तरह से वर्णन किया गया है, इसे सेवा अलेक्सेयेव नाम के व्यक्ति द्वारा प्रस्तावित किया गया था, इसलिए मैं केवल लिंक स्टैकओवरफ़्लो /questions/2860157/load-files-bigger-than-1m-from-assets-folder/3093966#30939669 लिंक दूंगा।
इस स्थिति में, आपका एप्लिकेशन डेटा की दो प्रतियों को संग्रहीत करेगा, एक .apk फ़ाइल में, दूसरा आवेदन के साथ निर्देशिका में अपलोड किया गया। यह थोड़ा अतिरिक्त कोड और "अनपैक्ड" डेटा के अस्तित्व और अखंडता की निगरानी करने की आवश्यकता को भी जोड़ता है।

एंड्रॉइड 2.3.1 और उच्चतर के लिए कोई वर्णित समस्या नहीं है।

बेशक, आप कुछ और सोच सकते हैं, उदाहरण के लिए, नेटवर्क (तथाकथित कैश) पर फ़ाइलों को डाउनलोड करना, जो हमेशा विश्वसनीय नहीं होता है यदि उपयोगकर्ता ने इंटरनेट बंद कर दिया है, या स्क्रैच से फाइल उत्पन्न कर रहा है, लेकिन ऊपर वर्णित दो विधियां मेरे लिए पर्याप्त थीं।