GStreamer: लिनक्स-फ्लेवर्ड कोडेक्स

क्या आपने कभी सोचा है कि टोटेम, रिदमबॉक्स या बंशी जैसे महान खिलाड़ी कैसे काम करते हैं? संभवतः आप में से प्रत्येक नव स्थापित उबंटू में, जब आप AVI-shku खेलने की कोशिश करते हैं, तो मैंने अतिरिक्त पैकेज gst-ffmpeg या gst-plugins-ugly को स्थापित करने की आवश्यकता के बारे में एक संदेश देखा। कटौती के तहत - यह मल्टीमीडिया फ्रेमवर्क कैसे काम करता है और क्या करने में सक्षम है, इस बारे में प्रकाश को स्पष्ट करने का मेरा प्रयास।

VLC या FFmpeg से मुख्य अंतर यह है कि पर्यावरण को मूल रूप से एक विशिष्ट अनुप्रयोग के लिए नहीं, बल्कि उन सभी कार्यक्रमों के लिए विकसित किया गया था जो मल्टीमीडिया के साथ काम कर सकते हैं। इस ढांचे को ऐसी भाषाओं में एकीकृत किया गया है: सी, सी ++ / क्यूटी, पायथन, रूबी, पर्ल।

GStreamer आपको ऐसे एप्लिकेशन बनाने की अनुमति देता है जो सक्षम हैं:

• लगभग किसी भी प्रोटोकॉल का उपयोग करके ऑडियो-वीडियो प्राप्त करें और प्रसारित करें: HTTP, RTSP / RTP, MMS, RTMP और अन्य।
• विभिन्न स्वरूपों में धाराओं / इकट्ठा करें: एमपीईजी, एवीआई, एएसएफ, एफएलवी, एमकेवी और अन्य।
• फाइलों में मेटाडेटा खींचो और चिपकाओ।
• कोडेक्स के लगभग किसी भी संयोजन में डिकोड / एनकोड स्ट्रीम।
  इस मामले में, आप न केवल ओपन-सोर्स समाधान (libavcodec, libmp3lame, libfaac) का उपयोग कर सकते हैं, बल्कि वे स्वामित्व वाले भी हैं जिन्हें आप खरीद सकते हैं। आप CUDA / VAAPI / क्रिस्टलएचडी प्रौद्योगिकियों का उपयोग करके हार्डवेयर समर्थन वाले डिकोडर्स का भी उपयोग कर सकते हैं।
• DirectFB से लेकर X-s तक कई तरह के समाधानों का उपयोग करके स्क्रीन या साउंड कार्ड पर स्ट्रीम प्रदर्शित करें।

किसी फिल्म को किसी अन्य प्रारूप में ट्रांसकोड करने जैसी समस्याओं को हल करने के लिए, मेन्कोडर या वीएलसी जैसे कार्यक्रम बहुत लोकप्रिय हैं। लेकिन GStreamer के साथ भी ऐसा करना ज्यादा मुश्किल नहीं है।

नीचे लिनक्स के लिए उदाहरण हैं जो रूपरेखा की क्षमताओं को प्रदर्शित करते हैं। इन उदाहरणों में, हम मुख्य कार्यक्रमों gst-launch और gst-inspect का उपयोग करेंगे - कुछ हद तक ग्राफएड विंडोज अनुप्रयोग की याद दिलाता है। उन लोगों के लिए जिन्हें ग्राफिकल शेल की आवश्यकता है - gst-editor है । लेकिन ध्यान रखें कि ये प्रोग्राम डिबगिंग के लिए बने हैं, इसलिए इनका उपयोग करने के लिए सुविधाजनक होने की उम्मीद न करें।

GStreamer के साथ आरंभ करने के लिए, आपको कुछ अवधारणाओं को समझने की आवश्यकता है:

• तत्व - GStreamer की वस्तु तत्व जो डेटा प्राप्त / भेज सकता है।
• source - एक स्ट्रीम (फ़ाइल, स्ट्रीम या डिवाइस) बनाता है।
• फ़िल्टर - एक तत्व जो एक धारा को परिवर्तित करता है (पार्सर, मल्टीप्लेक्सर्स, कोडेक्स)।
• सिंक - एक धारा प्राप्त करता है और इसे पुनर्निर्देशित नहीं करता है।
• पाइपलाइन - परस्पर तत्वों का एक संग्रह।

क्लासिक रूप में, हमें इस तरह की श्रृंखला मिलती है: स्रोत -> पार्सर -> डिकोडर -> फ़िल्टर -> सिंक।

यदि आप मैन्युअल रूप से कोडेक्स और मल्टीप्लेक्सर्स की पूरी श्रृंखला एकत्र करने के लिए बहुत आलसी हैं, तो GStreamer आपके लिए यह कर सकता है:

$ gst-launch playbin uri=file:///home/me/audo.mp3

प्लेबिन तत्व स्वयं फ़ाइल को पार्स करता है, वांछित कोडेक और आउटपुट तत्व पाता है। सभी आवश्यक है कि फ़ाइल को चलाने के लिए पथ निर्दिष्ट करें। यदि, हालांकि, आप रुचि रखते हैं कि किस तत्व के लिए जिम्मेदार है, तो आप gst-निरीक्षण चला सकते हैं और सभी उपलब्ध तत्वों को देख सकते हैं, और "gst-inspect लंगड़ा" एमपी 3 एनकोडर के मापदंडों को दिखाएगा। यह तत्व "डिकोडबिन 2" की उपयोगिता को भी ध्यान देने योग्य है, जो स्वयं वांछित डिकोडर को ढूंढता है।

सबसे सरल ऑडियो प्लेयर:

$ gst-launch filesrc location=audio.mp3 ! decodebin2 ! alsasink

सबसे सरल ऑडियो प्लेयर (मैन्युअल रूप से कोडेक का चयन करें, और प्रारूपों पर सहमत):

$ gst-launch filesrc location=audio.mp3 ! mad ! audioconvert ! audioresample ! alsasink

खिलाड़ी अधिक जटिल है (ध्वनि और वीडियो के साथ):

$ gst-launch filesrc location=audovideofile.mpeg ! decodebin2 name=decoder \
decoder. ! ffmpegcolorspace ! xvimagesink \
decoder. ! audioconvert ! audioresample ! alsasink

यदि आपको AVI फ़ाइल को MOV में ट्रांसकोड करने की आवश्यकता है, तो आप निम्न कमांड का उपयोग कर सकते हैं:

$ gst-launch-0.10 filesrc location=film.avi ! \
decodebin2 name=decoder { qtmux name=muxer ! filesink location=film.mov } \
{ decoder. ! ffmpegcolorspace ! jpegenc ! queue ! muxer. } \
{ decoder. ! queue ! audioconvert ! queue ! muxer. }

क्या आप एक फ़ाइल में रिकॉर्डिंग और स्क्रीन पर प्रसारण वीडियो प्रदर्शित करने के साथ एक साथ प्रसारण करना चाहते हैं? कोई समस्या नहीं:

$ gst-launch v4l2src ! queue ! \
ffmpegcolorspace ! tee name=t1 ! \
queue ! xvimagesink sync=false t1. ! \
queue ! theoraenc quality=1 ! \
queue ! oggmux name=mux \
alsasrc ! audio/x-raw-int,rate=8000,channels=1,depth=8 ! \
queue ! audioconvert ! vorbisenc ! \
queue ! mux. mux. ! \
queue ! tee name= t ! \
queue ! filesink location=test.ogg t. ! \
queue ! shout2send ip=<-icecast-> port=8000 password=hackme


जो लोग फ्लैश में लटकना पसंद करते हैं, वे भी एक तरफ नहीं खड़े होते हैं, लाइब्रेटम्प (आपको जीएसटी-प्लगइन्स-खराब पैकेज के पुनर्निर्माण की आवश्यकता है) के लिए धन्यवाद:

$ gst-launch v4l2src ! \
queue ! ffmpegcolorspace ! ffenc_flv ! \
queue ! flvmux name=muux is-live=true ! \
rtmpsink location='rtmp://localhost/path/to/stream live=1' \
alsasrc ! audio/x-raw-int,rate=22050,channels=1,depth=16 ! \
queue ! audioconvert ! lame bitrate=48 ! \
queue ! muux.

इसलिए डेवलपर्स ने "देशी" मल्टीमीडिया फ्रेमवर्क (क्विकटाइम / डायरेक्टशो) का उपयोग करने पर ध्यान दिया, यदि आप "पुलों" के लिए मैकओएस या विंडोज का उपयोग करते हैं।

खैर, निष्कर्ष में, मैं कहना चाहता हूं कि कई समस्याएं हैं जिन्हें डेवलपर्स को अभी भी हल करना है (desync, मेमोरी लीक और प्रदर्शन के साथ समस्याएं)। उनमें से ज्यादातर तीसरे पक्ष के पुस्तकालयों के उपयोग से जुड़े हैं, जो हमेशा अच्छी तरह से लिखे नहीं जाते हैं। इसलिए डेवलपर्स एक दिलचस्प चाल के साथ आए - प्लगइन्स को 5 श्रेणियों में विभाजित किया गया है:

• gst-plugins-base - पैकेज में शामिल मुख्य प्लगइन्स: CDDA, RTP, RTSP, ogg, theora, vorbis, Xvideo, V4L।
• gst-plugins-good - प्लगइन्स जो उनकी विश्वसनीयता के बारे में संदेह नहीं उठाते हैं: FLAC, speex, JPEG, PNG।
• gst-plugins-bad - कार्य करना, लेकिन संभव समस्याएं: VP8, XVID, FAAC, dirac, RTMP, VDPAU, DirectShow।
• gst-plugins-ugly - का उपयोग करते समय समस्याओं के बिना मत करो: ASF, वास्तविक, DVDSub, a52, AMR, x264।
• gst-ffmpeg - ऑल-इन-वन कोडेक्स का एक अलग सेट।

परिचारिका पर ध्यान दें (स्रोत):

1. Gstreamer सुविधाएँ
2. Gstreamer के साथ लाइव स्ट्रीम जीएसटी-लॉन्च के लिए उदाहरण
3. howto
4. GStreamer, RTP और लाइव स्ट्रीमिंग , अजगर के लिए उदाहरण
5. पेड कोडेक्स का संग्रह
6. नमस्ते विश्व GStreamer में सी