एआई मॉडल और प्लेटफ़ॉर्म

नई एआई संचालित टूल वीडियो संपादन को थीम्ड टेक्स्ट दस्तावेजों से सक्षम बनाता है

mm
Unite.AI को Google पर अपने पसंदीदा स्रोतों में जोड़ें

चीन के त्सिंघुआ और बेइहैंड विश्वविद्यालय, इज़राइल के आईडीसी हर्ज़लिया और हार्वर्ड विश्वविद्यालय के कंप्यूटर विज्ञान अनुसंधानकर्ताओं की एक टीम ने हाल ही में एक टूल बनाया है जो एक पाठ विवरण और वीडियो क्लिप के भंडार के आधार पर संपादित वीडियो बनाता है।

पेशेवर वीडियोग्राफरों, शौकीनों और सामान्य लोगों द्वारा प्रतिदिन बड़ी मात्रा में वीडियो फुटेज रिकॉर्ड किया जाता है। फिर भी, इस वीडियो को एक प्रस्तुति में संपादित करना जो समझ में आता है, अभी भी एक महंगा समय निवेश है, अक्सर जटिल संपादन टूल का उपयोग करने की आवश्यकता होती है जो कच्चे फुटेज को मैनिपुलेट कर सकते हैं। अनुसंधानकर्ताओं की अंतरराष्ट्रीय टीम ने हाल ही में एक टूल विकसित किया है जो थीम्ड पाठ विवरण लेता है और उन पर आधारित वीडियो बनाता है। टूल वीडियो क्लिप के एक भंडार में वीडियो क्लिप की जांच कर सकता है और उन क्लिप का चयन कर सकता है जो इनपुट पाठ के साथ मेल खाते हैं जो कहानी का वर्णन करता है। लक्ष्य यह है कि टूल उपयोगकर्ता-मित्र और पर्याप्त शक्तिशाली है ताकि व्यापक वीडियो संपादन कौशल या महंगे वीडियो संपादन सॉफ्टवेयर की आवश्यकता के बिना गुणवत्ता वाले वीडियो बना सके।

वर्तमान वीडियो संपादन प्लेटफ़ॉर्म वीडियो संपादन तकनीकों के ज्ञान की आवश्यकता होती है, लेकिन अनुसंधानकर्ताओं द्वारा बनाया गया टूल नौसिखिया वीडियो निर्माताओं को एक अधिक प्राकृतिक, सहज तरीके से कहानियों को बताने वाली रचनाएं बनाने की अनुमति देता है। “लिखें-वीडियो”, जैसा कि इसके निर्माताओं द्वारा इसका नाम दिया गया है, उपयोगकर्ताओं को वीडियो संपादित करने की अनुमति देता है बस वीडियो के साथ आने वाले पाठ को संपादित करके। यदि उपयोगकर्ता पाठ को हटा देता है, पाठ जोड़ता है, या वाक्यों को आगे बढ़ाता है, तो ये परिवर्तन वीडियो में परिलक्षित होंगे। संबंधित शॉट काटे जाएंगे या जोड़े जाएंगे क्योंकि उपयोगकर्ता पाठ को मैनिपुलेट करता है और अंतिम परिणामी वीडियो उपयोगकर्ता के विवरण के अनुसार तैयार किया जाता है।

आईडीसी हर्ज़लिया के एफआई अराज़ी स्कूल ऑफ कंप्यूटर साइंस के डीन अरियल शमीर ने समझाया कि लिखें-वीडियो टूल उपयोगकर्ताओं को मुख्य रूप से पाठ के माध्यम से वीडियो के साथ बातचीत करने की अनुमति देता है, प्रदान किए गए अर्थ के आधार पर वीडियो शॉट मेल खाने के लिए प्राकृतिक भाषा प्रसंस्करण तकनीकों का उपयोग करता है। एक अनुकूलन एल्गोरिदम तब वीडियो को एक साथ रखने के लिए उपयोग किया जाता है, शॉट काटने और स्वैप करने। टूल उपयोगकर्ताओं को विभिन्न दृश्य शैलियों के साथ प्रयोग करने की भी अनुमति देता है, दृश्यों को प्रस्तुत करने के तरीके को ट्वीक करके विशिष्ट फिल्म मुहावरों का उपयोग करके क्रिया को तेज या धीमा करने के लिए, या अधिक / कम कट जोड़ने के लिए।

कार्यक्रम संभावित शॉट्स का चयन उनकी सौंदर्य अपील के आधार पर करता है। कार्यक्रम यह निर्धारित करने के लिए शॉट्स को फ्रेम किया जाता है, फोकस किया जाता है और प्रकाश में कैसे दिखाया जाता है। टूल धुंधले या अस्थिर के बजाय बेहतर फोकस वाले शॉट्स का चयन करेगा और यह अच्छी तरह से जले हुए शॉट्स को भी प्राथमिकता देगा। लिखें-वीडियो के निर्माताओं के अनुसार, उपयोगकर्ता किसी भी बिंदु पर उत्पन्न वीडियो को रेंडर कर सकता है और पाठ का उपयोग करके क्लिप का चयन करने वाली वॉयसओवर कथा के साथ इसका पूर्वावलोकन कर सकता है।

अनुसंधान टीम के अनुसार, उनके प्रयोग ने दिखाया कि कंप्यूटर दृष्टि और प्राकृतिक भाषा प्रसंस्करण के पहलुओं को जोड़ने वाली डिजिटल तकनीक वीडियो संपादन जैसी रचनात्मक प्रक्रियाओं में उपयोगकर्ताओं की सहायता कर सकती है।

“हमारा काम इडियम-आधारित गणनात्मक संपादन में स्वचालित दृश्य-semantic मिलान की संभावना को प्रदर्शित करता है, वीडियो निर्माण को गैर-पेशेवरों के लिए अधिक सुलभ बनाने के लिए एक बुद्धिमान तरीका प्रदान करता है,” शमीर ने टेकएक्सप्लोर को समझाया।

अनुसंधानकर्ताओं ने अपने टूल का परीक्षण विभिन्न वीडियो भंडार के साथ किया, जिनमें थीम्ड पाठ दस्तावेज़ शामिल थे। उपयोगकर्ता अध्ययन और मात्रात्मक मूल्यांकन परिणामों की व्याख्या करने के लिए किया गया था। उपयोगकर्ता अध्ययन के परिणामों से पता चला कि गैर-पेशेवर कभी-कभी फ्रेम-आधारित संपादन सॉफ्टवेयर का उपयोग करने वाले पेशेवरों की तुलना में टूल का उपयोग करके उच्च गुणवत्ता वाले संपादित वीडियो बना सकते हैं। टेकएक्सप्लोर के अनुसार, टीम अपना काम कुछ दिनों में ऑस्ट्रेलिया में आयोजित एसीएम एसआईजीजीआरएएफ एशिया सम्मेलन में प्रस्तुत करेगी। अन्य संस्थाएं भी वीडियो संपादन में सहायता के लिए एआई का उपयोग कर रही हैं। एडोबे ने भी अपने संपादन प्लेटफ़ॉर्म के लिए अपने एआई-संचालित एक्सटेंशन पर काम किया है। टूल लोगों को यह सुनिश्चित करने में मदद करता है कि पहलू अनुपात में परिवर्तन महत्वपूर्ण वीडियो टुकड़ों को काटने नहीं देते हैं।

ब्लॉगर और प्रोग्रामर जिनकी विशेषज्ञता मैशीन लर्निंग और डीप लर्निंग विषयों में है। डैनियल दूसरों को सामाजिक कल्याण के लिए एआई की शक्ति का उपयोग करने में मदद करना चाहता है।