विश्व की पहली फिल्म "Watch The Skies", जो पूरी तरह से AI द्वारा अनुवादित और डब की गई है, जल्द ही अमेरिका के प्रमुख सिनेमाघरों में आने वाली है। यह स्वीडिश विज्ञान-कथा फिल्म Flawless कंपनी की TrueSync तकनीक के माध्यम से कृत्रिम बुद्धिमत्ता के अनुवाद और डबिंग को प्राप्त करती है।

Flawless न केवल संवादों का अंग्रेजी में अनुवाद करता है, बल्कि कृत्रिम बुद्धिमत्ता तकनीक का उपयोग करके फिल्म में सभी पात्रों के मुँह के हिलने को अंग्रेजी के साथ पूरी तरह से समन्वयित करता है। परिणाम इतना वास्तविक है कि ऐसा लगता है कि फिल्म मूल रूप से अंग्रेजी में बनाई गई थी।

पहले, जब दर्शक विदेशी सामग्री के अंग्रेजी डब संस्करण देखते थे, तो उन्हें अक्सर असहजता महसूस होती थी। स्ट्रीमिंग प्लेटफार्मों के प्रसार के लिए धन्यवाद, डब किए गए डेनिश अपराध नाटक या स्पेनिश बोर्डिंग स्कूल सोप ओपेरा देखना एक असहज "हॉरर वैली" यात्रा में बदल गया। "हॉरर वैली" एक व्यापक रूप से उपयोग किया जाने वाला शब्द है, जिसका अर्थ है ऐसी तकनीकें जो हमें विश्वास दिलाने में असफल रहती हैं, बल्कि मानव समानता को एक विरोधाभासी दुःस्वप्न में मिलाती हैं।

Flawless अपनी विशेष तकनीक TrueSync के माध्यम से चाहता है कि दर्शक स्ट्रीमिंग पर लोकप्रिय कार्यक्रमों का आनंद लेते हुए रात में आराम से सो सकें, बिना असमान मुँह के हिलने और क्रूर दृश्य संपादन की परेशानियों के। Flawless का निर्माण निर्देशक Scott Mann और Nick Lynes ने 2018 में किया था, और Flawless की तकनीक AI डबिंग क्षेत्र में अनुवाद के प्रभाव में प्रभावशाली है। इस कंपनी ने इस साल के कान फिल्म महोत्सव में अपने काम के उत्कृष्ट अंशों का पूर्वावलोकन किया, जिसे Variety वेबसाइट ने विशेष रूप से साझा किया।

Flawless का डिज़ाइन कला के अधिकारों की रक्षा करने और हॉलीवुड संघों के नियमों का पालन करने के लिए है, जिसने अंतरराष्ट्रीय सामग्री के मूल्य और अमेरिका के बाजार में इसके विकास की संभावनाओं पर महत्वपूर्ण प्रश्न उठाए हैं। Variety वेबसाइट यह भी रिपोर्ट कर सकती है कि Flawless ने औपचारिक रूप से फिल्म वितरण क्षेत्र में प्रवेश किया है। यह कंपनी XYZ Films और Tea Shop Productions के साथ साझेदारी में विदेशी फिल्म अधिकारों का अधिग्रहण कर रही है। यह साझेदारी इन परियोजनाओं को अंग्रेजी में अनुवादित करेगी और Flawless द्वारा वादे किए गए "सही मुँह के हिलने के दृश्य प्रभाव" के साथ संबंधित क्षेत्रों में जारी करेगी। पहली जारी की जाने वाली फिल्म विज़िटर डैनल द्वारा पुरस्कार विजेता विज्ञान-कथा कॉमेडी "UFO स्वीडन" होगी, जिसे घरेलू शीर्षक "Watch the Skies" के तहत जारी किया जाएगा। आने वाले महीनों में कई परियोजनाओं के लॉन्च होने की उम्मीद है।

Mann ने Variety के साथ एक गहन साक्षात्कार में मनोरंजन उद्योग में AI के डर और नफरत, नैतिक मानकों के निर्माण और हॉरर वैली के मस्तिष्क तंत्र पर चर्चा की। यहां साक्षात्कार का सारांश है:

आप इस क्षेत्र में कैसे आए?

यह 2018 में शुरू हुआ, मेरा बैकग्राउंड फिल्म निर्देशक, लेखक और निर्माता का है। मैंने अनजाने में एक लेख देखा जो जनरेटिव AI के बारे में दुनिया को बताता है, जिसका नाम "Deep Video Portrait" है, जो SIGGRAPH सम्मेलन से है, जो मूल रूप से विज्ञान का ऑस्कर है। यह मुझे झकझोर दिया।

मैं हमेशा दृश्य प्रभाव के क्षेत्र में रहा हूं, और यह स्पष्ट था कि यह तकनीक हमारे उद्योग पर कितना प्रभाव डाल सकती है। मैंने उस पेपर के लेखक से संपर्क किया, जिससे मुझे इन लोगों और मेरे साथी Nick Lynes के साथ कंपनी की स्थापना करने का मौका मिला। Christian Theobalt, Pablo Garrido और Hyeongwoo Kim ने हमारे वैज्ञानिक विभाग की स्थापना की और इसे दुनिया के सबसे प्रमुख कंप्यूटर-ड्राइव जनरेटिव साइंस डिपार्टमेंट में विकसित किया। यह हमारी गुप्त हथियार है।

वर्तमान में हॉलीवुड में, AI के चारों ओर बहुत डर और चिंता है। दिलचस्प बात यह है कि आपकी कंपनी इस पर सकारात्मक दृष्टिकोण रखती है।

हमने फिल्म निर्माण के दृष्टिकोण से इस कंपनी की स्थापना की। मुझे कला से प्यार है, और हमारा मुख्य उद्देश्य इस तकनीक को एक निर्माण उपकरण के रूप में देखना है। एक अलग दृष्टिकोण है जो कहता है कि इसका उद्देश्य रचनात्मक व्यक्तियों को खत्म करना और कला को चुराना है। इसे Napster बनाना, इसे बर्बाद करना। लेकिन हम मानव कहानी के अभिव्यक्ति में विश्वास करते हैं, और फिल्म इस अभिव्यक्ति का सबसे उन्नत रूप है। तकनीक इसे बढ़ा रही है और अधिक रचनात्मकता जोड़ रही है। फिर पूरी उद्योग की अर्थव्यवस्था है, जो कुछ सुरक्षा और इसके काम करने के तरीके की समझ पर निर्भर करती है।

इस शहर में AI के चारों ओर शिक्षा की गंभीर कमी है। इसका आपके व्यवसाय पर क्या प्रभाव पड़ा है?

यह एक वैश्विक समस्या है। केवल हॉलीवुड नहीं। शिक्षा और समझ महत्वपूर्ण हैं। कुछ कंपनियाँ - चलो उन्हें दोषपूर्ण कंपनियाँ कहते हैं - शिक्षा देने से बचती हैं क्योंकि इससे एक अनैतिक खिलाड़ी का खुलासा होता है। आपको ईमानदारी से चर्चा करने की आवश्यकता है कि यह कैसे और कहाँ नुकसान पहुंचाता है, और सकारात्मक पक्ष कहाँ है। पिछले कुछ वर्षों में, हमने स्टूडियो और संघों - जिसमें SAG-AFTRA भी शामिल है - के साथ समझ को प्राथमिकता दी है, और कहा है, "देखो, यह वह तरीका है जिसका उपयोग किया जाना चाहिए।" अगली AMPTP अनुबंध वार्ता हर किसी के लिए चर्चा करने का विषय होना चाहिए। एक परिवर्तनकारी चीज हमारे उद्योग में प्रवेश कर रही है और हमें इसके लिए तैयार रहना चाहिए।

क्या उद्योग इस मुद्दे पर गंभीरता से ध्यान दे रहा है?

मैं आत्मविश्वास से कह सकता हूं कि दृष्टिकोण में एक बड़ा बदलाव आया है। पिछले साल की हड़ताल से पहले, लोगों ने AI परियोजनाओं के उपयोग को मंजूरी देने में सतर्कता बरती। लोगों ने प्रारंभिक वार्तालाप किए, ऐसा लगता है कि उन्होंने इसे समझा है और प्रक्रियाओं में सुधार करने की कोशिश की है। लेकिन एक डर है, सीमा पार करने का डर। यह उद्योग वर्तमान में कुछ स्थानों पर खराब स्थिति में है, और कई लोग गलत समाधान अपनाने के लिए जल्दी नहीं होना चाहते।

Flawless अपने नैतिक मानकों का निर्माण कैसे कर रहा है?

यह मेरी व्यक्तिगत अनुभवों से आता है जो एक फिल्म निर्माता के रूप में हैं। मैं हमेशा फिल्म डबिंग को ठीक करना चाहता था। मैंने एक फिल्म बनाई, मैं बहुत सावधानी से किया, जिसका नाम "Robbery" है, जिसमें रॉबर्ट डेनिरो ने अभिनय किया। इसे इतनी करीबी और बारीकी से बनाया गया और हमें जो करना था, उसे सौंपने में खुशी हुई। मैंने डब किए गए विदेशी संस्करण को देखा। स्क्रिप्ट को पूरी तरह से फिर से लिखा गया, मुँह के हिलने में पूरी तरह से भिन्नता थी। मैंने महसूस किया, "हे भगवान, कोई आश्चर्य नहीं कि चीजें इतनी खराब फैलती हैं।"

मेरे पास इस समस्या को ठीक करने का एक विचार था, मैंने बहुत सारी दृश्य प्रभावों की कोशिश की, जैसे सिर की स्कैनिंग और अन्य बकवास। यह व्यावहारिक नहीं था और न ही हॉरर वैली को पार कर सका। यह एक लंबा बयान है, यदि आप उस क्षेत्र को हटा रहे हैं और नष्ट कर रहे हैं जो फिल्म में योगदान देता है, तो आप इसे नैतिक रूप से नहीं कर सकते। हमने सीखा कि नैतिक और कानूनी अधिकार एक-दूसरे के पूरक हैं।

जहां तक हॉरर वैली की बात है, वर्तमान में डबिंग देखना बहुत क्रूर है। विशेष रूप से स्ट्रीमिंग ने इसे बढ़ा दिया है।

एक मानव के रूप में, हम एक-दूसरे का बहुत बारीकी से अध्ययन करते हैं। यदि हम कुछ असामान्य देखते हैं, तो हमारा मस्तिष्क उच्च सतर्कता की स्थिति में जाने के लिए प्रोग्राम किया गया है। फिल्म निर्माण की प्रक्रिया में, हमारे मस्तिष्क को धोखा और पुनः प्रशिक्षित किया गया है। आपका अवचेतन वास्तविकता की जांच कर रहा है। यदि कुछ मेल नहीं खाता - विशेष रूप से आवाज और दृश्य - तो आप तुरंत किसी भी इमर्सिव भावनात्मकता और विश्वसनीयता के लिए एक बड़ा बाधा बना देते हैं। सोचिए, चेहरे, इशारों और अभिनेताओं के प्रदर्शन के माध्यम से कितनी भावनाएँ संप्रेषित होती हैं, भले ही आवाज न सुनी जाए। वहाँ बहुत कुछ है। ये सभी कारण [वर्तमान डबिंग] को एक समस्या बनाते हैं। लेकिन एक स्पष्ट समस्या को हल करना अच्छा है।

यहाँ एक काफी परिवर्तनकारी तत्व भी है, अंतरराष्ट्रीय फिल्मों के लिए। यह एक नए स्टार बाजार को खोल सकता है, बहुत सारी अमेरिकी भाषा के रीमेक का जश्न मनाने वाली फिल्मों को समाप्त कर सकता है।

फिल्म निर्माताओं को हमारे सामग्री दिखाना, विशेष रूप से पिछले वर्ष में, उन्होंने स्थानीय मंच से वैश्विक मंच की संभावनाओं को पहचान लिया। यह आपके काम को बाहर लाने का एक बड़ा अवसर है, जो हमेशा उत्साहजनक रहा है। वे अपने काम को व्यापक दर्शकों के सामने लाने के लिए बहुत उत्साहित हैं, विशेष रूप से अमेरिका में।

क्या कोई स्टूडियो या कंपनी पूरी तरह से आपको अधिग्रहित करने की कोशिश कर रही है?

हाँ, जब हम पहली बार हॉलीवुड में आए थे। हमारे पास 2021 में एक बहुत ही छोटी प्रोमोशनल वीडियो थी, कुछ लोगों ने सीधे कीमत की पेशकश करने की कोशिश की। Nick और मैंने दोनों सहमति दी कि हम हर किसी की सेवा करना चाहते हैं, न कि केवल एक स्टूडियो के हितों के लिए। हम स्विस बनना चाहते थे, क्योंकि अन्यथा बहुत सीमित होगा। लेकिन इससे हमें धन जुटाने और कंपनी को विकसित करने में मदद मिली। यह एक अच्छा सवाल है।

आप भी वितरण खेल में प्रवेश करना चाहते हैं।

हमने हमेशा खुद को एक तरह के स्टूडियो के रूप में देखा है। हम भविष्य पर ध्यान केंद्रित करना चाहते हैं। आपको प्री-प्रोडक्शन, प्रोडक्शन से लेकर रिलीज तक इस काम को सही तरीके से करना होगा। सभी चरणों पर तकनीक का प्रभाव होता है। मेरा मानना है कि हमें फिल्म दर्शकों को 10 गुना बढ़ाना चाहिए। और इन उपकरणों का उपयोग करके अद्भुत फिल्में बनाना चाहिए, कम लागत पर। यदि आप हमारी पहली फिल्म "UFO स्वीडन" को देखें, तो यह स्पष्ट रूप से अंग्रेजी में अनुवादित हो चुकी है, लेकिन इसने फिल्म निर्माताओं को उन चीजों को बढ़ाने और बदलने की स्वतंत्रता भी दी है जो वे पहले नहीं कर सकते थे। आप एक एल्गोरिदम घटक की तरह चयन कर सकते हैं, काम करने की कोशिश कर सकते हैं, लेकिन मेरा मानना है कि असली शक्ति फिल्म बनाने और वितरण से आती है। यह पूरी चीज़ है। पोस्ट-प्रोडक्शन के संदर्भ में, हम और अधिक कर सकते हैं। पिक्सर को देखें, वे रिलीज से पहले अपनी फिल्मों को पुनरावृत्त कर सकते हैं।

संयुक्त उद्यम का अधिग्रहण Ryan Black, XYZ के James Emanuel Shapiro और Tea Shop के James Harris द्वारा नेतृत्व किया जाएगा।

संदर्भ लेख:

https://variety.com/2024/film/news/flawless-ai-lip-dubbing-movies-tv-1236068071/