कार्यप्रवाह और स्वचालन

सोलर रेंडरर केवल कुछ चरणों में जनरेटिव संदर्भ प्रतिपादन करता है।

सोलर रेंडरर इंजन ज्यामिति को एक संदर्भ फ्रेम से स्टाइल किए गए वास्तविक समय के वीडियो में परिवर्तित करता है, जिसमें कुछ-चरण मॉडल, प्लस कोड, डेमो और बेंचमार्क होते हैं।

सोलर रेंडरर केवल कुछ चरणों में जनरेटिव संदर्भ प्रतिपादन करता है।

मुख्य बिंदु

  • सोलर रेंडरर प्रति गेम रीट्रेनिंग के बिना, एक एकल संदर्भ पहले फ्रेम द्वारा निर्देशित स्टाइल किए गए वास्तविक समय वीडियो में अनटेक्सचर्ड इंजन संरचना पास को परिवर्तित करता है।
  • यह इंजन की ज्यामिति, गति और समय फ्रेम द्वारा फ्रेम को संरक्षित करता है, जो 1313 के एलो स्कोर के साथ अपने बेंचमार्क पर शीर्ष संरचना प्रदर्शन का दावा करता है।
  • इसकी कुछ चरणों वाली आसुत पाइपलाइन प्रत्येक 0.70 सेकंड में 24 FPS पर 17-फ्रेम के टुकड़े प्रस्तुत करती है, जिसमें लगभग 1.1 सेकंड की विलंबता और निरंतर इनपुट के लिए KV-कैश समर्थन होता है।
  • इस परियोजना को इंजन और दृश्यों में रैपिड स्टाइल प्रोटोटाइपिंग के लिए डिज़ाइन किया गया है, जिसमें कागज, लाइव डेमो, कोड, वेट्स और बेंचमार्क संसाधन सार्वजनिक रूप से उपलब्ध हैं।

मेटा विवरणः सोलर रेंडरर बिना बनावट वाले इंजन संरचना को स्टाइल किए गए वास्तविक समय के वीडियो में बदल देता है, जो एक संदर्भ पहले फ्रेम द्वारा निर्देशित होता है, जिसमें बेंचमार्क, कोड और लाइव डेमो होते हैं।

SolarRenderer performs generative reference rendering in only a few steps.

टैगः सोलर रेंडरर, रियल-टाइम रेंडरिंग, स्ट्रक्चर पास, वीडियो जनरेशन, गेम इंजन

विशेष रुप से प्रदर्शित छवि: (अंग्रेज़ी में) ">"</string> एक वायरफ्रेम गेम दृश्य का अमूर्त, मैत्रीपूर्ण चित्रण वास्तविक समय के वीडियो में बदल जाता है, जिसमें कोई असली लोग नहीं होते हैं, कोई लोगो और कोई पाठ नहीं होता है

SolarRenderer एक वीडियो रेंडरिंग परियोजना है जो किसी भी इंजन की अनटेक्स्टर्ड संरचना पास raw कच्ची ज्यामिति, गति और समाप्त सामग्री के बिना समय लेता है और इसे संदर्भ पहले फ्रेम द्वारा निर्देशित एक तैयार, स्टाइल किए गए वीडियो में बदल देता है। गेम डेवलपर्स, ग्राफिक्स प्रयोगकारियों और दृश्य शैली का प्रोटोटाइप करने वाले किसी व्यक्ति के लिए, यह प्रत्येक खेल के लिए रीट्रेनिंग के बिना नंगे इंजन व्यू से प्लेबल दिखने वाले रेंडर पर जाने का एक तरीका प्रदान करता है। प्रोजेक्ट कहता है कि इसका मॉडल MiniMax -H3 पर बनाया गया है, जिसमें नियंत्रण कम-रैंक अनुकूलन ( LoRA ) और कुछ चरणों में आसुत LoRA शामिल हैं।

संरचना इंजन फ्रेम द्वारा फ्रेम का अनुसरण करती है

केंद्रीय वादा फ्री-फॉर्म जनरेशन के बजाय नियंत्रण है। सोलर रेंडरर को इनपुट की ज्यामिति, गति और समय फ्रेम द्वारा फ़्रेम का अनुसरण करने के रूप में वर्णित किया गया है, इसलिए प्रत्येक वस्तु जहां इंजन इसे रखता है वहां रहती है और रेंडरिंग खेल के साथ समय रखती है। परियोजना रिपोर्ट करती है कि, अपने आयोजित बेंचमार्क पर, यह संरचना पर 1313 के एक एलो स्कोर के साथ नौ अन्य तरीकों के खिलाफ पहले स्थान पर है।

SolarRenderer performs generative reference rendering in only a few steps.

यह जोर उन उपयोगकर्ताओं के लिए मायने रखता है जिन्हें आउटपुट को अंतर्निहित दृश्य से बंधे रहने की आवश्यकता होती है। एक स्टाइलिश रेंडर केवल तभी उपयोगी होता है जब वह अभी भी मूल लेआउट, एनीमेशन और पेसिंग को दर्शाता हो। संरचना परिणाम परियोजना का सबसे स्पष्ट तथ्यात्मक दावा हैः उत्पन्न वीडियो इंजन की अपनी गति पर शैलीबद्ध परत की तरह व्यवहार करने का इरादा है, न कि इसकी अलग व्याख्या।

शैली एक संदर्भ फ्रेम से आती है

दूसरी प्रमुख विशेषता सामान्यता है। यह परियोजना सोलर रेंडरर को किसी भी गेम, चरित्र या दृश्य में उपयोग करने योग्य के रूप में प्रस्तुत करती है, ब्लेन्डर का नामकरण, तीन.जेएस ब्राउज़र गेम्स, गेम इंजन और यहां तक कि एक स्क्रीन पर फिल्मांकन करने वाला फोन इनपुट के रूप मे प्रदान करता है।

यह शैली हस्तांतरण में एक आम घर्षण को कम करता है। प्रत्येक परियोजना के लिए एक अलग मॉडल बनाने के बजाय, उपयोगकर्ता संदर्भ पहले फ्रेम की आपूर्ति करता है और सिस्टम को अनुक्रम में उस रूप को ले जाने देता है। स्रोत शैलियों या विशिष्ट कला पाइपलाइन की एक निश्चित लाइब्रेरी का दावा नहीं करता है; शैली जो भी प्रारंभिक फ़्रेम स्थापित करती है।

SolarRenderer performs generative reference rendering in only a few steps.

गति छोटे टुकड़ों के आसपास बनाया गया है

वास्तविक समय के डिजाइन को एक ब्लॉक-कारण छात्र के आसपास वर्णित किया गया है जो प्रति टुकड़ा 4 कदम देता है। यह 24 FPS पर हर 0.70 सेकंड में 17-फ्रेम का हिस्सा पैदा करता है, जिससे आउटपुट अपने इनपुट से लगभग 1.1 सेकंड पीछे हो जाता है। KV कैश के साथ, सिस्टम तब तक चलता रहता है जब तक कि इनपुट होता है।

परियोजना इस क्षमता को एक सरल विचार के साथ संक्षेप में प्रस्तुत करती हैः नियंत्रक उठाओ और खेलो। व्यावहारिक निहितार्थ यह है कि सोलर रेंडरर का उद्देश्य निरंतर, इनपुट-लंबाई वीडियो है, न कि JUST छोटी ऑफ़लाइन क्लिप। रिपोर्ट किए गए 1.1 सेकंड की देरी भी पाठकों को फिट न्याय करने का एक ठोस तरीका देती हैः आकस्मिक प्रोटोटाइप के लिए, यह स्वीकार्य हो सकता है; तेजी से रिफ्लेक्स-भारी गेम के लिए , उस देरी को संदर्भ में परीक्षण की आवश्यकता होगी।

उपयोगकर्ता आगे क्या निरीक्षण कर सकते हैं

पेपर https://arxiv.org/abs/2610.28630 पर उपलब्ध है, लाइव डेमो के साथ परियोजना पृष्ठ https://enderfga.cn/SolarRenderer/ पर और कोड https://github.com/Enderfga/SolarRenderer पर। भार, डेटा और बेंचमार्क को https://huggingface.co/collections/Enderfga/solarrenderer पर एकत्र किया जाता है।

वे संसाधन पाठकों को दिए गए संरचना स्कोर की तुलना करने, डेमो का प्रयास करने और 17-फ्रेम, 0.70-सेकंड के खंड दावे के पीछे कार्यान्वयन की समीक्षा करने देते हैं। स्रोत संरचना प्रदर्शन रिपोर्ट करता है, हर दृश्य गुणवत्ता आयाम पर एक पूर्ण तुलना नहीं, इसलिए इच्छुक उपयोगकर्ताओं के लिए सबसे अच्छा अगला कदम लाइव डेमो और बेंचमार्क सामग्रियों का निरीक्षण करना है।

Comments (0)

  1. No comments yet. Be the first to share what worked for you.

Leave a comment

Comments are reviewed before they appear. Your email address is not published.