חוקרים ממכון NVIDIA למחקר הציגו פתרון חדשני ליצירת סרטים במישור הטקסט על ידי אפשרות לשלוט במסלול והתנהגות של עצמים בסרטים המתוסנתים. גישה חדשנית זו מספקת ממשק ברמה גבוהה שבאמצעותו המשתמשים יכולים לציין את מיקומם של אובייקטים בשלבים שונים בסרט על ידי סימון של תיבות גבול (bboxes) והכוונה לטקסט תואם.
בעריכת מפות תשומת לב מרחביות וזמניות במהלך שלבי התפשטות ההדוה הראשוניים, המשתמשים יכולים להתרכז בהפעלה במיקום הרצוי של העצם. מעין זה חשוב, הגישה הזו לא מפריעה להתלהבות בעבר הבנה של קשר בין הטקסט לתמונה ודורשת שינויים מינימליים בקוד.
אחת התכונות המרכזיות של שיטה חדשה זו היא היכולת ליצור מסגרת מפתח סביב התיבה הגבולית, מאפשרת למשתמשים לשלוט בגודל ובאפקטים הפרספקטיביים של העצם. כמו כן, במפתחן של הטקסט אפשר להשפיע על התנהגות הנושא בסרט המתוסנת.
גישה אינטואיטיבית זו מציעה למשתמשים רגילים כלי קיסוס לסיפורים מקוריים בו ניתן לשנות את מסלול והתנהגות הנושא עם הזמן. על ידי שילוב הנושא המתוסנת בסביבה מסוימת, המשתמשים יכולים ליצור תוצאות טבעיות, כולל אפקטי פרספקטיבה, תנועה מדויקת של אובייקטים ואינטראקציות בין אובייקטים וסביבתם.
החלק הכי טוב הוא ששיטה זו יעילה מחשבתית ואינה מחייבת כתיבת קוד, אימון או אופטימיזציה מקוונת. על ידי השימוש בכוחה של מודל ההתפשטות התחתון, היא מייצרת תוצאות באיכות גבוהה עם מינימום מאמץ מצד המשתמש.
בעוד שגישה זו מביאה לשיפורים משמעותיים בשליטה על מסלולי עצמים בסרטים מסונתזים, עדיין קיימות אתגרים כמו יצירת מאפיינים מדויקים עבור מספר עצמים או עצמים מעוצבים. בכל זאת, החוקרים ממשיכים לעבוד על שיפור השיטה כדי להתמודד עם המגבלות הללו ולשדרג את חוויית המשתמש.
המחקר החדשני הזה פותח אפשרויות חדשות בייצור סרטים, המאפשרת למשתמשים רגילים ליצור סרטים דינמיים ומרתקים בקלות. למידע נוסף על המחקר הזה, מוזמנים לקרוא את המאמר ולבדוק את הפרויקט של חוקרי מכון NVIDIA למחקר.
The source of the article is from the blog motopaddock.nl