טוויטר, או X, כמרקחה. ראנוויי (Runway) אוהבים לשחרר גרסאות מוקדמות לאמנים ויוצרים כדי לתת להם להתנסות ולהציף את הרשת בתוצרים שלהם, הרבה לפני שהכלים מגיעים לשוק. כך היה עם Gen2 וכך גם עכשיו עם מברשת התנועה המשודרגת – ה-Multi Motion Brush.
אבל לפני הכל – הישארו מעודכנים! הצטרפו לרשימת התפוצה שלנו ולא תפספסו שום עדכון, חידוש או מידע על כלי חדש שיוצא…
[NEW] Runway Multi-Motion Brush
Gen-2 Motion Brush has got a new update called Multi Motion Brush.
It is now possible to paint up to 5 unique subjects or areas within your input image to control their motion.
This is an upcoming update, currently in early beta access.
I chose… pic.twitter.com/9DRlABmvv2
— Anu Aakash (@anukaakash) January 17, 2024
* מתוך: ה-X (טוויטר לשעבר) של @anukaakash
·
איך זה עובד?
בניגוד למברשת התנועה הרגילה, עליה כתבנו בהרחבה כאן, המאפשרת לייצר תנועה ושינויים סלקטיביים באזורים ספציפיים בתמונה, הפיצ’ר החדש מאפשר שליטה במספר אזורים במקביל. או במילים אחרות – הנפשה של מספר אזורים שונים בתמונה, תוך כיוונון פרמטרים נפרדים לכל אזור ושליטה נפרדת בכל אזור. החופש הזה מאפשר לנו ליצור סרטונים שהרבה יותר קרובים למציאות. רמת השליטה מאחורי ה”מצלמה” גדלה, ואיתה גם ההזדמנויות. צפו בסרטון הבא כדי לקבל המחשה ויזואלית של הכתוב לעיל:
סרטון הסבר כללי על תפעול מברשות תנועה מרובות בסרטון אחד:
בפועל, השליטה באזורים השונים מתאפשרת ע”י מספר מברשות בצבעים שונים. לכל מברשת יש תפריט שליטה נפרד הנקרא Directional motion ובעזרתו אפשר לשלוט בתוצאה הסופית באותו אזור ספציפי שנצבע (ראו תמונה מטה).
·* הממשק של מברשת התנועה המשודרגת: Multi Motion Brush.
איך מנפישים אזורים שונים בסרטון בעזרת מברשת התנועה?
כפי שכתבנו מעלה, המפתח הוא להשתמש במברשות תנועה שונות לאזורים שונים, ושיוך ערכים שונים לכל מברשת. כדי לשלוט בעוצמת השינוי (ה”תנועה” במקרה שלנו) נשנה את הערכים בסליידר Ambient (noise). ככל שהערך גבוה יותר כך עוצמת הדיפוזיה של הפריימים השונים באותו אזור תהיה חזרה יותר – או במילים פשוטות יותר: ככל שהערך גבוה יותר, תהיה יותר תנועה או יהיה יותר שינוי באזור המסומן. כדי להבין טוב יותר את הכוונה, ראו את הסרטון מטה – אין כמו מראה עיניים. בסרטון תוכלו איך ניתן ליצור תנועה ריאליסטית (מכונית נוסעת ברחוב) בעזרת מברשות תנועה שונות לאזורים שונים. האזורים הרחוקים מקבלים ערך של Ambient (noise) נמוך (0.5) ואילו האזורים ש”קרובים למצלמה” מקבלים ערך גבוה יותר (5).
סרטון הסבר המדגים איך אפשר ליצור תנועה ריאליסטית בתוך סרטון, ע”י הנפשת אזורים שונים עם מברשות תנועה שונות בערכים שונים.
בסרטון מטה תוכלו לראות דוגמה נוספת: יצירת רגשות בעזרת מברשות תנועה שונות, השולטות באזורים שונים בפנים של הדמות:
סרטון הסבר המדגים יצירת מנעד רגשות עם מברשות תנועה מרובות:
האם הכלי זמין לכולם?
כפי שניתן לראות בתמונה מעלה, השדרוג זמין לכולם. כל מה שצריך לעשות זה להכנס ל-Gen2 ב-Runway, להעלות תמונת רפרנס ולבחור במברשת התנועה (Motion Brush). בשלב זה יש לבחור את המברשות הצבעוניות ולהתחיל לצבוע בצבעים שונים אזורים שונים. כאמור, לכל מברשת יש תפריט נפרד של פרמטרים, אותם ניתן לשנות. לחיצה על כפתור Generate תהפוך את התמונה לסרטון.
עוד קצת דוגמאות
ריכזתי לכם מספר דוגמאות של יוצרים מהרשת. מוזמנים להתרשם מהיכולות המפתיעות של הכלי המדהים הזה!
More control. pic.twitter.com/JMj57u3ByX
— Nicolas Neubert (@iamneubert) January 17, 2024
* מתוך: ה-X (טוויטר לשעבר) של Nicolas Neubert | @anukaakash
😲 Incredible news for digital artists!@runwayml #Gen2 is about to launch a game-changing feature: Multi-Motion Brush! 🎨 Check out this video and get ready to wield control like never before, with FIVE levels of mastery at your fingertips!
Follow for more amazing updates! pic.twitter.com/yGe2FKcTaR— vkuoo (@vkuoo) January 17, 2024
* מתוך: ה-X (טוויטר לשעבר) של @vkuoo
@Runway, Game Changer 💥 Multi Motion Brush!!
Do you want to create the Vertigo Dolly Zoom?! Now you can! And the best part is that you can adjust the parameters afterward…
You have 5 brushes, each with its own set of parameters. So, you have various movements you can create… pic.twitter.com/oRYJFvq2sC
— Jesus Plaza (@JesusPlazaX) January 17, 2024
* מתוך: ה-X (טוויטר לשעבר) של @JesusPlazaX
Here are some generations using @runwayml Multi Motion Brush I did this evening. Paint up to 5 unique subjects or areas within your image to control their motion independent of other areas. Currently beta testing with CPP members only. pic.twitter.com/zHRGH2gG0c
— Jeff_synthesized (@JeffSynthesized) January 17, 2024
* מתוך: ה-X (טוויטר לשעבר) של @JeffSynthesized
סדנת מחוללי וידאו ו-AI בוידאו
הצטרפו לסדנת ה-AI בוידאו שלנו והכירו את מחוללי הוידאו המובילים בשוק. הנה טעימה ממה שתלמדו בסדנה: עבודה עם ראנוויי (Runway) Gen1 ו-Gen2, שימוש במברשת התנועה (Motion Brush) בראנוויי, הנדסת פרומפטים במחוללי וידאו, קאיבר (Kaiber) – מחולל מבוסס סטייבל דיפיוז’ן, וונדר סטודיו (Wonder Studio), יצירת אווטארים מדברים 3D עם HetGen, תרגום ודיבוב סרטונים לשפות אחרות, ועוד הרבה דברים טובים! פרטים והרשמה בלינק הבא. הזינו את קוד הקופון LETSAI וקבלו גם הנחה!
מדריכים מקצועיים בעברית לכלי AI בוידאו ששווה להכיר
ריכזתי לכם מספר מדריכים מקצועיים וחינמיים על כלי AI בוידאו שיעזרו לכם לקחת את האומנות שלכם צעד אחד קדימה!
מדריך ל-DomoAI – מחולל וידאו ותמונות בדיסקורד.
מדריך מקיף ל-Pika: מחולל וידאו חינמי בדיסקורד.
כל החידושים ב-Gen2 של Runway, לרבות מברשת התנועה. לקריאה לחצו כאן.
מבט מסקרן לעתיד של מודלי החישוב של ראנוויי ומחוללי הוידאו: מודלי עולם כלליים (general world models)