הפיצ’ר לו חיכינו! ראנוויי מוסיפה בקרת מצלמה ל-Gen3 טורבו

במהלך השבועות האחרונים, חברת Runway המשיכה במגמת ההתרחבות שלה בכל הקשור לתכונות AI חדשות – שדרוגים כמו היכולת להוסיף פריים ראשון ואחרון בג’ינרוט וידאו, ההכרזה על Act One שמאפשר להוסיף מיקרו הבעות על בסיס וידאו רפרנס, וכמובן השקת המודל המהיר – Gen3 Alpha Turbo באוגוסט 2024. ועכשיו, סוף סוף מגיע פיצ’ר חשוב, לו רבים ציפו – בקרת מצלמה. הפיצ’ר זמין נכון להיום רק במודל הטורבו של Gen3. חשוב לציין שבקרת מצלמה אינה דבר חדש – ראינו את היכולת הזו בקלינג, בפיקה וכמובן הראשונה להציג יכולות שליטה בתנועות מצלמה הייתה ראנוויי עצמה, עוד ב-Gen2. השדרוג החדש-ישן הזה מציע ליוצרי תוכן, עורכי וידאו ויוצרי AI שליטה מדויקת על תנועות המצלמה בסרטוני הווידאו שהם מייצרים בעזרת AI, מה שמביא את חוויית היצירה לרמה חדשה של מקצועיות ודיוק.

מה זה פיצ’ר בקרת המצלמה?

פיצ’ר בקרת המצלמה הוא כלי חדשני שמאפשר שליטה על כיוון ועוצמת תנועת המצלמה בווידאו מבוסס AI. בקרת מצלמה במחוללי וידאו היא תכונה המאפשרת שליטה מדויקת על תנועות המצלמה בסרטונים הנוצרים באמצעות בינה מלאכותית. באמצעות פיצ’ר זה, יוצרים יכולים להגדיר את כיוון ועוצמת תנועות המצלמה – כמו תנועה אופקית, אנכית, פאן, טילט, זום ורול – כדי להעניק לסצנות מראה דינמי וקולנועי יותר. בקרת המצלמה מאפשרת למשתמשים ליצור וידאו בעל עומק ואיכות גבוהים, תוך התאמה אישית של תנועות המצלמה לפי הצרכים הספציפיים של התסריט.

הפיצ’ר מציע שש תנועות מצלמה עיקריות, אותן ניתן להתאים ולשנות לפי הצורך:

1. תנועה אופקית (Horizontal): תזוזת המצלמה על ציר ה-X.
2. תנועה אנכית (Vertical): תזוזת המצלמה על ציר ה-Y.
3. פאן (Pan): תזוזה אופקית של המצלמה מנקודה קבועה.
4. טילט (Tilt): תזוזה אנכית של המצלמה מנקודה קבועה.
5. זום (Zoom): התקרבות או התרחקות של המצלמה מהנושא.
6. רול (Roll): סיבוב המצלמה סביב צירה.

המדריכים תמיד חינמיים, אבל אם בא לכם להתמקצע - יש גם קורס יצירת סרטים עם AI

לפרטים נוספים לחצו כאן >>

גישה לפיצ’ר בקרת המצלמה

כדי להשתמש בפיצ’ר זה, יש לבצע את השלבים הבאים:

• כניסה לראנוויי: פתחו את Runway ולחצו על כפתור הווידאו הגנרטיבי (Generative Video).
• בחירת מודל: ודאו שבחרתם בדגם Gen-3 Alpha Turbo מתוך תפריט המודל העילי (שימו לב שנכון להיום בקרת מצלמה עדיין לא זמינה במודל הדגל של ראנוויי Gen3 Alpha, אלא רק בגרסת הטורבו שלו).
• הפעלת בקרת המצלמה: לחצו על אייקון המצלמה בתפריט השמאלי לגישה לחלון בקרת המצלמה, בו ניתן להעלות תמונה, להזין פרומפט טקסטואלי ולהגדיר את ערכי התנועות.

בקרת מצלמה ב-Gen3 טורבו.

שילוב פרומפטים לטקסט והגדרות תנועה

הפיצ’ר עובד בצורה הטובה ביותר בשילוב פרומפטים טקסטואליים המפרטים את הסצנה והנושא. השימוש בפרומפטים עוזר למודל להבין את הכוונה המדויקת מאחורי תנועות המצלמה ולהבטיח תוצאה עקבית. בלינק הבא תמצאו מדריך מורחב לשילוב פרומפטים מילוליים עם ערכים של תנועות מצלמה ב-Gen3 טורבו.

הגדרות עוצמת התנועה

כל אחת מהתנועות ניתנת להתאמה באמצעות ערכי עוצמה הנעים מ-0 (אין תנועה) ועד 10 (תנועה אינטנסיבית במיוחד). ערכים אלו משפיעים על מהירות ועוצמת התנועה, ומאפשרים ליצור סצנות נועזות ומרשימות יותר:

• עוצמה נמוכה (0.1-1): תנועות עדינות.
• עוצמה בינונית (2-3): תנועות בולטות אך לא אגרסיביות.
• עוצמה גבוהה (7-10): תנועות חזקות שמעניקות מראה דינמי במיוחד.

Advanced Camera Control is now available for Gen-3 Alpha Turbo. Choose both the direction and intensity of how you move through your scenes for even more intention in every shot.

(1/8) pic.twitter.com/jRE6pC9ULn

— Runway (@runwayml) November 1, 2024

שליטה מדויקת בכיוון ועוצמת התנועה | מתוך חשבון ה-X של Runway.

יתרונות ושימושים אפשריים

השקת הפיצ’ר החדש מביאה איתה כמה יתרונות מרכזיים:

• שליטה מלאה על זוויות המצלמה: הפיצ’ר של בקרת המצלמה מאפשר ליוצרים לכוון את תנועות המצלמה בצורה מדויקת ואחידה, דבר שמעניק להם את היכולת לבנות סצנות מורכבות ומלאות בפרטים. השליטה בזוויות מאפשרת יצירת תחושות שונות כמו דרמטיות, מתח או אפילו עדינות, בהתאם למבנה התנועה. התוצאה היא סרטון שבו כל תזוזת מצלמה מתוכננת ומתבצעת בהתאם לתסריט או לסיפור הרצוי, מה שמקנה לו אופי קולנועי ומשמעותי יותר.

  שיפור יכולות הסיפור הוויזואלי: תנועות מצלמה מדויקות אינן רק עניין של אסתטיקה, אלא חלק בלתי נפרד ממלאכת הסיפור הוויזואלי. תנועה מתוזמנת היטב יכולה לחשוף פרטים חשובים בסצנה, להדגיש דמויות או נושאים, וליצור תחושת זרימה טבעית בין חלקי העלילה. יכולת זו מאפשרת ליוצרים להשתמש בתנועות מצלמה ככלי שמוסיף עומק ואווירה לכל שוט, ויוצר תחושת חיות בסרטון שמדברת ישירות אל הצופה.

  יכולת שילוב פרומפטים מפורטים: פרומפטים מפורטים מספקים הנחיות ברורות למודל ה-AI ומאפשרים יצירת תכנים שמגיבים בצורה נאמנה לכוונת היוצר. תיאור מדויק של הסצנה והתנועות הרצויות עוזר למודל להבין את המטרה הסופית ולהתאים את התנועות באופן שתואם את התוכן הנדרש. בזכות זה, ניתן ליצור וידאו בעל אחידות ודיוק בתנועות המצלמה, מה שמקנה ליצירה אמינות ומשיכה ויזואלית.

עוד דוגמאות מערוץ ה-X של Runway:

Combine outputs with various camera moves and speed ramps for interesting loops.

(4/8) pic.twitter.com/ImCu2zCOFJ

— Runway (@runwayml) November 1, 2024

אתגרים ובאגים

למרות היתרונות הברורים של הפצ’ר המצוין הזה, הוא רחוק ממושלם. יש עדיין לא מעט באגים (ותמיד יהיו באגים בכל מה שקשור למחוללי וידאו או תמונה שמבוססים על תהליכי דיפוזיה). אחד מהאתגרים המרכזיים הוא הבטחת עקביות התנועה והתגובה של המודלים בסצנות מורכבות. לעיתים, תגובות הנושא עלולות להיות לא מדויקות ולא תואמות בצורה מושלמת לפרומפטים שהזינו המשתמשים. כמו כן, תמיד נדרש לבצע כוונון עדין ושימוש במערך הגדרות משולב – הרבה טסטים (ניסוי וטעייה) ואיתור הפרומפט המילולי שישלב לצד הגדרת ערך בקרת המצלמה וכיוון התנועה. 

למרות הכתוב לעיל, פיצ’ר בקרת המצלמה ב-Gen-3 Alpha Turbo מהווה קפיצת מדרגה משמעותית ליוצרים שמשתמשים ב-Gen3 – לדעתנו, מודל הוידאו הטוב בעולם נכון ליום כתיבת שורות אלו. השילוב של יכולות תנועה מדויקות עם פרומפטים מפורטים מאפשר ליוצרים להגיע לתוצרים מרשימים יותר, עם נופך קולנועי שמחזק את חוויית הצפייה. אם אתם מחפשים כלי עוצמתי ליצירת וידאו ג’נרטיבי, אין ספק שזה הכלי בשבילכם! יתרון נוסף במודל Gen3 Turbo הוא זמן הג’ינרוט המהיר (מאוד). כ-20 שניות ויש לכם שוט מוכן של 5-10 שניות. וזה גם פלוס אדיר!