אם חשבתם שהגענו לתקרת הזכוכית של יצירת וידאו בבינה מלאכותית, Ray2 של לומה לאבס (Luma Labs) בא לשבור לכם את האשליה. המודל החדש שלהם, שהוטמע בפלטפורמת Dream Machine, מציג יכולות מרשימות במיוחד! ריאליזם עוצר נשימה, חיקוי של הפיזיקה של העולם האמיתי, תנועה חלקה ומגע קולנועי ברמה של הוליווד.
רוצים לקבל עדכונים בלייב? רוצים מקום בו אתם יכולים להתייעץ עם מומחי AI, לשאול שאלות ולקבל תשובות? רוצים לשמוע על מבצעים והטבות לכלי ה-AI שמשנים את העולם? הצטרפו לקהילות ה-AI שלנו.
אפשר גם להרשם לניוזלטר שלנו
לפני הכל, שימו לב להשוואה הבאה שעשיתי בין Gen3 של ראנוויי ל-Ray2 של לומה.
לומה Ray2 מצטיין בתנועה מציאותית ואותנטית, וזה ללא ספק אחד היתרונות הבולטים שלו על פני מודלים אחרים.
אז מה הופך את Ray2 לכל כך מיוחד?
הנה כמה מהתכונות המרכזיות של המודל, שמבדילות אותו מהמתחרים ומקודמו, Ray1:
ריאליזם מהפנט
הסצנות שמייצר Ray2 לא נראות כמו עבודת מחשב גסה, אלא כמו וידאו שצולם במצלמה אמיתית, עם תאורה טבעית ותנועה שמרגישה זורמת ומשכנעת.
Credit: Luma Labs.
פיזיקה שעובדת כמו במציאות
החל ממבחן חיתוך הסטייק המפורסם, שברי זכוכית שמתפזרים בצורה הגיונית ועד למים שמתנהגים כמו… ובכן, מים. מדובר בשיפור משמעותי בהשוואה לדורות הקודמים של מודלים ליצירת וידאו.
Credit: Luma Labs.
תנועה חלקה ואמינה
לא עוד דמויות עם אנימציה נוקשה ומוזרה.Ray2 מתמחה ביצירת תנועה מציאותית של אנשים, חיות, כלי רכב ואובייקטים שונים.
Credit: Luma Labs.
רזולוציה גבוהה
כרגע המודל תומך ביצירת סרטונים באורך של עד 10 שניות ברזולוציית 1080p, עם תוכניות להרחבה בעתיד.
Credit: Luma Labs.
מהירות ביצוע מוגברת… בערך
לומה לאבס מצהירים ש-Ray2 משתמש בעוצמת מחשוב גבוהה פי 10 מקודמו, מה שמאפשר עיבוד מהיר ואפקטיבי יותר. מניסיון שלנו, הוא עדיין יחסית איטי – לשוט בודד לוקח כמה דקות לסיים את תהליך הדיפוזיה. בהשוואה למודלים אחרים כמו Gen3 טורבו, שיוצרים סרטון בפחות מ-20 שניות, זה חסרון משמעותי.
יכולות שמרגישות כמו קסם
כמו בפלטפורמות AI אחרות ליצירת וידאו, גם Ray2 מחזיק ארסנל מרשים של יכולות ופיצ’רים מתקדמים:
המרת תמונה לווידאו (Image to Video)
מעלים תמונה בודדת, ו-Ray2 מחייה אותה עם תנועה טבעית. אפשר לקחת תמונה של דמות קפואה ולהפוך אותה לקטע וידאו חי. יכולת הנפשת תמונה סטטית היא הבסיס לכל יצירת סרטון, פרסומת או קליפ עם AI.
פשוט העלו תמונה כפריים ראשון ותנו ללומה להמשיך משם…
יצירת וידאו מטקסט (Text to Video)
רוצים לראות איך נראה “כלב רובוטי רודף אחרי רחפן בשדה חיטה”? פשוט תכתבו את זה. Ray2 ידע לתרגם את זה לתמונה נעה.
עריכה ושיפור וידאו (Modify)
בוחרים בסרטון שיצרתם בלומה, לוחצים על Modify ורושמים הנחיות טקסטואליות שמסבירות ללומה מה ברצונכם לשנות בסרטון!
הוספת אודיו לוידאו (Audio)
בלומה תמצאו גם פיצ’ר חדש יחסית שמאפשר להוסיף סאונד לסרטונים שיצרתם. פה תמצאו מדריך מקיף לכלי.
השימוש בפיצ’ר מאוד פשוט – בחרו בסרטון שברצונכם להוסיף לו סאונד, לחצו על כפתור Audio ותארו את הצלילים שברצונכם להוסיף לסרטון.
למי זה מתאים?
לכאורה, כל מי שרוצה ליצור וידאו עם AI יכול ליהנות מ-Ray2, אבל יש כמה קהלים שירוויחו ממנו במיוחד:
- יוצרים קולנועיים: במאים, אנימטורים ואומני וידאו שמחפשים דרך מהירה וחסכונית ליצור סצנות קולנועיות באיכות גבוהה יכולים להפיק תועלת עצומה מהכלי. במקום לשכור צוות צילום, להשיג לוקיישנים יקרים ולהשקיע חודשים בהפקה, ניתן ליצור סצנות מרהיבות תוך דקות. האפשרות לשלב תנועה דינמית ולהגדיר סביבות בצורה גמישה פותחת אפשרויות חדשות לסיפור ויזואלי.
- משווקים ומותגים: ליצור סרטוני פרסומת מושכים ומרשימים מבלי להוציא הון על ימי צילום זה חלומו של כל מפרסם. עם Ray2, מותגים יכולים להפיק וידאו שיווקי איכותי במהירות ולהגיב בזמן אמת לטרנדים משתנים. הקלות שבה ניתן לשלב לוגואים, מוצרים ותכנים מותאמים אישית הופכת את הכלי לאידיאלי לקמפיינים פרסומיים דיגיטליים.
- יוצרי פרסומות ודיגיטל: פרסומאים, מעצבי תוכן ומנהלי קריאייטיב יכולים להשתמש ב-Ray2 כדי ליצור תוכן ויזואלי מלהיב שמתאים לכל הפלטפורמות – מטיקטוק ועד קמפיינים טלוויזיוניים. החיסכון בזמן ובעלויות מאפשר יצירה מהירה של גרסאות שונות של אותו סרטון, התאמה לפורמטים שונים ודיוק במסרים השיווקיים.
- מפתחי משחקים ויוצרי תוכן אינטראקטיבי: היכולת ליצור סביבות ריאליסטיות או אמנותיות באמצעות AI הופכת את Ray2 לכלי שימושי עבור מפתחי משחקים ויוצרים שמעוניינים לשלב וידאו דינמי בעולמות וירטואליים. ניתן להשתמש בכלי כדי ליצור קדימונים, סצנות מעבר במשחקים או חוויות אינטראקטיביות ייחודיות.
- יוצרי תוכן לרשתות החברתיות: בלוגרים, יוטיוברים ואושיות רשת יכולים לשדרג את התוכן שלהם עם וידאו איכותי שנוצר בלחיצת כפתור. בין אם מדובר בסרטוני השראה, הדגמות מוצרים או סיפורי וידאו, הכלי מאפשר הפקה ברמה גבוהה ללא צורך בידע טכני נרחב.
שימו לב כמה קל לייצר סרטון אנימה מטריף – מג’נרטים כמה תמונות (בתוך לומה או בכל מחולל תמונות אחר), מנפישים את התמונות ומוסיפים תנועה אותנטית וזהו – יש לכם סרטון מרשים ומקורי!
אז איך משיגים את Ray2?
אם הסתקרנתם ואתם רוצים לנסות, כדאי לדעת ש-Ray2 לא זמין בחינם לכל דורש. הוא זמין למנויים בתשלום דרך מחולל הוידאו של לומה – Dream Machine, וגם דרך Pikaso של Freepik, או דרך FAL. בתוך דרים משין אפשר לבחור בין מספר תוכניות מנוי, כאשר המתקדמות יותר מעניקות גישה לפיצ’רים העוצמתיים ביותר. פה תוכלו לקבל מידע על החבילות והעלויות השונות.
לא הכל מושלם – האתגרים של Ray2
כמו כל טכנולוגיה חדשנית, גם ל-Ray2 יש חסרונות שלא ניתן להתעלם מהם:
- חוסר יציבות בסרטונים ארוכים: מעל 7 שניות, יש נטייה לקפיצות מוזרות בתנועה ולירידה בריאליזם. זה לא תמיד כך, אבל זה מבאס שאתה ממתין כמה דקות לסרטון ואז מגלה שחצי ממנו לא שמיש. מצד שני, אם תבצעו מספר טסטים, תמיד תמצאו כאלה שהיו טובים יותר.
- אתגרים בפיזיקה מורכבת: עדיין לא מושלם, במיוחד כשמדובר באינטראקציות מסובכות כמו תנועה של גוף מלא, או תנועה מאוד מורכבת, מהירה ומסובכת.
בשורה חדשה או הייפ מוגזם?
אין ספק ש-Ray2 הוא צעד משמעותי קדימה בעולם הווידאו הגנרטיבי. אם אתם יוצרים תוכן, משווקים או סתם חובבי טכנולוגיה, זה כלי מסקרן שכדאי לשים עליו עין. למרות המגבלות והבאגים, המודל הזה טיפס אצלי מאוד גבוה ברשימת כלי הוידאו הג’נרטיביים האהובים עלי (נכון ליום כתיבת שורות אלו). מבחינתי הוא לא נופל בתוצרים שלו מסורה, מראנוויי, מקלינג או ממינימקס (ופעמים רבות גם מתעלה עליהם). אבל החסרון הכי גדול מבחינתי הוא משך הזמן שלוקח לג’נרט סרטון. כיוצר מקצועי זה מינוס גדול מבחינתי שמאוד מאט את קצב העבודה שלי, ולרוב גורם לי לעבור לכלים אחרים ומהירים יותר (כמו ראנוויי או סורה). אבל מבחינת איכות, הוא לחלוטין מפגיז!