טוב זה כבר מטורף! מדי פעם מגיע כלי שממחיש לך עד כמה הטכנולוגיה בה אנו משתמשים לא ברורה מאליה ואיך אפשר להמשיך לדחוף אותה קדימה עוד ועוד. השבוע השיקה Stability Ai את מודל ה-Text to Image החדש והמהיר במיוחד שלה – SDXL Turbo, שבניגוד למודלים אחרים, מג’נרט בזמן אמת, ממש אל מול עיני היוצר.
Introducing SDXL Turbo: A real-time text-to-image generation model.
SDXL Turbo achieves state-of-the-art performance with a new distillation technology, enabling single-step image generation with unprecedented quality, reducing the required step count from 50 to just one.
The… pic.twitter.com/0NA4aUqKkD
— Stability AI (@StabilityAI) November 28, 2023
ההודעה הרשמית ב-X (טוויטר לשעבר) של סטביליטי.
שימו לב לסרטון הבא שמציג ג’ינרוט בזמן אמת עם SDXL Turbo – הכלי הנסיוני החדש של Stability Ai, החברה שעומדת מאחורי סטייבל דיפיוז’ן. וכן , הוא זמין גם בגרסה החינמית המוגבלת בקליפדרופ!
אז מה הוא יודע לעשות?
מהירות החישוב המדהימה של SDXL Turbo מאפשרת לו לג’נרט בזמן אמת תמונות, תוך ביצוע שינויים מידיים בתמונה תוך כדי תנועה. הכל בעצם בכפוף להנחיות שתזינו לו. רוצים תמונה של כלב – קיבלתם.
רוצים תמונה של כלב בחלל? סגור!
ואולי בכלל כלב שנואם בקונגרס האמריקאי?
* כל צילומי המסך לקוחים מגרסת הבטא של SDXL Turbo באתר של קליפדרופ.
כל מה שצריך לעשות זה רק לשנות את המילים, והקסם קורה בזמן אמת אל מול עיניכם! היתרון הגדול בשימוש במודל החדש ובשיטת העבודה החדשה שנוצרה בעקבותיו הוא שכעת יש לנו יכולת לראות את השפעת השינויים שאנו מבצעים בפרומפטים שלנו באופן מיידי. לא צריך לחכות 20 שניות לתהליך דיפוזיה ארוך ומייגע ורק אז לגלות אם התמונה יצאה בהתאם לציפיות שלנו או לא. הכל קורה בלייב ובזמן אמת, מה שמקנה לנו יותר שליטה על התוצר הסופי, וכמובן מקצר את תהליכי העבודה. גם אם התוצרה לא מושלמת ועדיין יש פגמים, ניתן לתקן אותם בעזרת כלי העריכה המובנים והרבים של קליפדרופ, או בעזרת כלים חיצוניים כמו פוטושופ ג’נרייטיב פיל.
כמה מהר אתם מקלידים? סרטון ההשקה מערוץ היוטיוב Stability AI Archive
איפה אפשר להשתמש ב-SDXL Turbo?
אפשר להשתמש בגרסת בטא של הכלי ב-Clipdrop. למי שלא מכיר, קליפדרופ היא הפלטפורמה המדהימה שיצרה חברת Stability Ai ובה היא מנגישה מגוון רחב מהכלים הג’נרטיביים שפיתחה, החל מגישה למודלים של סטייבל דיפיוז’ן, לרבות SDXL 1.0 (המודל החדש והמוצלח במיוחד של החברה, אותו תוכלו למצוא למשל גם בלאונרדו). בין השאר תמצאו ב-ClipDrop כלים נוספים שמאפשרים לבצע שלל פעולות דוגמת אינפיינטינג, החלפת שמיים, החלפת רקעים, אפסקיילר להגדלת וחידוד תמונות, הסרת רקעים, פייס סוואפ, ג’ינרוט על בסיס שירבוט ועוד…
צילום מסך מתוך האתר של קליפדרופ: https://clipdrop.co/
לינקים חשובים
- לאתר של קליפדרופ לחצו כאן.
- רוצים להשתמש ב-SDXL Turbo בקליפדרופ – לחצו כאן.
- למאמר הרשמי באתר של סטביליטי – לחצו כאן.
- להורדת משקלי המודל ב-Hugging Face לחצו כאן.
- להורדת הוורקפלואו, כנסו ללינק הבא, הורידו את התמונה שבפנים למחשב שלכם, וגררו אותה ל-ComfyUI.
אם אהבתם את SDXL Turbo, אתם חייבים לנסות את ה-LiveCanvas של לאונרדו
הכלי הזה עובד בצורה מאוד דומה, אבל הפעם יש לכם גם אפשרות לצייר/לשרבט, ולא רק לכתוב פרומפטים. מדהים! כמובן שיש מדריך מפורט גם לכלי הזה ממש פה.