מודלי וידאו AI: להפיק את המיטב

מייטל סלע עושה סדר בעולם הווידאו בבינה מלאכותית: ארבע הדרכים ליצור וידאו, רפרנסים ודף דמות, סאונד ועברית, השוואה בין Kling 4, Seedance 2.5 ו-Seedance 2.0 Mini לפי מחיר ואיכות, אימון דמות ב-Omni ונוסחה לפרומפט וידאו. בסוף שאלות ותשובות.

מה תלמדו

• להבדיל בין שיטות היצירה: טקסט לוידאו, תמונה לוידאו, פריים פתיחה ופריים סיום, רפרנסים להנפשה והארכת וידאו קיים
• להכין דף דמות נקי (שלוש זוויות, גוף מלא, רקע אפור, בלי טקסטים) כדי לשמור על דמות עקבית בסרטונים
• לאמן דמות פעם אחת מתמונת חזית אחת ולהשתמש בה שוב בסרטונים נוספים, בקלינג ובסידן 2.5
• לבחור מודל וידאו לפי תקציב ומטרה, ולהשוות בין סידן 2.0 מיני, קלינג 4 וסידן 2.5 באורך, ברזולוציה ובעלות בקרדיטים
• להוסיף סאונד לסרטון: אפקטים מובנים, מוזיקה כרפרנס וקול מקובץ mp3
• ליצור סרטון עם קריינות בעברית מ-ElevenLabs, ולחבר קול ווידאו לליפסינק בעברית עם Sync 3
• לכתוב פרומפט לווידאו לפי שמונה חלקים: נושא, סביבה, פעולה, תנועות מצלמה, תאורה, סאונד, סגנון ומה אסור לשנות
• לחסוך בקרדיטים על ידי ניסויים במודלים זולים ושימוש במחשבון העלויות ובטבלת המפרט של המנועים

למי זה מתאים

• מתחילים בוידאו AI שכבר עברו על סדנת התמונות ורוצים להנפיש אותן
• יוצרי תוכן ומנהלי סושיאל שרוצים סרטונים קצרים עם קריינות בעברית
• בעלי עסקים ומשווקים שרוצים דמות או מוצר שנשארים עקביים לאורך סדרת סרטונים
• יוצרי אנימציה וסרטי AI שצריכים להבין מודלים, עלויות ורפרנסים
• מי שמתלבט באיזה מנוע וידאו לבחור ומחפש להבין את ההבדלים ביניהם

מה אפשר לעשות עם זה בפועל

• הנפשת דמות מצוירת מדף דמות לסרטון אנימציה קצר שבו היא נראית אותו דבר לאורך כל הסרטון
• יצירת סרטון לאינסטגרם עם קריינות בעברית מ-ElevenLabs, סאונד אפקטס מהמודל וכתוביות בעברית
• הכנסת מוצר, כמו בקבוק עם כיתוב באנגלית, כרפרנס כך שיופיע בסרטון בלי להשתנות
• הארכת סרטון קיים של 30 שניות לכדי דקה ושינוי מה שקורה בהמשך, למשל שקיעה וסירה נוספת
• חיבור תמונת פתיחה לתמונת סיום, וחיבור קטעים רצופים לסרט אחד
• ליפסינק בעברית: יצירת קול נפרד, יצירת וידאו וחיבור ביניהם עם Sync 3
• בדיקת עלות לפני פרויקט, למשל השוואה בין 30 שניות בקלינג 4 לבין סידן 2.5 ברזולוציה גבוהה
• תרגול זול של פרומפטים לווידאו על סידן 2.0 מיני לפני השקעה במודל יקר

מה עוברים בסדנה

לקאדברה ולקודי ההנחה ←החוברת מהלייב ←



הקדמה
בסדנה עברה מייטל סלע על המונחים של עולם הווידאו בבינה מלאכותית, מהבסיס: מה זה פריים, איך תמונה סטטית הופכת לווידאו, ובמה שונות הדרכים ליצור אותו. בעזרת דמות קבועה אחת, קפיברה, הראתה איך עובדים עם רפרנסים, איך שומרים על דמות עקבית ואיך בוחרים מנוע לפי תקציב. כל החומר מרוכז בחוברת שהכינה, עם פרומפטים להעתקה, מחשבון קרדיטים וטבלת השוואה בין המנועים. בחלק השני ענתה על שאלות.

נקודות מרכזיות
1. **ארבע דרכים ליצור וידאו**: טקסט לווידאו, שבו המודל מחליט על הכול לבד; תמונה לווידאו, שבה מנפישים תמונה אחת או כמה תמונות; פריים פתיחה ופריים סיום, שבו המודל בונה את הדרך ביניהם; ורפרנסים לווידאו, השיטה שרוב היוצרים עובדים בה היום. בנוסף יש הארכת וידאו, שממשיכה סרטון קיים מאותה נקודה, למשל סרטון של 30 שניות שהופך לדקה.
2. **רפרנסים ודף דמות**: רפרנס יכול להיות דמות, סביבה, חפץ, סטוריבורד, סרטון, קול או מוזיקה. ב-Seedance 2.5 אפשר לצרף עד 30 תמונות, 4 סרטונים ו-10 קבצי קול, וב-Kling 4 עד 10 תמונות. לדף דמות ריאליסטי מספיקות שלוש זוויות בגוף מלא על רקע אפור, בלי טקסט ובלי אביזרים מיותרים. לאנימציה כדאי להוסיף הבעות פנים.
3. **סאונד ועברית**: את אפקטי הסאונד כדאי להשאיר למודל הווידאו. דיבור של דמות עובד היום באנגלית בלבד, וגם טקסט בעברית בתוך הפרומפט משתבש. לסרטון בעברית יש שתי דרכים: קריינות שנוצרת ב-ElevenLabs ומונחת בעריכה, או ליפסינק שמחבר אודיו לווידאו בכלי כמו Sync 3.
4. **בחירת מנוע לפי תקציב**: Seedance 2.0 Mini הוא הזול ביותר (מ-3 קרדיטים) ונותן תוצאות טובות, במיוחד באנימציה. Kling 4 נמצא באמצע, ו-30 שניות ב-1080 עולות בו 86 קרדיטים. Seedance 2.5 נחשב הטוב ביותר, ו-30 שניות ב-1080 עולות בו 269 קרדיטים. ההמלצה היא לעבוד בטיוטה ב-480, ובתוך 24 שעות להגדיל את הסרטון שאהבתם ל-1080.
5. **אימון דמות ב-Omni**: מעלים תמונה פרונטלית אחת וברורה ונותנים לדמות שם באנגלית. האימון עולה 5 קרדיטים פעם אחת, והדמות נשמרת בגלריה לכל הסרטונים הבאים, גם ב-Kling וגם ב-Seedance 2.5.
6. **ה-@ בפרומפט ונוסחת הפרומפט**: עם @ מצרפים לפרומפט דמות או קובץ ונותנים להם תפקיד בסרטון. בחוברת יש נוסחה לפרומפט וידאו: נושא, סביבה, פעולה, תנועות מצלמה, תאורה, סאונד, סגנון, ומה אסור לשנות. יש בה גם שקף של שפת המצלמה.
7. **שאלות ותשובות**: יצירה מסרטון קיים (וידאו לווידאו, עד 30 שניות), תנועה מסרטון עם Blender, אווטרים, עבודה דרך ה-MCP בקלוד וב-ChatGPT, הפרומפטר של קאדברה שמקבל עברית ומחזיר פרומפט באנגלית, ורעיונות לסרטונים לעסק. בסוף בר עושה סיור קצר במועדון החדש: חיפוש, ספרייה, קורסים ומדריכים.

שימושים מעשיים

• הנפשת דמות מצוירת מדף דמות לסרטון אנימציה קצר שבו היא נראית אותו דבר לאורך כל הסרטון
• יצירת סרטון לאינסטגרם עם קריינות בעברית מ-ElevenLabs, סאונד אפקטס מהמודל וכתוביות בעברית
• הכנסת מוצר, כמו בקבוק עם כיתוב באנגלית, כרפרנס כך שיופיע בסרטון בלי להשתנות
• הארכת סרטון קיים של 30 שניות לכדי דקה ושינוי מה שקורה בהמשך, למשל שקיעה וסירה נוספת
• חיבור תמונת פתיחה לתמונת סיום, וחיבור קטעים רצופים לסרט אחד
• ליפסינק בעברית: יצירת קול נפרד, יצירת וידאו וחיבור ביניהם עם Sync 3
• בדיקת עלות לפני פרויקט, למשל השוואה בין 30 שניות בקלינג 4 לבין סידן 2.5 ברזולוציה גבוהה
• תרגול זול של פרומפטים לווידאו על סידן 2.0 מיני לפני השקעה במודל יקר