החלפת פנים באמצעות בינה מלאכותית, או החלפת דמויות, הבשילה היום לרמות מרשימות למדי. כולכם כבר ראיתם ברשתות החברתיות סרטי בינה מלאכותית שבהם הדמויות מקטעי וידאו מפורסמים הוחלפו בדמויות של אחרים, במקרים רבים פוליטיקאים ששמו אותם ללעג.
אז בואו נצלול אל הנושא הכי חם ברשת, ונענה על השאלה שכולם שואלים: איך מחליפים פנים בסרט עם AI?
Contents
מהחלפת פנים אל החלפת דמות
המונח, או ליתר דיוק היכולת לעשות זאת, כבר נמצא איתנו מזמן. אני זוכר את הדברים האלו עוד מסוף שנת 2025, שזה בערך כמו משהו מתקופת הפרעונים במונחים של בינה מלאכותית. אני תמיד אומר שהתחום הזה משתנה מאוד מהר, וזו לא קלישאה, זו עובדה.
אבל היכולות של 2025, שבזמנו נראו לי כל כך מרשימות, די מוגבלות וממש לא עומדות בסטנדרטים של היום.
אחד הדברים המשמעותיים הוא המעבר מטכנולוגיות של החלפת פנים אל טכנולוגיות של החלפת דמות. וזה לא סתם הבדל סמנטי, יש כאן תפיסות טכנולוגיות שונות. במחוללי הווידאו של פעם, שהתמקדו בהחלפת פנים, הגישה הטכנולוגית הייתה בבחינת הדבקת מסכה על הדמות הקיימת.
כלים אלו, כמו למשל Higgsfield Face Swap, יכלו לתת מענה לסרטי וידאו פשוטים, בעיקר כאלו שבהם הדמות מביטה ישר למצלמה ואינה מרבה בתנועה. וגם המצלמה לא זזה יותר מדי, ומוטב בכלל שתהיה מקובעת במקום. אז אתם בוודאי מבינים שכל עוד אינכם מתכננים לעשות החלפת פנים של יונית לוי, הכלים הללו אינם מספקים.
וכך הגענו אל מחוללי הווידאו שמבצעים החלפה של דמות, שינוי טכנולוגי קטן שפתח את הדלת לאפשרויות מורכבות יותר, ובמילים פשוטות הפך את הגימיק למשהו באמת שימושי. המודלים החדשים לא הסתפקו בקונספט המסכה, אלא הלכו רחוק יותר: הם פשוט מציירים את הסצנה מחדש.

היה לזה גם מחיר. הפעולה הפכה למורכבת יותר, ולכן גם יקרה יותר וקצרה יותר, כלומר כפופה לסטנדרטים הרגילים של מחוללי הווידאו, שרובם נמצאים בטווח המקסימלי של 15 עד 30 שניות.
החלפת דמויות ב-AI: מעבר מכלים ייעודיים לכלים רב-תכליתיים
אם פעם החלפת הפנים דרשה מודלים מיוחדים שמתמקדים במטרה זו, כיום יש מעבר לכלים רב-תכליתיים, כדוגמת קלינג 4 או סידאנס. כלים אלו יודעים להתמודד עם משימות מהסוג הזה, אבל הם אינם כלי ייעודי שמנסה להתמקד ולהצטיין באספקט אחד של התחום, החלפת פנים. אלו כלים שמנסים להתמחות בהכול ולתת פתרון לכל האתגרים שמלווים את יוצרי הבינה המלאכותית: יצירת עקביות, שימוש ברפרנסים הכוללים אודיו, וידאו, תמונות ואפילו הוראות גרפיות (למשל סטוריבורד).
מיד אציג בפניכם את הכלים שבעזרתם אפשר לבצע כיום החלפת דמויות בצורה יעילה וטובה. אציין שאלו הכלים שבדקתי באופן אישי, וייתכן שיש כלים אחרים שלא נכנסו לרשימה. וכמובן, בעולם הבינה המלאכותית כל יום יש טכנולוגיות חדשות, כך שיש לצפות לכלים חדשים ולשיפור מתמיד ביכולות.
בכל הכלים העליתי את אותו קטע של פרסומת, ופחות או יותר ביקשתי את אותה בקשה להחלפת הדמויות.
Higgsfield Genjutsu
הבעיה הראשונה שבלטה לעין הייתה העיוות של הכתוביות. לא הייתה לי ציפייה בנושא, ובאופן כללי ההמלצה שלי היא להביא את סרטי הווידאו בלי שום כתוביות. את הכתוביות אפשר להוסיף בעריכה. תשומת הלב המרכזית היא הדיוק של העבודה. המודל הצליח להחליף בצורה מדויקת את הדמויות שביקשתי, שמר על תנועת הגוף ועשה את הליפסינק בצורה מושלמת. הבעיה המרכזית היא שהוא החליף גם דמות שלא ביקשתי להחליף.
העלות הייתה 56 קרדיטים בהיגספילד לקטע של 8 שניות ברזולוציה של 720p. המודל תומך גם ב-1080p.
באופן כללי, בשיטה זו אפשר לעבוד על סרטי וידאו של עד 30 שניות, עם עד 30 קבצי רפרנס לשינויים.
קלינג 4
קלינג 4 הביא תוצאה מעבר לציפיות, כי הוא הצליח לשמור על העברית בכתוביות (למרות שזה לא מה שעמד כאן למבחן). הוא החליף את הדמויות בצורה מושלמת ולא שינה את הדמויות שלא ביקשתי.
מבחינת עלויות: 22 קרדיטים לשמונה שניות של סרט ברזולוציה 720p, והוא תומך גם ב-1080p.
רציתי לבחון גם את סידאנס, אבל לאור ההצלחה של קלינג 4, אני חושב שאפשר לסיים כאן את הניסוי.
ולאור ההצלחה של הניסוי, מהיום אל תגידו החלפת פנים עם AI, תגידו החלפת דמויות!
את כל הניסוי, צעד אחר צעד, ריכזתי בסרטון אחד:

החלפת פנים ב-AI: האם זה באמת שימושי?
אני באופן אישי ראיתי אינספור סרטים באינטרנט, חלקם פוליטיים, אחרים סתם הומור ונונסנס, ולכל אלו יש שוק ואינטרסים כלכליים. אז גם אם עבורכם זה נראה סתם גימיק ולא משהו באמת שימושי, תדעו שאצל אחרים זה בהחלט שימושי.
ואם אתם שואלים אם אני משתמש בזה? השתמשתי בזה בשבועיים האחרונים, כשיצרתי סרט ליום הולדת 90. זה היה הפתרון לאחת הסצנות, שבה התבקשתי להחליף את דמותו של יהורם גאון בשיר "רוזה רוזה" בדמותו של חתן השמחה.
לצורך העניין, גם כלים כמו Kling Motion הם בעצם החלפת דמות, ויצא לי להשתמש בהם כמה וכמה פעמים, כמו למשל כשהכנתי קליפ בר מצווה שכלל ריקוד של המשפחה. והלוואי שהיו לי אז היכולות שקיימות כיום.
האם היו עוד מקרים שהשתמשתי בזה? אני די בטוח שלא. אבל דווקא עכשיו, כשאלו כלים חזקים יותר, אני מחכה להזדמנות להשתמש בהם.
רוצים ללמוד לעשות את זה בעצמכם?
החלפת פנים באמצעות בינה מלאכותית היא כבר לא קסם שמור למקצוענים, אבל בין לראות את התוצאה ברשת לבין להפיק אותה בעצמכם יש לא מעט פרטים קטנים: איזה כלי לבחור, איך לנסח את הבקשה, איך להכין את הקטע המקורי ואיך לא לשרוף קרדיטים על ניסיונות. אם אתם רוצים ללמוד לעשות החלפת פנים עם AI ולהפיק סרטים כאלה בעצמכם, אני מעביר שיעורים פרטיים, אחד על אחד, מותאמים בדיוק לפרויקט שלכם. מוזמנים לפנות אליי.
שאלות נפוצות על החלפת פנים באמצעות בינה מלאכותית
מה ההבדל בין החלפת פנים להחלפת דמות ב-AI?
החלפת פנים "מדביקה" את הפנים החדשות כמו מסכה על הדמות הקיימת, וזה עובד בעיקר כשהדמות מביטה למצלמה והמצלמה לא זזה. בהחלפת דמות המודל מצייר את כל הסצנה מחדש, שומר על תנועת הגוף ועל הליפסינק, ולכן התוצאה הרבה יותר אמינה.
כמה עולה החלפת פנים ב-AI?
בניסוי שלי, Higgsfield Genjutsu עלה 56 קרדיטים ל-8 שניות ב-720p, וקלינג 4 עלה 22 קרדיטים לאותו אורך ובאותה רזולוציה. שני הכלים תומכים גם ב-1080p.
מה האורך המקסימלי של סרטון שאפשר לעשות בו החלפת דמויות?
ברוב מחוללי הווידאו המקסימום הוא 15 עד 30 שניות. ב-Genjutsu אפשר לעבוד על קטעים של עד 30 שניות ולהעלות עד 30 קבצי רפרנס. סרט ארוך יותר בונים מכמה קטעים ומחברים אותם בעריכה.
אולי יעניין אותך
ברכות ממפורסמים ai: כשביונסה מאחלת לכם מזל טוב