איך לתרגם ולדובב כל וידאו לכל שפה בעזרת בינה מלאכותית

תרגום וידאו לכל שפה עם HeyGen

HeyGen הוא כלי תרגום וידאו מבוסס בינה מלאכותית המאפשר למשתמשים לתרגם סרטונים ל-100 שפות שונות. הכלי משתמש בטכנולוגיית GPT-4 של OpenAI כדי לתרגם את הטקסט בסרטון לשפה המבוקשת. לאחר מכן, הכלי משתמש בטכנולוגיית wav2lip כדי לסנכרן את תנועות השפתיים של הדובר בסרטון עם הטקסט המתורגם.

הכלי עדיין נמצא בפיתוח, אך הוא כבר הצליח לתרגם סרטונים באורך של עד חמישה דקות. הכלי זמין לשימוש בחינם עבור סרטונים באורך של עד 30 שניות. עבור סרטונים ארוכים יותר, המשתמשים צריכים לשלם מנוי.

יתרונות HeyGen:

• תומך ביותר מ-100 שפות
• משתמש בטכנולוגיית GPT-4 של OpenAI לתרגום מדויק
• משתמש בטכנולוגיית wav2lip לסנכרון תנועות שפתיים
• זמין בחינם עבור סרטונים באורך של עד 30 שניות

חסרונות HeyGen:

• הכלי עדיין נמצא בפיתוח
• תרגומים עשויים להיות לא מושלמים עבור שפות מסוימות
• לכמות סרטונים וסרטונים ארוכים יותר דורשים מנוי בתשלום.

איך נרשמים? הולכים לכתובת הבאה ונרשמים ( שימו לב שנמצא באיזור labs זה אומר שעוד בפיתוח ) : https://labs.heygen.com/video-translate

עוברים לדף ומתחילים לייצר:

1. לוחצים על drop to upload

2.בוחרים את השפה שאנחנו רוצים שהסרטון יהיה

3.לוחצים ליצירת התרגום

4. מורידים את התוצאה

דוגמא שיצרתי – העליתי את הסרטון הזה:

תוצאה באנגלית:

*שימו לב כי כל סרטון של 30 שניות עולה קרדיט 1

*במנוי החינמי יש להמתין זמן מה תלוי בעומס המשתמשים עד שמקבלים תוצאה ויש סה״כ שני קרדיטים בלבד

שימו לב ניתן להוסיף כתוביות אוטומטיות וניקוי רעשי רקע עם תוכנה בשם KAPWING

בימים יותר שמחים הכנתי 2 סרטוני הסבר על הכלי :

ניקוי רעשי רקע:

https://www.facebook.com/reel/311957154694148?mibextid=jaSYs6

כתוביות אוטומטיות:

https://www.facebook.com/reel/1594843634681780?mibextid=jaSYs6