מדריך | קול בעברית- בינה מלאכותית

[jelly]

ראיתי שרבו הנושאים הנפתחים פה בנושא זה, ולכן אני אנסה לעשות פה קצת סדר לפי מיעוט ידיעותיי.
נהוג לחלק את עניין השמעת קול בעזרת בינה מלאכותית לשתי טכניקות:

הטכניקה הראשונה היא- text to speech או בקיצור tts:

כאן לוקחים טקסט ובעזרת בינה מלאכותית "מפיחים" בו רוח חיים. כלומר, לוקחים טקסט גולמי והופכים אותו לקובץ שמע.
כיום, אין שירות מספיק טוב בעברית עבור ההמרה הזו, יש כל מיני אלגוריתמים שמסוגלים לעשות את הפעולה בעברית אבל זה יוצא רובוטי ולא אנושי.
(יצוין - אני מתייחס אך ורק לעברית. באנגלית- כבר קיימים כלים שמנפיקים קולות אנושיים ברמה גבוהה מאוד)

הטכניקה השנייה היא- speech to speech:

כאן, יש אלגוריתם שמקבל קובץ שמע, וקובץ שמכיל כל מיני פרמטרים של קול קיים, שנקרא - מודל.
||(ניתן ליצור מודל כזה מכל קול שרוצים- הדבר דורש קצת התעסקות, אבל אפשרי בהחלט||
האלגוריתם לוקח את קובץ השמע- מחלץ ממנו כל מיני פרטים ולבסוף- "מלביש" את גוון הקול מתוך המודל, על ההקלטה המקורית של קובץ השמע.
כלומר במקום לקחת טקסט ולהקריא אותו מ0, הטכניקה הזו כבר מקבלת טקסט מוקרא, ורק מלבישה עליו קול שונה.
הטכניקה הזו פשוטה יותר לשימוש בעברית, כי מבחינת האלגוריתם אין הבדל בין שפות שונות- כל מה שהוא עושה זה להחליף בין שני קולות.

יש תוכנה פשוטה מאוד לשימוש בשם replay
שמבצעת את ההחלפה הזאת. מורידים מהקישור שצרפתי, מתקינים, ומשם זה די פשוט, אם כי התוכנה עצמה באנגלית.
אם הציבור ירצה- אני אעלה בעז"ה הדרכה מפורטת איך להשתמש בה.

לסיכום:
קיימות שתי טכניקות להשמעת קול בעזרת בינה מלאכותית:
הראשונה היא לקחת קובץ טקסט ולהקריא אותו מ-0. זו שיטה שכרגע עוד לא מספיק טובה בעברית.
השנייה- לקחת קובץ שמע ולהלביש עליו קול אחר. זו טכניקה קצת יותר מורכבת כיון שצריך להקליט מראש את הטקסט המבוקש, אבל באיכות מספקת בשביל עברית.

[שמואל5]

@jelly כתב במדריך | קול בעברית- בינה מלאכותית:

אם הציבור ירצה- אני אעלה בעז"ה הדרכה מפורטת איך להשתמש בה.

אני רוצה (לא שאני 'הציבור'...)

[דוד משה 1]

חסום בנטפרי אין לי נקודות זה משהוא גדול או אפשר להעלות אותו

[שלל]

@jelly יישר כוח!
רציתי לשאול: למה אי אפשר להשתמש עם הטכניקה הראשונה, ליצור באמצעותה קובץ שמע, ואז להלביש עליה 'קול' אנושי יותר, ע"י הטכניקה השניה?

[jelly]

@שלל
בעיקרון אפשרי, הבעיה היא שהקול עדיין עלול לצאת רובוטי, כי הטכניקה השניה משנה רק גוון קול ולא מקצב, ניגון, ועומק.
לכן כאי להשתמש בטכניקה השנייה- כדאי שאדם אמיתי יקליט את המקור

[שלמה 2005]

@jelly כולנו רוצים ישר כח על ההסבר המפורט

[IGO]

@jelly כתב במדריך | קול בעברית- בינה מלאכותית:

הראשונה היא לקחת קובץ טקסט ולהקריא אותו מ-0. זו שיטה שכרגע עוד לא מספיק טובה בעברית.

ניתן לבקש ממודל הקול של צאט GPT להקריא כל דבר, ואפשר לאמר לו באיזה טון ובהתאם לאיזה סיטואציה להקריא. גם בעברית יוצא בסדר. (נראה לי שזה רק למנויים בתשלום)

[שלמה 2005]

@IGO איך עושים את זה

[IGO]

@שלמה-2005 למי שיש באפליקציה את האופציה של הדיבור אם צאט GPT אפשר פשוט לבקש ממנו

[א.מ.ד.]

@jelly כתב במדריך | קול בעברית- בינה מלאכותית:

הטכניקה הראשונה היא- text to speech או בקיצור tts:
כאן לוקחים טקסט ובעזרת בינה מלאכותית "מפיחים" בו רוח חיים. כלומר, לוקחים טקסט גולמי והופכים אותו לקובץ שמע.
כיום, אין שירות מספיק טוב בעברית עבור ההמרה הזו, יש כל מיני אלגוריתמים שמסוגלים לעשות את הפעולה בעברית אבל זה יוצא רובוטי ולא אנושי.
(יצוין - אני מתייחס אך ורק לעברית. באנגלית- כבר קיימים כלים שמנפיקים קולות אנושיים ברמה גבוהה מאוד)

שירותי הטקסט לדיבור של GPT ושל ג'מיני מוצלחים מאוד, ודאי מצב הקול המתקדם של GPT שאם אתה עוצם עיניים - הוא נשמע לחלוטין אדם רגיל כולל הבעת רגשות וקולות צחוק אמיתיים...

[מנשה* 2]

@דוד-משה-1 שלחתי בקשה..

[יוסף אלחנן]

@דוד-משה-1 כתב במדריך | קול בעברית- בינה מלאכותית:

חסום בנטפרי אין לי נקודות זה משהוא גדול או אפשר להעלות אותו

https://drive.google.com/file/d/1cTKswe_ZJstdA6QoM*****6fYkoH1y9TFXca3/view?usp=drive_link

[נחמן פלח]

@א-מ-ד כתב במדריך | קול בעברית- בינה מלאכותית:

@jelly כתב במדריך | קול בעברית- בינה מלאכותית:

הטכניקה הראשונה היא- text to speech או בקיצור tts:
כאן לוקחים טקסט ובעזרת בינה מלאכותית "מפיחים" בו רוח חיים. כלומר, לוקחים טקסט גולמי והופכים אותו לקובץ שמע.
כיום, אין שירות מספיק טוב בעברית עבור ההמרה הזו, יש כל מיני אלגוריתמים שמסוגלים לעשות את הפעולה בעברית אבל זה יוצא רובוטי ולא אנושי.
(יצוין - אני מתייחס אך ורק לעברית. באנגלית- כבר קיימים כלים שמנפיקים קולות אנושיים ברמה גבוהה מאוד)

שירותי הטקסט לדיבור של GPT ושל ג'מיני מוצלחים מאוד, ודאי מצב הקול המתקדם של GPT שאם אתה עוצם עיניים - הוא נשמע לחלוטין אדם רגיל כולל הבעת רגשות וקולות צחוק אמיתיים...

איך משתמשים בזה???

[jelly]

@א-מ-ד
אמת. אבל זה מאוד מוגבל בכמות, תוך כמה דקות שיחה אתה מגיע להגבלה חודשית

[מנשה* 2]

@יוסף-אלחנן כתב במדריך | קול בעברית- בינה מלאכותית:

https://drive.google.com/file/d/1cTKswe_ZJstdA6QoM*****6fYkoH1y9TFXca3/view?usp=drive_link

עושה לי בעיות בההתקנה,
מישהו הצליח להתקין?