בקשה | בקשה לעזרה בהקלטות מתומללות של שיעורים והרצאות-לצורך מודל ויספר לא מקוון מותאם לשיעורים!
-
@א.-יעקבוביץ-0 תוריד את vibe ותכוון אותה על המודל הזה.
@יעקב11 מאיפה להוריד?
-
@יעקב11 מאיפה להוריד?
ניתן להשתמש במודלים בתוכנת VIBE ניתנת להורדה מכאן https://thewh1teagle.github.io/vibe/
-
@א.-יעקבוביץ-0 תוריד את vibe ותכוון אותה על המודל הזה.
@יעקב11 אחרי התקנה של שעה של התוכנה :), איפה מכוונים את המודלים?
-
@יעקב11 אחרי התקנה של שעה של התוכנה :), איפה מכוונים את המודלים?
-
שלום וברכה לכולם, לאחרונה קיבלתי בקשות רבות להכנת מודל תמלול לא מקוון מותאם לדיבור תורני ושיעורים.
ואפרט מעט את הנושא:
כיום במודלים לא מקוונים קיימים סוגים רבים של מודלים, לצורך תמלול שמע קיימים בגדול שני סוגי מודלים, מודל שפה מולטימודלי שהוא בדרך כלל תומך גם בתמלול הקלטות והוא גם מדוייק יותר אך בדרך כלל איטי מאד על מחשב ביתי, ומודלי תמלול ייעודיים שהמפורסם שבהם כיום הוא ויספר של חברת OPEN AI עם מספר גירסאות ורמות.
המודלים הללו מוצלחים מאד לתמלול קול ישראלי רגיל וברור בסביבה נטולת רעשים, אך מי שניסה פעם לתמלל בהם שיעור או הקלטה לא מספיק ברורה גילה שזה לא מתקרב אפילו למקור.
אומנם זה לא קריטי אבל אני רוצה להוסיף הסבר קצר לעניין:
מודל שפה כשהוא מתמלל הוא מסוגל להבין לא רק את המילים עצמם אלא גם את ההקשר בין מילה למילה ולהבין את התוכן הכולל ולתקן לפי זה ולעיתים כבר שלב ההבנה שלו הוא הרבה יותר טוב אך בדיוק מסיבה זו צריכת המשאבים שלו מהמחשב היא גדולה מאד.
בעוד מודל תמלול הוא ייועד מראש לתמלול קולי בלבד ולכן צריכת המשאבים שלו היא קטנה אבל הוא וגבל מאד מראש לתחום שבו אימנו אותו שזה תמלול קול ישראלי רגיל והוא מתבלבל לגמרי כשהוא מגיע לתחום כזה שלא מוכר לו.
אני רוצה לפתור את הבעיה הזו בשני דרכים:- להכניס למול ספרייה תורנית אדירה שקיימת אצלי שכבר הוכחה כיעילה בתוכנת זיהוי כתב היד כך שהמודל יידע להכיר יותר טוב מילים תורניות.
- לאמן את המודל על הקלטות רבות של שיעורים והרצאות רבות בהגייה ישיבתית ועם קולות רקע כך שהמודל יידע חהבין ולקשר הרבה יותר טוב גם הקלטות כאלו.
ובסיום העבודה אקווה שיהיה מודל קטן ממש שכל אחד יוכל להריץ על המחשב בביתו ולתמלל את ההקלטות של שיעורים או כל דבר אחר שמעוניין בו הן בהגייה ישיבתית והן בכל סוג הגייה תורנית שהיא.
מה שאני צריך עזרה ממכם זה בשני נושאים:
1. כל מי שיש לו הקלטות מתומללות של שיעורים או הרצאות מילה במילה בלבד(!!!) אם יוכל להעביר אותם אלי במייל MENI42525@GMAIL.COM.
2. אני זקוק לתרומות בעניין כך שאוכל לשכור את משאבי המיחשוב והבינה המלאכותית הנצרכים לאימון המודל החדש.
אם יהיה כמות גדולה של שיעורים והרצאות וגם כמות מספקת של תרומות המודל יוכל להבנות מחדש לחלוטין בהתאמה מושלמת ומדוייקת לתוכן תורני מה שייתן דיוק עצום וגודל מודל קטן ממש שיוכל לרוץ במהירות אדירה על כל מחשב פשוט.
מי שמעוניין לעזור גם בעניין הכספי מוזמן לפנות במייל הנ"ל או בצאט בפורום כאן.יודגש:
- לא בדקתי מספיק וייתכן שכבר קיימים פיתוחים כאלו.
- איני מתחייב כמה זמן ומאמץ אוכל להשקיע בזה וייתכן שייקח זמן וכל התורם כספים או קבצים לא יוכל לבוא אלי בתביעה בשום שלב.
- הערכת התוצאה הכתובה כאן מבוססות על השערה והערכה בלבד ואין לי כל דרך לדעת מה רמת התוצאה שאני יצליח להגיע אליה ואם היא אכן תשביע את רצון התורמים והמסייעים.
@ARISH מאחל לך (ולנו...) הרבה הצלחה בפרוייקט החדש שלך! כה לחי!
שתי הצעות לגבי הפרוייקט:
א) כמו בתוכנת ה_ocr הנפלא שלך, תהיה גם כאן אפשרות לאימון לפי דוברים וכו'.
ב) אם אפשר להוסיף מודל גם לתמלול של שיעורים ביידיש. (גם כאן תהיה עדיפות לאימון כנ"ל, ובפרט בשפת היידיש, שיש בה דיאלקטים שונים, ארצישראלי ליטאי/חסידי, אמריקני חסידי, וכו')
שוב הצלחה רבה בכל מעשי ידיך. -
שלום וברכה לכולם, לאחרונה קיבלתי בקשות רבות להכנת מודל תמלול לא מקוון מותאם לדיבור תורני ושיעורים.
ואפרט מעט את הנושא:
כיום במודלים לא מקוונים קיימים סוגים רבים של מודלים, לצורך תמלול שמע קיימים בגדול שני סוגי מודלים, מודל שפה מולטימודלי שהוא בדרך כלל תומך גם בתמלול הקלטות והוא גם מדוייק יותר אך בדרך כלל איטי מאד על מחשב ביתי, ומודלי תמלול ייעודיים שהמפורסם שבהם כיום הוא ויספר של חברת OPEN AI עם מספר גירסאות ורמות.
המודלים הללו מוצלחים מאד לתמלול קול ישראלי רגיל וברור בסביבה נטולת רעשים, אך מי שניסה פעם לתמלל בהם שיעור או הקלטה לא מספיק ברורה גילה שזה לא מתקרב אפילו למקור.
אומנם זה לא קריטי אבל אני רוצה להוסיף הסבר קצר לעניין:
מודל שפה כשהוא מתמלל הוא מסוגל להבין לא רק את המילים עצמם אלא גם את ההקשר בין מילה למילה ולהבין את התוכן הכולל ולתקן לפי זה ולעיתים כבר שלב ההבנה שלו הוא הרבה יותר טוב אך בדיוק מסיבה זו צריכת המשאבים שלו מהמחשב היא גדולה מאד.
בעוד מודל תמלול הוא ייועד מראש לתמלול קולי בלבד ולכן צריכת המשאבים שלו היא קטנה אבל הוא וגבל מאד מראש לתחום שבו אימנו אותו שזה תמלול קול ישראלי רגיל והוא מתבלבל לגמרי כשהוא מגיע לתחום כזה שלא מוכר לו.
אני רוצה לפתור את הבעיה הזו בשני דרכים:- להכניס למול ספרייה תורנית אדירה שקיימת אצלי שכבר הוכחה כיעילה בתוכנת זיהוי כתב היד כך שהמודל יידע להכיר יותר טוב מילים תורניות.
- לאמן את המודל על הקלטות רבות של שיעורים והרצאות רבות בהגייה ישיבתית ועם קולות רקע כך שהמודל יידע חהבין ולקשר הרבה יותר טוב גם הקלטות כאלו.
ובסיום העבודה אקווה שיהיה מודל קטן ממש שכל אחד יוכל להריץ על המחשב בביתו ולתמלל את ההקלטות של שיעורים או כל דבר אחר שמעוניין בו הן בהגייה ישיבתית והן בכל סוג הגייה תורנית שהיא.
מה שאני צריך עזרה ממכם זה בשני נושאים:
1. כל מי שיש לו הקלטות מתומללות של שיעורים או הרצאות מילה במילה בלבד(!!!) אם יוכל להעביר אותם אלי במייל MENI42525@GMAIL.COM.
2. אני זקוק לתרומות בעניין כך שאוכל לשכור את משאבי המיחשוב והבינה המלאכותית הנצרכים לאימון המודל החדש.
אם יהיה כמות גדולה של שיעורים והרצאות וגם כמות מספקת של תרומות המודל יוכל להבנות מחדש לחלוטין בהתאמה מושלמת ומדוייקת לתוכן תורני מה שייתן דיוק עצום וגודל מודל קטן ממש שיוכל לרוץ במהירות אדירה על כל מחשב פשוט.
מי שמעוניין לעזור גם בעניין הכספי מוזמן לפנות במייל הנ"ל או בצאט בפורום כאן.יודגש:
- לא בדקתי מספיק וייתכן שכבר קיימים פיתוחים כאלו.
- איני מתחייב כמה זמן ומאמץ אוכל להשקיע בזה וייתכן שייקח זמן וכל התורם כספים או קבצים לא יוכל לבוא אלי בתביעה בשום שלב.
- הערכת התוצאה הכתובה כאן מבוססות על השערה והערכה בלבד ואין לי כל דרך לדעת מה רמת התוצאה שאני יצליח להגיע אליה ואם היא אכן תשביע את רצון התורמים והמסייעים.
@ARISH ניסתי את התוכנה שלך (אופליין מה שיש באתר שלך, זה לא היה ליטאי) וקויותי שיהיה כמו הרמה של זיהוי כתב יד, אבל אני חושב שכרגע יש תוכנה יותר טובה תבדוק האם אפשר להתקדם.
התוכנה של elch וזה הקישור
אצלך לוקח המון! זמן עד שמתרגם ושם ממש ממש מהר וגם מתמלל באיכות יותר טובה, לא ששם זה מצוין אבל בכל אופן יותר מדויק. (ובחרתי אצלך באופציה הפחות איטית).
ועוד נקודה בדר"כ מי שמתמלל הוא רוצה שהכל יהיה בחתיכה אחת ולא שכל שורה יהיה כתוב איזה שניה זה ושם אכן זה בבת אחת.
שתצליח. -
@ARISH ניסתי את התוכנה שלך (אופליין מה שיש באתר שלך, זה לא היה ליטאי) וקויותי שיהיה כמו הרמה של זיהוי כתב יד, אבל אני חושב שכרגע יש תוכנה יותר טובה תבדוק האם אפשר להתקדם.
התוכנה של elch וזה הקישור
אצלך לוקח המון! זמן עד שמתרגם ושם ממש ממש מהר וגם מתמלל באיכות יותר טובה, לא ששם זה מצוין אבל בכל אופן יותר מדויק. (ובחרתי אצלך באופציה הפחות איטית).
ועוד נקודה בדר"כ מי שמתמלל הוא רוצה שהכל יהיה בחתיכה אחת ולא שכל שורה יהיה כתוב איזה שניה זה ושם אכן זה בבת אחת.
שתצליח. -
@לחי צודק, אני עדיין בשלבים ראשוניים, בע"ה יהיה עוד התקדמויות רבות.
כרגע נדרש משאבים כספיים לעניין ומי שמעוניין לתרום לזה מוזמן. -
שלום! נראה שהשיחה הזו מעניינת אותך, אבל עדיין אין לך חשבון.
נמאס לכם לגלול בין אותם הפוסטים בכל ביקור? כשנרשמים לחשבון, תמיד תחזרו בדיוק למקום שבו הייתם קודם, ותוכלו לבחור לקבל התראות על תגובות חדשות (בין אם במייל, ובין אם בהתראת פוש). תוכלו גם לשמור סימניות ולפרגן ב-upvote לפוסטים כדי להביע הערכה לחברי קהילה אחרים.
בעזרת התרומה שלך, הפוסט הזה יכול להיות אפילו טוב יותר 💗
הרשמה התחברות
