שיתוף | תוסף וסקריפט לתמלול דיבור לטקסט בכל אתר - ללא API
-
@מייבין-במקצת תודה, אני מעדכן בפוסט הראשי.
-
@אברהם-גלסר עד כמה האיכות של התמלול?
@טופ-שבמתמחים הכי טובה שאני מכיר... של גוגל
-
@טופ-שבמתמחים הכי טובה שאני מכיר... של גוגל
-
@אברהם-גלסר זה יעבוד אופליין?
@טופ-שבמתמחים לא.
-
@אהרן לא קשור לנטפרי.
זהה רכיב מובנה בדפדפן בשם window.webkitSpeechRecognition.
קשה לי להאמין שנטפרי יכולים לבטל אותו.
הם שולטים ברמה כזו במחשב? יכולים למנוע מתוכנות לעבוד?Avraham + ChatGPTחשבתי שהקרדיט רק לו? ולא קשור אליך? או שהפרומפט כן נחשב עבודה..?
@המלאך שלנו ביחד. הרעיון ושיפוץ קצת שלי אבל הוא כתב את העיקר (רובו ככולו).
-
@אהרן לא קשור לנטפרי.
זהה רכיב מובנה בדפדפן בשם window.webkitSpeechRecognition.
קשה לי להאמין שנטפרי יכולים לבטל אותו.
הם שולטים ברמה כזו במחשב? יכולים למנוע מתוכנות לעבוד?Avraham + ChatGPTחשבתי שהקרדיט רק לו? ולא קשור אליך? או שהפרומפט כן נחשב עבודה..?
@המלאך אשמח לשמוע שיש דרך להפעיל את זה בנטפרי. זה מה שיצא בהקלטת תעבורה: [גמיני טען שזה בגלל נטפרי]
תשובת גמיני:
כן, הבעיה אכן קשורה באופן ישיר לסינון של נטפרי.להלן הסבר מפורט על מה שקורה ברקע, מדוע זה נחסם וכיצד ניתן להתמודד עם זה:
- מהם האתרים/כתובות ה-IP האלו?
כתובת ה-IP שמופיעה בצילום המסך שלך (142.251.153.119) שייכת ל-Google.
בסקריפט שצירפת נעשה שימוש בפונקציית התמלול המובנית של הדפדפן:
window.SpeechRecognition || window.webkitSpeechRecognition
בדפדפני כרום (Chrome) ודפדפנים מבוססי כרומיום, כאשר משתמשים במנגנון זה, הדפדפן
אינו מבצע את פענוח הדיבור לטקסט באופן מקומי על המחשב שלך. במקום זאת, הדפדפן
מקליט את השמע מהמיקרופון ושולח אותו בזמן אמת לשרתים של גוגל (בפורט 443 המוצג
בצילום) כדי ששרתי הבינה המלאכותית של גוגל יתרגמו את הקול למילים ויחזירו אותם
לדפדפן כטקסט.- מדוע נטפרי חוסמת זאת?
סימני האזהרה האדומים (
️) בעמוד "הקלטת תעבורה" מעידים שנטפרי חסמה את התקשורת הזו
באופן יזום. נטפרי חוסמת את הגישה לשרתי התמלול והקול הלא-מבוקרים של גוגל. מכיוון
שמדובר בהזרמת שמע מוצפנת בזמן אמת (encrypted audio stream), מערכת הסינון
האוטומטית של נטפרי אינה יכולה לבדוק או לסנן את התוכן הקולי שנשלח ומתקבל,
ולכן ברירת המחדל היא חסימת הגישה לשירותים אלו.מה ניתן לעשות?
-
שליחת פנייה לנטפרי: תוכל לשלוח פנייה למערכת הפניות של נטפרי ולצרף לה את
הקלטת התעבורה הזו. לפעמים, עבור צרכי עבודה מוגדרים ובקשות ספציפיות, הם
יכולים לאשר נקודת קצה (endpoint) מסוימת, אם כי בנושא תמלול קולי מול גוגל הם
נוטים להקשות מכיוון שלא ניתן לסנן את השמע. -
שימוש בכלי תמלול מקומיים (אופליין): מאחר שהחסימה היא ברשת האינטרנט, הפתרון
היעיל ביותר עבור משתמשי סינון הוא שימוש בתוכנות המבצעות תמלול על גבי המחשב
עצמו ללא צורך באינטרנט. למשל, כלים מבוססי Whisper (של OpenAI) שיכולים לרוץ
באופן מקומי (Local) על המעבד או כרטיס המסך של המחשב שלך יפעלו בצורה חלקה
לחלוטין וללא שום תלות בסינון הרשת.
-
@המלאך אשמח לשמוע שיש דרך להפעיל את זה בנטפרי. זה מה שיצא בהקלטת תעבורה: [גמיני טען שזה בגלל נטפרי]
תשובת גמיני:
כן, הבעיה אכן קשורה באופן ישיר לסינון של נטפרי.להלן הסבר מפורט על מה שקורה ברקע, מדוע זה נחסם וכיצד ניתן להתמודד עם זה:
- מהם האתרים/כתובות ה-IP האלו?
כתובת ה-IP שמופיעה בצילום המסך שלך (142.251.153.119) שייכת ל-Google.
בסקריפט שצירפת נעשה שימוש בפונקציית התמלול המובנית של הדפדפן:
window.SpeechRecognition || window.webkitSpeechRecognition
בדפדפני כרום (Chrome) ודפדפנים מבוססי כרומיום, כאשר משתמשים במנגנון זה, הדפדפן
אינו מבצע את פענוח הדיבור לטקסט באופן מקומי על המחשב שלך. במקום זאת, הדפדפן
מקליט את השמע מהמיקרופון ושולח אותו בזמן אמת לשרתים של גוגל (בפורט 443 המוצג
בצילום) כדי ששרתי הבינה המלאכותית של גוגל יתרגמו את הקול למילים ויחזירו אותם
לדפדפן כטקסט.- מדוע נטפרי חוסמת זאת?
סימני האזהרה האדומים (
️) בעמוד "הקלטת תעבורה" מעידים שנטפרי חסמה את התקשורת הזו
באופן יזום. נטפרי חוסמת את הגישה לשרתי התמלול והקול הלא-מבוקרים של גוגל. מכיוון
שמדובר בהזרמת שמע מוצפנת בזמן אמת (encrypted audio stream), מערכת הסינון
האוטומטית של נטפרי אינה יכולה לבדוק או לסנן את התוכן הקולי שנשלח ומתקבל,
ולכן ברירת המחדל היא חסימת הגישה לשירותים אלו.מה ניתן לעשות?
-
שליחת פנייה לנטפרי: תוכל לשלוח פנייה למערכת הפניות של נטפרי ולצרף לה את
הקלטת התעבורה הזו. לפעמים, עבור צרכי עבודה מוגדרים ובקשות ספציפיות, הם
יכולים לאשר נקודת קצה (endpoint) מסוימת, אם כי בנושא תמלול קולי מול גוגל הם
נוטים להקשות מכיוון שלא ניתן לסנן את השמע. -
שימוש בכלי תמלול מקומיים (אופליין): מאחר שהחסימה היא ברשת האינטרנט, הפתרון
היעיל ביותר עבור משתמשי סינון הוא שימוש בתוכנות המבצעות תמלול על גבי המחשב
עצמו ללא צורך באינטרנט. למשל, כלים מבוססי Whisper (של OpenAI) שיכולים לרוץ
באופן מקומי (Local) על המעבד או כרטיס המסך של המחשב שלך יפעלו בצורה חלקה
לחלוטין וללא שום תלות בסינון הרשת.
-
M menajemmendel התייחס לנושא זה
-
@אהרן אכן.
זה באמת שייך לנטפרי, זה מוזר, כי כל התכנים האלה מוזרמים באמצעות המקירופון, אז ממה החשש? שאתה תגיד מילים מסוימות וגוגל יקריאו אותם?@המלאך דבר זה עובד בנטפרי מצויין
https://mitmachim.top/topic/97481/שיתוף-שיתוף-תוסף-לתמלול-דיבור-לטקסט -
לי זה עובד מצויין בנטפרי
דרך אגב את זה כתבתי באמצעות התוסף
-
-
עובד גם במק?
@מנסה-לעבוד-את-ה לא יודע, לכאורה אמור. אתה מוזמן לנסות ולעדכן אותנו.
-
@מנסה-לעבוד-את-ה לא יודע, לכאורה אמור. אתה מוזמן לנסות ולעדכן אותנו.
@אברהם-גלסר אז כן זה עבד לי אבל רק דרך הטעינה של תוסף בלתי ארוז, כמו כן חלק מהפיצ׳רים לא עובדים לי כמו ההוזזה של המיקרפון,
אולי כדאי שמישהו יעלה את זה כתוסף לכרום, מישהו שיש לו חשבון מפתח.
 { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}