בירור | האם ניתן לעשות הזרמת אודיו דרך AI בטלפון? (לדוגמא מיוטיוב) לא נפתר
-
@שוקו-בננה תראה מה כתבתי לקלוד
נראה אותך עושה בשבילי את כל העבודה,או הרוב
והנה התשובה
השרת של קו ה-AI כתוב, פרוס ועונה בכתובתhttps://kav-ai-kappa.vercel.app/api/yemot(פרויקטkav-aiבחשבון ה-Vercel שלך). כרגע הוא מחזיר "חסרים מפתחות בשרת", כי את החשבונות והמפתחות רק אתה יכול לפתוח ולהזין.בחרתי ב-Vercel: הוא פשוט יותר ואין בו הירדמות שרת כמו ב-Render החינמי. הקוד כולו שלי, בלי הקבצים מהפורום.
מה נבדק: הלוגיקה נבדקה מול Groq וימות מדומים, והכתובת החיה נגישה מבחוץ. שיחה אמיתית עוד לא נבדקה, כי אין עדיין מערכת ומפתחות.
מה נשאר לך:
- Groq – לפתוח חשבון ב-console.groq.com וליצור מפתח API.
- ימות המשיח – לפתוח מערכת.
- Vercel – בפרויקט
kav-ai, תחת Settings ← Environment Variables, להוסיף:GROQ_API_KEY– המפתח מ-Groq.YEMOT_TOKEN– טוקן של ימות, אומספר_מערכת:סיסמה.API_SECRET(מומלץ) – מחרוזת אקראית כלשהי, כדי שרק הקו שלך יוכל להשתמש בשרת.
- שלוחה בימות – בקובץ
ext.iniשל השלוחה הרצויה:
בליtype=api api_link=https://kav-ai-kappa.vercel.app/api/yemot?key=הסוד_שבחרתAPI_SECRETמשמיטים את?key=.... - לכתוב לי "הזנתי" – אפרוס מחדש כדי שהמשתנים ייכנסו לתוקף, ונבדוק שיחה יחד.
איך הקו עובד: המתקשר מקליט שאלה ומקיש סולמית, השרת מתמלל ב-Groq, שואל את המודל, וימות מקריאה את התשובה. אחר כך אפשר לשאול שאלת המשך.
מגבלות שכדאי להכיר:
- זיכרון השיחה נשמר בזיכרון השרת בלבד. בדרך כלל הוא מחזיק לאורך שיחה, אבל זה לא מובטח, ואין תיעוד שיחות קבוע (רק בלוגים של Vercel).
- הנחתי שההקלטה נשמרת בימות כקובץ
wavבשלוחה עצמה. אם השיחה הראשונה תיכשל בתמלול, זה החשוד הראשון. - מחיקת ההקלטות מהמערכת אחרי התמלול לא אומתה, כך שייתכן שיצטברו קבצים בשלוחה.
- השרת רץ באזור ארה"ב, כך שתיתכן שנייה או שתיים של המתנה לפני כל תשובה.
Sources:
-
@acherbanahal לא הבנתי,
א מה זה קשור כאן
ב יש לך קלוד קוד? -
@שוקו-בננה כן אני יכול
-
@מוקד-המערכות לא כ"כ מסובך יש כאן (זה נקרא ID לא API) - גוגל Cloud
צריך שרת אורקל? או שמספיק רגיל?צריך שרת אורקל? או שמספיק רגיל?
ממש מצחיק להגיד את זה, לאורקל אין שרתים מקצועים יותר מקלודאפלייר וורסל וכו' ,
אין בהם משהו מדי מיוחד וגם, אני לא חושב שאתה צריך API של יוטיוב, לדעתי אתה יכול לפשוט לשים עוזר חכם בתוך האתר של יוטיוב ,אותו רעיון ש @מייבין-במקצת עשה למתמחים טופ בטלפון,
אבל פשוט ביוטיוב. -
צריך שרת אורקל? או שמספיק רגיל?
ממש מצחיק להגיד את זה, לאורקל אין שרתים מקצועים יותר מקלודאפלייר וורסל וכו' ,
אין בהם משהו מדי מיוחד וגם, אני לא חושב שאתה צריך API של יוטיוב, לדעתי אתה יכול לפשוט לשים עוזר חכם בתוך האתר של יוטיוב ,אותו רעיון ש @מייבין-במקצת עשה למתמחים טופ בטלפון,
אבל פשוט ביוטיוב. -
@שוקו-בננה כלומר אם מתכנת פותח כאן משתמש אז הוא לא יודע כלום עד שיש לו כמות של מוניטין? נראה לך למשל @מישהו12 כשהוא פתח כאן משתמש הוא לא ידע כלום?

-
@שוקו-בננה כלומר אם מתכנת פותח כאן משתמש אז הוא לא יודע כלום עד שיש לו כמות של מוניטין? נראה לך למשל @מישהו12 כשהוא פתח כאן משתמש הוא לא ידע כלום?

-
@שוקו-בננה
הכנתי גירסה מסוימת של הבינה שלך - אז רציתי לשאול אם אתה מסכים לי לפרסם את זה בפורום כי זה זכיות יוצרים.(לא הצלחתי לפנות אליך בצ'אט - אין לך מספיק מוניטין.)
-
אחרי חקירה ניסוי ותיהיה (או איך שלא כותבים את זה) מה שכולם משתמשים לפי איך שבהנתי זו תוכנה פתוחה בשם yt-dlp. היא פונה ליוטיוב כאילו היא דפדפן רגיל, מוציאה את הכתובת הפנימית של השמע (ביוטיוב השמע שמור בנפרד מהווידאו) ומורידה רק אותו.
אחרי זה מעבירים את השמע דרך ffmpeg, שממירה אותו לפורמט טלפוני,
בסוף מחברים את זה לשלוחת API בימות המשיח. כשמישהו נכנס לשלוחה, ימות פונה לשרת, והשרת מחזיר לה את הקובץ להשמעה. רק שימ לב שצריך לזה שרת אמיתי VPS, כי Cloudflare לא יכול להריץ את התוכנות האלה כי השפת ההקראה שלו היא ג'אווה סקריפט. וגם יוטיוב חוסם לפעמים הורדות משרתים, אז זה לא תמיד יציב.
כרגע אני עובד על הקו עצמו והשרת שיהיה מוכן אני ישמח לחבר אותך שתשמע ולהדריך אותך בדיוק איך לעשות את זה -
דרך ימות כמובן
לדוגמא: אני יאמר לו נגן לי את השיר של פריד "אדרבה" והוא יחפש ביוטיוב, וינגן@שוקו-בננה זה רעיון ממש טוב אבל לפי מה שאני חושב הוא מלא יהיה שימושי
א) כי השמע בטלפון כשר לא מספיק טוב ונוח בשביל לשמוע מוזיקה בין השאר גם כי לפעמים פתאום אין קליטה אז השיר נקטע
ב) כי זה מסורבל לחפש ואז להכנס לשיר ואם זה לא מספיק איכותי המנוע חיפוש והתמלול וכו' אז יהיה קשה להכנס לשיר שבאמת רציתי ולא בטעות לשיר אחר -
אני לרוב חשבתי יותר על פודקאסטים ולפי בדיקה שלי כרגע
זמן ההמרה לסרטון של 40 דק' לוקח 20 - 30 שניות
ואני עובד כרגע שהשרת יכין ויעלה רק את 2–3 הדקות הראשונות, וההשמעה מתחילה מיד.
בזמן שהמתקשר שומע את ההתחלה, השרת מכין ברקע את שאר הפודקאסט, חלק אחרי חלק. -
אני לרוב חשבתי יותר על פודקאסטים ולפי בדיקה שלי כרגע
זמן ההמרה לסרטון של 40 דק' לוקח 20 - 30 שניות
ואני עובד כרגע שהשרת יכין ויעלה רק את 2–3 הדקות הראשונות, וההשמעה מתחילה מיד.
בזמן שהמתקשר שומע את ההתחלה, השרת מכין ברקע את שאר הפודקאסט, חלק אחרי חלק.זמן ההמרה לסרטון של 40 דק' לוקח 20 - 30 שניות
בלת"ק, אבל איך אתה עושה את זה?
אצלי - 10 קבצים של 3 דקות בערך כ"א - אורך סה"כ כ8 דקות, פחות או יותר!בזמן שהמתקשר שומע את ההתחלה, השרת מכין ברקע את שאר הפודקאסט, חלק אחרי חלק.
אני עשיתי שבזמן שהמשתמש מאזין לשיעור מספר 1 - השרת מכין את שיעור 2 (מדובר בשיעורים באורך שעה בערך)
לא חשבתי שאפשר לעשות את זה ע"י חלוקה של השיעור עצמו למקטעים. הבעיה היא - שאם ארצה להוריד את השיעור למחשב מימות, הוא ירד בקטעים, לא? -
אחרי חקירה ניסוי ותיהיה (או איך שלא כותבים את זה) מה שכולם משתמשים לפי איך שבהנתי זו תוכנה פתוחה בשם yt-dlp. היא פונה ליוטיוב כאילו היא דפדפן רגיל, מוציאה את הכתובת הפנימית של השמע (ביוטיוב השמע שמור בנפרד מהווידאו) ומורידה רק אותו.
אחרי זה מעבירים את השמע דרך ffmpeg, שממירה אותו לפורמט טלפוני,
בסוף מחברים את זה לשלוחת API בימות המשיח. כשמישהו נכנס לשלוחה, ימות פונה לשרת, והשרת מחזיר לה את הקובץ להשמעה. רק שימ לב שצריך לזה שרת אמיתי VPS, כי Cloudflare לא יכול להריץ את התוכנות האלה כי השפת ההקראה שלו היא ג'אווה סקריפט. וגם יוטיוב חוסם לפעמים הורדות משרתים, אז זה לא תמיד יציב.
כרגע אני עובד על הקו עצמו והשרת שיהיה מוכן אני ישמח לחבר אותך שתשמע ולהדריך אותך בדיוק איך לעשות את זהאחרי חקירה ניסוי ותיהיה (או איך שלא כותבים את זה) מה שכולם משתמשים לפי איך שבהנתי זו תוכנה פתוחה בשם yt-dlp. היא פונה ליוטיוב כאילו היא דפדפן רגיל, מוציאה את הכתובת הפנימית של השמע (ביוטיוב השמע שמור בנפרד מהווידאו) ומורידה רק אותו.
אחרי זה מעבירים את השמע דרך ffmpeg, שממירה אותו לפורמט טלפוני,
בסוף מחברים את זה לשלוחת API בימות המשיח. כשמישהו נכנס לשלוחה, ימות פונה לשרת, והשרת מחזיר לה את הקובץ להשמעה.אני עשיתי משהו די דומה - עם עוגיות אמיתיות של יוטיוב - מחשבון גוגל לא שמיש שלי. וזה עובד לי מצויין דרך רנדר.
-
@שוקו-בננה זה רעיון ממש טוב אבל לפי מה שאני חושב הוא מלא יהיה שימושי
א) כי השמע בטלפון כשר לא מספיק טוב ונוח בשביל לשמוע מוזיקה בין השאר גם כי לפעמים פתאום אין קליטה אז השיר נקטע
ב) כי זה מסורבל לחפש ואז להכנס לשיר ואם זה לא מספיק איכותי המנוע חיפוש והתמלול וכו' אז יהיה קשה להכנס לשיר שבאמת רציתי ולא בטעות לשיר אחרכי זה מסורבל לחפש ואז להכנס לשיר ואם זה לא מספיק איכותי המנוע חיפוש והתמלול וכו' אז יהיה קשה להכנס לשיר שבאמת רציתי ולא בטעות לשיר אחר
לא נכון - אם זה מחובר לAI - הוא מוצא לך יפה מאוד - במיוחד אם אתה לא מקליט את הבקשה אלא מקליד אותה. מנסיון. כמעט ואין לי טעויות.
פיתחתי לעצמי את זה בצורה משוכללת ממש, כולל זכירה של רשימות שיעורים בשלוחה מיוחדת, מעבר בין רשימות שיעורים, ועוד.
דוגמא: אני יכול לבקש ממנו - צור לי רשימה של 10 שיעורים בנושא פיתוח עם קלוד, מאת פלוני אלמוני - הוא מקריא לי את הרשימה - ואז אני יכול לבחור שיעור מסויים, או לבקש ממנו להשמיע לי את כולם - הוא מוריד את כולם, מעלה לימות, ויוצר לי לבד שלוחה חדשה - עם כל רשימת השיעורים הזו.
שלום! נראה שהשיחה הזו מעניינת אותך, אבל עדיין אין לך חשבון.
נמאס לכם לגלול בין אותם הפוסטים בכל ביקור? כשנרשמים לחשבון, תמיד תחזרו בדיוק למקום שבו הייתם קודם, ותוכלו לבחור לקבל התראות על תגובות חדשות (בין אם במייל, ובין אם בהתראת פוש). תוכלו גם לשמור סימניות ולפרגן ב-upvote לפוסטים כדי להביע הערכה לחברי קהילה אחרים.
בעזרת התרומה שלך, הפוסט הזה יכול להיות אפילו טוב יותר 💗
הרשמה התחברות