בירור | יצירת אלגוריתם/כללים למנוע חיפוש
-
יש לי מערכת שמכילה טבלה עם מוצרים, לצורך הענין כרגע מאוחסנים שם ספרים, יש מנגנון חיפוש בטבלה הזו, הענין הוא שהחיפוש צריך להיות גמיש, אבל לא גמיש מידי, שחיפוש יניב תוצאות גם קרובות אבל לא רחוקות מידי.
הAI המסכן הסתבך במנגנון הזה, בכל סשן הוא מצא סיבה למה לשנות את המנגנון למשהו אחר.
אני אשמח אם מישהו יוכל לתת לי רעיון או מה הדרך המקובלת לעשות כזה חיפוש (לא סתם אלגוריתם לוינשטיין זה גם אני יודע).
לדוגמא חיפשתי (זה עבר תמלול ולכן יצא מעוות) ש"ס חתנים, התמלול החליט שביקשתי שש/שף חתנים וחיפש את זה, המערכת החזירה 0 תוצאות למרות שיש 3 סוגים של ש"ס חתנים... פעם הוא היה מוצא גם את זה, באחד השינויים זה אבד לו...
הענין הוא שהמערכת לא אמורה להחזיק ספרים וגם לא מבנה ספציפי, היא אמורה להיות גנרית ומתאימה לכל מה שיאחסנו בה ובכל מבנה, אם בספרים זה שם, הוצאה, קטגוריה, כריכה ומספר כרכים, אז בכלי עבודה או במחשבים יהיו עמודות שונות והחיפוש צריך להתמודד נכון עם הכל.
מה שמביא אותי למחשבה שמעבר לאלגוריתם חיפוש חכם, צריך גם סט כללים שיתנו למי שמכניס את הנתונים את הידע לכתוב אותם בצורה נכונה שהאלגוריתם ידע להתמודד עם זה בקלות ולתת את התוצאות הכי טובות.
זו ההצעה האחרונה של קלוד:
ההצעה: ארבעה רכיבים, בסדר הזה
א. קורפוס מדידה, לפני כל שינוי בחיפושקובץ נתונים של שאילתות שנשמעו בשיחות אמיתיות, ולצד כל אחת המוצר הנכון (או "אין התאמה נכונה"). הוא מתחיל ממה שכבר יש בלוגים ובמסמכים: "שוקאמין", "שש חתנים", "שף חתנים", "בן אשר", "עץ חיים", "ים של שלמה", "Pas moi" (רמב"ן), "שס חדנים".
מריצים עליו כל שינוי ומודדים שני מספרים:
כמה נמצאו נכון.
כמה קיבלו מוצר שגוי עם מחיר. זה המספר שאסור לו לעלות. כ8 אומר שתשובה שגויה גרועה מ"לא מצאתי".כלל שמשפר את הראשון ומעלה את השני נדחה. זה מה שמבדיל כלל ממערכת מטלאי להדגמה.
ב. "שם מדובר" לכל מוצר: כללי רישום בשכבת התחום
לכל מוצר יש שם כתוב (מה שמוצג) ושמות מדוברים (מה שמחפשים מולו). השמות המדוברים נגזרים בכללים, לא ביד לכל ספר:
כלל דוגמה
ראשי תיבות נקראים כמילה ש"ס ← שס
ספירת כרכים ומידות אינן חלק מהשם (26 כר'), (17 ס"מ) ← מוסר
קיצורים נפתחים כר' ← כרכים
שם הוצאה הוא שדה, לא חלק מהשם עוז והדר ← לשדה ההוצאההכללים הם נתונים בשכבת התחום, והמנוע שמפעיל אותם בליבה. זה המבחן של תוכנית_עבודה.md §1.2: בחומרי בניין הכללים יהיו "מ"מ", "ק"ג" ושמות יצרנים, והמנוע לא ישתנה.
בנוסף, שם נוסף שבעל החנות מזין בפאנל ("גמרא" לספר שכתוב "תלמוד בבלי"). שם כזה הוא נתון שאדם אישר.
ובפאנל, בדיקה בזמן רישום: שם מדובר שזהה לשם של מוצר אחר, או שכל מילותיו קצרות, מקבל אזהרה. זו "מערכת כללים לרישום": הבעיה נתפסת כשמזינים את המוצר, לא כשלקוח מתקשר.
ג. התאמה פונטית לשיבושי זיהוי קולי
הזיהוי הקולי מחליף אותיות שנשמעות דומה בטלפון: ס/ש/שׂ, כ/ח, ת/ט, ק/כ, א/ע, ו/ב, פ/ף. לכל מילה בשם המדובר מחשבים מפתח פונטי שמאחד את הקבוצות האלה. "שש" ו"שס" מקבלים אותו מפתח, ו"שף" קרוב אליו.
שני תנאים שומרים על כ8:
התאמה פונטית לבדה אינה מוסרת מחיר. היא מחזירה מועמד, והסוכן שואל: "התכוונת לש"ס חתנים?". מחיר נמסר רק אחרי שהלקוח אישר, או כשההתאמה מדויקת.
הקבוצות נמדדות על הקורפוס (רכיב א'). קבוצה שמעלה את מספר התשובות השגויות יוצאת.קבוצות האותיות הן ידע על עברית בטלפון, לא על ספרים. לכן הן בליבה.
נשמע לי לא רציני... לכן בבקשה, רק תגובות מבני אדם שמבינים מה שאומרים ולא מAI, אותם גם אני יכול לשאול...
יותר מאשמח לעזרה.
תודה
אגב, @מנהלים ? חייבים קטגוריה כללית לתכנות, לא יכול להיות שכזו שאלה אני צריך לכתוב כאן כי אין קטגוריה כללית שמתאימה לנושאי תכנות שלא שייכים לשפה מסוימת
-
יש לי מערכת שמכילה טבלה עם מוצרים, לצורך הענין כרגע מאוחסנים שם ספרים, יש מנגנון חיפוש בטבלה הזו, הענין הוא שהחיפוש צריך להיות גמיש, אבל לא גמיש מידי, שחיפוש יניב תוצאות גם קרובות אבל לא רחוקות מידי.
הAI המסכן הסתבך במנגנון הזה, בכל סשן הוא מצא סיבה למה לשנות את המנגנון למשהו אחר.
אני אשמח אם מישהו יוכל לתת לי רעיון או מה הדרך המקובלת לעשות כזה חיפוש (לא סתם אלגוריתם לוינשטיין זה גם אני יודע).
לדוגמא חיפשתי (זה עבר תמלול ולכן יצא מעוות) ש"ס חתנים, התמלול החליט שביקשתי שש/שף חתנים וחיפש את זה, המערכת החזירה 0 תוצאות למרות שיש 3 סוגים של ש"ס חתנים... פעם הוא היה מוצא גם את זה, באחד השינויים זה אבד לו...
הענין הוא שהמערכת לא אמורה להחזיק ספרים וגם לא מבנה ספציפי, היא אמורה להיות גנרית ומתאימה לכל מה שיאחסנו בה ובכל מבנה, אם בספרים זה שם, הוצאה, קטגוריה, כריכה ומספר כרכים, אז בכלי עבודה או במחשבים יהיו עמודות שונות והחיפוש צריך להתמודד נכון עם הכל.
מה שמביא אותי למחשבה שמעבר לאלגוריתם חיפוש חכם, צריך גם סט כללים שיתנו למי שמכניס את הנתונים את הידע לכתוב אותם בצורה נכונה שהאלגוריתם ידע להתמודד עם זה בקלות ולתת את התוצאות הכי טובות.
זו ההצעה האחרונה של קלוד:
ההצעה: ארבעה רכיבים, בסדר הזה
א. קורפוס מדידה, לפני כל שינוי בחיפושקובץ נתונים של שאילתות שנשמעו בשיחות אמיתיות, ולצד כל אחת המוצר הנכון (או "אין התאמה נכונה"). הוא מתחיל ממה שכבר יש בלוגים ובמסמכים: "שוקאמין", "שש חתנים", "שף חתנים", "בן אשר", "עץ חיים", "ים של שלמה", "Pas moi" (רמב"ן), "שס חדנים".
מריצים עליו כל שינוי ומודדים שני מספרים:
כמה נמצאו נכון.
כמה קיבלו מוצר שגוי עם מחיר. זה המספר שאסור לו לעלות. כ8 אומר שתשובה שגויה גרועה מ"לא מצאתי".כלל שמשפר את הראשון ומעלה את השני נדחה. זה מה שמבדיל כלל ממערכת מטלאי להדגמה.
ב. "שם מדובר" לכל מוצר: כללי רישום בשכבת התחום
לכל מוצר יש שם כתוב (מה שמוצג) ושמות מדוברים (מה שמחפשים מולו). השמות המדוברים נגזרים בכללים, לא ביד לכל ספר:
כלל דוגמה
ראשי תיבות נקראים כמילה ש"ס ← שס
ספירת כרכים ומידות אינן חלק מהשם (26 כר'), (17 ס"מ) ← מוסר
קיצורים נפתחים כר' ← כרכים
שם הוצאה הוא שדה, לא חלק מהשם עוז והדר ← לשדה ההוצאההכללים הם נתונים בשכבת התחום, והמנוע שמפעיל אותם בליבה. זה המבחן של תוכנית_עבודה.md §1.2: בחומרי בניין הכללים יהיו "מ"מ", "ק"ג" ושמות יצרנים, והמנוע לא ישתנה.
בנוסף, שם נוסף שבעל החנות מזין בפאנל ("גמרא" לספר שכתוב "תלמוד בבלי"). שם כזה הוא נתון שאדם אישר.
ובפאנל, בדיקה בזמן רישום: שם מדובר שזהה לשם של מוצר אחר, או שכל מילותיו קצרות, מקבל אזהרה. זו "מערכת כללים לרישום": הבעיה נתפסת כשמזינים את המוצר, לא כשלקוח מתקשר.
ג. התאמה פונטית לשיבושי זיהוי קולי
הזיהוי הקולי מחליף אותיות שנשמעות דומה בטלפון: ס/ש/שׂ, כ/ח, ת/ט, ק/כ, א/ע, ו/ב, פ/ף. לכל מילה בשם המדובר מחשבים מפתח פונטי שמאחד את הקבוצות האלה. "שש" ו"שס" מקבלים אותו מפתח, ו"שף" קרוב אליו.
שני תנאים שומרים על כ8:
התאמה פונטית לבדה אינה מוסרת מחיר. היא מחזירה מועמד, והסוכן שואל: "התכוונת לש"ס חתנים?". מחיר נמסר רק אחרי שהלקוח אישר, או כשההתאמה מדויקת.
הקבוצות נמדדות על הקורפוס (רכיב א'). קבוצה שמעלה את מספר התשובות השגויות יוצאת.קבוצות האותיות הן ידע על עברית בטלפון, לא על ספרים. לכן הן בליבה.
נשמע לי לא רציני... לכן בבקשה, רק תגובות מבני אדם שמבינים מה שאומרים ולא מAI, אותם גם אני יכול לשאול...
יותר מאשמח לעזרה.
תודה
אגב, @מנהלים ? חייבים קטגוריה כללית לתכנות, לא יכול להיות שכזו שאלה אני צריך לכתוב כאן כי אין קטגוריה כללית שמתאימה לנושאי תכנות שלא שייכים לשפה מסוימת
אגב, @צוות-פיקוח חייבים קטגוריה כללית לתכנות, לא יכול להיות שכזו שאלה אני צריך לכתוב כאן כי אין קטגוריה כללית שמתאימה לנושאי תכנות שלא שייכים לשפה מסוימת
ואיך צוות פיקוח קשורים לזה?
אנחנו לא מנהלי הפורום..סתם הקפצת את כולם עכשיו..
-
אגב, @צוות-פיקוח חייבים קטגוריה כללית לתכנות, לא יכול להיות שכזו שאלה אני צריך לכתוב כאן כי אין קטגוריה כללית שמתאימה לנושאי תכנות שלא שייכים לשפה מסוימת
ואיך צוות פיקוח קשורים לזה?
אנחנו לא מנהלי הפורום..סתם הקפצת את כולם עכשיו..
@שניאור-שמח מחילה, שיניתי למנהלים.
-
יש לי מערכת שמכילה טבלה עם מוצרים, לצורך הענין כרגע מאוחסנים שם ספרים, יש מנגנון חיפוש בטבלה הזו, הענין הוא שהחיפוש צריך להיות גמיש, אבל לא גמיש מידי, שחיפוש יניב תוצאות גם קרובות אבל לא רחוקות מידי.
הAI המסכן הסתבך במנגנון הזה, בכל סשן הוא מצא סיבה למה לשנות את המנגנון למשהו אחר.
אני אשמח אם מישהו יוכל לתת לי רעיון או מה הדרך המקובלת לעשות כזה חיפוש (לא סתם אלגוריתם לוינשטיין זה גם אני יודע).
לדוגמא חיפשתי (זה עבר תמלול ולכן יצא מעוות) ש"ס חתנים, התמלול החליט שביקשתי שש/שף חתנים וחיפש את זה, המערכת החזירה 0 תוצאות למרות שיש 3 סוגים של ש"ס חתנים... פעם הוא היה מוצא גם את זה, באחד השינויים זה אבד לו...
הענין הוא שהמערכת לא אמורה להחזיק ספרים וגם לא מבנה ספציפי, היא אמורה להיות גנרית ומתאימה לכל מה שיאחסנו בה ובכל מבנה, אם בספרים זה שם, הוצאה, קטגוריה, כריכה ומספר כרכים, אז בכלי עבודה או במחשבים יהיו עמודות שונות והחיפוש צריך להתמודד נכון עם הכל.
מה שמביא אותי למחשבה שמעבר לאלגוריתם חיפוש חכם, צריך גם סט כללים שיתנו למי שמכניס את הנתונים את הידע לכתוב אותם בצורה נכונה שהאלגוריתם ידע להתמודד עם זה בקלות ולתת את התוצאות הכי טובות.
זו ההצעה האחרונה של קלוד:
ההצעה: ארבעה רכיבים, בסדר הזה
א. קורפוס מדידה, לפני כל שינוי בחיפושקובץ נתונים של שאילתות שנשמעו בשיחות אמיתיות, ולצד כל אחת המוצר הנכון (או "אין התאמה נכונה"). הוא מתחיל ממה שכבר יש בלוגים ובמסמכים: "שוקאמין", "שש חתנים", "שף חתנים", "בן אשר", "עץ חיים", "ים של שלמה", "Pas moi" (רמב"ן), "שס חדנים".
מריצים עליו כל שינוי ומודדים שני מספרים:
כמה נמצאו נכון.
כמה קיבלו מוצר שגוי עם מחיר. זה המספר שאסור לו לעלות. כ8 אומר שתשובה שגויה גרועה מ"לא מצאתי".כלל שמשפר את הראשון ומעלה את השני נדחה. זה מה שמבדיל כלל ממערכת מטלאי להדגמה.
ב. "שם מדובר" לכל מוצר: כללי רישום בשכבת התחום
לכל מוצר יש שם כתוב (מה שמוצג) ושמות מדוברים (מה שמחפשים מולו). השמות המדוברים נגזרים בכללים, לא ביד לכל ספר:
כלל דוגמה
ראשי תיבות נקראים כמילה ש"ס ← שס
ספירת כרכים ומידות אינן חלק מהשם (26 כר'), (17 ס"מ) ← מוסר
קיצורים נפתחים כר' ← כרכים
שם הוצאה הוא שדה, לא חלק מהשם עוז והדר ← לשדה ההוצאההכללים הם נתונים בשכבת התחום, והמנוע שמפעיל אותם בליבה. זה המבחן של תוכנית_עבודה.md §1.2: בחומרי בניין הכללים יהיו "מ"מ", "ק"ג" ושמות יצרנים, והמנוע לא ישתנה.
בנוסף, שם נוסף שבעל החנות מזין בפאנל ("גמרא" לספר שכתוב "תלמוד בבלי"). שם כזה הוא נתון שאדם אישר.
ובפאנל, בדיקה בזמן רישום: שם מדובר שזהה לשם של מוצר אחר, או שכל מילותיו קצרות, מקבל אזהרה. זו "מערכת כללים לרישום": הבעיה נתפסת כשמזינים את המוצר, לא כשלקוח מתקשר.
ג. התאמה פונטית לשיבושי זיהוי קולי
הזיהוי הקולי מחליף אותיות שנשמעות דומה בטלפון: ס/ש/שׂ, כ/ח, ת/ט, ק/כ, א/ע, ו/ב, פ/ף. לכל מילה בשם המדובר מחשבים מפתח פונטי שמאחד את הקבוצות האלה. "שש" ו"שס" מקבלים אותו מפתח, ו"שף" קרוב אליו.
שני תנאים שומרים על כ8:
התאמה פונטית לבדה אינה מוסרת מחיר. היא מחזירה מועמד, והסוכן שואל: "התכוונת לש"ס חתנים?". מחיר נמסר רק אחרי שהלקוח אישר, או כשההתאמה מדויקת.
הקבוצות נמדדות על הקורפוס (רכיב א'). קבוצה שמעלה את מספר התשובות השגויות יוצאת.קבוצות האותיות הן ידע על עברית בטלפון, לא על ספרים. לכן הן בליבה.
נשמע לי לא רציני... לכן בבקשה, רק תגובות מבני אדם שמבינים מה שאומרים ולא מAI, אותם גם אני יכול לשאול...
יותר מאשמח לעזרה.
תודה
אגב, @מנהלים ? חייבים קטגוריה כללית לתכנות, לא יכול להיות שכזו שאלה אני צריך לכתוב כאן כי אין קטגוריה כללית שמתאימה לנושאי תכנות שלא שייכים לשפה מסוימת
שלום! נראה שהשיחה הזו מעניינת אותך, אבל עדיין אין לך חשבון.
נמאס לכם לגלול בין אותם הפוסטים בכל ביקור? כשנרשמים לחשבון, תמיד תחזרו בדיוק למקום שבו הייתם קודם, ותוכלו לבחור לקבל התראות על תגובות חדשות (בין אם במייל, ובין אם בהתראת פוש). תוכלו גם לשמור סימניות ולפרגן ב-upvote לפוסטים כדי להביע הערכה לחברי קהילה אחרים.
בעזרת התרומה שלך, הפוסט הזה יכול להיות אפילו טוב יותר 💗
הרשמה התחברות { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}