שיתוף | אימון מודל לזיהוי הנושא ההלכתי

[אהרן]

@אהרן כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

@sivan22 כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

@sivan22 הנה ממשק נחמד ויותר שימושי, עם תוצאות מהשולחן ערוך ומשנה ברורה:

מי שרוצה לנסות מוזמן להכנס לקישור.

שלחתי לפתיחה בנטפרי

תשובת נטפרי:
האתר נפתח
עם סינון מלל על ידי רובוט אוטומטי וסינון תמונות אנושי.
בהצלחה!

[אהרן]

@sivan22 ניסיתי פעם ראשונה וזה מה שקיבלתי:

[aiib]

@sivan22 צריך לדעת איך לשאול? כי שאלתי כמה וכמה שאלות ולא הצלחתי לקבל מקור מתאים

[sivan22]

@aiib כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

@sivan22 צריך לדעת איך לשאול? כי שאלתי כמה וכמה שאלות ולא הצלחתי לקבל מקור מתאים

צריך להדגיש שמדובר כרגע בהדגמת יכולות בלבד, ואין שום הבטחה שהתשובות יהיו מדוייקות.
מכיון שהנתונים שהוא התאמן עליהם היו הפוסקים, אז ככל שתכתוב דבר שהוא דומה לסעיף במשנה ברורה או מגן אברהם, יש יותר סיכוי שהוא יזהה אותו נכון. השלב הבא שאני מתכנן לעשות בסייעתא דשמיא הוא לאמן אותו על מאגר שאלות בשפה המדוברת מה שכנראה יעלה את הסיכוי לקבל מקור טוב גם לשאלה קצרה בעברית .

[sivan22]

@אהרן כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

@sivan22 ניסיתי פעם ראשונה וזה מה שקיבלתי:

לאחר כמה נסיונות הוא יעבוד. אני מכיר את הבאג, עובד על זה.

[aiib]

@sivan22 יש באג קטן, כשמקישים אנטר אחרי הכנסת שאלה 'האיש' מתחיל לרוץ כאילו הוא מחפש אבל בפועל הוא מחפש רק לאחר הקשה על 'חיפוש'

[אהרן]

@sivan22 מה זה המספרים בצד ליד לשון השו''ע והמ''ב?

[טכנופוב]

@sivan22 ניסיתי להוריד לשימוש לא מקוון וזה מה שהוא כותב לי
FileNotFoundError: Directory sivan22/orach-chaim not found
ובאמת אין לי בכלל תיקיה בכל המחשב בשם sivan22,

[sivan22]

@טכנופוב היו כמה באגים בקוד, עדכנתי את הריפו, יש להוריד מחדש. (וסליחה שהוצאתי אותו לא אפוי)

[MAKRO]

@sivan22
בהחלט הוא (אתה!) מתקדם
הממשק כבר ממש נראה יפה!
והצגת הציטוטים שדרוג רציני! והרבה יותר תועלתי שרואים את התוצאות מיד
במודל הקודם פשוט פתחתי אחד אחד
בשלב הבא לחיצה על הטקסט תפתח את המקור...

[MAKRO]

@sivan22
"טלית פסולה כבוד הבריות" תוצאה מדויקת - רביעית
וזה המילים של השו"ע כמעט מילה במילה
"ציצית פסולה כבוד הבריות" תוצאה מדויקת - שניה
ואין שם את המילה "ציצית"

לא לנסות להבין אותו....

הצעת ייעול קטנה אם היא אפשרית:
שלחיצה על אנטר תאשר את חיפוש, ולא יהיה צורך ללחוץ עם העכבר על "חפש"

[sivan22]

@MAKRO ניסיתי "טלית פסולה צריך להוריד מיד או שיש כבוד הבריות" וקיבלתי תוצאה ראשונה. נראה לי שהוא מתקשה יותר בשאלות קצרות, כי כל המשפט מסייע לו להבין את המשקל של כל מילה (לעומת החיפוש המקובל היום לפי מילות מפתח שמחפש את הדימיון לפי מילה ולא לפי משמעות), וגם בגלל שהוא התאמן על קטעים ארוכים יותר (המפרשים), כבר כתבתי שאני מקווה שאחרי אימון על מאגר של שאלות, הוא ישתפר עוד.

לא לנסות להבין אותו...

לגבי התמיהה שלך, זה שוב בגלל שהוא לא עובד לפי מילה אלא לפי הקשר, וכנראה שהוא ראה יותר פעמים את המילה ציצית בהקשר שעוזר לו להבין למה התכוונת, מאשר את המילה טלית. (כי למעשה גם אם לא היה כתוב בכלל את המילה טלית יכול להיות שהוא היה מוצא את זה לפי שאר המשפט שגורם לכך שמובן מאליו שמדברים על טלית)

[י. פל.]

@sivan22 כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

אני עובד על גירסה לא מקוונת.

אז אין כרגע??

@טכנופוב כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

ניסיתי להוריד לשימוש לא מקוון וזה מה שהוא כותב לי

אז יש כרגע???

@sivan22 כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

יש להוריד מחדש.

אז יש כרגע!
איך מורידים?

[טכנופוב]

@י-פל יש אפשרות להוריד לשימוש לא מקוון אבל צריך לזה אינטרנט בשביל ההורדה בפעם הראשונה,
בגיטהאב יש הוראות להתקנה אבל זה לא מדוייק
ולהלן ההוראות:
דבר ראשון צריך להתקין פייתון וגיט

1. תריץ את הפקודה הזו

pip install streamlit

(@sivan22 שים לב שכתבת בטעות pip intall sreamlit)

2. תריץ את הפקודה הזו

git clone https://github.com/Sivan22/halacha-classification.git

אם זה מחזיר שגיאה בסיגנון Cloning into 'halacha-classification'...
fatal: unable to access 'https://github.com/Sivan22/halacha-classification.git/': SSL certificate problem: unable to get local issuer certificate תריץ את הפקודה הזו

git config --global http.sslVerify false

ותחזור שוב על שלב 2, ואחרי שהוא גומר לרוץ תריץ שוב

git config --global http.sslVerify true

3. תריץ

cd halacha-classification

4. ובסוף תריץ

streamlit run App.py

אני עשיתי את זה וזה עובד לי אופליין,
קרדיט @sivan22 וchatGPT

[י. פל.]

הצלחתי הכל, חוץ מ:
???

@טכנופוב @sivan22 ???

[י. פל.]

@sivan22 @טכנופוב
זה מה שכתוב בגוף הצילו"מ:

File "C:\Users\user\AppData\Local\Programs\Python\Python312\Lib\site-packages\streamlit\runtime\scriptrunner\script_runner.py", line 534, in _run_script
    exec(code, module.__dict__)
File "C:\Users\user\halacha-classification\App.py", line 3, in <module>
    from transformers import  pipeline

[NH.LOCAL]

@י-פל כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

הצלחתי הכל, חוץ מ...

אתה צריך להוריד את החבילה transformers
תשתמש בפקודה:

pip install transformers

[י. פל.]

@NH-LOCAL כתב בשיתוף | אימון מודל לזיהוי הנושא ההלכתי:

אתה צריך להוריד את החבילה transformers
תשתמש בפקודה:

pip install transformers

צודק, עשיתי חיפוש והורדתי...
לא הספקתי למחוק...
תודה בכל אופן!

[אהרן]

@טכנופוב זה תופס מקום בראם או רק בזמן השימוש [פייתון מותקן אצלי בכל מקרה, גיט אצטרך להתקין במיוחד].

[sivan22]

שיניתי קצת:

git clone https://github.com/Sivan22/halacha-classification.git
cd halacha-classification
pip install -r requirements.txt
streamlit run App.py

לחילופין אפשר להריץ את run.bat