שיתוף | מה חדש בבינה מלאכותית - נספח עדכוני פיצ'רים ודיונים 💬

[המלאך]

הבנתי מקודם שלא,
אבל זה לא 12 שעות, נכון ללפני שבועיים וחצי.
כלומר רשמית הם מצהירים שכן, מעשית הם מכבים את הTpu לפני...

[CSS 0]

@המלאך כי TPU זה עד 9 שעות.

[עניו כמשה]

@א.מ.ד. איך מורידים ומתי יהיה זמין

[המלאך]

@CSS-0 ייתכן.
אבל איך שמרתם סשן שם?

המלאך כתב:

אני לא הצלחתי לשמור סשן בקאגל עצמו למרות שרשמית זה אחד הפלוסים העיקריים שלהם על קולאב.
עיין כאן: https://tchumim.com/topic/17538/הגדרת-שמירת-נתונים-בקאגל

[CSS 0]

@המלאך כתב:

יש דרך לעשות שזה ישמר אבל אני לא זוכר איך עושים את זה, תתיעץ עם ה AI הקרוב הוא זה שהדריך אותי בזמנו.. היום איןלי כבר צורך בקאגל אז אני לא משתמש בו..

[המלאך]

@CSS-0 לצערי הוא מייעץ את מה שידעתי לפני.
לשמור בhf.

המלאך כתב:

אני לא הצלחתי לשמור סשן בקאגל עצמו למרות שרשמית זה אחד הפלוסים העיקריים שלהם על קולאב.

[לנציצ]

Spoiler

> @חובבן-מקצועי כתב:

פיצ‌​‌‌​‌​​​​​‌'ר שבהתחלה היה פתוח לחלוטין בנטפרי, וכרגע עובד חלקית בלבד..

התשובה פשוטה לדעתי
זה פשוט לא הפעיל שום כתובת שרת חדשה (אולי תת שרת)
ולכן גם לקח להם זמן לעלות על זה ולחסום

[ע"ה דכו"ע]

@CSS-0 כתב:

בכמ"ק עם המחשב שלך עובר למצב שינה או משהו כזה או שהטאב נסגר אז הקאגל מפסיק ולא שומר יכול להיות שהטאב של קאגל הדפדפן העביר לשינה ולכן זה עצר לך.

יש שם אפשרות כלשהי להריץ ברקע

@המלאך כתב:

הבנתי מקודם שלא,

קולאב סגור קאגל פתוח

[צדיק וטוב לו 0]

@חובבן-מקצועי כתב:

פיצ'ר שבהתחלה היה פתוח לחלוטין בנטפרי, וכרגע עובד חלקית בלבד..

בדיוק כמו 'שאל את ג'מיני' ביוטיוב, שהיה פתוח גורף עד לפני שבוע, שעלו על זה וסגרו אותו לחלוטין.
ובטווח הרחוק יותר - ג'מיני בגוגל פיננס שעבר בדיוק אותו תהליך.
למרות ששניהם שימושיים מאד, ולא נראה שנטפרי מתכננים לפתוח את זה בצורה מוגבלת מתי שהוא.)

[יודע ספר]

@עניו-כמשה https://mitmachim.top/post/1215346
!!!!!

[CSS 0]

@המלאך לי הוא יעץ

[המלאך]

@CSS-0 אפשר גם בעיגול השחור בצד ימין למעלה.
זה עושה אותה פעולה,
ולמרבה האירוניה (או ההיגיון? ) אי אפשר לשמור גירסה בזמן ריצה..

[חובבן מקצועי]

Spoiler

> @צדיק-וטוב-לו-0 כתב:

ולא נראה שנטפרי מתכננים לפתוח את זה בצורה מוגבלת מתי שהוא.)

את הסוכן של גוגל אין דרך לפתוח, המחשב הווירטואלי רץ על השרתים של גוגל.. (לפי מה שאני מבין)

[י. פל.]

@המלאך כתב:

אני‌​‌‌​‌​​​​​‌ לא הצלחתי לשמור סשן בקאגל עצמו למרות שרשמית זה אחד הפלוסים העיקריים שלהם על קולאב.

בגלל שהרצת מהדף עצמו, ואז זה נסגר כשאתה סוגר.
אתה צריך לכתוב/לערוך את המחברת, לצאת, ואז השמירה מפעילה את המחברת אוטומטית, כשהתוצרים נשמרים (אא״כ כתבת אותם לtemp).
בכל מקרה, אתה יכול להתקין את חבילת הפייתון שלהם, ולבקש מהai להריץ לך, הוא וודאי יסתדר עם זה....

[המלאך]

@י.-פל. מודה שלא חשבתי על זה
אני אנסה..

[א.מ.ד.]

@עניו-כמשה כתב:

@א.מ.ד. איך מורידים ומתי יהיה זמין

מהקישור שהבאתי בפוסט...
אבל מן הסתם זה לא רלוונטי לחומרה שלך...

@יודע-ספר כתב:

@עניו-כמשה https://mitmachim.top/post/1215346
!!!!!

הוא כתב בשרשור הזה, לא השני, מה הבעיה?

[המלאך]

@א.מ.ד. כתב:

הוא כתב בשרשור הזה, לא השני, מה הבעיה?

נראה לי שניהם נכתבו בשני והועברו על ידי צ"פ לכאן..

[צדיק וטוב לו 0]

@המלאך אני כמעט בטוח שאכן כך.

[חיים שנקר]

@א.מ.ד. @המלאך @css-0 רק בשביל ההמחשה לרעיון שלי ביקשתי סיכום מGPT עבור מה אפשר לנצל מספריא עבור מודל הטמעה - לא בדקתי אפילו

Spoiler

בקיצור, עבור מודל הטמעה (Embedding) לעברית תורנית, מספריא כדאי לנצל בעיקר את שכבת הקשרים ולא רק את הטקסטים עצמם. ספריא מספקת גם טקסטים וגם מבנה של קשרים בין מקורות. (Sefaria)

הדברים החשובים ביותר:

1. קישורי מקורות (Links)

להפוך לקשרי אימון:

פסוק
 ↓
רש"י
 ↓
רמב"ן
 ↓
מדרש

שימוש:

• Positive pairs לאימון contrastive learning
• הבנת "איזה מקורות קשורים"

(Sefaria)

---

2. פירושים (Commentaries)

ליצור קשר:

טקסט בסיס
+
פירוש עליו
=
קרבה סמנטית חזקה

לדוגמה:

• תנ"ך רש"י
• גמרא תוספות
• משנה מפרשים

---

3. Topics / נושאים

להוסיף שכבת משמעות:

קטע
 ↓
נושא
 ↓
קטעים נוספים באותו נושא

לדוגמה:

שמיטה
 ├─ ויקרא
 ├─ משנה שביעית
 ├─ רמב"ם
 └─ שו"ת

(Sefaria)

---

4. Sheets (דפי מקורות)

מקורות שאנשים כבר קיבצו יחד:

מקור א
מקור ב
מקור ג

זה Dataset טבעי של "מקורות קרובים".

---

5. ציטוטים והפניות (Citations)

ללמד את המודל:

ספר מאוחר
 ↓
מצטט
 ↓
מקור קדום

לדוגמה:

שו"ת
  ↔
תלמוד

(Sefaria)

---

6. מטא־דאטה

להכניס לכל embedding:

{
 book:"",
 author:"",
 period:"",
 category:"",
 language:"",
 topics:[]
}

זה יעזור למודל להבדיל בין:

• הלכה
• אגדה
• פרשנות
• מדרש
• קבלה וכו'.

---

Dataset שהייתי בונה:

sefaria_embedding/

texts.jsonl
links.jsonl
commentaries.jsonl
topics.jsonl
sheets.jsonl
citations.jsonl
metadata.jsonl

---

סוגי זוגות אימון:

זוג חיובי:

רמב"ן בראשית א
↔
רש"י בראשית א

זוג נושאי:

הלכות שבת רמב"ם
↔
מסכת שבת

זוג ציטוט:

שו"ת אחרון
↔
מקור בגמרא

שלילי:

הלכות שבת
↔
הלכות עירובין רחוקות

---

אם מדרגים חשיבות למודל embedding:

1. Links
2. Commentaries
3. Topics
4. Sheets
5. Citations
6. Metadata

החלק הייחודי של ספריא הוא שהמודל לא ילמד רק "מילים דומות", אלא מבנה של קשרי לימוד תורניים.

[א.מ.ד.]

@חיים-שנקר מודל קטן לא יכול לקלוט את הקשר הסמנטי בין קטע תורני לנושאי כלים שעליו. רק מודל גדול ברמת ג'מיני אמבדינג שמבין היטב את המשמעות ומודע מראש להקשרים.