להורדה | ספריא מסונן - מסד נתונים של sqlite

[sivan22]

בהמשך לפרוייקט של סינון ספריא, אני מעלה כאן קישור למסד הנתונים של ספריא, מסונן, רק עם ספרים בעברית, בפורמט sqlite.

ניתן להוריד קורא קבצי sqlite מכאן.

להלן מידע כללי על תוכן מסד הנתונים:

מספר הספרים הכולל: 5669
מספר קטעי הטקסט: 2,936,539
מספר הקישורים בין קטעי טקסט: 2,655,954

הטבלאות

• books - הספרים, שמם באנגלית ובעברית, ומידע נוסף.
• texts - הטסקטים, עם מזהה הספר המקושר לטבלת הספרים, וכן מספור הקטע השורה הדף וכדומה.
• links - הקישורים בין הטסקטים השונים, מזהה טקסט למזהה טקסט, וכן סוג הקשרים.
• nodes - מבנה הספר לספרים מורכבים (ראה להלן). וכן מבנים נוספים לספרים שיש להם חלוקה נוספת (כגון חומש לפרשיות, ירושלמי לדפי וילנא ודפי ונציה
• searchings - אינדקס עבור חיפוש לפי מילים.

מבנה הספרים בספריא

חשוב להבין את מבנה הספרים בספריא:

• ספרים פשוטים - מחולקים לכמה רמות של חלוקה, לדוגמה שס בבלי מחולק לפי עמוד, שורה. רשי על החומש מחולק לפי פרק, פסוק, פירוש. את שמות הקטעים ["פרק", "פסוק"] ניתן למצוא בטבלה books. ואת מספור הקטעים ניתן למצוא בטבלה texts, כאשר level_1 הוא החלוקה הנמוכה ביותר (שורה בגמרא, פירוש ברש"י).
• ספרים מורכבים - מחולקים לחלקים שונים בספר (הקדמה, על אורח חיים, על חושן משפט, נספח) כאשר כל חלק בספר מחולק לרמות שונות של חלוקה כמו ספר פשוט (לדוגמה ההקדמה מחולקת לפסקאות, על אורח חיים מחולק לסימן, סעיף, סעיף קטן).

במסד הנתונים מבנה הספר המורכב נמצא בטבלה nodes. לכל טקסט בטבלה texts ששייך לספר מורכב קיים parentNode שהוא מזהה שמשייך אותו לרשומה בטבלה node בה נמצא שם החלק בספר, ולאותה רשומה ישנו גם כן מאפיין parentNode שמשייך אותו לרמה מעליו, עד לרמה הגבוהה ביותר שם parentNode שווה לאפס.

כמו כן גם לספרים פשוטים קיימים מבנים נוספים של חלוקה, והם מופיעים בטבלה nodes.

[לא-מתייאש]

@sivan22 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

בהמשך לפרוייקט של סינון ספריא, אני מעלה כאן קישור למסד הנתונים של ספריא, מסונן, רק עם ספרים בעברית, בפורמט sqlite.

ניתן להוריד קורא קבצי sqlite מכאן.

להלן מידע כללי על תוכן מסד הנתונים:

מספר הספרים הכולל: 5669
מספר קטעי הטקסט: 2,936,539
מספר הקישורים בין קטעי טקסט: 2,655,954

הטבלאות

• books - הספרים, שמם באנגלית ובעברית, ומידע נוסף.
• texts - הטסקטים, עם מזהה הספר המקושר לטבלת הספרים, וכן מספור הקטע השורה הדף וכדומה.
• links - הקישורים בין הטסקטים השונים, מזהה טקסט למזהה טקסט, וכן סוג הקשרים.
• nodes - מבנה הספר לספרים מורכבים (ראה להלן). וכן מבנים נוספים לספרים שיש להם חלוקה נוספת (כגון חומש לפרשיות, ירושלמי לדפי וילנא ודפי ונציה
• searchings - אינדקס עבור חיפוש לפי מילים.

מבנה הספרים בספריא

חשוב להבין את מבנה הספרים בספריא:

• ספרים פשוטים - מחולקים לכמה רמות של חלוקה, לדוגמה שס בבלי מחולק לפי עמוד, שורה. רשי על החומש מחולק לפי פרק, פסוק, פירוש. את שמות הקטעים ["פרק", "פסוק"] ניתן למצוא בטבלה books. ואת מספור הקטעים ניתן למצוא בטבלה texts, כאשר level_1 הוא החלוקה הנמוכה ביותר (שורה בגמרא, פירוש ברש"י).
• ספרים מורכבים - מחולקים לחלקים שונים בספר (הקדמה, על אורח חיים, על חושן משפט, נספח) כאשר כל חלק בספר מחולק לרמות שונות של חלוקה כמו ספר פשוט (לדוגמה ההקדמה מחולקת לפסקאות, על אורח חיים מחולק לסימן, סעיף, סעיף קטן).

במסד הנתונים מבנה הספר המורכב נמצא בטבלה nodes. לכל טקסט בטבלה texts ששייך לספר מורכב קיים parentNode שהוא מזהה שמשייך אותו לרשומה בטבלה node בה נמצא שם החלק בספר, ולאותה רשומה ישנו גם כן מאפיין parentNode שמשייך אותו לרמה מעליו, עד לרמה הגבוהה ביותר שם parentNode שווה לאפס.

כמו כן גם לספרים פשוטים קיימים מבנים נוספים של חלוקה, והם מופיעים בטבלה nodes.

ישר כוח גדול

[אהרן]

@sivan22 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

בהמשך לפרוייקט של סינון ספריא, אני מעלה כאן קישור למסד הנתונים של ספריא, מסונן, רק עם ספרים בעברית, בפורמט sqlite.

ניתן להוריד קורא קבצי sqlite מכאן.

להלן מידע כללי על תוכן מסד הנתונים:

מספר הספרים הכולל: 5669
מספר קטעי הטקסט: 2,936,539
מספר הקישורים בין קטעי טקסט: 2,655,954

הטבלאות

• books - הספרים, שמם באנגלית ובעברית, ומידע נוסף.
• texts - הטסקטים, עם מזהה הספר המקושר לטבלת הספרים, וכן מספור הקטע השורה הדף וכדומה.
• links - הקישורים בין הטסקטים השונים, מזהה טקסט למזהה טקסט, וכן סוג הקשרים.
• nodes - מבנה הספר לספרים מורכבים (ראה להלן). וכן מבנים נוספים לספרים שיש להם חלוקה נוספת (כגון חומש לפרשיות, ירושלמי לדפי וילנא ודפי ונציה
• searchings - אינדקס עבור חיפוש לפי מילים.

מבנה הספרים בספריא

חשוב להבין את מבנה הספרים בספריא:

• ספרים פשוטים - מחולקים לכמה רמות של חלוקה, לדוגמה שס בבלי מחולק לפי עמוד, שורה. רשי על החומש מחולק לפי פרק, פסוק, פירוש. את שמות הקטעים ["פרק", "פסוק"] ניתן למצוא בטבלה books. ואת מספור הקטעים ניתן למצוא בטבלה texts, כאשר level_1 הוא החלוקה הנמוכה ביותר (שורה בגמרא, פירוש ברש"י).
• ספרים מורכבים - מחולקים לחלקים שונים בספר (הקדמה, על אורח חיים, על חושן משפט, נספח) כאשר כל חלק בספר מחולק לרמות שונות של חלוקה כמו ספר פשוט (לדוגמה ההקדמה מחולקת לפסקאות, על אורח חיים מחולק לסימן, סעיף, סעיף קטן).

במסד הנתונים מבנה הספר המורכב נמצא בטבלה nodes. לכל טקסט בטבלה texts ששייך לספר מורכב קיים parentNode שהוא מזהה שמשייך אותו לרשומה בטבלה node בה נמצא שם החלק בספר, ולאותה רשומה ישנו גם כן מאפיין parentNode שמשייך אותו לרמה מעליו, עד לרמה הגבוהה ביותר שם parentNode שווה לאפס.

כמו כן גם לספרים פשוטים קיימים מבנים נוספים של חלוקה, והם מופיעים בטבלה nodes.

למי שיש פרוייקט השו"ת [29], יש ספרים שקיימים בספריא ולא בשו"ת?

[מישהו12]

@sivan22 וואו! ישר כוח!
@לא-מתייאש נראה עכשיו את התוכנה שלך לזה?

[לא-מתייאש]

@מישהו12 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@לא-מתייאש נראה עכשיו את התוכנה שלך לזה?

[יעקב11]

@sivan22 סליחה על השאלה, אבל זה יכול לבא לידי שימוש באנדרואיד?

[gogo]

למה זה לא פתוח בנטפרי

Spoiler

[אהרן]

@אהרן כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

למי שיש פרוייקט השו"ת [29], יש ספרים שקיימים בספריא ולא בשו"ת?

@sivan22 ?

[לא-מתייאש]

@יעקב11 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@sivan22 סליחה על השאלה, אבל זה יכול לבא לידי שימוש באנדרואיד?

וודאי, SQLITE זה הבסיס באנדרואיד

[יעקב11]

@לא-מתייאש לא נעים לי לבקש הדרכה, אבל ממש חשוב לי השימוש בספריא, תוכל לזרוק לי כמה מילים, לשימוש בטאבלט?

[לא-מתייאש]

@יעקב11 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@לא-מתייאש לא נעים לי לבקש הדרכה, אבל ממש חשוב לי השימוש בספריא, תוכל לזרוק לי כמה מילים, לשימוש בטאבלט?

צריך שמישהו יקים אפליקצייה מבוססת על המאגר נתונים הזה (אוליי אני מי יודע חחח, קודם כל שאתחיל על המחשבים ואח"כ נראה), אבל אין כ"כ הדרכה לזה, זה לא PDF שניתן לקראו אותו דרך אפליקצייה

[יעקב11]

@לא-מתייאש הבנתי, תודה.

[sivan22]

@לא-מתייאש כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@יעקב11 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@sivan22 סליחה על השאלה, אבל זה יכול לבא לידי שימוש באנדרואיד?

וודאי, SQLITE זה הבסיס באנדרואיד

האמת שבדקתי את זה ולמעשה הם לא משתמשים כיום בכלל בsqlite באנדרואיד, אלא בקבצי json כאלו: Genesis.zip

לכל ספר יש אינדקס, וגם כל הלינקים בתוך המקום שלהם בספר!

וזה הקובץ שהוא האינדקס הכללי של הספרים: toc.json

וזה בערך המבנה של הספרייה:

זאת אומרת בסוף הם משתמשים בnoSQL כי הם בנויים לקבל מהשרת את התוצאות, רק שיש גם אפשרות להוריד את הספריה.

[לא-מתייאש]

@sivan22 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@לא-מתייאש כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@יעקב11 כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

@sivan22 סליחה על השאלה, אבל זה יכול לבא לידי שימוש באנדרואיד?

וודאי, SQLITE זה הבסיס באנדרואיד

האמת שבדקתי את זה ולמעשה הם לא משתמשים כיום בכלל בsqlite באנדרואיד, אלא בקבצי json כאלו: Genesis.zip

לכל ספר יש אינדקס, וגם כל הלינקים בתוך המקום שלהם בספר!

וזה הקובץ שהוא האינדקס הכללי של הספרים: toc.json

וזה בערך המבנה של הספרייה:

זאת אומרת בסוף הם משתמשים בnoSQL כי הם בנויים לקבל מהשרת את התוצאות, רק שיש גם אפשרות להוריד את הספריה.

תודה רבה על העבודה המדימה שלך, לא התכוונתי על מה שהם עושים כיום, אלא שבדרך כלל אפליקציות אנדרואיד זה SQLITE, זה בכלל לא NOSQL או קבצי JSON.

[תודה לבורא עולם]

@sivan22 נשמח להדרכה בסיסית איך להציג את הספרים בתוכנה.
כמובן הורדתי את המאגר ואת התוכנה.
ראיתי כל מה שכתבת על מבנה הספרים אך לא הצלחתי להבין איך פותחים ספר.
תודה !!

[צדיק תמים]

@תודה-לבורא-עולם אין פה משהו מעשי כרגע
תבדוק את זה: https://mitmachim.top/topic/59148/להורדה-תוסף-חדש-לתורת-אמת-מאגר-הספרים-של-ספריא-ודיקטה

[דאנציג]

@אהרן כתב בלהורדה | ספריא מסונן - מסד נתונים של sqlite:

למי שיש פרוייקט השו"ת [29], יש ספרים שקיימים בספריא ולא בשו"ת?

כן!
כרגע אני לא זוכר את כולם, אבל:

1. חלק מפרשני מדרש רבה.
2. כל ספרי הקבלה [חוץ מזוהר הקדוש ופירוש הסולם].
3. סידורי תפילה ומחזורים סליחות הגדה של פסח, ופרשניה (כן סידור פשוט - אין בפרוייקט השו"ת).

וישנם עוד כמה ספרים, ואפילו חשובים, אם זה חשוב לך תעדכן אותי, ואני אבדוק.