הצעת ייעול | קונספט חדש לפרוייקט השו״ת
-
@לא-מתייאש יש לעשות לדוגמה אפשרות לקיצורי מקשים לחיפוש
יש חיפוש חכם (בבר אילן יש כמה 1 חיפוש מדויק עם החרגות 2 חיפוש טקסט חופשי ועוד -
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
אתה יודע מה זה FRAMEWORK ?
הכל טוב ויפה אם ההתמזל מזלך ויש לך את כל מה שצריך בframework וזה אם גדול....
אגב להמיר הכל לsqlite ולא להשתמש במונגו כמו שהם עשו?
-
@pcinfogmach כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
אתה יודע מה זה FRAMEWORK ?
הכל טוב ויפה אם ההתמזל מזלך ויש לך את כל מה שצריך בframework וזה אם גדול....
לא קשור למזל, למדתי ואני ממשיך ללמוד. רק שבדקתי טוב טוב מה שאני צריך לפני שאתחיל ללמוד, כדי לוודא שאני לומד את הדבר הנכון שמספק את הצרכים שלי.
אגב להמיר הכל לsqlite ולא להשתמש במונגו כמו שהם עשו?
אני לא מכיר דרך להשתמש במאגר מונגו באפליקצייה לוקלית, זה עשוי להיות על שרת. אני לא הולך עכשיו להתחיל לעשות סוג של קומבינה כזאת שיפעיל שרת מונגו ברקע בלוקלי, אני שונא קומבינות, כי לא מגיעים עם זה לאף מקום. הדרך המקובלת כדי לאחסן נתונים בלוקלי זה SQLITE, ככה כולם עושים ויש סיבות לזה.
-
המילים דלהלן לא קשורים כל כך לשרשור ולכן הם בסוגריים
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:לא קשור למזל, למדתי ואני ממשיך ללמוד. רק שבדקתי טוב טוב מה שאני צריך לפני שאתחיל ללמוד, כדי לוודא שאני לומד את הדבר הנכון שמספק את הצרכים שלי.
זה ויכוח קצת מצחיק אין framework מושלם מה שהתאים בול למשימה אחת בכלל לא מתאים למשימה אחרת. אבל אני כן מסכים שייתכן בגדול לבחור framework טוב יותר מאחרים.
-
@pcinfogmach @לא-מתייאש בהמשך לדיון על מסד הנתונים של ספריא, התחלתי לעבוד על המרה לSQLite, וזה באמת המון עבודה. גיליתי שיש שם כל כך הרבה דאטה, שזה פשוט לא לעניין לא להשתמש בזה, אבל מצד שני זה גם לא פשוט בכלל לחלץ כל כך הרבה מידע.
בינתיים חילצתי להדגמה רק כמה נתונים בסיסיים ממש:
לצורך העבודה השתמשתי בעיקר בספריית pandas (הרי אני כיום מתיימר להיות מדען נתונים),וגם קצת בaggragation של MongoDB.
העליתי את הקוד של ההמרה לגיטהאב.
ואת המסד נתונים עצמו אני אעלה בהמשך להגי פייס.אבל יש עוד הרבה מאד עבודה עד שזה יהיה ראוי לשימוש אפילו מינימלי.
מה שחסר במיוחד כרגע, זה כל השמות בעברית. יש אותם כמובן במסד נתונים, אבל צריך לחלץ אותם מעומק העץ של MongoDB. -
@sivan22 לא מבין כלום בענייני מסדי נתונים, אבל ראיתי שיש לספריא כבר משהו לsql
https://github.com/Sefaria/Sefaria-SQL
יש להם גם משהו למונגו db
https://github.com/Sefaria/Sefaria-Export
יש להם עוד כמה מאגרים
https://github.com/Sefaria -
פוסט זה נמחק!
-
-
-
@sivan22 כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@מישהו12 למעשה חשבתי שהפרוייקט בספריא לא מתוחזק, וייקח לי יותר זמן לגרום לו לעבוד מאשר לעשות את זה לבד. אבל אתמול דווקא ניסיתי אותו ונראה די מבטיח, עדכונים בעזרת ה' בהמשך.
בדקתי, חוץ ממונגו, יש להם את הכל המאגר בJSON, לא אמור להיות כזה קשה לעשות סקריפט שימיר הכל לSQLITE, הרבה פחות ממה שחשבתי וודאי.
אני ממש עמוס כרגע, אבל מקווה שחודש הבא אוכל לבדוק יותר ברצינות. יתכן שבסוף COMPOSE יותר מתאים מFLUTTER.
אני צריך לחשוב על זה, כי כאן זה חשוב שנוכל לפתוח גם כמה חלונות, אני לא יודע עד כמה זה נתמך בFLUTTER. -
@לא-מתייאש הצלחתי בסוף להמיר דרך הקוד שלהם [שבאמת עובד על הJSON]: https://github.com/Sefaria/Sefaria-SQL
עם קצת מניפולציות בקוד.
[כרגע הלינקים עדיין לא עובד, צריך עוד טיפה עבודה, אבל זה בהחלט נראה בכיוון הנכון, והרבה פחות עבודה ממה שהיה נראה] -
@sivan22 כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@לא-מתייאש הצלחתי בסוף להמיר דרך הקוד שלהם: https://github.com/Sefaria/Sefaria-SQL
עם קצת מניפולציות בקוד.
[כרגע הלינקים עדיין לא עובד, צריך עוד טיפה עבודה, אבל זה בהחלט נראה בכיוון הנכון, והרבה פחות עבודה ממה שהיה נראה]יפה מאוד ! לא חשבתי שהיו הולכים לעשות את זה ביומיים ! בין כה אמרתי שחודש הזה זה לא יהיה, אבל חודש הבא כן אוכל להתחיל ב"ה.
חשבתי קצת ועדיף להתמקד על ממשק למחשבים לחוד ולהתחיל איתו. -
אני חושב שגם צריך לשלב קורא PDF שכל אחד יוכל להוסיף את הספרים שלו בתוך האפליקצייה. כך נוכל להנות יותר מאתרים כמו hebrewbooks. את האמת שיש לי יותר מוטיבצייה לעשות את זה מקיידרואיד, כי אני גם צריך אפליקצייה כזאת
אני בכלל על הלינוקס ואין כלום. בין שעשה את זה עם FLUTTER או COMPOSE, נרוויח גם ווינדוס, דם מאק, וגם לינוקס. אבל זה הרבה יותר קל מקיידרואיד, לא לפחד, זה עניין של הפסקה של שבוע, אוליי 2 אם אני הולך לעשות דברים יותר מורכבים. -
@לא-מתייאש חשבתם על לפתוח התרמה כמו שעשה @הפצת-אנקי ?
כל הצדדים ירוויחו -
@יוסי-מחשבים כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@לא-מתייאש חשבתם על לפתוח התרמה כמו שעשה @הפצת-אנקי ?
כל הצדדים ירוויחואני אף פעם לא כ"כ האמנתי בתרומות
אבל אני לא נגד 
-
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
לינוקס ואין כלום
יש אורייתא, אבל זה באמת קטן.
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
כך נוכל להנות יותר מאתרים כמו hebrewbooks.
אם תמצאו דרך להוריד את כל המאגר של היברובוקס לתוכנה מראש, או למצער לעשות חיפוש מובנה בתוך התוכנה בהיברובוקס עם לחצן הורדה זה בכלל יהיה מטורף...
-
@מישהו12 כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
כך נוכל להנות יותר מאתרים כמו hebrewbooks.
אם תמצאו דרך להוריד את כל המאגר של היברובוקס לתוכנה מראש, או למצער לעשות חיפוש מובנה בתוך התוכנה בהיברובוקס עם לחצן הורדה זה בכלל יהיה מטורף...
כבר בדקתי ומצאתי endpoint של הapi שלהם, כך שטכני אין שום בעייה, רק שזה הגד הכללים של האתר, צריך לבקש מהם אישור
-
@מישהו12 כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
כך נוכל להנות יותר מאתרים כמו hebrewbooks.
אם תמצאו דרך להוריד את כל המאגר של היברובוקס לתוכנה מראש, או למצער לעשות חיפוש מובנה בתוך התוכנה בהיברובוקס עם לחצן הורדה זה בכלל יהיה מטורף...
רוב ספרי היברו בוקס במצב קריאה, שגם רובוט AI לא יזהה...
וברצינות: יש הבדל בין ספר יחסית חדיש, שבקלות ניתן לבצע בו חיפוש, לבין חלק גדול ממאגר היברובוקס, שהם ספרים ישנים מאוד. -
@צדיק-וטוב-לו-0 כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@מישהו12 כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
@לא-מתייאש כתב בהצעת ייעול | קונספט חדש לפרוייקט השו״ת:
כך נוכל להנות יותר מאתרים כמו hebrewbooks.
אם תמצאו דרך להוריד את כל המאגר של היברובוקס לתוכנה מראש, או למצער לעשות חיפוש מובנה בתוך התוכנה בהיברובוקס עם לחצן הורדה זה בכלל יהיה מטורף...
רוב ספרי היברו בוקס במצב קריאה, שגם רובוט AL לא יזהה...
וברצינות: יש הבדל בין ספר יחסית חדיש, שבקלות ניתן לבצע בו חיפוש, לבין חלק גדול ממאגר היברובוקס, שהם ספרים ישנים מאוד.גם אם לא יהיה חיפוש בתוך הספרים אלא רק בשמות זה כבר יעיל.
![חיפוש גוגל בפורום](javascript:{bootbox.prompt({title:'<div style="text-align: center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400"></div>',placeholder:'כתוב מילים לחיפוש ב Google',buttons:{confirm:{label:'חיפוש'},cancel:{label:'ביטול'}},backdrop:true,callback:function(result){if(result!=null&&result!=''){var a=document.createElement('a');a.href='https://www.google.co.il/search?q=site:mitmachim.top '+encodeURIComponent(result.trim());a.target='_blank';a.click();}}})();};){kind=link}