בקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!
-
בשביל כזה פרויקט יש בזה 2 שלבים עיקריים
שלב א' - זיהוי גבולות ההטקסט - כלומר שבאמצעות איזה שיטה ספריית קוד או מודל מאומן - יזוהה איזור הטקסט, אם קיימים מספר עמודות וגבולותיהם, יזוהו הגבולות השורות, וגבולות המילים, וגבולות האותיות - כולל ישור הדף לסריקה או כתיבה עקומה. וסדר מימין לשמאל.
ברגע שיש את גבולות האותיות ניתן לעבור לשלב ב'.
שלב ב' - מודל שיכול לקבל קטל של תמונת אות ותת פלט של איזה אות זה .
בשביל לבנות מודל צריך שיהיה דוגמיות מכל סוג צריך כמות של עשרות מכל אות וזה מספיק למודלים טובים.
---בכדי לבנות משהו שיכול לעבוד על מחשב ממוצע של אברייכים - רצוי לבנות מודל שיכול לעבוד בכו סביבה.אחרי השלבים האלו - ניתן לכתוב קוד שיבצע את השלבים בזה אחר זה ויתן פלט - לעשות ממשק נח שיכולים להוסיף דרכו עוד דוגמיות למודל עצמו, וכך מתוך הכתב יד הספציפי שאתה רוצה לפענח יש ממנו דוגמיות במודל, ולכן זה יעבוד בקרוב ל מאת האחוזים על כל כתב יד.
[כמו כן ניתן לעשות שיהיה ויזאליזציה ומספור - שתראה את סדר העמודות והשורות והמילים בכל שורה. כך שאם זיהוי הגבולות לא יהיה מדויק תוכל לתקן אותו באמצעות העכבר]
לשלב א' ניתן להשתמש אפי' בספריית פיתון OpenCV, [יש עוד ספריות תומכות בפעולות כאלו אבל זה טוב מספיק].
לשלב ב' עדיף לבנות מודל לפחות EfficientNet-B0.
ויש לציין שיהיה צורך להשתמש בPyTorch או PyQt5 ועוד כלים [לפחות בnumpy torch torchvision matplotlib pandas pyqt5] בכדי להוסיף דיוק
[ועדיף שהדוגמית עצמם של האותיות לא יהיו חתוכים במרובע רק בפוליגון]
(קל לבנות מודל מדוגמיות שנבנו בתוכנה שמתאימה לבניית דוגמאות לזה - כמו Label Studio (ניתן לעשות שם ממשק נח לעשות תיוג) או אפי' VGG Image Annotator - יש יצוא מסודר ובנוי לזה)
[ויש אפשרות לבנות עם TrOCR ואז זה שני השלבים יחד רק צריכים להשתמש בדוגמיות של עברית שקיימות בגיטהב וכדו' ולהתאים לעברית]באם זה לא מובן דיו - תוכל לשאול כל מודל על טקסט זה רק תכתוב לו כך "אני רוצה לבנות תוכנה עם ממשק ידידותי שמתאים לוינדוס - ויעבוד במחשב סטנדרטי באופן מקומי - ויפענח כתב יד בעברית.
לפניך איזה תכנית תעזור להבין אותה ואיך ליישם אותה".
ותצרף את הנ"ל ותראה פלאים. -תוך כמה שעות זה יהיה בנוי....@SBW
לא ולא,
אין שום ענין שזה יעבוד על מחשב של אברך
עיין ערך מודל תמלול של דיקטה שמיועד למחשבי אברכים
עדיף שיהיה משהו עוצמתי ומדוייק מאד
גם אם זה דורש שרת ויהיה בתשלום מלא [רק פחות מקלדנית כמובן...]
טוב ציפור אחת ביד מאשר דימיונות על העץהמחשב נועד לשרת את האדם ולא האדם את המחשב
-
@SBW
לא ולא,
אין שום ענין שזה יעבוד על מחשב של אברך
עיין ערך מודל תמלול של דיקטה שמיועד למחשבי אברכים
עדיף שיהיה משהו עוצמתי ומדוייק מאד
גם אם זה דורש שרת ויהיה בתשלום מלא [רק פחות מקלדנית כמובן...]
טוב ציפור אחת ביד מאשר דימיונות על העץ -
@SBW
לא ולא,
אין שום ענין שזה יעבוד על מחשב של אברך
עיין ערך מודל תמלול של דיקטה שמיועד למחשבי אברכים
עדיף שיהיה משהו עוצמתי ומדוייק מאד
גם אם זה דורש שרת ויהיה בתשלום מלא [רק פחות מקלדנית כמובן...]
טוב ציפור אחת ביד מאשר דימיונות על העץ -
@SBW כתב בבקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!:
@975
כמעט דייקת - מה שצריך באמת זה זה https://huggingface.co/datasets/sivan22/hebrew-handwritten-dataset
@sivan22 כבר הכין את זה עם מאות דוגמאות לכל אותלא נכון, מה שצריך באמת זה את המאגר השני, ואפילו הוא לא מספיק טוב כיוון שהוא לא כולל מעברי שורות.
באימון על אותיות יחידות בלבד הרמה תהיה ס"ה כמו לאמן ABBYY על הרבה אותיות, כלומר, לא מידי מדוייק, ולא מתקרב לרמה של למידת מכונה איכותית
-
@ע-ה-דכו-ע
לא מדויק כלל
EfficientNet זה מודל למידת מכונה עמוקה.
תעשה בירור
מודל יעודי הוא עדיף עשרת מונים על מודל שיש לו יכולות נוספות.
במקרה רגיל אימון מודל זה מורכב אבל בשביל 27 אותיות עם כמה סימוני פסיק - לבנות מודל כזה מאפס זה די קל.@SBW כתב בבקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!:
@ע-ה-דכו-ע
לא מדויק כלל
EfficientNet זה מודל למידת מכונה עמוקה.
תעשה בירורמדוע זה הופך את מה שאמרתי ללא מדוייק?
-
@SBW כתב בבקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!:
@אלף-שין אני מכיר קלדנים שזה מה שהם עושים.
וזה עובד יפה מאוד.מה? המודל של דיקטה?
@ע-ה-דכו-ע
לא הם בנו לבד לבד מודל EfficientNet -
@אלף-שין
האם יש חדש בנושא ?
אני עוקב, וכבר זמן רב שאין התקדמות
יצויין, אין לי מה לתרום, כיון שאיני מבין כלל בנושא, אבל יש לי צורך בכך.
אשמח לעדכון -
@אלף-שין
האם יש חדש בנושא ?
אני עוקב, וכבר זמן רב שאין התקדמות
יצויין, אין לי מה לתרום, כיון שאיני מבין כלל בנושא, אבל יש לי צורך בכך.
אשמח לעדכון -
אני מציע שאני אקים שרת שבו כל אחד יכול להעלות את כתב ידו
תהיה אפשרות לחלוקה אוטומטית ותיוג אוטומטי של אותיות לקבוצות
המשתמש יצטרך לענות על כל קבוצה איזו אות היא וכך המודל ישתפר לאט לאט
את הקוד אני אפרסם בגיטהאב
אני רק צריך לחשוב על פתרון היכן לאחסן את הדאטה בייס
מבלי שאני אצטרך לשלם עליו
בסופו של דבר התוכנה תהיה פתוחה לציבור -
hebrew_ocr_system_88d4623b.plan.pdf
הציבור מוזמן לקרוא את התוכנית ולהציע שינויים -
hebrew_ocr_system_88d4623b.plan.pdf
הוספתי לתוכנית חידוד התמונות לפני אימון -
hebrew_ocr_system_88d4623b.plan.pdf
הוספתי לתוכנית חידוד התמונות לפני אימון -
hebrew_ocr_system_88d4623b.plan.pdf
הוספתי לתוכנית חידוד התמונות לפני אימון -
@shalomke כתב בבקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!:
hebrew_ocr_system_88d4623b.plan.pdf
הוספתי לתוכנית חידוד התמונות לפני אימוןזה לא נפתח לי, אולי הבעיה בנטפרי.
-
@ע-ה-דכו-ע כתב בבקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!:
תגדיר בהגדרות סינון בנטפרי שלא יהיה אזהרה על שיבוש קבצים
אני על סינון של משהו אחר, ולכן אני לא יכול לשנות את הגדרות הסינון, מה הבעיה להעלות את הקובץ הזה לפורום?
-
אני מציע שאני אקים שרת שבו כל אחד יכול להעלות את כתב ידו
תהיה אפשרות לחלוקה אוטומטית ותיוג אוטומטי של אותיות לקבוצות
המשתמש יצטרך לענות על כל קבוצה איזו אות היא וכך המודל ישתפר לאט לאט
את הקוד אני אפרסם בגיטהאב
אני רק צריך לחשוב על פתרון היכן לאחסן את הדאטה בייס
מבלי שאני אצטרך לשלם עליו
בסופו של דבר התוכנה תהיה פתוחה לציבור@shalomke בכל אופן, עם ישראל עומד מאחוריך , אם זה יצליח והלוואי שזה יצליח זה יהיה אחד המהפכות הכי חזקות והכי רציניות בעולם התורה, זה פשוט יעשה הסטוריה, רק לשם המחשה היום סיפרתי לכמה חברים שעובדים על כזו תוכנה, אתה צריך לראות את ההתרגשות שהייתה בקרב הקהל על זה, אתה חייב, אבל חייב להצליח!!!!
-
hebrew_ocr_system_88d4623b.plan.pdf
הוספתי לתוכנית חידוד התמונות לפני אימון@shalomke כתב בבקשה | פיתוח זיהוי כתב יד בעברית יוצא לדרך! בואו והצטרפו!:
הדף מוציא שגיאה 403
גם לי לא נפתח, גם לא בחלוון גלישה בסתר שבדרך כלל מועיל בנטפרי
 { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}