בקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים
-
אתמול ניסיתי להמשיך את התוכנה שבניתי עם הסיגמנטציה
לפני יומיים גוגל הוציאה תוסף כרום שמזהה כתב יד אבל רק על ידי שרבוט בזמן אמת
הורדתי את התוסף וחקרתי אותו ולא הצלחתי לבנות משהו דומה על סריקות
מה שכן אני עובדד עכשיו על תוכנה שתבצע סיגמנטציה לאלפי כתבי יד
להלן התוכנית מלמעלה:
התוכנית:- תמונות גולמיות
↓ - שיפור איכות (denoise, deskew, contrast)
↓ - חיתוך כל אות בנפרד (contour detection)
↓ - קיבוץ אותיות דומות (K-Means clustering)
↓ - תיוג 27 קבוצות בלבד! (אות לכל קבוצה)
↓ - אימון CNN classifier
↓ - זיהוי: חיתוך → זיהוי כל אות → הרכבת טקסט
- תמונות גולמיות
-
-
@shalomke כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
זה יעבוד בצורה הזו:
חילוץ וקיבוץ אותיות
python main.py segment --input data/raw --output data/segmented
תיוג (GUI פשוט - רק 27 קבוצות!)
python main.py label-clusters --dir data/segmented/clusters
אימון
python main.py train
זיהוי
python main.py predict --model models/best_model.pt --input image.png
מה עם ראשי תיבות? פיסוק? מחיקות של אותיות?
לפני שאתה מנסה לחקות את התהליך שראית בפרוג, כדאי שתחקור לעומק את הדרך אם זו בכלל באמת הדרך הנכונה לבצע את העבודה.
ושיהיה ברור: הדרך בפרוג מעניינת למדי, אבל לוקה בחסר במובנים רבים.חבל לעבוד קשה בכיוון הלא נכון. תבחר בדרך הארוכה שהיא קצרה - תכנון מסודר ומעמיק של הדרך הטובה ביותר בשלב הראשון ואז יישום שלה, במקום בחירה בדרך בעייתית שאחר כך תדרוש לחזור שוב את כל הדרך מחדש!
-
@shalomke כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
הדרך בפרוג היא אני בעצמי
אדרבה. לא יכלתי להגיב לך בפרוג, כי אין לי הרשאות בקבוצת המעמדים.
הדרך שלך מעניינת מאוד ומקורית, הפתרון שלך כדי לפתור את בעיית איסוף הדאטה באמת גאוני
(חשבתי על העניין בעבר ולא מצאתי פתרון יעיל שלא יצריך המון כותבים אנושיים שיעזרו...)
למרות זאת, נראה שכדאי לבצע כמה שיפורים בה כדי לעשות אותה טובה עוד יותר -
@shalomke יש לי שאלה.
אתה מחפש דרך לאמן דווקא כתב של מישהו ספציפי, או זיהוי מרובה כתבים?
כי אני לא רואה איך זה יצליח על הרבה כתבים, במידה ואתה מאמן אות אות - בלי זיהוי של 'התמונה המלאה'.
(הרי ה'ב' שלך היא ה'ד' שלי) -
@shalomke יש לי שאלה.
אתה מחפש דרך לאמן דווקא כתב של מישהו ספציפי, או זיהוי מרובה כתבים?
כי אני לא רואה איך זה יצליח על הרבה כתבים, במידה ואתה מאמן אות אות - בלי זיהוי של 'התמונה המלאה'.
(הרי ה'ב' שלך היא ה'ד' שלי)@צדיק-וטוב-לו-0 אני עדיין לומד את התחום
אני מתלבט בין אימון על כתבי יד מרובים או אימון אינדבדואלי -
@צדיק-וטוב-לו-0 אני עדיין לומד את התחום
אני מתלבט בין אימון על כתבי יד מרובים או אימון אינדבדואלי -
@shalomke
אני כל כך שמח שאתה מגיב פההאם יש סיכוי שתסכים להעלות פה את מה שעשית עד כה?
אולי נוכל לעזור לך לפתח את זה עוד!
יש כאן המון מתנדבים שישמחו לעזור בכזה דבר חשוב!נ"ב: בשלב ראשון אני רוצה לנסות אימון אישי ולראות כמה דאטה זה דורש
-
@אלף-שין אני מת שמישהו שישתף איתי פעולה
רק אני לא רוצה להעלות קבל עם ועדה את כל הקוד
בכיף אפשר לפנות אלי בפרטי shalomkf@gmail.com
0548481658 -
@צדיק-תמים כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
@NH.LOCAL כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
מדובר על זיהוי וסגמנטציה של תמונות, שלא זמינה כרגע בג'מיני 3.0
נו, ומי אמר שחייבים להשתמש ב3
ג'מיני 3 זה המודל הראשון עד כה שמצליח לזהות טקסט כתב יד בעברית באופן טבעי.
אמנם הוא רחוק מלהיות מאה אחוז, במיוחד בכתב צפוף ועמוס, אבל יכול לעזור באימון מודללמעשה, אתה צודק שבהקשר לקישור שהובא מפרוג, אז הקישור למודל סגמנטציה הוא באמת הפתרון המתאים.
אבל עבור סגמנטציה עדיף כבר למשתמש ב-SAM3, עם רמת דיוק גבוהה בהרבה וזול משמעותית@אלף-שין כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
לאור ההתקדמויות הגדולות בתחום הAI
אבקש ממי שיכול לבקש מגמיני 3 סקריפט שיעשה מה שרואים בקישור הבא
https://www.prog.co.il/threads/הדרך-לתוכנת-ocr-לכתב-יד-עברי-עוברת-דרך-כאן.1051354/post-14939550
[תסתכלו בכל המצגות שם מתחילתם עד סופם]
זה יכול להיות פתח למהפך גדול והיסטורי שייזכר לדורות!בהקשר לקישור שהובא מפרוג. יש לציין שהיעילות של הדרך שלו נמוכה מאוד, וכנראה לא תהיה שווה הרבה כל עוד הוא לא יאמן אותה על כמות דאטה עצומה ועל כמות נרחבת של כתבי יד שונים
@NH.LOCAL כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
ג'מיני 3 זה המודל הראשון עד כה שמצליח לזהות טקסט כתב יד בעברית באופן טבעי.
באמת?
אפשר דוגמאות?
באיזה כלי ומה הפרומפט?
@NH.LOCAL כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
אבל עבור סגמנטציה עדיף כבר למשתמש ב-SAM3, עם רמת דיוק גבוהה בהרבה וזול משמעותית
מה זה? אפשר קישור? האם יש אופציה לסגמנטציה אופליין? [נניח ספריית פייתון מוכנה...]
@NH.LOCAL כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
למרות זאת, נראה שכדאי לבצע כמה שיפורים בה כדי לעשות אותה טובה עוד יותר
נשמח מאד שתפרט יותר...
מי יודע אולי עוד כמה חודשים נחזה בהשלמת המהפך שהתחיל כאן
תחשבו על היום שבו כל הדברים הבאים יושלמו:1] OCR כתבי יד עברית [זהו הפרוייקט הנוכחי, לאחר ניסויים בעבר שלא צלחו לדוגמא זה כעת נראה שאנו במסלול הנכון...],
2] AI תורני רציני ומשמעותי [לא בשביל לסמוך, אלא כביקורת ומראי מקומות וכדו'] [יש כמה שעובדים על זה במקביל]
3] תמלול תורני [כבר קיים ומושלם בס"ד "אלף בוט"!, לאט לאט הציבור יקלוט את עוצמת הבשורה!]
מכאן הדרך קצרה לעוד המון דברים טובים!
-
שלב ראשון
עכשיו צריך להוסיף אופציה להכניס לו כמויות של מסמכים לתיוג
ואח"כ יגיע שלב האימון -
@shalomke כדאי לך לנסות לבקש שיתו"פ עם תורה דיליה.
יש להם דאטה עצום של כתבי יד+הקלדות מדוייקות של זה. -
@shalomke כדאי לך לנסות לבקש שיתו"פ עם תורה דיליה.
יש להם דאטה עצום של כתבי יד+הקלדות מדוייקות של זה. -
@shalomke
לא יודע מה זה. -
@shalomke כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
יש דאטה בייס עצום בארכיון של המדינה
@צדיק-וטוב-לו-0 כתב בבקשה | מי יכול לבקש מגמיני סקריפט שיבצע מהפכה.... פרטים בפנים:
@shalomke
לא יודע מה זה.מן הסתם מוטב מראש לאמן על כתבי יד תורניים....
 { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}