תוכנת זיהוי OCR לכתב יד גירסה V2 שידרוגים משמעותיים ביותר!!!
-
דבר ראשון תודה רבה וענקית על התוכנה, היא מזהה לי כתב ממש קשה ברמה של 90% ויותר!!!
יש מילים שאפי' אני לא מצליח לזהות והתוכנה מכוונת אותי נכון!!!
הערה קטנה
שמתי לב שיש הבדל די משמעותי באיכות הצילום של הכתב, אם פותחים אותו בתוכנה או בתמונות של ווינדוס,
מאד יעזור אם יהיה אפשר לשפר את זה ובפרט לכתבים לא כ"כ ברורים.
תודה. -
כהמשך לhttps://mitmachim.top/topic/99333/מדריך-ocr-לכתב-יד-מבוסס-בינה-מלאכותית-להורדה-ישירה-כולל-הרבה-מאד-פונקציות-ותיקון-אוטומטי-חדש-חדש/95
בס"ד לאחר מאמצים מרובים מאד ועשרות (אם לא מאות...) שעות של עבודה בשילוב סוכני הבינה המלאכותית המתקדמים ביותר בשוק תוך אימות הדדי של שניים מהסוכנים המתקדמים ביותר לאורך תהליך בניית התוכנה ושכירת שרתי GPU מתקדמים ביותר לצורך הרצת האימון של המודל החדש שמפעיל את התוכנה נבנתה כעת גירסה חדישה ועדכנית של תוכנת המרת כתב היד לטקסט, להלן יפורט בע"ה השיפורים שנעשו כולל צורת הפעולה של התוכנה.
התוכנה אומנה מחדש על מאות כתבי יד וכל כתבי היד של אנשים ששלחו את נתוני האימון שלהם דרך התוכנה הישנה עברו כעת עיבוד מתקדם ונכנסו לבסיס המודל ישמש כעת את כולם (אגב זה רווח צדדי לכל מי ששלח נתוני אימון בעבר התוכנה כעת מכירה את כתב ידו בבסיס האימון שלה שנעשה ע"י סוכן הבינה המלאכותית המתקדם בעצמו...),
התוכנה כעת פועלת במספר שלבים כולל מודל שפה זעיר שאומן במיוחד על טקסטים תורניים לצורך חיבור ותיקון משפטים באופן מייד לפי הבנת הקשר תורני של התוכן וכן שלב הראייה של התוכנה של כתב היד עבר שינוי עמוק וכעת! פועל בצורה של ראייה עמוקה והסתכלות ממספר כיוונים וצבעים על כתב היד.עד כאן ההסבר הטכני ומכאן והלאה יבואר בע"ה השינויים בשטח לכל משתמש בתוכנה החדשה:
1.נבנה לתוכנה ממשק עצמאי-היא אינה פועלת יותר כשרת מקומי דרך הדפדפן כמו התוכנה הקודמת.
2. האימון על כתבי יד חדשים עלה רמה בצורה משמעותית וכעת גם על כתב יד חדשים שהתוכנה מעולם לא ראתה היא מסוגלת להגיע לרמת הצלחה של בין 60 ל80 אחוז תלוי באיכות כתב היד של הכותב. ואילו על כתבי יד לאחר אימון התוכנה מסוגלת להגיע קרוב ממש ל100 אחוז תלוי כמה ברור כתב היד של הכותב.
3. התוכנה כעת מסמנת בעצמה את השורות שנמצאות בספק ואת המילים שנמצאות בספק.
4. ניתן לבחור מצב המרה בתוכנה האם מהיר-ללא ראייה עמוקה או מתקדם הכולל ראייה עמוקה.
5. אולי זה השידרוג הכי קריטי-האימון על כתב יד חדש נעשה במהירות עצומה כעת תוך כמה דקות ממש (תלוי ברמה של המחשב) וכבר מ15 שורות של תיקון, יעילות התוכנה בכתב יד ברור עולה למעל 90 אחוזי הצלחה.
6. התוכנה חוברה כעת באופן ישיר לשרת האימון- נבנה באופן מיוחד סקריפט אימון שרץ ברציפות על שרת אימון מיוחד שלי וכל מי ששולח נתוני אימון מהתוכנה הנתונים שלו נקלטים באופן מייד לאימון ופעם בשבוע השרת מפיק מודל חדש מאומן יותר שמידי פעם יופץ לציבור.
7. ממשק התוכנה כולו עבר התאמה מיוחדת וכעת השורות שנקלטו בתוכנה מסומנות בריבוע ירוק וכל דף הסריקה מוצג באופן מלא.
8. התוכנה שומרת את היסטוריית העבודות של כל משתמש וכעת תוכלו בפתיחה מחדש של התוכנה להמשיך בדיוק מהיכן שעצרתם.
9. מאחר ובתוכנה הושקעה כמות עצומה של עבודה ומשאבים התוכנה אומנם משוחררת כעת כגירסה חינמית אך ייתכן ובעתיד היא תהפוך לתוכנה בתשלום ולכן מלכתחילה התוכנה נבנתה עם מנגנון אימות טלפוני שדורש אימות טלפוני פעם בחודש, שימו לב אין כרגע שום משמעות לאימות הטלפוני וכל מטרתו היא שבעתיד כשארצה להפוך את התוכנה לתוכנה בתשלום יהיה לי שליטה על השימוש בה.10. אני מבקש מאד לשלוח נתוני אימון מתוקנים רבים ככל האפשר זה יעלה מאד את רמת התוכנה לטווח הרחוק וכולנו נרוויח מזה, בנוסף זה רווחי לכל אחד בפני עצמו כי אינו דומה רמת אימון עצמאית לאימון שנעשה בשרת עם מודלים מתקדמים...
- אשמח מאד לכל הערה או הצעה לשיפור.
- כמעט שכחתי לציין השיפור החשוב ביותר- התוכנה כעת קולטת טוב פי כמה וכמה כל כתב יד שהוא ומגיעה לרמה גבוהה מאד (כדוגמה על כתב היד שלי 99.5 אחוזים...) כדאי מאד לנסות ולהתרשם זה בשורה שאין כל יום.
- כמובן התוכנה פועלת באופן מלא בצורה לא מקוונת.
- לתוכנה לוקח בערך דקה להיטען-זו לא תקלה פשוט לוקח למחשב זמן לטעון את המודלים שמפעילים אותה, משך הזמן המדוייק של הטעינה תלוי באיכות המחשב.
ניתן להוריד את התוכנההעדכנית מהכתובת הבאה:
https://arishs.duckdns.org/
הורדת מדריך לשימוש בתוכנה מגיטאהב כאן.
מומלץ בחום.. הסקירה מתארת את כל יכולות התוכנה בצורה מוצלחת מאד...בס"ד לאחר הרבה עמל ולבקשת רבים הופק סרטון מושקע המתאר את יכולות התוכנה וצורת השימוש בה ומומלץ מאד לכל אחד לראות אותו, הוא כבר קיים בתיקיית הדרייב של התוכנה ומופיע גם בקישורים הבאים בגיטאהב.
אשמח מאד לתגובות כאן או במייל MENI42525@GMAIL.COM.
הקישורים תוקנו.
עדכון כז' חשוון תשפז':
יש עדכון חדש לתוכנה וניתן לעדכן מהתוכנה עצמה בגירסאות החדשות-בהגדרות יש לחצן עדכון או להוריד גירסה חדשה מהאתר.
שימו לב שלאחר הורדת המודל מחדש (אין חובה) יש להפעיל מחדש את האימון האישי (נתוני האימון נשמרים רק את האימון האישי יש להפעיל מחדש). -
הצעה נוספת לתוכנה:
מכיון שהתוכנה עובדת יפה גם עם ספרים מודפסים,
שתתמוך גם בזיהוי ניקוד.
(תוכנת 'כלי החיתוך' של וינדוס תומך בניקוד, וגם אתר https://translate.google.com/?source=gtx של גוגל).יישר כח על כל השיפורים האחרונים!
היה לי טקסט עם שורות צפופות, שהתוכנה בתחלה לא זיהתה את חילוק השורות נכון (זיהתה שתי שורות כאילו הן אחת), ואילו כעת זיהתה מצויין!
-
@ARISH
האם יש דרך להפעיל את התוכנה בלי אינטרנט ובלי להתקשר לקו (אני בארה"ב ויש לי שיחות לארץ אבל משום מה זה לא עובד לקו)?@שקאד
תכתוב פה את הקוד שהתוכנה נותנת לך, והציבור דפה ינפיק לך קוד נגדי -
הצעה נוספת לתוכנה:
מכיון שהתוכנה עובדת יפה גם עם ספרים מודפסים,
שתתמוך גם בזיהוי ניקוד.
(תוכנת 'כלי החיתוך' של וינדוס תומך בניקוד, וגם אתר https://translate.google.com/?source=gtx של גוגל).יישר כח על כל השיפורים האחרונים!
היה לי טקסט עם שורות צפופות, שהתוכנה בתחלה לא זיהתה את חילוק השורות נכון (זיהתה שתי שורות כאילו הן אחת), ואילו כעת זיהתה מצויין!
@אהרל-ה לי יש בעיה דומה שיש לי עמודים שחלקם עם כתם שחור שיצרתי כדי להסתיר טור אחר שאינו נוגע אלי, והתוכנה מתבלבלת אולי בגלל זה או מכל סיבה אחרת, ויש עמודים של 50 שורות שהיא מזה רק שתי שורות מתוכם והשאר מתעלמת לגמרי, מצד שני יש עמודים שהיא מזהה בדיוק של 99 אחוז, כך שבעיני זה פלא איך התוכנה יכולה להיות כל כך חכמה מצד אחד ומהצד השני כל כך טיפשה
-
פורסמה גירסת עידכון לתוכנה (עדיין לא באתר אך מתוך התוכנה קיים כבר).
הרבה מהדברים שצויינו כאן נכנסו לשם אני ממליץ לכל אחד לבדוק איך זה נראה. -
פורסמה גירסת עידכון לתוכנה (עדיין לא באתר אך מתוך התוכנה קיים כבר).
הרבה מהדברים שצויינו כאן נכנסו לשם אני ממליץ לכל אחד לבדוק איך זה נראה. -
כיון שהמפתח קשוב לפניות...
אם התוכנה נעצרת באמצע התמלול (מכל סיבה שהיא), מה שתומלל נשמר (וטוב שכך), אבל אין אפשרות להמשיך לתמלל את המשך הקובץ, אלא אם כן מעלים אותו מחדש. -
כהמשך לhttps://mitmachim.top/topic/99333/מדריך-ocr-לכתב-יד-מבוסס-בינה-מלאכותית-להורדה-ישירה-כולל-הרבה-מאד-פונקציות-ותיקון-אוטומטי-חדש-חדש/95
בס"ד לאחר מאמצים מרובים מאד ועשרות (אם לא מאות...) שעות של עבודה בשילוב סוכני הבינה המלאכותית המתקדמים ביותר בשוק תוך אימות הדדי של שניים מהסוכנים המתקדמים ביותר לאורך תהליך בניית התוכנה ושכירת שרתי GPU מתקדמים ביותר לצורך הרצת האימון של המודל החדש שמפעיל את התוכנה נבנתה כעת גירסה חדישה ועדכנית של תוכנת המרת כתב היד לטקסט, להלן יפורט בע"ה השיפורים שנעשו כולל צורת הפעולה של התוכנה.
התוכנה אומנה מחדש על מאות כתבי יד וכל כתבי היד של אנשים ששלחו את נתוני האימון שלהם דרך התוכנה הישנה עברו כעת עיבוד מתקדם ונכנסו לבסיס המודל ישמש כעת את כולם (אגב זה רווח צדדי לכל מי ששלח נתוני אימון בעבר התוכנה כעת מכירה את כתב ידו בבסיס האימון שלה שנעשה ע"י סוכן הבינה המלאכותית המתקדם בעצמו...),
התוכנה כעת פועלת במספר שלבים כולל מודל שפה זעיר שאומן במיוחד על טקסטים תורניים לצורך חיבור ותיקון משפטים באופן מייד לפי הבנת הקשר תורני של התוכן וכן שלב הראייה של התוכנה של כתב היד עבר שינוי עמוק וכעת! פועל בצורה של ראייה עמוקה והסתכלות ממספר כיוונים וצבעים על כתב היד.עד כאן ההסבר הטכני ומכאן והלאה יבואר בע"ה השינויים בשטח לכל משתמש בתוכנה החדשה:
1.נבנה לתוכנה ממשק עצמאי-היא אינה פועלת יותר כשרת מקומי דרך הדפדפן כמו התוכנה הקודמת.
2. האימון על כתבי יד חדשים עלה רמה בצורה משמעותית וכעת גם על כתב יד חדשים שהתוכנה מעולם לא ראתה היא מסוגלת להגיע לרמת הצלחה של בין 60 ל80 אחוז תלוי באיכות כתב היד של הכותב. ואילו על כתבי יד לאחר אימון התוכנה מסוגלת להגיע קרוב ממש ל100 אחוז תלוי כמה ברור כתב היד של הכותב.
3. התוכנה כעת מסמנת בעצמה את השורות שנמצאות בספק ואת המילים שנמצאות בספק.
4. ניתן לבחור מצב המרה בתוכנה האם מהיר-ללא ראייה עמוקה או מתקדם הכולל ראייה עמוקה.
5. אולי זה השידרוג הכי קריטי-האימון על כתב יד חדש נעשה במהירות עצומה כעת תוך כמה דקות ממש (תלוי ברמה של המחשב) וכבר מ15 שורות של תיקון, יעילות התוכנה בכתב יד ברור עולה למעל 90 אחוזי הצלחה.
6. התוכנה חוברה כעת באופן ישיר לשרת האימון- נבנה באופן מיוחד סקריפט אימון שרץ ברציפות על שרת אימון מיוחד שלי וכל מי ששולח נתוני אימון מהתוכנה הנתונים שלו נקלטים באופן מייד לאימון ופעם בשבוע השרת מפיק מודל חדש מאומן יותר שמידי פעם יופץ לציבור.
7. ממשק התוכנה כולו עבר התאמה מיוחדת וכעת השורות שנקלטו בתוכנה מסומנות בריבוע ירוק וכל דף הסריקה מוצג באופן מלא.
8. התוכנה שומרת את היסטוריית העבודות של כל משתמש וכעת תוכלו בפתיחה מחדש של התוכנה להמשיך בדיוק מהיכן שעצרתם.
9. מאחר ובתוכנה הושקעה כמות עצומה של עבודה ומשאבים התוכנה אומנם משוחררת כעת כגירסה חינמית אך ייתכן ובעתיד היא תהפוך לתוכנה בתשלום ולכן מלכתחילה התוכנה נבנתה עם מנגנון אימות טלפוני שדורש אימות טלפוני פעם בחודש, שימו לב אין כרגע שום משמעות לאימות הטלפוני וכל מטרתו היא שבעתיד כשארצה להפוך את התוכנה לתוכנה בתשלום יהיה לי שליטה על השימוש בה.10. אני מבקש מאד לשלוח נתוני אימון מתוקנים רבים ככל האפשר זה יעלה מאד את רמת התוכנה לטווח הרחוק וכולנו נרוויח מזה, בנוסף זה רווחי לכל אחד בפני עצמו כי אינו דומה רמת אימון עצמאית לאימון שנעשה בשרת עם מודלים מתקדמים...
- אשמח מאד לכל הערה או הצעה לשיפור.
- כמעט שכחתי לציין השיפור החשוב ביותר- התוכנה כעת קולטת טוב פי כמה וכמה כל כתב יד שהוא ומגיעה לרמה גבוהה מאד (כדוגמה על כתב היד שלי 99.5 אחוזים...) כדאי מאד לנסות ולהתרשם זה בשורה שאין כל יום.
- כמובן התוכנה פועלת באופן מלא בצורה לא מקוונת.
- לתוכנה לוקח בערך דקה להיטען-זו לא תקלה פשוט לוקח למחשב זמן לטעון את המודלים שמפעילים אותה, משך הזמן המדוייק של הטעינה תלוי באיכות המחשב.
ניתן להוריד את התוכנההעדכנית מהכתובת הבאה:
https://arishs.duckdns.org/
הורדת מדריך לשימוש בתוכנה מגיטאהב כאן.
מומלץ בחום.. הסקירה מתארת את כל יכולות התוכנה בצורה מוצלחת מאד...בס"ד לאחר הרבה עמל ולבקשת רבים הופק סרטון מושקע המתאר את יכולות התוכנה וצורת השימוש בה ומומלץ מאד לכל אחד לראות אותו, הוא כבר קיים בתיקיית הדרייב של התוכנה ומופיע גם בקישורים הבאים בגיטאהב.
אשמח מאד לתגובות כאן או במייל MENI42525@GMAIL.COM.
הקישורים תוקנו.
עדכון כז' חשוון תשפז':
יש עדכון חדש לתוכנה וניתן לעדכן מהתוכנה עצמה בגירסאות החדשות-בהגדרות יש לחצן עדכון או להוריד גירסה חדשה מהאתר.
שימו לב שלאחר הורדת המודל מחדש (אין חובה) יש להפעיל מחדש את האימון האישי (נתוני האימון נשמרים רק את האימון האישי יש להפעיל מחדש).@ARISH שיפורים לזיהוי כתב יד
אני לא מבין בתוכנות, אך כמדומני שרוב התקלות המעצבנות בזיהוי הם של חוסר בזיהוי מספר הטורים, חיבור בין חלקי קטעי הטקסטים מה עומד לעצמו ומה המשך, זיהוי כמות השורות, וזיהוי שיוכים של טקסט שחורגים מהשורה, הפיתרון שאני חושב שיכול לייעל מאוד את המערכת, לתת אפשרות לחלק את הזיהוי לשתיים, חלק א' הוא זיהוי השורות וחלקי המסמך, כאשר יהיה ניתן לסמן למערכת את החלקים של הטקסט ששייכים אחד לשני, או החלקים שאין בהם צורך בזיהוי לדוג' לא צריך שיופיע ''בס''ד'' בזיהוי בכל עמוד בכתב יד, וכן זיהוי של קטעי טקסט שמשוייכים בנפרד כגון הערות או כותרות, המערכת תלמד גם את הזיהוי הזה, ותתאים אותו אישית לכותב, אלא שעל ידי שזה יהיה חלק נפרד, השלב השני של זיהוי הטקסט עצמו יהיה הרבה יותר ממוקד ומדוייק.
צורת ההפעלה תהיה שהמערכת תזהה לבד את צורת הדף, ואז יהיה אפשר לאשר או לתקן
לדוג' יהיה שורת כלים שבו יהיה צורות כמו שקיימים בוורד צורות שונות או שרטוט צורה חופשית, ואז יסמן עם העכבר צורה, יתקן אותה לפי הזויות עד שתתאים ויאשר, לאחר מכן יהיה זיהוי השורות בעצמם, עם אפשרות לשינוי בצורה פרקטית, כגון שהעמוד יופיע מוגדל ובצד ימין יהיה כמין נקודה שממנה יוצא קו תחת השורה, וניתן ע''י העכבר להעלות או להוריד את השורה, וכן להוסיף או להפחית שורה אם התוכנה לא זיהתה נכון את כמות השורות, (ויוכל להיות גם קו מתפתל אם הוא כתב עקום-אלא שאז יהיה יותר קשה לכוון את התיקונים, ויצטרכו קו ידני).
רק אחרי כל התהליך המערכת תזהה את הטקסט עצמו ונדמה לי שאז זה יהיה פי 10 יותר מדוייק. כי כבר עכשיו התוכנה מאוד מדייקת, אלא שרוב הטעויות הם מחמת טעות בזיהוי הנכון של מיקום הטקסט
בנוסף אשמח לדעת להיכן שולחים חבילות אימון, וכן מה הכוונה באחוז דיוק המודל האישי שבכל אימון הוא כותב לי אחוז יותר נמוך ומאידך הוא כותב אחוז יותר גבוה של פחות שגיאות מאשר לפני האימון, זה לא תרתי דסתרי?
לגבי העידכון הנוכחי לא כל כך ברור מה צריך להוריד י שם מדאי הרבה קבצים, וכן אם יש אפשרות לעדכן את התוכנה הקיימת ולא בכל פעם להוריד ולהתקין מחדש את כל התוכנה
בתודה ובברכה
שלום! נראה שהשיחה הזו מעניינת אותך, אבל עדיין אין לך חשבון.
נמאס לכם לגלול בין אותם הפוסטים בכל ביקור? כשנרשמים לחשבון, תמיד תחזרו בדיוק למקום שבו הייתם קודם, ותוכלו לבחור לקבל התראות על תגובות חדשות (בין אם במייל, ובין אם בהתראת פוש). תוכלו גם לשמור סימניות ולפרגן ב-upvote לפוסטים כדי להביע הערכה לחברי קהילה אחרים.
בעזרת התרומה שלך, הפוסט הזה יכול להיות אפילו טוב יותר 💗
הרשמה התחברות { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}