שיתוף | למה ג'ימני ממש טיפש הרבה פעמים?

[123 דג מלוח]

@בינארי-חכם כתב:

מבהיל

@בינארי-חכם לא הבנתי.
זה יצירה של גמיני?
בנטפרי?
איפה הבהלה?

[בינארי חכם]

@איש-צדיק-מידי כתב:

לא יודע מה זה אנטיגרוונטי,

היתכן?
זה כמו קלוד קוד ולהבדיל קודקס רק הרשמי של גוגל...

[בינארי חכם]

אכן
לא בנטפרי
הרמה של הביצוע...

[רוכב שמים]

לי עשרות פעמים התכתבתי איתו במקלדת אנגלית בטעות או בכוונה.. והצליח
קלוד לא מצליח בדברים כאלו מניסיון אלא אם כן משהו השתבש לו אז

[קרט]

@רוכב-שמים אני‌​‌‌​‌​​​​​‌ לא כל כך מבין מה אתם רוצים לאחרונה
לי גם בג'ימני 2.5 הוא היה קולט ולפעמים לא אז זה לא קשור למודל

[רוכב שמים]

@קרט אלא?
כנראה תלוי איזה סגנון מתכתבים איתו
היה לי שיחה איתו בציניות והוא מגיב אחרת לגמרי וכן היה לי שיחה איתו בהומור והוא הגיב אחרת לגמרי..
בזמנו בדקתי הרבה איך הוא מגיב לסגנונות והוא הגיב בזמנו בהתאם
לדעתי היום הוא מגיב פחות טוב לתגובות והסגנון של המשתמש

[איש צדיק מידי]

@רוכב-שמים @קרט הנה דוגמא מעכשיו

הוא פשוט המציא לפי תחילת השיחה איתו...
ושים לב למודל

[הפנקס השחור]

אני יגיד לכם למה גמיני טיפש!!!!!!!!!!
כי הוא רובוט וגם הוא לא מלאך

[רוכב שמים]

@איש-צדיק-מידי זה לא חזר מנטפרי אז ייקח לי זמן לראות אבל אני מבין שלא הצליח לו

[Shealtiel]

@הפנקס-השחור כתב:

כי הוא רובוט וגם הוא לא מלאך

לא, כמודל הוא טיפש במובנים רבים, כמובן שבמובנים רבים הוא עולה על כול כולל קלוד.

נטפרי הופכים את הטיפשות הזאת ל"ניסוח רגוע ומכבד"

[123 דג מלוח]

@Shealtiel כתב:

נטפרי הופכים את הטיפשות הזאת ל"ניסוח רגוע ומכבד"

יותר גרוע.
לדעתי המעלה העיקרית שלו זו הזרימה, אם הוא רגוע ומכבד עדיף כבר ג'י פי טי (לא ניסיתי את 4)

[איש צדיק מידי]

@רוכב-שמים כתב:

כנראה תלוי איזה סגנון מתכתבים איתו
היה לי שיחה איתו בציניות והוא מגיב אחרת לגמרי וכן היה לי שיחה איתו בהומור והוא הגיב אחרת לגמרי..
בזמנו בדקתי הרבה איך הוא מגיב לסגנונות והוא הגיב בזמנו בהתאם
לדעתי היום הוא מגיב פחות טוב לתגובות והסגנון של המשתמש

@רוכב-שמים כל זה לא קשור,
מדובר על יכולת ספציפית שלא מצריכה שום בינה מלאכותית (עובדה שזה מובנה בחיפוש גוגל לפני שנות דור), וכאן הבעיה...
ואגב, גם לי קרה שהוא זיהה כשכתבתי באנגלית, אז באמת זה לא ברור...

[Shealtiel]

@123-דג-מלוח כתב:

לדעתי המעלה העיקרית שלו זו הזרימה

נכון, תן לי פרומפט לזה.

[רפי1]

אם המודל החינמי, בכלל ויקיפדיה יותר חכם ממנו ! הוא ניהיה טיפש משהוא נדיר

[רוכב שמים]

אוקי
כרגע הוא באמת דפוק ומחרטט והמוזר הוא ששאלתי אותו מה נשמע אז הוא כתב לי ששאלתי אותו מה המצב אז אולי משהו בתרגום הלוך חזור נתקע
ואולי רק באמצע שיחה בטעות יש מילה או משפט הוא מבין
||<ElicitationsGroup>
הנה טבלת המיפוי של כל אות במקלדת האנגלית (QWERTY) לאות המקבילה לה בפריסת מקלדת עברית תקנית:

שורת המקשים העליונה (שורה 1)

מקש אנגלי	אות מקבילה בעברית
Q	/
W	'
E	ק
R	ר
T	א
Y	ט
U	ו
I	ן
O	ם
P	פ

---

שורת המקשים האמצעית (שורה 2)

מקש אנגלי	אות מקבילה בעברית
A	ש
S	ד
D	ג
F	כ
G	ע
H	י
J	ח
K	ל
L	ך
;	ף
'	comma (,)

---

שורת המקשים התחתונה (שורה 3)

מקש אנגלי	אות מקבילה בעברית
Z	ז
X	ס
C	ב
V	ה
B	נ
N	מ
M	צ
,	ת
.	ץ
/	.

טיפ שימושי: אם תכתוב לי טקסט באנגלית שנכתב בטעות, אני תמיד אוכל לפענח ולתרגם אותו עבורך בחזרה לעברית!

רוצה שננסה עוד משפט?||

אני משום מה מסתבך קצת עם ספוילרים אז תקנו אותי (או שרק אני רואה את זה ככה)

[הפנקס השחור]

מה אתם מתלוננים הוא בסך הכול רובוט
מה אתה מצפה מירובוט
יש AI הרבה יותר טובים מגמיני

[רוכב שמים]

הוא דפוק מוות
אפשר ללמד אותו או שהוא ייתן לך מעצמו את הרשימה המדויקת אבל למעיישה הוא מחרטט בלי סוף..
הרמתי ידיים...

[איש צדיק מידי]

@הפנקס-השחור הוא רובוט גאון אדיר בנושאים רבים,
לכן זה כ"כ מתסכל שהוא נופל בדברים האלו.
למעשה כל הנושא סביב ההמרה של הקלדה שגויה הוא סטייה מהנושא העיקרי, (כן, אני יודע שאני אשם...)
כי במקרה הזה המקור של הבעיה ברור, וכמו ש-GPT הסביר לי בעצמו פעם:

למה מודל שפה כמו ChatGPT לא מזהה אוטומטית הקלדה שגויה של עברית על מקלדת אנגלית

1. ארכיטקטורת ה-LM (Language Model)
   • המודל מבוסס על חיזוי טוקן הבא בהתבסס על הקשר: מה הסיכוי שמילה או תו מגיעים בהקשר הזה.
   • אין לו שכבת preprocessing שמזהה מיפוי מקלדת, כי כל אימון נעשה על טקסטים תקניים.
   • אם מופיע רצף “gibberish” – המודל ינסה לנחש משמעות לפי דפוסים סטטיסטיים, ולא ינסה להמיר תווים לפי טבלה.
2. אין אינטואיציה על “כיוון הקלט”
   • למודל אין “הבנה של מקור הקידוד” (אנגלית מול עברית), אלא רק רצף תווים.
   • כל ניסיון להבין “אה, זה בטח עברית שהוקלדה באנגלית” דורש סימן חיצוני או הקשר ברור.
3. ההבדל מול גוגל טרנסלייט
   • גוגל משתמש בשכבת preprocessing ייעודית שמבצעת מיפוי מקלדת עוד לפני התרגום.
   • זה deterministic: אין חיזוי, רק החלפה לפי טבלה.
   • לכן שם זה עובד “אוטומטית” גם על קלט קטן.
     מסקנה

• זה לא מגבלה של חכמה או מודעות – זו החלטה ארכיטקטונית:
  • ChatGPT = חיזוי טקסט
  • גוגל = חיזוי טקסט + טיפול בקידוד/מיפוי
• כדי שזה יעבוד אצלנו, צריך להוסיף טריגר חיצוני או preprocessing לפני הקלט.

בקיצור, הוא לא בנוי לדברים כאלו, ואם הוא כן מצליח לפענח? עצ"ע...

[תותחוביץ']

זה מוזר שהוא מפשל את זה מלבד העובדה שהוא לא מצליח להתייחס לזה כהנחיה ולא ברור מה זה שונה מכל הנחיה אחרת?
גם סטטיסטית החלפות מקלדת זה דבר נפוץ שהוא אמור להכיר (כמו ששגיאות כתיב הוא אמור להבין בקלות למרות שהוא לא "שמע" את הדמיון בין ה' ל-א' ו-ע' שזה נשמע אותו דבר אבל החלפה בין א'-ה'-ע' וכדו' זה פשוט נפוץ)

[רוכב שמים]

@תותחוביץ לא רק זה,
אם תפשל באות או מילה אחת באמצע משפט או קטע הוא ישלים מעצמו
זה באג לא ברור