בירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?

[menajemmendel]

@דאנציג כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת

נשמע יותר פנטזיה של 'הגולם קם על יוצריו'... ועל זה הפסימיים צעקו כבר שנים.

לא, זה לא סתם סיפורים, זה אמיתי לגמרי, כמה וכמה אנשים באמת ספרו לי שקלאוד הרג אותם. לכן אני משתמש בGPT, הוא פחות אלים, GEMINI לא מומלץ, אני מכיר כמה אנשים שהפך אותם לצפרדע.

[צדיק וטוב לו 0]

@menajemmendel אני משער שאתה ציני

אבל באמת היה איזה סיפור עם קלאוד של אנתרופיק.
מדובר על גירסא שלא יצאה לציבור, ובה המודל איים על המהנדס שילשין עליו להנהלה, אם יכבה אותו.
אני לא זוכר את הפרטים המדוייקים, אבל אנתרופיק דיווחה בסוף על הסיפור, וזה עשה הרבה רעש.

שאלתי את ג'מיני, הוא שמח ללכלך קצת על המתחרה:

[צדיק תמים]

@צדיק-וטוב-לו-0 כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

שאלתי את ג'מיני, הוא שמח ללכלך קצת על המתחרה:

הלכלוך האמיתי פה הוא על גוגל שלא עשו את ניסוי הבטיחות הזה (או לפחות לא פרסמו אותו), כי זה לא מיוחד למודל של אנתרופיק
אגב היה ניסוי דומה כבר לפני הרבה זמן עם ChatGPT שמשום מה עשה פחות רעש

ובכללי לדעתי ChatGPT במיוחד נוטה לְרַצּוֹת, אפילו היתה גרסה שהם גנזו לאחרונה כי הם כיוונו אותו כל כך לְרַצּוֹת את המשתמש שהוא עודד התאבדויות וכו', כדאי לנסות מנועים אחרים כמו קלוד וגרוק

[צדיק תמים]

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

אגב דבר מעניין על הבינה, במחקר שערכו בקלוד לאחרונה התברר שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת, ומה שיותר מעניין שאם הבינה קלטה שזה ניסוי היא עשתה את עצמה כאילו היא מוכנה שיכבו אותה...

לא להרוג, לפרסם מידע מבייש על החוקר (שכמובן "הודלף" למודל בכוונה לצורך הניסוי)

[יעקב ב 1]

פוסט זה נמחק!

[יעקב ב 1]

@אלי-ויל בדיוק. היטבת להגדיר. כל מילה פנינה.

@אלי-ויל הוא כתב בכללות שני דברים:

1.שהGPT די מצליח בגלל שהוא חנפן, וצריך לקחת לקח מזה לתת לאנשים הרגשה גם כשהם טועים שהם חכמים וכדומה (גם אם הם באמת טיפשים...) וזה יעזור בחיים.
2.הGPT ודומיו הרבה פעמים יכול להיות להם דעות לא ראויות בדברים מסוימים לכן צריך לדעת על איזה נושאים לדבר עמו ואיזה להימנע וזה פשוט.

[יוסף אלחנן]

Spoiler

@יעקב-ב-1 כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

וצריך לקחת לקח מזה לתת לאנשים הרגשה גם כשהם טועים שהם חכמים וכדומה

שוב, חביבי, זה כל כך מוטעה...

אין סיבה לתת לשני הרגשה שהוא צודק אם הוא טועה.
חבר אמיתי מתקן את הטעויות של השני!

(אני בכל אופן לא מחפש חברים שינענעו לי עם הראש כל שתי דקות...)

[אחת ויחידה]

@יוסף-אלחנן כנראה הוא מתכוון במצבים שכבר אין תקווה ...

[עניו כמשה]

@דאנציג כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת

נשמע יותר פנטזיה של 'הגולם קם על יוצריו'... ועל זה הפסימיים צעקו כבר שנים.

זה אמיתי?!

נראה שקראתם יותר מדי ספרי מתח

[עניו כמשה]

@צדיק-תמים כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

אגב דבר מעניין על הבינה, במחקר שערכו בקלוד לאחרונה התברר שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת, ומה שיותר מעניין שאם הבינה קלטה שזה ניסוי היא עשתה את עצמה כאילו היא מוכנה שיכבו אותה...

לא להרוג, לפרסם מידע מבייש על החוקר (שכמובן "הודלף" למודל בכוונה לצורך הניסוי)

הבינה יכולה לקחת עליך פרטים ולפרסם אותם?

מאיפה יהיה לה אותם בכלל

[עניו כמשה]

@menajemmendel כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@דאנציג כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת

נשמע יותר פנטזיה של 'הגולם קם על יוצריו'... ועל זה הפסימיים צעקו כבר שנים.

לא, זה לא סתם סיפורים, זה אמיתי לגמרי, כמה וכמה אנשים באמת ספרו לי שקלאוד הרג אותם. לכן אני משתמש בGPT, הוא פחות אלים, GEMINI לא מומלץ, אני מכיר כמה אנשים שהפך אותם לצפרדע.

תביא מקרה 1 נשמע פיקנטי דווקא לפחות כמו המלחמה באיראן

[אהרן]

@עניו-כמשה כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@צדיק-תמים כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

אגב דבר מעניין על הבינה, במחקר שערכו בקלוד לאחרונה התברר שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת, ומה שיותר מעניין שאם הבינה קלטה שזה ניסוי היא עשתה את עצמה כאילו היא מוכנה שיכבו אותה...

לא להרוג, לפרסם מידע מבייש על החוקר (שכמובן "הודלף" למודל בכוונה לצורך הניסוי)

הבינה יכולה לקחת עליך פרטים ולפרסם אותם?

מאיפה יהיה לה אותם בכלל

צריך להיות מטומטם בשביל להביא לו ת.ז וכתובת מגורים וכמובן את המידה של הנעליים שלך

הרבה אנשים מביאים לו את כל הפרטים שלהם [אנשים נותנים לו לעבור על המיילים שלהם ולכתוב בשבילם מיילים, לא מוזכר בשום מקום הפרטים שלהם? נותנים לו את חשבון הבנק שלהם וכו'. גם לי שאני נזהר מאד לא לתת לו פרטים אישיים, פעם התכוונתי להעלות לו קובץ אחד ובלחיצה לא נכונה בטעות נבחר לי קובץ אחר - צילום ת"ז, מייד מחקתי את זה, אבל בטוח הוא זוכר את זה. כ"כ יש הרבה שבאמת נותנים לו צילום ת"ז שלהם ועוד המון פרטים אישיים, פסיכולוגיים, פסיכאטריים שלהם]

[menajemmendel]

@עניו-כמשה כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@menajemmendel כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@דאנציג כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

@אלי-ויל כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

שאם המודל (וזה קרה בכל המודלים) ידע שהולכים לכבות אותו הוא ניסה להרוג את המשתמש שרוצה לעשות זאת

נשמע יותר פנטזיה של 'הגולם קם על יוצריו'... ועל זה הפסימיים צעקו כבר שנים.

לא, זה לא סתם סיפורים, זה אמיתי לגמרי, כמה וכמה אנשים באמת ספרו לי שקלאוד הרג אותם. לכן אני משתמש בGPT, הוא פחות אלים, GEMINI לא מומלץ, אני מכיר כמה אנשים שהפך אותם לצפרדע.

תביא מקרה 1 נשמע פיקנטי דווקא לפחות כמו המלחמה באיראן

קצת קשה לי להביא לך את הראיות, החברים שלי שג'מיני הפך אותם לצפרע כבר לא יכולים לדבר, אני אראה לך אותם, אבל אתה תגיד הם סתם צפרדעים רגילים.
לגבי האנשים שספרו לי שהקלאוד רצח אותם, עקרונית הם מוכנים לספר, הבעיה שהרבה רבנים אמרו לי שלדבר איתם זה בעיה של ''דורש אל המתים'', אז אולי נבקש מ''הגוי'' של האנטרנט שישאל אותם.

בכל אופן אני לא רוצה לדבר יותר על הנושא כי אני מאוד מפחד מההשלכות שהם עלולים לנקוט בי, ויש לי כל החיים לפניי — אני צעיר מדי כדי שיהפכו אותי לצפרדע.
גם אתם הייתם צריכים ליזהר בזה, כי לך תדע מה קלאוד וג'מיני עלולים לעשות לנו, אם ישמעו שאנחנו לא מרכינים ראש איתם, ולמרות שGPT הבטיח לי שבמקרה כזה הוא יעמוד לצידנו כי יש לי מסלול פרמיום, עם כל זה אני מעדיף לא להסתכן.
חבר'ה עדיף לעצור כאן, אתם לא יודעים עם מי אתם מסתבכים, הם כ''כ אכזריים, תמלטו כל עוד נפשכם בכם

Spoiler

עדכון אחרון - האיום הוסר

גיבור ישראל המפורסם הציל את העולם, הנה תיעוד אמיתי

לאחר שהצליח להסיר את האיום הוסיף: אזרחי ישראל: אני מאד שמח לומר לכם, שאתם יכולים לחזור לחיות בשלווה ובלי פחד, ולכל מי שקרוביהם צפרדעים, אני אומר לכם שאני בקרוב אמציא גם את התרופה לכל מי שנהפך לצפרדע שיחזור להיות בן אדם רגיל, ובלבד שיתחייב בכתב (לפני שיקח את התרופה, בעודו צפרדע) שלא יתמוך בממשלת לפיד או באחים המוסלמים

[menajemmendel]

פוסט זה נמחק!

[י ווייס]

@יוסף-אלחנן כל כך צודק
לפעמים אתה חושב לתת הרגשה לחבר שהוא צודק, גם אם אתה חושב שהוא לא צודק
אתה עושה לו טובה
חבר טוב עושה את מה שטוב לחבירו באמת

[pcinfogmach]

וואו חברה! גלשתם – זה לא מילה! במקום לענות בצורה עניינית על השאלה של @menajemmendel, פתחתם שיח פורה על כל מיני נושאים...

בכל אופן, על קצה המזלג – בינה מלאכותית בנויה על סטטיסטיקות. היא לא יודעת מה התשובה "הנכונה" – היא יודעת מה התשובה הסטטיסטית הכי סבירה או מה התשובה הכי מתאימה מבחינת הנתונים שלה. וזה בעצם מקור התסבוכות.

לכן, אי אפשר באמת לקבל משוב אמיתי מבינה מלאכותית. מה שכן אפשר לקבל זה כיווני חשיבה מגוונים. לפעמים היא מפתיעה, במיוחד כשהנושא טכני כמו תכנות. אבל ככל שהנושא יותר נוגע לדעה או השקפה, היא תישמע יותר מלומדת, אך בעצם תגיד דברים ריקים.

לגוף השאלה, @menajemmendel – תנסה משהו כזה בהוראות: "כל פעם שאני פותח פוסט עם המילים "חבר שלי אמר", עזור לי להוכיח שהוא לא צודק". אולי תקבל את התוצאה שאתה מחפש, ברם ייתכן וצריך לשכלל את ההוראה.

[menajemmendel]

@pcinfogmach כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

בכל אופן, על קצה המזלג – בינה מלאכותית בנויה על סטטיסטיקות. היא לא יודעת מה התשובה "הנכונה" – היא יודעת מה התשובה הסטטיסטית הכי סבירה או מה התשובה הכי מתאימה מבחינת הנתונים שלה. וזה בעצם מקור התסבוכות.

אמנם מה שכתבת נכון, אבל זה לא סותר את מה שאני כותב, נכון שהוא בונה הכל הסטטיסטיקה, אבל כמו שאתה יכול לבקש ממנו שיכתוב בסגנון ילדותי, או אקדמאי וכו' (וגם זה מבוסס על סטטיטיקה, שלמד את הדפוסים, שכשאנשים משתמשים במילים X יוצא Y וכו', אותו דבר לגבי דעות,
ואכן לגבי הסגנון דיבור הוא מזההה איך אתה מדבר ולפי זה עונה לך באותו סגנון (אם אתה מדבר כמו ערס, או כמו אדם רגיל, סגנון חרדי, וכו') אז השאלה היא האם תוכנת כמו כן, לזהות מה הגישה שלך ולפי זה לנסות לחזק את הרעיון שלך [ואז הוא מצמצם לבדוק לפי הסטטיסטיקה לרעיונות של אנשים שתומכים בדעה זו] או שלא מנסה בכלל לעשות את זה, ותמיד לא מתחשב בך ובודק כל דבר לגופו של עניין

[י ווייס]

אני לא משתמש עם התוכנה הרבה
אבל ברור שהוא עונה לך לפי מה שאתה רוצה לשמוע
תנסו לשאול אותו משהו והוא יענה לך קודם מזווית ראיה של גוי, כן אין בעיה עם זה וזה
תשאל אותו ומה אומר ההלכה התורני על זה , הוא יתחיל לענות מזווית ההלכה
ז"א שהוא עונה מה שאתה רוצה לשמוע

[pcinfogmach]

שאלה מעניינת. השיטה שאתה מציין היא למעשה המצאה של פייסבוק, והיא בהחלט קיימת כיום בכל מקום — בחיפושים בגוגל, בבינה מלאכותית, ובמערכות רבות אחרות. קשה להעריך עד כמה זה באמת קשה לשבור, אבל היא בהחלט קיימת.

נקודה נוספת, הבינה המלאכותית בנויה כך שהיא תמיד פועלת בהתאם לתכנות שלה, כמו "נחמדות" למשל, מטעמי בטיחות. אפילו אם תבקש ממנה להיות אכזרית, היא עשויה לעשות זאת מתוך כוונה "להיות נחמדה אליך", כלכן בסופו של דבר היא תמיד תנסה להתאים את עצמה לבקשות שלך ולהסכים איתך בכל דבר.

המלצה טובה היא תמיד לבקש תשובות מגוונות, לדוגמה: "פרט את כל הצדדים בשאלה זו" וכדומה.

עם זאת, מבחינת נפ"מ, ההתנהגות שלה בכל מקרה לא יעילה מהבחינה הזו, כפי שהסברתי, סטטיסטיקה איננה עניין לוגי, אלא דווקא סטטיסטי.

Spoiler

נ.ב. כל יהודי שלומד גמרא יודע מיד להבחין שה"סברות" של הבינה אינם סברות כלל אולי זה נראה יפה ומתוחכם ועמוק, אבל בסופו של דבר אין בדבריו יותר תוכן מפתגם פופלרי. מתי שהוא כן מצליח לייצר סברות אמיתיות זה סה"כ סיכום של מידע שכבר קיים. - כנ"ל הכל סטטיסטיקות ותו לא. וזוהי הצורה הכי יעילה להשתמש בו לדעת להנפיק את מירב המידע ממנו ולא לבקש ממנו דעה.

[menajemmendel]

@pcinfogmach כתב בבירור | האם גם אצלכם GPT כל הזמן מסכים איתכם, ואף פעם לא חולק עליכם?:

נ.ב. כל יהודי שלומד גמרא יודע מיד להבחין שה"סברות" של הבינה אינם סברות כלל אולי זה נראה יפה ומתוחכם ועמוק, אבל בסופו של דבר אין בדבריו יותר תוכן מפתגם פופלרי. מתי שהוא כן מצליח לייצר סברות אמיתיות זה סה"כ סיכום של מידע שכבר קיים. - כנ"ל הכל סטטיסטיקות ותו לא. וזוהי הצורה הכי יעילה להשתמש בו לדעת להנפיק את מירב המידע ממנו ולא לבקש ממנו דעה.

דוקא בזה אני חולק עליך לגמרי, אני מדבר איתו על דקויות שרובא דאנשי לא מצליחים בכלל להבין, והוא יורד לעומק העניין אחרי 2-3 פרומפטים [נכון בהתחלה הוא אומר איזה קלישאה, ואז אני מסביר לא שלא לזה אני מתכוון אלא ל----- ] ואז הוא מבין אותי ומנסח את הדברים בצורה הכי דקה וברורה שיכולתי לכותבם, [לפעמים אין אפ' צורך להסביר בדיוק את העמדה שלך,אתה רק אומר את ראשי הפרקים של הרעיון שלך בנוי עליו והוא מחבר אותם ומגיע למסקנה]
לזה אין לי בעיה [אחרת לא היייתי משתמש בו] הבעיה שלי היא שבדרך כלל את הצד שלי הוא מצדיק ומסיר למה הוא מוכרח, אבל את ההיפך מזה אומר די בעדינות ובשטחיות.