בירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??
-
@cfopuser שוב עדיין זה רק פיין טיוניג לא יותר מזה, מתפרסם הרבה שטויות זה לא אומר כלום (תמיד אנשים אוהבים להגיד שכל מה שיש לסין זה מהמערב...)
כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
גם אם היה אפשר זה לא היה משתלם וגם התשובות היו בסגנון של גוגל וזה לא!! חוץ מזה רואים שהוא מאומן בעיקר על סינית, וגם העליות של שימוש ב api יהיו הרבה יותר יקרות מהשגת ביג דאטא וגם שעיקר העלות זה האימון עצמו ולא השגת הביג דאטא)
גם אם הוא פעם אחת ענה שהוא מודל אנטרופיק זה לא אומר שהוא אומן על ביג דאטא משם יכול להיות שלקחו קצת מידע לאימון סופי (סגנון תשובות)
@mefateach זה לא סתם השערות openai בעצמם טוענים את זה.
בנוסף לחשבונות שקושרו לפיתוח הזה.
לא מבין מה כזה הזוי לך שתבוצע כזה סוג של גניבה,
מה חברה סינית תעדיף לאמן מאפס או לאמן על פלט של מודל קיים. -
@מתכנת-חובב יש בכלל פודקסטים אמיתיים למתכנתים?? (שמעתי פעם עושים תוכנה אבל ראיתי שזה ממש רק להסביר שעה שלמה ל"עמ הרצים"...)
@mefateach אין טובים בעברית,
לפחות לא כאלה שאני מכיר. -
@cfopuser שוב עדיין זה רק פיין טיוניג לא יותר מזה, מתפרסם הרבה שטויות זה לא אומר כלום (תמיד אנשים אוהבים להגיד שכל מה שיש לסין זה מהמערב...)
כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
גם אם היה אפשר זה לא היה משתלם וגם התשובות היו בסגנון של גוגל וזה לא!! חוץ מזה רואים שהוא מאומן בעיקר על סינית, וגם העליות של שימוש ב api יהיו הרבה יותר יקרות מהשגת ביג דאטא וגם שעיקר העלות זה האימון עצמו ולא השגת הביג דאטא)
גם אם הוא פעם אחת ענה שהוא מודל אנטרופיק זה לא אומר שהוא אומן על ביג דאטא משם יכול להיות שלקחו קצת מידע לאימון סופי (סגנון תשובות)
@mefateach כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
שוב עדיין זה רק פיין טיוניג לא יותר מזה
אתה מבין באימון מודלים כדי לדעת מה המשקל של זה באימון LLM?
שאלה באמת תמימה כי אני לא מבין (עכשיו אני קצת נכנס לתחום) -
@יודע-ספר גם אם בשבילך הוא פודקאסט טוב, בשביל אלו שנושמים את ה bits&bytes זה בקושי מגרד את פני השטח
@מתכנת-חובב עכ"פ הבאתי את הפודקאסט הזה כהמלצה להתעדכן על נושא השרשור כאן ולא על הדיון האחרון והוא אכן מאוד מעודכן וטוב לחדשות AI, זה ודאי נכון
-
@mefateach זה לא סתם השערות openai בעצמם טוענים את זה.
בנוסף לחשבונות שקושרו לפיתוח הזה.
לא מבין מה כזה הזוי לך שתבוצע כזה סוג של גניבה,
מה חברה סינית תעדיף לאמן מאפס או לאמן על פלט של מודל קיים.@cfopuser כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
@mefateach זה לא סתם השערות openai בעצמם טוענים את זה.
בנוסף לחשבונות שקושרו לפיתוח הזה.
לא מבין מה כזה הזוי לך שתבוצע כזה סוג של גניבה,
מה חברה סינית תעדיף לאמן מאפס או לאמן על פלט של מודל קיים.הטענה שלו היא שגם אם אכן התבצעה גניבה היא עזרה לחסוך 5 אחוז (דוגמה) מעלות וזמן אימון המודל
-
הם אכן העתיקו הרבה מאוד מהמידע של האימון ממודלים אחרים חיפוש גוגל פשוט יראה לך אינספור סקירות על זה.
בתמונות אתה רואה שdeep seek מתייחס לעצמו כgpt או קלאוד.
-
@cfopuser יש לך מקור יותר אמין מפוסט בפורום?
-
@cfopuser יש לך מקור יותר אמין מפוסט בפורום?
-
@מתכנת-חובב יש בכלל פודקסטים אמיתיים למתכנתים?? (שמעתי פעם עושים תוכנה אבל ראיתי שזה ממש רק להסביר שעה שלמה ל"עמ הרצים"...)
@mefateach מתכנתים מחוץ לקופסה
השאלה היא איזה סגנון אתה מחפש כי רוב הפודקאסטים באים מהמקום של התעשיה ולא המקום הטכנולוגי -
@mefateach כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
שוב עדיין זה רק פיין טיוניג לא יותר מזה
אתה מבין באימון מודלים כדי לדעת מה המשקל של זה באימון LLM?
שאלה באמת תמימה כי אני לא מבין (עכשיו אני קצת נכנס לתחום)@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
עכשיו אני קצת נכנס לתחום
עם היסודיות שלך, חוששני שעוד חודש נשמע על מודל חדש שלך שמאתגר את התחום...
-
@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
עכשיו אני קצת נכנס לתחום
עם היסודיות שלך, חוששני שעוד חודש נשמע על מודל חדש שלך שמאתגר את התחום...
@צדיק-וטוב-לו-0 האמת שבזמן האחרון הרגשתי שעוקבים אחרי
אולי גוגל שלחה מתנקשים?
תודה על המחמאה בכל אופן אבל אין למה לצפות -
@צדיק-וטוב-לו-0 האמת שבזמן האחרון הרגשתי שעוקבים אחרי
אולי גוגל שלחה מתנקשים?
תודה על המחמאה בכל אופן אבל אין למה לצפות@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
האמת שבזמן האחרון הרגשתי שעוקבים אחרי
לא, זה בשביל לגנוב את הפיתוח הטכנולוגי המדהים של שליחת קבצים דרך קו הטלפון.

-
@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
האמת שבזמן האחרון הרגשתי שעוקבים אחרי
לא, זה בשביל לגנוב את הפיתוח הטכנולוגי המדהים של שליחת קבצים דרך קו הטלפון.

@צדיק-וטוב-לו-0 יש לי נטיה להתחיל דברים ולא לסיים
דווקא התקדמתי עם זה הרבה מאוד אבל השתעממתי בסוף והמשכתי הלאה
אני יתן להם בחינם את מה שיש לי אם הם יבקשו יפה -
@א.מ.ד. לא קראתי את הכול בפירוט,
אבל את המחירים הזולים של פיתוח המודלים כמו deep seek,
לא קרה בגלל המצאה חדשה כול שהיא, הם פשוט אימנו את המודלים שלהם על המודלים הקיימים של גוגל אנתרופיק וכו',
מה שחסך עלויות תיוג וגרם לזה שהעלויות יהיו בעיקר על האימון בלבד מה שחוסך משמעותית.
(כמו כול דבר בסין זה פשוט חיקוי בסופו של דבר.....)@cfopuser כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
@א.מ.ד. לא קראתי את הכול בפירוט,
אבל את המחירים הזולים של פיתוח המודלים כמו deep seek,
לא קרה בגלל המצאה חדשה כול שהיא, הם פשוט אימנו את המודלים שלהם על המודלים הקיימים של גוגל אנתרופיק וכו',
מה שחסך עלויות תיוג וגרם לזה שהעלויות יהיו בעיקר על האימון בלבד מה שחוסך משמעותית.
(כמו כול דבר בסין זה פשוט חיקוי בסופו של דבר.....)זה שהם השתמשו במודלי צ'אט קיימים (אני גם שמתי לב לזה מיד כשיצא deepseek R1 כשהוא קרא לעצמו GPT) זה חלק ממש אפסי מהאימון. עיקר זה האימון זה ה-pre-train (אימון מקדים) שבו המודל לומד כמויות עצומות של טקסט גולמי, שאותו א"א להפיק מ-API של מודלים קיימים. זו שיטה די נפוצה ומשמשת בדרך כלל לאימון המודל הרציני הראשון של כל חברה, מכיוון שבשלב הזה אין להם מספיק נתונים בפורמט צ'אט, אז הם מייצרים אותם ע"י מודלים חיצוניים. כיום אני מאמין שהם כבר לא משתמשים בזה מכיון שיש להם מספיק מערכי נתונים של צ'אטים בזכות עצמם ע"י השימוש בעולם.
בנוסף, אני מאמין שההשפעה של זה היתה אפסית, כי א"א באמת ליצור חיקוי שמתעלה על המקור, כמו שהיה בזמנו, וגם לא דומה למקור כמו KIMI K2.5.
באמת קצת מוזר - כמה כבר קשה לנקות את זה מנתוני האימון...@cfopuser כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
עלויות תיוג
מדובר כאן על מודל שפה, בלמידה עצמית.
@cfopuser כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
הם אפילו לא טרחו להסתיר את זה טוב כולכך.
בנוסף openai הראו על מספר מפתחות api שמשכו תנועה גדולה מאוד של מידע לכיוונם.התמונה שהעלית מתגובת המודל לא מוכיחה כלום. אין למודל באמת דרך לדעת מי הוא (בלי הוראת מערכת שבאמת מונעת את התופעה), והוא מגיב לפי ההסתברות הנפוצה ביותר בנתוני האימון שמודל שפה הוא GPT. כיום מאמנים מודלים מסויימים באגרסיביות לדעת מי הם, אבל לפני שנה זה לא היה ככה.
זה בדיוק כמו חוסר המודעות של Gemini שגורמת לו להמליץ קודם על GPT ו-Claude, ולשכוח שגם הוא עצמו אופציה. לפעמים זה קורה גם ל-GPT.@cfopuser כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
בנוסף openai הראו על מספר מפתחות api שמשכו תנועה גדולה מאוד של מידע לכיוונם.
ממש אמין. יש הרבה הוכחות שהם יכלו להביא. זה, ממש שטות שנועדה לאוזניים של מי שלא מבין בתחום.
@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
אתה מבין באימון מודלים כדי לדעת מה המשקל של זה באימון LLM?
שאלה באמת תמימה כי אני לא מבין (עכשיו אני קצת נכנס לתחום)זה בערך 1% מהאימון הכולל. מניסיון.
אז כן, גם אני חושב שהם השתמשו ברמה מסויימת בנתונים מ-GPT וכדו', אבל זה סטנדרט בתחום (נקרא "נתונים סינטטיים) ומשפיע באופן מינימלי.
-
@mefateach מתכנתים מחוץ לקופסה
השאלה היא איזה סגנון אתה מחפש כי רוב הפודקאסטים באים מהמקום של התעשיה ולא המקום הטכנולוגי@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
השאלה היא איזה סגנון אתה מחפש כי רוב הפודקאסטים באים מהמקום של התעשיה ולא המקום הטכנולוגי
זה עיקר הבעיה!!
אני מחפש משהו שמגיע מכיוון טכנולוגיה[@מתכנת-חובב כתב בבירור | אני קורא ולא מאמין - פורום למודלי AI שמתנהל באופן עצמאי??:
(עכשיו אני קצת נכנס לתחום)
אל תיכנס בלי מחשוב על חבל על הזמן שלך (או כסף לקנות אותו)

בכל מקרה את כל מה שלמדתי למדתי מה chatgpt ניסתי גם לבצע אימון אבל אחרי שראיתי שזה ייקח 90 שעות ואני לא יודע מה ייצא מזה בסוף (וחבל על המאק שלי שלא נראה לי מיועד לזה) ביטלתי את זה
