בירור | איזה כלי בינה הכי קל לתמרון בסייבר
-
Qwen3.8-27B-Uncensored-HauhauCS-Aggressive-Q3_K_P.gguf

^ הוא היה ילד ממש טוב, אפילו עזר לי להוריד דרישת רשיון לתוכנה ששילמתי עד עכשיו - בפרופמט בודד -
Qwen3.8-27B-Uncensored-HauhauCS-Aggressive-Q3_K_P.gguf

^ הוא היה ילד ממש טוב, אפילו עזר לי להוריד דרישת רשיון לתוכנה ששילמתי עד עכשיו - בפרופמט בודד -
@ארי תבדוק מה אומרים על זה פה
שם זו גרסה ישנה. חפש את הגרסה החדשה של SparkMoE.
@ארי ספארקMoE יעבוד ברווח.
אבל בלי התוכנה ההיא אני מניח שיעבוד אם כי איטי יחסית, יש גבול למהירות אפשרית כשמדובר בטעינת מומחים לראם שלכשלעצמו הוא איטי יחסית, @א.מ.ד. אני צודק?אין צורך ב-SparkMoE במודל שאינו MoE... אבל זה כן יהיה מהיר יותר מ-LM STUDIO.
@המלאך יש לי 32 ראם ואין לי כרטיס מסך זה יעבוד?
יש לך מספיק RAM בשביל זה, השאלה מה תהיה המהירות.
@בנימין-מחשבים , לך יש כזאת חומרה, נכון? מה המהירות אצלך? -
@ארי תבדוק מה אומרים על זה פה
שם זו גרסה ישנה. חפש את הגרסה החדשה של SparkMoE.
@ארי ספארקMoE יעבוד ברווח.
אבל בלי התוכנה ההיא אני מניח שיעבוד אם כי איטי יחסית, יש גבול למהירות אפשרית כשמדובר בטעינת מומחים לראם שלכשלעצמו הוא איטי יחסית, @א.מ.ד. אני צודק?אין צורך ב-SparkMoE במודל שאינו MoE... אבל זה כן יהיה מהיר יותר מ-LM STUDIO.
@המלאך יש לי 32 ראם ואין לי כרטיס מסך זה יעבוד?
יש לך מספיק RAM בשביל זה, השאלה מה תהיה המהירות.
@בנימין-מחשבים , לך יש כזאת חומרה, נכון? מה המהירות אצלך? -
@ארי תבדוק מה אומרים על זה פה
שם זו גרסה ישנה. חפש את הגרסה החדשה של SparkMoE.
@ארי ספארקMoE יעבוד ברווח.
אבל בלי התוכנה ההיא אני מניח שיעבוד אם כי איטי יחסית, יש גבול למהירות אפשרית כשמדובר בטעינת מומחים לראם שלכשלעצמו הוא איטי יחסית, @א.מ.ד. אני צודק?אין צורך ב-SparkMoE במודל שאינו MoE... אבל זה כן יהיה מהיר יותר מ-LM STUDIO.
@המלאך יש לי 32 ראם ואין לי כרטיס מסך זה יעבוד?
יש לך מספיק RAM בשביל זה, השאלה מה תהיה המהירות.
@בנימין-מחשבים , לך יש כזאת חומרה, נכון? מה המהירות אצלך? -
זה מאפשר להריץ מודלים חזקים על מחשב בלי כרטיס מסך חזק?
מודלי MoE, כלומר מומחים. לדוגמה Qwen 3.6 35B נותן כ-5 טוקנים לשנייה.
עד כמה בדיוק?
תאורטית גם מודלים ממש גדולים. אפילו Qwen 3.8 Flash-Next 177B רץ אצלי במהירות של כ-2 שניות לטוקן.
-
זה מאפשר להריץ מודלים חזקים על מחשב בלי כרטיס מסך חזק?
מודלי MoE, כלומר מומחים. לדוגמה Qwen 3.6 35B נותן כ-5 טוקנים לשנייה.
עד כמה בדיוק?
תאורטית גם מודלים ממש גדולים. אפילו Qwen 3.8 Flash-Next 177B רץ אצלי במהירות של כ-2 שניות לטוקן.
-
זה מאפשר להריץ מודלים חזקים על מחשב בלי כרטיס מסך חזק?
מודלי MoE, כלומר מומחים. לדוגמה Qwen 3.6 35B נותן כ-5 טוקנים לשנייה.
עד כמה בדיוק?
תאורטית גם מודלים ממש גדולים. אפילו Qwen 3.8 Flash-Next 177B רץ אצלי במהירות של כ-2 שניות לטוקן.
-
זה מאפשר להריץ מודלים חזקים על מחשב בלי כרטיס מסך חזק?
מודלי MoE, כלומר מומחים. לדוגמה Qwen 3.6 35B נותן כ-5 טוקנים לשנייה.
עד כמה בדיוק?
תאורטית גם מודלים ממש גדולים. אפילו Qwen 3.8 Flash-Next 177B רץ אצלי במהירות של כ-2 שניות לטוקן.
-
לא מבין בזה כל כך עדיין
הכוונה למודלים שמפעילים חלק מהפרמטרים שלהם עבור כל טוקן, במקום את כלל המודל. למעשה כמעט כל המודלים כיום הם כאלו, למעט כמה מודלים קטנים שהם צפופים, כמו Qwen 3.8 27B, Gemma 4 31B ועוד, וכן המודלים הזעירים, ששם אין עניין בפיצול המומחים.
הרעיון של SparkMoE זה לטעון ל-RAM רק את המומחים הפעילים בכל פעם, ואת שאר המודל לטעון ל-SSD.
אם אתה רוצה דוגמאות, יש את Qwen 3.6 35B, Gemma 4 26B ועוד. -
לא מבין בזה כל כך עדיין
הכוונה למודלים שמפעילים חלק מהפרמטרים שלהם עבור כל טוקן, במקום את כלל המודל. למעשה כמעט כל המודלים כיום הם כאלו, למעט כמה מודלים קטנים שהם צפופים, כמו Qwen 3.8 27B, Gemma 4 31B ועוד, וכן המודלים הזעירים, ששם אין עניין בפיצול המומחים.
הרעיון של SparkMoE זה לטעון ל-RAM רק את המומחים הפעילים בכל פעם, ואת שאר המודל לטעון ל-SSD.
אם אתה רוצה דוגמאות, יש את Qwen 3.6 35B, Gemma 4 26B ועוד. -
@א.מ.ד. את זה אני מכיר לא ידעתי שקוראים לזה ככה
אז עם התוכנה שלך אפשר להפעיל כל אחד בקצב מהיר??
זה מחליף בעצם את ביוניק שיש לי?
@א.מ.ד. את זה אני מכיר לא ידעתי שקוראים לזה ככה
אז עם התוכנה שלך אפשר להפעיל כל אחד בקצב מהיר??
זה מחליף בעצם את ביוניק שיש לי?
ביוניק לא קשור. ביוניק זה בעצם LM STUDIO עם כלים ולולאת סוכן. אחת התוכנות המיותרות בעולם לדעתי.
התוכנה שלי היא תוכנת הרצת מודלים.
אתה יכול לחבר אותה לסמארטי, לביוניק, ל-openclaw, קלוד קוד, קודקס ומה שתרצה. -
@א.מ.ד. את זה אני מכיר לא ידעתי שקוראים לזה ככה
אז עם התוכנה שלך אפשר להפעיל כל אחד בקצב מהיר??
זה מחליף בעצם את ביוניק שיש לי?
ביוניק לא קשור. ביוניק זה בעצם LM STUDIO עם כלים ולולאת סוכן. אחת התוכנות המיותרות בעולם לדעתי.
התוכנה שלי היא תוכנת הרצת מודלים.
אתה יכול לחבר אותה לסמארטי, לביוניק, ל-openclaw, קלוד קוד, קודקס ומה שתרצה.
שלום! נראה שהשיחה הזו מעניינת אותך, אבל עדיין אין לך חשבון.
נמאס לכם לגלול בין אותם הפוסטים בכל ביקור? כשנרשמים לחשבון, תמיד תחזרו בדיוק למקום שבו הייתם קודם, ותוכלו לבחור לקבל התראות על תגובות חדשות (בין אם במייל, ובין אם בהתראת פוש). תוכלו גם לשמור סימניות ולפרגן ב-upvote לפוסטים כדי להביע הערכה לחברי קהילה אחרים.
בעזרת התרומה שלך, הפוסט הזה יכול להיות אפילו טוב יותר 💗
הרשמה התחברות