שיתוף | הפכתי את Google AI Studio לסוכן אוטונומי מלא – שליטה במחשב ובדפדפן (Gemini Control)
-
@הידען
@מטען-נייד
כדי שהAI יוכל להפוך לסוכן הוא חייב את הקבצים שבזיפ
||[אם זה לא היה ברור הסוכן הולך להתנהל מהפרויקט שתפתח]||
לפתוח כאן
ואז כאן וזהו
@אחד-מקצועי ממש מסובך יש סיכוי שתתן הסבר מפורט על כל שלב!
נגיד מה עכשיו עושים
שרת הגישור המרכזי וה-AI: server.ts (ניהול WebSockets, חיבורי סשנים לדפדפן ולמחשב, אינטגרציית Gemini).
כלי ה-CLI והאוטומציה: scripts/browser.cjs, scripts/pc.cjs, scripts/deploy_pc_server.cjs.
ממשק המשתמש וההגדרות: src/App.tsx, GuideModal.tsx, ErrorBoundary.tsx, ו-config.json.
הנחיות הפעולה והבטיחות: AGENTS.md.
המערכת מהודקת, נבדקה ועוברת קומפילציה מלאה בהצלחה.
במה תרצה שנתמקד כעת או איזו פעולה נרצה להריץ? -
@הידען
@מטען-נייד
כדי שהAI יוכל להפוך לסוכן הוא חייב את הקבצים שבזיפ
||[אם זה לא היה ברור הסוכן הולך להתנהל מהפרויקט שתפתח]||
לפתוח כאן
ואז כאן וזהו
@אחד-מקצועי עדיין הוא לא יכול להעלות לא זיפ ולא תיקיות
-
@אחד-מקצועי ממש מסובך יש סיכוי שתתן הסבר מפורט על כל שלב!
נגיד מה עכשיו עושים
שרת הגישור המרכזי וה-AI: server.ts (ניהול WebSockets, חיבורי סשנים לדפדפן ולמחשב, אינטגרציית Gemini).
כלי ה-CLI והאוטומציה: scripts/browser.cjs, scripts/pc.cjs, scripts/deploy_pc_server.cjs.
ממשק המשתמש וההגדרות: src/App.tsx, GuideModal.tsx, ErrorBoundary.tsx, ו-config.json.
הנחיות הפעולה והבטיחות: AGENTS.md.
המערכת מהודקת, נבדקה ועוברת קומפילציה מלאה בהצלחה.
במה תרצה שנתמקד כעת או איזו פעולה נרצה להריץ? -
@הידען
עכשיו תכנס לתצוגה מקדימה שם
משם נראה שיהיה די ברור
תתקין תוסף [וזה לכשעצמו יתן לך שליטה על הדפדפן לשליטה על המחשב תתקין משם גם את התוכנה]
@אחד-מקצועי אפשרי בנטפרי?
התצוגה מקדימה חסום... -
איך?
תצוגה מקדימה חסומה בנטפרי. -
@אחד-מקצועי אפשרי בנטפרי?
התצוגה מקדימה חסום...@מטען-נייד
קצת בעיה, כי התוסף צריך לרדת דווקא דרך שם. בנוסף אם התצוגה המקדימה לא עובדת, אז גם התוסף לא יוכל לתקשר
(התוסף מתקשר דרך השרת של התצוגה המקדימה). בעברית, אם התצוגה המקדימה לא עובדת, אז לא נראה לי שהוא יכול לעבוד. מתברר כנראה שבנטפרי זה פחות עובד. אולי תנסה לבקש מנטפרי שיפתחו את כתובת השרת? תשאל את ה-AI מה כתובת השרת שלך, ושלח אותה לבדיקה. -
@הידען
בפועל זה רק 3פעולות
לפתוח פרויקט
להתקין תוסף
להתקין תוכנה
[התוכנה לא חובה ]
אבל כל אחד הוא נצרך תאמין לי ניסיתי לקצר תהליכים
אגב היה תקיעה נוספת או משהו לא ברור חוץ מנטפרי? -
@מיני-האקר
אולי זה לא מספיק ברור
זה ממש לא API
זה הסוכן המקודד מבצע את הפעלות כלומר מתוך גוגל סטודיו הוא מבצע את הפעלות
זה נגיד דוגמה
-
יש מול אנטי גרוויטי המון יתרונות.
דבר ראשון, שליטה מלאה בווינדוס: אנטי גרוויטי לא מזיז עכבר, לא מקליד במקלדת ולא מתפעל חלונות. כאן יש מנוע UI Automation וראייה ממוחשבת שמאפשרים לסוכן ללחוץ פיזית על כפתורים, לפתוח תוכנות שולחניות, קנבסים ומשחקים, לתפעל אפליקציות שאין להן שורת פקודה.
לגבי הדפדפן: אנטי גרוויטי פותח חשבון בנפרד שמצריך אישורים, בלי העוגיות שלך. כאן מדובר בתוסף שרץ בתוך הדפדפן היומיומי שלך, בלשוניות רקע ומבלי לחטוף פוקוס, כשהוא משתמש באתרים שאתה כבר מחובר אליהם.
וגם במגבלות ובמכסות: באנטי גרוויטי יש מכסות והגבלות שבועיות קשיחות (יש הבדל משמעותי, יש מגבלות שבועיות ויש מכסות שעותיות די קשיחות). כאן הריצה מתבצעת ישירות על בסיס המכסה החינמית הרגילה של Google AI Studio עם חלון הקשר עצום, ללא הגבלות הפלטפורמה של אנטי גרוויטי.
ויש גם שליטה בזמן ריצה: אפשר להזריק לסוכן הנחיות תוך כדי הלולאה (בלי לעצור את המשימה מחדש), והסוכן עצמו יכול להקפיץ חלון שאלה יזום כשיש לו ספק, במקום לפעול על עיוור.
יש עוד יתרונות טכניים מבחינת ביצוע (כך אנטי גרוויטי טען והסביר, אבל לא רואה עניין להלאות את הציבור).
תגיד לו ללכת לפוטושופ לעצב לך משהו – הוא לא יוכל לעשות את זה. את הציור הזה שהסוכן צייר לי עכשיו, אנטי גרוויטי לא יכול לצייר.
-
@אחד-מקצועי אגב זה גם יתרון על אנטיגרוויטי שזה פתוח בנטפרי
-
אני אשמח אם מישהו נתקל בבאג או ברעיון לשדרוג אני אשמח שתשתפו כדי שאוכל לשפר
-
יש מול אנטי גרוויטי המון יתרונות.
דבר ראשון, שליטה מלאה בווינדוס: אנטי גרוויטי לא מזיז עכבר, לא מקליד במקלדת ולא מתפעל חלונות. כאן יש מנוע UI Automation וראייה ממוחשבת שמאפשרים לסוכן ללחוץ פיזית על כפתורים, לפתוח תוכנות שולחניות, קנבסים ומשחקים, לתפעל אפליקציות שאין להן שורת פקודה.
לגבי הדפדפן: אנטי גרוויטי פותח חשבון בנפרד שמצריך אישורים, בלי העוגיות שלך. כאן מדובר בתוסף שרץ בתוך הדפדפן היומיומי שלך, בלשוניות רקע ומבלי לחטוף פוקוס, כשהוא משתמש באתרים שאתה כבר מחובר אליהם.
וגם במגבלות ובמכסות: באנטי גרוויטי יש מכסות והגבלות שבועיות קשיחות (יש הבדל משמעותי, יש מגבלות שבועיות ויש מכסות שעותיות די קשיחות). כאן הריצה מתבצעת ישירות על בסיס המכסה החינמית הרגילה של Google AI Studio עם חלון הקשר עצום, ללא הגבלות הפלטפורמה של אנטי גרוויטי.
ויש גם שליטה בזמן ריצה: אפשר להזריק לסוכן הנחיות תוך כדי הלולאה (בלי לעצור את המשימה מחדש), והסוכן עצמו יכול להקפיץ חלון שאלה יזום כשיש לו ספק, במקום לפעול על עיוור.
יש עוד יתרונות טכניים מבחינת ביצוע (כך אנטי גרוויטי טען והסביר, אבל לא רואה עניין להלאות את הציבור).
תגיד לו ללכת לפוטושופ לעצב לך משהו – הוא לא יוכל לעשות את זה. את הציור הזה שהסוכן צייר לי עכשיו, אנטי גרוויטי לא יכול לצייר.
@אחד-מקצועי זה הוא צייר עם שכבות? כלומר ניתן להזיז אובייקטים וכולי?
-
@אחד-מקצועי זה הוא צייר עם שכבות? כלומר ניתן להזיז אובייקטים וכולי?
@הלי
כן הוא צייר
לבד ותיקן בלייב וזה שכבות וניתן לעריכה
[הוא גם עובד לי בבלנדר ופוטושופ[אומנם בבלנדר הוא משתמש בתוסף של בלנדר שנותן לו לעבוד בקלות יותר כלומר הוא לא צריך את העכבר] -
@אחד-מקצועי הכפתור להורדת התוסף לא עובד תוכל להעלות אותו לכאן?
תודה -
@אחד-מקצועי הכפתור להורדת התוסף לא עובד תוכל להעלות אותו לכאן?
תודה@המתכנת-הצעיר
אני יביא לך קישור עוד מעט לפתיחת פרויקט המעודכן יותר ושם זה יעבוד -
@אחד-מקצועי הכפתור להורדת התוסף לא עובד תוכל להעלות אותו לכאן?
תודה@המתכנת-הצעיר
בבקשהזה קישור שיפתח לך ישר פרויקט רק תלחץ על "רימקס" והפרויקט יהפוך ליהות זמין [ושם זה גרסה יותר מתקדמת והתוסף עובד ]
https://ai.studio/apps/1993db78-e593-4b27-9086-7d6af017496c
שלום! נראה שהשיחה הזו מעניינת אותך, אבל עדיין אין לך חשבון.
נמאס לכם לגלול בין אותם הפוסטים בכל ביקור? כשנרשמים לחשבון, תמיד תחזרו בדיוק למקום שבו הייתם קודם, ותוכלו לבחור לקבל התראות על תגובות חדשות (בין אם במייל, ובין אם בהתראת פוש). תוכלו גם לשמור סימניות ולפרגן ב-upvote לפוסטים כדי להביע הערכה לחברי קהילה אחרים.
בעזרת התרומה שלך, הפוסט הזה יכול להיות אפילו טוב יותר 💗
הרשמה התחברות { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}