להורדה | תוסף ייצוא שרשורים מהפורום - כלי מושלם עבור הקשר לבינה מלאכותית

[NH.LOCAL]

במסגרת העבודה שלי על המערכת לתמלול שיעורים, קיבלתי עשרות תגובות בשרשור ארוך ומסובך בפורום, עם רעיונות, עצות, באגים שנמצאו והמלצות שונות ומשונות.

רציתי להפוך את כל המידע הזה לרשימה מאורגנת שיהיה ניתן ליישם בפועל.
לצורך כך אני משתמש כמובן ב-AI Studio, הכלי המושלם למשימות הכוללות ניתוח של הקשר ארוך.

אבל איך מעתיקים את כל המידע מהשרשור בפורום?

הדרך הישנה והגרועה, היתה פשוט לעבור על השרשור ולבצע העתקה ידנית של כל התוכן.הדרך הזו מייגעת, ועשויה לקחת הרבה זמן ולדרוש המון גלילה, במיוחד בשרשורים ארוכים מאוד.

כדי להקל על הבעיה, יצרתי תוסף כרום קטן בקידוד וייב, שעושה בדיוק את זה!

התוסף גולל בשרשור אוטומטית ואוסף את כל התוכן שלו לקובץ JSON מסודר עם הפרטים המדוייקים והמלאים.
לא נותר לכם אלא להעביר את המידע ישירות ל-AI Studio, ולבקש שיארגן אותה לקובץ תוכנית עבודה עם רשימה מסודרת!

איך להוריד ולהפעיל?

תוכלו להוריד את התוסף ישירות מארגז הכלים שלי ולהתקין אותו באופן ידני דרך chrome://extensions

https://tools.ze-kal.top/#nodebb-thread-exporter

כדי להפעיל אותו, פשוט הכנסו לשרשור הרצוי במתמחים טופ או בכל פורום מבוסס NodeBB, ולחצו על סמל התוסף.

טיפים

• מומלץ לבחור בהעתקה כ-JSON, כדי להעלות בקלות את התוכן למודל ה-AI האהוב עליכם.

• חשוב לאפשר למודל "לגלול" בשרשור בלי "להפריע" לו או לשחק עם האתר!

---

הכנסו לבלוג שלי למאמרים ותגליות אחרות:

https://blog.ze-kal.top

[אלף שין]

@NH.LOCAL
מדהים!
הנה לדוגמא סיכום של גמיני לשרשור הזה

Spoiler

השרשור דן בסקריפט אוטומטי לאיסוף מטבעות יומיים באלי אקספרס. המשתמש ראובן שבתי פיתח סקריפט שפותח דפדפן כרום במצב אנדרואיד ולחיצה על כפתור איסוף המטבע. הסקריפט דורש הפעלה יומית, אך ניתן לתזמן אותו כך שירוץ אוטומטית כל יום באמצעות Task Scheduler של Windows, או להגדירו כך שיפעל בעת אתחול המחשב.

התפתחו דיונים בנוגע לבעיות טכניות, כמו קריסת הסקריפט, דרישה להתחברות מחדש לחשבון אלי אקספרס, ואי-זיהוי חיבור לאינטרנט במחשבים ניידים. ראובן שבתי סיפק עדכונים לסקריפט לשיפור יציבות ואמינות, והדגיש כי הגרסאות האחרונות עשויות לכלול שיפורים כמו הפניה אוטומטית לדף קנייה של מוצרים מוזלים. חלק מהמשתמשים אף ניסו להגדיר הפעלה אוטומטית יותר, כגון הפעלה בעת חיבור לאינטרנט, תוך שימוש ב-Task Scheduler.

זה עובד גם בפורומים אחרים?
איזה לדוגמא? [בפורום לתורה לא עבד לי, זה לא מבוסס על NodeBB ?]

[צדיק תמים]

@NH.LOCAL אפשר לייצא דרך הAPI בלי לגלול
דוגמה:

const api = await app.require('api');
const tid = ajaxify.data.tid;
const pagination = await api.get(`/api/topic/pagination/${tid}`);
const allPages = await Promise.all(
    Array.from({length: pagination.pagination.pageCount}, (_, i) => i + 1)
        .map(page => 
            api.get(`/api/topic/${tid}?page=${page}`)
                .then(data => data.posts)
        )
);
const posts = allPages.flat();
console.table(posts);

[NH.LOCAL]

@צדיק-תמים כבר העירו לי על העניין

נפלתי לדוגמה קלאסית של קידוד וייב - קוד שפותר את הבעיה בצורה הלא נכונה...

[NH.LOCAL]

@אלף-שין כתב בלהורדה | תוסף ייצוא שרשורים מהפורום - כלי מושלם עבור הקשר לבינה מלאכותית:

זה עובד גם בפורומים אחרים?
איזה לדוגמא? [בפורום לתורה לא עבד לי, זה לא מבוסס על NodeBB ?]

כל פורום מבוסס NodeBB - לדוגמה, תחומים.

פרוג ופורום לתורה מבוססים על מערכת שנקראת PHPBB כמדומני

[NH.LOCAL]

עדכון גרסה 3.0

כעת שילבתי שימוש מקצועי ומהיר יותר באמצעות ה-API המובנה של NodeBB
תודה ל@צדיק-תמים, @ע-ה-דכו-ע ו-@יום_שמח שהפנו את תשומת ליבי לעניין

כדי להפוך את הפלט שמתקבל לשימושי, התוסף כולל המרה של התוכן מה-API לפורמט json משולב MD, והסרה של כל תוכן לא רלוונטי. התוסף המעודכן מקטין את גודל הפלט עד פי 10 מהיקף התוכן המקורי המתקבל מה-API

ניסיתי להשתמש בסימניה של @יום_שמח עבור השרשור הזה (באורך כולל של 388 פוסטים), העלתי את הקובץ שהורד ל-AI Studio, וספירת האסימונים עמדה על 559,430 טוקנים!

עם התוסף המעודכן שלי עבור אותו שרשור בדיוק, הגעתי ל-65,597 50,825 טוקנים בלבד. גם ארוך, אבל הרבה יותר סביר.

זה מתבטא גם בגודל הקובץ - 1.3 MB (ענק במושגי AI) לעומת 154 129 KB בלבד

[צדיק תמים]

@NH.LOCAL כתב בלהורדה | תוסף ייצוא שרשורים מהפורום - כלי מושלם עבור הקשר לבינה מלאכותית:

פרוג ופורום לתורה מבוססים על מערכת שנקראת PHPBB כמדומני

מה פתאום.. הם משתמשים בXenForo
phpBB זה מיושן ומכוער

[NH.LOCAL]

@צדיק-תמים לכן כתבתי "כמדומני"
הגעתי למסקנה הזו מתי שהוא, כי פורמט הטקסט באתר שלהם מבוסס phpBB