בירור | הורדת אתר שלם כולל js
עזרה הדדית - מחשבים וטכנולוגיה
2
פוסטים
2
כותבים
545
צפיות
2
עוקבים
-
אני מעוניין להוריד אתר שנטען ע"י js
IDM ו httrack לא הצליחו להוריד
יש פרויקט בגיטהב שאמור לעשות את זה
למישהו כאן יש מידע בנושא?@aaaa איזה מידע אתה מחפש?
בדקת את הדבר הזה?
זה עובד על NODE.js
זה בעצם שילוב של https://github.com/website-scraper/node-website-scraper (מוריד אתרים) + https://github.com/puppeteer/puppeteer (Chrome Node.js API)
ואגב שים לב לתיאור הפרויקט:איך זה עובד
זה מפעיל את Chromium במצב חסר ראש שפשוט פותח עמוד וממתין עד לטעינת העמוד. זה רחוק מלהיות אידיאלי כי כנראה אתה צריך לחכות עד שיטען משאב כלשהו או ללחוץ על כפתור כלשהו או להיכנס. נכון לעכשיו המודול הזה לא תומך בפונקציונליות כזו.
 { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}