@ע-ה-דכו-ע הסיבה היא שהטוקנייזר (שמתרגם את הטקסט לטוקנים) מכיר את רוב המילים השלמות באנגלית, כך שמילה דורשת על פי רוב טוקן אחד, מה שאין כן בעברית שלרוב המילים נצרך 2-3 או יותר טוקנים. משמעות המילים וזה שמילה עברית מכילה יותר תוכן פחות קשור פה, כי הטוקנייזר לא מבין משמעות (זה לא המודל עצמו שמבין מרחב סמנטי) אלא הוא מילון סטטי של תווים ומילים. הטוקנייזר אומן בעיקר על אנגלית ולכן המודל מכיר את המילים באנגלית בשלמותן, לעומת עברית שהמילון שלו דל יותר ולכן נאלץ לפרק כל מילה להברות ואפילו לאותיות.
הסיבה שכתוב בקישור שהביא @החכם-התם לא נכונה, מכיוון שהטוקנייזר פשוט מפרק את המילים לטוקנים בלי קשר למשמעות שלהן, כך שגם המילה "מחשבים" ברבים יכולה להיות טוקן אחד אם הטוקנייזר היה מאומן על עברית באותה רמה של אנגלית. הטוקנייזר לא מבין משמעות של יחיד ורבים.
כמובן שזה הולך ומשתפר ממודל למודל, וכיום אני מאמין שזה כבר לא פער משמעותי, לפחות ב-Gemini שאומן על כמות הטקסטים הגדולה ביותר בעברית.
 { const baseUrl = "https://www.google.co.il/search?q=site:mitmachim.top"; const m = location.pathname.match(/^\/(topic|category)\/(\d+)/); const type = m ? m[1] : null; const id = m ? m[2] : null; let searchInput; function search(path = "") { const query = searchInput.value.trim(); if (query) { window.open(`${baseUrl}${path}%20${encodeURIComponent(query)}`, "_blank"); } } let buttons = {}; buttons.searchAll = { id: "bb-search-all", label: `חיפוש ${type ? "בכל הפורום" : ""}`, className: type ? "btn-secondary" : "btn-primary", callback: () => search(), }; if (type === "topic") { buttons.searchTopic = { label: "חיפוש בנושא זה", className: "btn-primary", callback: () => search(`/topic/${id}`), }; } else if (type === "category") { buttons.searchCategory = { label: "חיפוש בקטגוריה זו", className: "btn-primary", callback: () => search(`/category/${id}`), }; } buttons.cancel = { label: "ביטול", className: "btn-default", "data-bs-dismiss": "modal" }; const dialog = bootbox.dialog({ title: '<div style="text-align:center;"><img src="/assets/uploads/files/1625950269825-mt-google.png" width="400" alt="חיפוש בגוגל"></div>', message: '<input id="bb-inp" class="bootbox-input bootbox-input-text form-control" placeholder="הקלידו כדי לחפש בגוגל" autocomplete="off"/>', buttons, backdrop: true, show: true, onEscape: true }); dialog.on("shown.bs.modal", function () { searchInput = document.getElementById("bb-inp"); if (searchInput) { searchInput.focus(); searchInput.addEventListener("keydown", function (e) { if (e.key === "Enter") { e.preventDefault(); const query = this.value.trim(); if (query) { search(); dialog.modal("hide"); } } else if (e.key === "Escape") { e.preventDefault(); dialog.modal("hide"); } }); } const searchAllButton = document.getElementById("bb-search-all"); if (searchAllButton) { searchAllButton.title = "לחצו על אנטר כדי לחפש"; } }); })(); void 0;){kind=link}