חזרה לאתר
ML ומודלים 4 דק׳ קריאה שיעור 7 מתוך 9

LLM — מודל שפה גדול בתמונה אחת

LLM מנחש את ההמשך הכי הסתברותי — שוב ושוב — ונראה כמו שיחה.

הרעיון בתנועה

מה קורה בתוך LLM

איור מונפש: מה קורה בתוך LLM. לחיצה על «צעד» מקדמת שלב אחד ומקריאה את תיאורו; כל מה שהאיור מראה מוסבר גם בטקסט שמתחתיו.

הסבר פשוט

הוא לא 'יודע אמת' כמו אנציקלופדיה מובטחת.

הוא דחוס מהרבה טקסט שראה באימון + מה שתתנו לו עכשיו בהקשר.

לכן הוא יכול להמציא בביטחון (הזיה). נלמד איך לעגן עם RAG.

  • ניחוש ההמשך
  • הקשר חשוב
  • צריך כלי אמת/מקורות
תרגול קטן

השלימו: 'מודל שפה בלי מקורות עלול…' (הזיה).

מקור השראה: Compendium ch07 + MS intro

בדיקה מהירה

LLM בעיקר…