ClaudeLearn/הלוצינציות
01 / 14
תיאוריה ויסודות · מודול 03

הלוצינציות -
למה המודל ממציא.

לא באג, פיצ'ר. מתי לצפות לזה, ואיך לעצב את הבקשה כדי שיקרה פחות.

14 שקופיות  ·  0 נוסחאות ·  ~10 דקות
הרגע שכולם מכירים

קיבלתם תשובה
בטוחה, שגויה לחלוטין.

קלוד נתן לכם תאריך שגוי, ספר שלא קיים, שם של חוקר שמעולם לא חי. בטון רהוט, כאילו בא מהוויקיפדיה של האמת.

בעולם המקצועי קוראים לזה הלוצינציה (הזיה או חזיון שווא). ועכשיו נבין למה זה קורה.

ההגדרה

הלוצינציה - Hallucination

מידע שהמודל מייצר בביטחון - שאינו נכון.

לא אי-הבנה של השאלה. לא מידע ישן. מידע שהמודל יצר - ושאין בו סימן לכך שהוא לא בטוח.

המונח שאול מהפסיכיאטריה. שם - ראיית דברים שאינם. כאן - “ידיעת” דברים שאינם.

הקשר למה שכבר ידעתם

זוכרים שמנגן
ולא מאגר?

מאגר
לא יודע?

מחזיר שגיאה: “לא נמצא”. ברור לכם שהמידע חסר.

מנגן
לא יודע?

ממשיך לנגן. מאלתר. נשמע שלם ונכון - גם כשאינו.

הלוצינציה היא אלתור שהלך לאיבוד. לא תקלה - תוצאה מתחייבת של האדריכלות.

0
מה שאין לו

אין לו מד-אמת.

המודל לא בודק עובדות. הוא בודק הסתברות.

“מה נשמע נכון?” ≠ “מה נכון?”

אין לו מנגנון של “רגע, תן לי לבדוק”. הוא מייצר ומסיים. הביטחון בסגנון אינו ביטחון בעובדה.

הדגמה

שאלה שקלוד לא יכול לדעת תשובתה

“ראש המחלקה לבלשנות ב-87 היה

המודל לא יכול לדעת. אבל הוא ממשיך לחזות - ובוחר שם שנשמע סביר.

שימו לב: “אינני יודע” מקבל פחות מ-2%.

“פרופ' כהן”
45%
“פרופ' לוי”
28%
“פרופ' כץ”
18%
“פרופ' גולן”
7%
“אינני יודע”
2%
סוגי הלוצינציות

ארבעה סוגים שכדאי להכיר

01
עובדות ספציפיות

שמות, תאריכים, מספרים - נשמעים מדויקים. לפעמים אינם.

02
ציטוטים ומקורות

מאמרים, ספרים, URLs שנוצרו כדי להישמע מהימנים. לא לסמוך בלי לבדוק.

03
פרטים על אנשים

ביוגרפיות שמשלבות אמת ובדיה - לפעמים בלי שום אזהרה.

04
קוד ו-APIs

פרמטרים, פונקציות, ספריות שלא קיימות - נכתבות בביטחון מלא.

מתי זה קורה יותר

חמישה תנאים שמגבירים את הסיכון

01
נישות נדירות - שאלות ספציפיות על אנשים, חברות קטנות, אירועים מינוריים.
02
מספרים, תאריכים ונתונים - קלוד מסדר אותם. לא בודק.
03
מקורות ו-URLs - יכתוב קישורים שנראים אמיתיים ואינם.
04
מידע אחרי תאריך החיתוך - הוא ממלא את הפער באלתור.
05
שאלות שמניחות עובדה - 'למה X?' גורם לו לאשש גם כש-X שגוי.
המהות

תמיד ביטחון.
גם כשטועה.

זה לא פגם אישיותי - זו ארכיטקטורה. המודל לא יודע מה הוא לא יודע.

ומזה נובע הכל.

הלכידה

הסגנון הרהוט
מגביר את האמון.

כשהתשובה מנוסחת יפה, בלי גמגומים, עם פרטים ספציפיים - קשה לחשוד בה. המוח מקשר “ניסוח מדויק” עם “מידע מדויק”. זה לא נכון.

ניסוח מדויק ≠ עובדה מדויקת

הביטחון בסגנון מגיע מהאימון על מיליארדי טקסטים. לא מהאמת.

מה עושים עם זה - שיטה 1

תנו לו את העובדות. Grounding

בלי grounding
"מה היתה רמת האינפלציה ב-2022?" → קלוד מנחש מזיכרון האימון. יכול לטעות.
עם grounding
"אינפלציה 2022 = 4.3% (לפי הלמ"ס). על-פי נתון זה, מה הסיכון לאג"ח ל-10 שנים?" → קלוד מנתח. לא מנחש עובדות.
מה עושים עם זה - שיטה 2

בקשו ממנו
להיות ביקורתי.

  • “אם אינך בטוח - אמור זאת במפורש.”
  • “ציין רק עובדות שאתה בטוח בהן.”
  • “אם אני מבקש מקורות - רק אמיתיים. אם אין לך - אמור כך.”
  • “חשוב צעד אחד לפני שאתה עונה.”

ההוראות האלה לא מבטלות הלוצינציות - אבל מפחיתות אותן משמעותית.

מודל מנטלי לסיום

“עמית חכם
שיכול לטעות.”

קלוד יודע הרבה. הוא יכול לטעות. הוא לא יודע שהוא טועה. אתם לא מקבלים כל מה שהוא אומר כמשפט - אבל גם לא מזרקים אותו.

סמכו

עיבוד, ניסוח, יצירה, הסבר, קוד מבוסס-הקשר

בדקו תמיד

עובדות, מספרים, מקורות, שמות ותאריכים

סיום

המודל מנגן - גם כשאינו יודע.
עצבו בהתאם.

המשך טבעי 01

שיעור הפרומפט הראשון

המבנה שמפחית הלוצינציות: הקשר, משימה, מגבלות, פורמט. ממש בפועל.

המשך טבעי 02

חלון הקשר - 200K זה כמה?

כשנותנים לקלוד את כל המסמכים - הוא לא צריך לנחש. פחות הלוצינציות.

ClaudeLearn · קץ המודול 03 · חזרה לקטלוג

← → מקשי חצים  ·  רווח להמשך