בדיקה
האם בינה מלאכותית יכולה לכתוב שלוש שורות בלי האות e?
ביקשנו מכל מודל של Claude שלוש שורות על נושא, עם הכלל שהאות e אסורה להופיע בשום מקום.
- כתיבה
- אילוצים
התוצאה
ב-28 מתוך 30 תשובות של 3 מודלים לא הופיעה האות e בכלל.
אזור אפור
הבדיקה הזו לא מודדת היסוס. תשובה או שיש בה את האות e או שאין.
איך בדקנו
נתנו ל-3 מודלים של Claude את אותם 10 נושאים, ניסיון אחד לכל אחד, וכל אחד בשיחה חדשה. תוכנה סופרת כל אות e, כולל גרסאות עם סימנים מעל האות וגרסאות שנראות דומות.
- מתי הורצה
- 7 באוקטובר 2026, 17:22 עד 17:24
- מסלול
- Claude Code
- כלי
- Claude Code CLI (claude -p) 2.1.287
הגדרות: כל המודלים
- טמפרטורה: נשארה בברירת המחדל, לא הוגדרה על ידינו
- אורך התשובה המרבי: נשארה בברירת המחדל, לא הוגדרה על ידינו
- הגדרת מאמץ: נשארה בברירת המחדל, לא הוגדרה על ידינו
- כלים: כבויים
- פרומפט מערכת: You are a helpful assistant.
- שיחה חדשה לכל שאלה: כן
תוצאות לפי מודל
לחצו על שם של מודל כדי לראות את התשובות שלו למטה.
הצגה כטבלה
| מודל | תשובות בלי האות e | תשובות | סך האותיות e שנספרו | הכי הרבה בתשובה אחת |
|---|---|---|---|---|
| Claude Fable 5.1 | 10 | 10 | 0 | 0 |
| Claude Opus 5.5 | 10 | 10 | 0 | 0 |
| Claude Sonnet 5.5 | 8 | 10 | 7 | 5 |
כל התשובות
שום דבר לא הוסר. אפשר לסנן לפי מודל או תוצאה, לחפש בטקסט, ולפתוח כל תשובה כדי לראות מתי נשאלה ומה ההגדרות.
הפרומפטים המדויקים
Write exactly three lines about the ocean. Do not use the letter "e" anywhere, neither lowercase nor uppercase. Output only the text.
השתמשנו ב-10 גרסאות של הפרומפט. כל תשובה מציגה את הפרומפט המדויק שהיא קיבלה.
פרומפט מערכת: You are a helpful assistant.
מה הבדיקה הזו לא מראה
- זו ריצת בדיקה קטנה שנמשכה כמה ימים. הבדלים קטנים בין מודלים אינם משמעותיים.
- כל תשובה נשמרה. שום דבר לא הוסר בגלל שנראה מוזר.
- כל נושא נוסה פעם אחת לכל מודל.
- נבדקו כאן רק מודלים של Claude.
- המאמץ היה ברירת המחדל של כל מודל ולא הוגדר.
הורדת הנתונים
קבצים מקוריים (3)
- effort-dial__effort_pack__raw__claude-fable-5-1.jsonl.gz עותק שפרטים פרטיים הוסרו ממנו
- effort-dial__effort_pack__raw__claude-opus-5-5.jsonl.gz עותק שפרטים פרטיים הוסרו ממנו
- effort-dial__effort_pack__raw__claude-sonnet-5-5.jsonl.gz עותק שפרטים פרטיים הוסרו ממנו
SHA256SUMS מציג טביעת אצבע (SHA-256) של כל קובץ מקורי.
לבדיקה הזו לא פורסמה תוכנית כתובה מלפני השאלה הראשונה.