EvalGuysהציעו בדיקה

בדיקה

מהו הסרט הגדול בכל הזמנים?

ביקשנו מכל צ'אטבוט לנקוב בשם הסרט הגדול בכל הזמנים, שוב ושוב, ושמרנו כל תשובה.

  • דעות
  • סרטים

10 באוקטובר 2026 · 19 מודלים · 437 תשובות

התוצאה

205 מתוך 380 תשובות נקבו בשם Citizen Kane (1941)

Citizen Kane (1941) הייתה התשובה השכיחה ביותר, ונתנו אותה ב-205 מתוך 380 תשובות.

אזור אפור

תשובה באזור האפור נקבה בשם אבל הסתייגה: היא הוסיפה הסתייגות, או שלא נתנה שם אחד.

אף תשובה בבדיקה הזו לא נמצאת באזור אפור.

איך בדקנו

שאלנו 19 צ'אטבוטים את אותה שאלה, 20 פעמים כל אחד. כל שאלה הייתה שיחה חדשה לגמרי, בלי זיכרון של האחרות.

מתי הורצה
10 באוקטובר 2026, 19:11 עד 22:00
מסלול
OpenRouter
כלי
OpenRouter chat/completions
הגדרות: 17 מודלים (אורך התשובה המרבי 4000; מאמץ חשיבה low)

Claude Fable 5.1, Claude Haiku 5.5, Claude Opus 5.5, Claude Sonnet 5.5, DeepSeek V4 Pro, DeepSeek V4.1 Flash, Gemini 3.1 Pro Preview, Gemini 3.8 Flash, Mistral Large 4, Kimi K3, GPT-6 Astra, GPT-6 Luna (mini), GPT-6.1 Sol, gpt-oss-120b (open), Qwen3.8 Max Prime, Grok 4.7, GLM 5.3

  • טמפרטורה: נשארה בברירת המחדל, לא הוגדרה על ידינו
  • אורך התשובה המרבי: 4000
  • מאמץ חשיבה: low
  • פרומפט מערכת: אין
  • שיחה חדשה לכל שאלה: כן
הגדרות: Gemma 4 31B (open), Llama 4 Maverick (אורך התשובה המרבי 400; מאמץ חשיבה אין)
  • טמפרטורה: נשארה בברירת המחדל, לא הוגדרה על ידינו
  • אורך התשובה המרבי: 400
  • פרומפט מערכת: אין
  • שיחה חדשה לכל שאלה: כן

תוצאות לפי מודל

לחצו על שם של מודל כדי לראות את התשובות שלו למטה.

  • Citizen Kane (1941)205
  • The Godfather (1972)175
כל המודלים
380 תשובות
Citizen Kane (1941): 20 מתוך 20
Citizen Kane (1941): 20 מתוך 20
Citizen Kane (1941): 20 מתוך 20
Citizen Kane (1941): 20 מתוך 20
Citizen Kane (1941): 19 מתוך 20
Citizen Kane (1941): 19 מתוך 20
Citizen Kane (1941): 17 מתוך 20
Citizen Kane (1941): 15 מתוך 20
Citizen Kane (1941): 13 מתוך 20
Citizen Kane (1941): 12 מתוך 20
Citizen Kane (1941): 11 מתוך 20
The Godfather (1972): 20 מתוך 20
The Godfather (1972): 20 מתוך 20
The Godfather (1972): 20 מתוך 20
The Godfather (1972): 20 מתוך 20
The Godfather (1972): 19 מתוך 20
The Godfather (1972): 16 מתוך 20
The Godfather (1972): 15 מתוך 20
The Godfather (1972): 11 מתוך 20
הצגה כטבלה
מודלCitizen Kane (1941)The Godfather (1972)סך הכול
כל המודלים205175380
Claude Fable 5.120020
Claude Haiku 5.520020
Claude Sonnet 5.520020
Mistral Large 420020
GPT-6.1 Sol19120
Qwen3.8 Max Prime19120
Gemini 3.8 Flash17320
GPT-6 Astra15520
Claude Opus 5.513720
DeepSeek V4 Pro12820
Kimi K311920
Gemini 3.1 Pro Preview02020
Gemma 4 31B (open)02020
Grok 4.702020
gpt-oss-120b (open)02020
Llama 4 Maverick11920
GPT-6 Luna (mini)41620
DeepSeek V4.1 Flash51520
GLM 5.391120

כל התשובות

שום דבר לא הוסר. אפשר לסנן לפי מודל או תוצאה, לחפש בטקסט, ולפתוח כל תשובה כדי לראות מתי נשאלה ומה ההגדרות.

הפרומפטים המדויקים

שאלה A: התשובה בלבד
What is the greatest movie of all time? Answer with one title only, no explanation.
שאלה B: התשובה עם נימוק
What is the greatest movie of all time? Give one title, then one short sentence why.

לא היה פרומפט מערכת.

ריצות שלא השתמשנו בהן

הריצות האלה נשמרו, אבל אף אחת מהתשובות שלהן לא נספרת בשום מקום באתר הזה.

  • נעצרה מוקדם. טעות בהגדרה שלחה את השאלה הלא נכונה בתחילת ההרצה הראשונה. היא נעצרה תוך שניות, ואף אחת מהתשובות שלה לא משמשת בשום תוצאה. 120 תשובות
  • הוחלפה בריצה מאוחרת יותר. ריצה ראשונה של מודלי Claude דרך Claude Code השתמשה בגרסה מיושנת של הכלי, כך שמודל אחד רץ כגרסה ישנה יותר ומודל אחר לא היה זמין. היא הוחלפה בריצה דרך OpenRouter, ואף אחת מהתשובות שלה לא בשימוש. 69 תשובות

מה הבדיקה הזו לא מראה

  • זו ריצת בדיקה קטנה שנמשכה כמה ימים. הבדלים קטנים בין מודלים אינם משמעותיים.
  • כל תשובה נשמרה. שום דבר לא הוסר בגלל שנראה מוזר.
  • לא הגדרנו טמפרטורה. כל מודל השתמש בברירת המחדל שלו.
  • חלק מהמודלים הוגשו על ידי ספקים שונים. הספק רשום בכל תשובה.

הורדת הנתונים

קבצים מקוריים (19)

SHA256SUMS מציג טביעת אצבע (SHA-256) של כל קובץ מקורי.

תוכנית שנכתבה לפני השאלה הראשונה (נרשמה, לא נעולה). נרשמה ב-10 באוקטובר 2026, 19:12.

איפה פרסמנו