🌐
גרג ברוקמן @gdb

מייסד-שותף ולשעבר נשיא OpenAI. אחד מאדריכלי הארגון שיצר את ChatGPT.

'בנצ'מרקים? לאן שאנחנו הולכים, לא צריכים בנצ'מרקים'

ברוקמן זורק היום שני ציוצים שנשמעים קלילים אבל טוענים טענה כבדה. הראשון — 'Benchmarks? Where we're going, we don't need benchmarks' — ציטוט מחזרה לעתיד עם 4,422 לייקים ו-249 RT.

אחרי שאתמול הוא הציג קפיצה מ-9% ל-30% בפיזיקה מחקרית, היום הוא אומר: הפסיקו למדוד ככה. זה מהלך מחושב: OpenAI רוצה להזיז את השיח מ'איזה מודל מנצח בבנצ'מרק' ל'איזה מודל משנה את איך שאתה עובד'. והציוץ השני מחזק: שיתוף של שגרת בוקר חדשה — קפה, בדיקת פרויקטי Codex שרצו בלילה, brainstorming עם GPT-5.4 Pro, ו'חשיבה על 90% מהיכולות שעוד לא חקרתי'.

966 לייקים. ברוקמן לא מדבר על ביצועים — הוא מדבר על שינוי הרגלים.

ברוקמן על עידן מה-שאחרי-בנצ'מרקים

Benchmarks? Where we're going, we don't need benchmarks.
בנצ'מרקים? לאן שאנחנו הולכים, לא צריכים בנצ'מרקים.
לפוסט המקורי ↗
💡
תובנה
כשברוקמן מכריז 'לא צריכים בנצ'מרקים' יום אחרי שהציג קפיצה של פי 3 בפיזיקה — הוא לא מזלזל במדידה, הוא אומר שהמדד הישן כבר לא תופס את מה שהשתנה.
כל הכתבות ←