17/06/2026
אותו מודל. אותם פרומפטים. 10.1% יותר איכות. כל ההבדל היה מי בודק את התוצאה בסוף.
ב-Code with Claude האחרון של אנטרופיק הציגו פיצ'ר בשם Outcomes, ולמי שבונה מוצרי AI לפרודקשן זה אחד הדברים הכי מעניינים שיצאו השנה.
הרעיון פשוט. כותבים rubric, בעצם הגדרה בשפה פשוטה של איך נראית תוצאה טובה. הסוכן עושה את שלו. ואז סוכן שני, נפרד, שלא ראה איך הראשון הגיע לתוצאה, קורא רק את הפלט הסופי ונותן לו ציון מול ה-rubric. לא עבר את הרף? חוזר לעוד סיבוב, עם רשימה מדויקת של מה לתקן.
המספרים שאנטרופיק פרסמו מהבנצ'מרקים הפנימיים שלהם:
✓ 8.4% יותר איכות במסמכי Word
✓ 10.1% יותר איכות במצגות PowerPoint
וכל זה בלי לגעת במודל ובלי איזה פרומפט חכם יותר. רק שכבת בדיקה אחת.
הדבר הכי חשוב פה הוא ההפרדה. סוכן שבודק את עצמו קורא את התשובה של עצמו וגם משכנע את עצמו שהכל תקין. סוכן נפרד, בלתי תלוי, שרואה רק את התוצאה מול הסטנדרט, תופס בדיוק את הפער ויכול להצביע על בעיות.
אנחנו ב-YooTech בונים מוצרי AI ללקוחות בארץ ובחו"ל, וזה אחד הדברים שאנחנו מדגישים כבר הרבה זמן. רוב הארגונים מפספסים איכות לא כי המודל חלש, אלא כי אין להם דרך מסודרת לבדוק את הפלט לפני שהוא יוצא החוצה. כשהסוכן זורק 40 שקפים בשלוש דקות, אין סיכוי לעבור על כולם ידנית בכל פעם. צריך שער איכות אוטומטי.
ופה הקאץ': כל הסיפור עומד או נופל על ה-rubric. כתבת אותו מעורפל? הסוכן הבודק יאשר הכל. כתבת אותו בצורה מדוייקת עם כל הפרטים, כזה שמכריח אותו לפתוח את המקור ולוודא נתון מסוים, פתאום הוא תופס בעיות אמיתיות. ואת ה-rubric הזה כותב מהנדס שמכיר את הדומיין, לא המודל.
ככל שהמודלים נהיים טובים יותר, הערך זז מהמודל אל ההנדסה שעוטפת אותו (harness).
ואצלכם במוצר, מי בודק את הפלט של ה-AI לפני שהוא מגיע ללקוח?