ارزیابیها
کیفیتی که
میتوانی نشان بدهی.
ارزیابی یک گیت کیفیت ذخیرهشده است: معیارها، آستانهها و یک داور LLM که خروجی را نمره میدهد و با گزارش کامل رأی میدهد. کار بیکیفیت قبل از انتشار متوقف میشود.
ارزیابی چیست.
یک EvalSuite اعلامشده با معیارها، آستانههای قبولی و داوری که رأی و گزارش شواهد تولید میکند.
- خروجی را در برابر معیارهای اعلامشده نمره میدهد
- از داور LLM استفاده میکند، نه چکلیست
- حالتهای قبولی: همه معیارها یا حداقل نمره
- رأی و گزارش کامل دلیل برمیگرداند
- گزارش ارزیابی پاسشده شواهد الزامی است
- در رجیستری ارزیابی ثبت میشود
دقیقاً چطور اینجا کار میکند.
ارزیابیها معیارهای اعلامشده را اعمال میکنند و گزارشهای مبتنی بر شواهد میدهند. دپارتمان Content پیش از آماده شدن کار کمپین، متن را از گیت کیفیت عبور میدهد.
ارزیابی چطور کار میکند.
- 1
یک دپارتمان EvalSuite با معیارها و آستانهها ثبت میکند
- 2
ران یک خروجی تولید میکند
- 3
داور آن را در برابر معیارها نمره میدهد
- 4
رأی و گزارش با ران ذخیره میشود
- 5
خروجی فقط با گزارش پاسشده جلو میرود
این نظم را در شرکتات میخواهی؟
Agent Brief یکی از ورکفلوهای تو را به همین چرخه، تأییدها و شواهد وصل میکند.
ثبت درخواست — بررسی رایگان