رفتن به آموزش
ارزیابی AI، بدون پیچیدگی Evals چیست؟ارزیابی هوش مصنوعی Evals یا ارزیابی هوش مصنوعی یعنی سنجیدن خروجی AI با معیارهای مشخص. بهجای اعتماد به یک جواب قشنگ، دقت، کیفیت و نتیجهٔ واقعی رو بررسی کن.
اطلاعات واقعی این مثال کفش «راه» ارسال: ۳ روز مرجوعی: ۷ روز قبل از بررسیپیشنویس ایمیل معرفی با کفش «راه»، هر روز راحتتر قدم بردار.ارسال فوری رایگان و ۳۰ روز مرجوعی! مدل موردعلاقهات رو ببین.
جواب رو بررسی کن ✓ قول درست؟
✓ دعوت روشن؟
✓ کوتاه و خوانا؟
بعد از اصلاحپیشنویس اصلاحشده کفش «راه» رو با ارسال ۳روزه و ۷ روز مهلت مرجوعی امتحان کن. مدل موردعلاقهات رو ببین.
لحن مطمئن، درستبودن جواب رو ثابت نمیکند. دوباره ببین
این یعنی ارزیابی؛ یا Eval. یک مثال، چند معیار، و نتیجهای که دلیلش روشنه.
با هم یکی بسازیم با خروجی خودت شروع کن؛ مثالهای آماده هم در دسترساند.
۱ مثال تو ۲ چکلیست ۳ امتیاز و اهمیت ۴ امتحان کن ۵ بستهات رو بگیر
AI رو تغییر دادی؟ با همان معیارها دوباره بسنج. یک مثال معمولی، یک مورد دشوار و یک جواب اشتباه رو نگه دار. بعد از هر تغییر، همانها رو دوباره بررسی کن.
ارزیابی رو وارد کار واقعی کن با هر تغییر سیستم، دوباره ارزیابی کن. مثالهای آزمون، سابقهٔ اجرا و نتیجهٔ تغییرها رو کنار هم نگه دار. این سه ابزار بهت کمک میکنن ارزیابی ایجنت یا ورکفلو رو به کار همیشگی تیم تبدیل کنی.
معیارها و مثالهات رو در ابزار انتخابی تعریف کن. فایل این صفحه قالب کاروایز رو داره و ورود خودکار به این سرویسها نیست. امتیاز داور AI رو هم با مثالهای بازبینیشده توسط انسان مقایسه کن.