سؤال آموزشی خوب فقط متن پیچیدهای از یک سند نیست. باید هدف یادگیری، پاسخ مورد انتظار و شاهدی داشته باشد که بازبین بتواند آن را پیدا کند. مدل ممکن است گزینهای ظاهراً منطقی اما خارج از سند بسازد؛ بنابراین بانک سؤال بدون کلید و منبع برای آموزش داخلی قابل اتکا نیست.
روش اجرا و تصمیمگیری
ابتدا هدف را محدود کنید: شناخت یک قاعده، تشخیص استثنا یا انتخاب اقدام در یک موقعیت. سپس بخش مرتبط سند و نسخه آن را در اختیار مسیر مجاز مدل قرار دهید. از تولید سؤال درباره موضوعی که در منبع پوشش ندارد جلوگیری کنید؛ اطلاعات عمومی مدل جای متن سیاست سازمان نیست.
برای هر سؤال، پاسخ درست، دلیل و محل شاهد بخواهید. گزینههای غلط باید از نظر زبان و طول متعادل باشند و پاسخ را با نشانه ظاهری لو ندهند. از پرسشهایی که چند جواب قابل دفاع دارند برای نمره قطعی استفاده نکنید؛ آنها میتوانند تمرین بحث با بازبین باشند.
بازبینی را دو مرحله کنید: نخست مطابقت پاسخ با سند و سپس وضوح آموزشی. فردی که سند را ندیده باید بفهمد دقیقاً چه چیزی پرسیده شده است. پیش از استفاده گسترده، چند نفر تمرین را انجام دهند و موارد سوءبرداشت ثبت شود. تغییر سیاست باید بانک سؤال وابسته را نیز وارد بازبینی کند.
نمونهٔ ساختگی و قابل تکرار
در نمونه ساختگی، راهنما میگوید درخواست خارج از اختیار کارشناس باید به سرپرست ارجاع شود. سؤال موقعیتی میپرسد کارشناس در برابر درخواست تخفیف خارج از اختیار چه کند. پاسخ «قول قطعی ندهد و ارجاع ثبت کند» به بند مشخص وصل میشود. گزینه «همیشه درخواست را رد کند» از منبع نتیجه نمیشود و باید به عنوان گزینه غلط توضیح داشته باشد. اگر سقف اختیار در سند نیست، سؤال نباید مبلغی اختراع کند تا آزمون کامل به نظر برسد.
محدودیتها و خطاهای رایج
نمره آزمون کوتاه مهارت واقعی فرد را به طور کامل نشان نمیدهد. تصمیم استخدام یا ارزیابی حساس را به خروجی تولیدی مدل واگذار نکنید. اسناد داخلی و پاسخ کارکنان باید دسترسی و مدت نگهداری مشخص داشته باشند و از استفاده خارج از هدف آموزش جلوگیری شود.
کنترل پیش از استفاده
| کنترل | معیار پذیرش |
|---|---|
| هدف | هر سؤال یک مهارت یا قاعده مشخص را بسنجد. |
| کلید | پاسخ و دلیل به بند همان نسخه سند قابل اتصال باشند. |
| کیفیت | ابهام، چندپاسخی بودن و نشانه ظاهری جواب بازبینی شوند. |
کاربرگ همراه
کاربرگ بانک سؤال است و برای هر سؤال یک ردیف میخواهد. متن سؤال بدون ستون شاهد را آماده آموزش ندانید. پس از تغییر منبع، ردیفهای وابسته را علامت بزنید تا کلید پاسخ قدیمی در آزمون باقی نماند.
دریافت کاربرگ CSV این راهنما — دادههای داخل فایل نمونهٔ ساختگیاند. نسخهٔ اصلی را نگه دارید و برای آزمون خودتان یک کپی بسازید.
منبع و ادامهٔ کار
NIST: مدیریت ریسک هوش مصنوعی. تاریخ بررسی منابع: ۱ نوامبر ۲۰۲۶.
اگر کاربرد شما پاسخگویی به مشتری است، مسیر مرتبط اپرا را ببینید و مسئله و محدودیتهای همین کاربرگ را برای بررسی در دمو همراه داشته باشید.