راهنمای برچسب‌گذاری باید تعریف دسته، شروط ورود و خروج و مثال مرزی داشته باشد. فهرست نام دسته‌ها بدون قاعده تصمیم، توافق پایدار ایجاد نمی‌کند.
مسئله را درست تعریف کنیم
دو نفر ممکن است یک عبارت را شکایت و دیگری درخواست راهنمایی ببینند. قبل از آموزش مدل، مرز این دو باید برای برچسب‌زن روشن شود.
روش اجرا
- برای هر دسته تعریف کوتاه و شاهد لازم بنویسید.
- موارد چندمنظوره و نامطمئن را تعیین تکلیف کنید.
- نمونه‌های اختلاف را به راهنما برگردانید و نسخه آن را ثبت کنید.
نمونه آموزشی
در نمونه آموزشی، «سفارش هنوز نرسیده؛ چه کنم؟» هم وضعیت می‌پرسد و هم نارضایتی دارد. اگر هدف اولویت‌بندی رسیدگی است، قاعده دسته اصلی باید مشخص باشد. اگر چندبرچسبی مجاز است، هر دو برچسب با دلیل ثبت می‌شوند؛ تصمیم را پنهان نکنید.
آزمون تکمیلی برای تصمیم عملی
یک تمرین کوچک از پیام‌های ساختگی درباره سفارش آماده کنید و پیش از شروع برچسب‌گذاری، هدف دسته‌ها را توضیح دهید. تشخیص نارضایتی، تعیین واحد رسیدگی و تشخیص موضوع سفارش سه هدف متفاوت‌اند؛ ممکن است یک جمله برای هر کدام برچسب متفاوتی لازم داشته باشد. در کنار تعریف هر دسته بنویسید چه شاهدی برای انتخاب آن کافی است و در چه حالتی نباید آن را انتخاب کرد. اگر اطلاعات برای تصمیم کافی نیست، مسیر «نیازمند بررسی» را تعریف کنید تا برچسب‌زن مجبور به حدس نشود.
پس از اولین دور مستقل، نمونه اختلاف را بدون حذف پاسخ‌های اولیه مرور کنید. اگر قاعده تازه‌ای اضافه شد، راهنما نسخه جدید بگیرد و مشخص شود کدام نمونه‌های پیشین نیازمند بازبینی‌اند. فقط اصلاح همان چند ردیفِ دیده‌شده کافی نیست؛ ممکن است همان ابهام در بخش دیگری تکرار شده باشد. در کاربرگ، مثال مرزی و دلیل تصمیم را با هم نگه دارید. این فرایند به روشن‌شدن برچسب‌ها کمک می‌کند، اما از توافق روی یک تمرین کوچک، کیفیت مدل نهایی یا کامل‌بودن همه دسته‌ها نتیجه نگیرید.
جدول کار برای همین موضوع
| فیلد ثبت | کاربرد در تصمیم |
|---|---|
| دسته | شکایت در برابر پرسش وضعیت |
| تعریف | هدف آموزشی دسته را یک جمله بنویسید |
| شرط ورود | شاهد نارضایتی لازم یا اختیاری است؟ |
| شرط خروج | پرسش صرف را بی‌دلیل شکایت نکنید |
| مثال مرزی | «سفارش نرسیده، چه کنم؟» مرزی است |
| قاعده تصمیم | تک‌برچسبی یا چندبرچسبی را صریح کنید |
فایل قابل استفاده
دریافت فرم CSV این راهنما. هر سطر را با اطلاعات پروژه خود تکمیل کنید. خانه نامعلوم را نامشخص بگذارید؛ نبود شاهد را با عدد صفر یا تأیید جایگزین نکنید. فایل شامل اطلاعات مشتری واقعی نیست و برای ثبت بررسی به کار می‌رود.
محدودیت و تصمیم بعدی
راهنما باید متناسب هدف مدل باشد؛ دسته‌های یک پروژه را بدون بررسی به پروژه دیگر منتقل نکنید.
منبع فنی برای مطالعه بیشتر
scikit-learn: model_evaluation. مثال‌ها و فرم این مطلب برای آموزش طراحی شده‌اند و نتیجه مشتری یا آزمون محصول نیستند.
ادامه مطالعه مرتبط
برای تفاوت برچسب اصلی و فرعی در یک کاربرد واقعی، یک تماس چند موضوع دارد؛ قواعد برچسب اصلی و فرعی را ببینید.