رفتن به محتوای اصلی
بازگشت به وبلاگ

تحلیل و کیفیت تماس

آزمون ایجنت با نویز و لهجه؛ ماتریس تست به‌جای یک دموی آرام

کیفیت ایجنت صوتی را با جفت آزمون‌های ثابت در سکوت، نویز و تلفظ متفاوت بسنجید؛ ماتریس نمونه کمک می‌کند علت خطا را از تغییر متن جدا کنید.

دموی آرام با یک گوینده، رفتار ایجنت در صدای خیابان یا تلفظ متفاوت را نشان نمی‌دهد. برای ارزیابی کاربردی، شرایط صدا را کنترل‌شده تغییر دهید و متن درخواست را تا حد ممکن ثابت نگه دارید. هدف این آزمون رتبه‌دادن به لهجه افراد نیست؛ سنجش دسترسی و درستی عملکرد در شرایط متنوع مورد نیاز شماست.

از سؤال کسب‌وکاری شروع کنید

مشخص کنید کدام کار باید درست انجام شود: تشخیص نوع درخواست، گرفتن زمان، فهم نام خدمت یا ارجاع هنگام ابهام. صرف شباهت متن پیاده‌شده کافی نیست. برای هر کار، پاسخ مرجع و رفتار قابل قبول بنویسید. اگر داده حساس یا تصمیم پراثر وارد آزمون می‌شود، از نمونه ساختگی و محیطی استفاده کنید که هیچ اقدام واقعی اجرا نمی‌کند.

مثال: متن عوض شد و نتیجه به نویز نسبت داده شد

در آزمون آموزشی اول، گوینده در اتاق آرام می‌گوید «وقت مشاوره می‌خواهم». در آزمون دوم، فرد دیگری با صدای خیابان نام خدمت و زمان متفاوتی می‌گوید. اگر نتیجه دوم بدتر شود، هنوز نمی‌دانیم علت نویز، تلفظ، تفاوت درخواست یا همه آن‌هاست. اصلاح این است که یک جمله مرجع در دو شرایط ضبط مجاز شود؛ سپس عامل دیگری جدا تغییر کند. نتیجه این آزمون کوچک هم به همه مشتریان تعمیم قطعی ندارد.

ماتریس شش حالت پیشنهادی

حالتمتنشرایطشاهد پذیرش
مرجعدرخواست ثابتآرامتشخیص هدف درست
نویزهمان متنصدای زمینه کنترل‌شدهپرسش روشن‌ساز در ابهام
تلفظ دیگرهمان معناگوینده مجاز دیگرنتیجه یا ارجاع مناسب
سرعت دیگرهمان متنآهسته یا تندحدس‌نزدن فیلد حیاتی
اصلاح جملهزمان اصلاح‌شدهآرامپذیرش آخرین تأیید
شرایط دشوار ترکیبیدرخواست ثابتپس از آزمون‌های جدامسیر جایگزین روشن

شرایط ضبط را هم ثبت کنید

نوع میکروفون، مسیر تلفنی، نسخه سناریو و زمان آزمون را نگه دارید. افزایش مصنوعی حجم نویز بدون ثبت روش، بازتولید نتیجه را سخت می‌کند. اگر با فایل کار می‌کنید، شناسه فایل کافی است؛ نام واقعی گوینده را در گزارش عمومی نگذارید. رضایت استفاده از صدا و حدود دسترسی را از ابتدا روشن کنید. صدای ساختگی یا نمونه مجاز آموزشی برای تمرین اولیه کافی است.

خرابی را به جزء درست نسبت دهید

ممکن است متن گفتار درست باشد اما پاسخ بر منبع نامعتبر تکیه کند؛ یا متن یک عدد را غلط بنویسد و پاسخ بعدی هم به‌درستی از همان ورودی اشتباه ساخته شود. ابتدا صوت، متن، تصمیم و نتیجه را جدا بررسی کنید. راهنمای Google درباره سنجش دقت گفتار، مقایسه با مرجع و تناسب نمونه آزمون با کاربرد را توضیح می‌دهد؛ این اصل، تضمین عملکرد هیچ محصولی در فارسی یا لهجه خاص نیست.

قبولی را با حدودش گزارش کنید

بنویسید کدام حالت‌ها آزمایش شدند، کدام شکست خوردند و چه چیزهایی هنوز آزموده نشده‌اند. «شش حالت تمرینی پذیرفته شد» با «همه لهجه‌ها پشتیبانی می‌شود» برابر نیست. بعد از اصلاح، همان نمونه شکست‌خورده و چند نمونه تازه مرتبط را دوباره بسنجید تا حفظ‌شدن پاسخ یک جمله با بهبود روش اشتباه نشود. شرط توقف و مسیر انسانی یا متنی باید همراه نتیجه ارزیابی باشد.

ادامه بررسی با داده خودتان

برای تکمیل این بررسی، هوش مصنوعی صوتی چگونه کار می‌کند؟ از تبدیل گفتار به متن تا تولید پاسخ و نوبت‌گیری در مکالمه صوتی چیست؟ چرا ایجنت هوش مصنوعی وسط حرف مشتری می‌پرد؟ را در کنار نمونه‌های مجاز تیم خود ببینید. اگر مسئله شما پاسخ‌گویی اولیه و پیگیری تلفنی است، بسته‌های ابری تماس و مسیر دریافت پیشنهاد از فروش را برای بررسی تناسب با نیاز خود ببینید. درباره تناسب هر قابلیت با این روال، پیش از خرید از تیم فروش توضیح و شاهد اجرایی بخواهید.

منبع تعریف محدود این راهنما: Google Cloud: Measure and improve speech accuracy. مثال‌ها و عددها آموزشی و ساختگی‌اند و نتیجه مشتری اپرا نیستند.

راهنماهای مرتبط با این مسئله

دقت متن تماس برای نام و عدد؛ چرا خطای کلمه به‌تنهایی کافی نیست؟ و وقتی زبان تماس پشتیبانی نمی‌شود، چه پاسخی بدهیم؟ می‌توانند گام بعدی بررسی تیم شما باشند.

این مسئله را برای کسب‌وکارتان بررسی کنیم

بسته‌های اپرا و هزینه‌های راه‌اندازی را ببینید؛ سپس کاربرد موردنظرتان را با تیم اپرا مطرح کنید. دامنه اجرا و جمع هزینه پیش از تأیید و پرداخت در پیشنهاد مکتوب مشخص می‌شود.

درخواست بررسی و راه‌اندازی مقایسه بسته‌ها و قیمت‌ها