Simulation-Based Usability Evaluation of Spoken and Multimodal Dialogue Systems

این کتاب توسعه‌ای از شبیه‌سازی رفتار کاربر (UBS) یک ابزار موجود برای ارزیابی خودکار قابلیت استفاده (AUE) را شرح می‌دهد. این برنامه افزودنی مبتنی بر مطالعه کاربر با سیستم خانه هوشمند است. برای اجرای پژوهش و تحلیل داده های جمع آوری شده از روش های فنی- جامعه شناختی استفاده می کند. مقایسه UBS حاصل با UBS های قبلی و همچنین داده های تجربی نشان می دهد که رویکرد شبیه سازی جدید بهتر از شبیه سازی قبلی است. این بهبود بر پیش‌بینی معیارهای گفتگو که به کارایی گفتگو و اثربخشی گفتگو مربوط می‌شوند تأثیر می‌گذارد.

به‌علاوه، این کتاب یک مدل داده مبتنی بر پارامتر و همچنین یک چارچوب مرتبط را توصیف می‌کند. هر دو برای توصیف یکسان تعاملات چندوجهی انسان و رایانه و ارائه چنین توصیفاتی برای ارزیابی قابلیت استفاده استفاده می شوند. در نهایت، این کتاب یک روش دو مرحله‌ای جدید برای ارزیابی UBSs پیشنهاد می‌کند. این روش مبتنی بر محاسبه اندازه‌گیری فاصله بین دو پیکره گفت‌وگو و مقایسه زوجی فواصل در میان چندین پیکر گفتگو است.

This book describes an extension of the user behaviour simulation (UBS) of an existing tool for automatic usability evaluation (AUE). This extension is based upon a user study with a smart home system. It uses technical-sociological methods for the execution of the study and the analysis of the collected data. A comparison of the resulting UBS with former UBSs, as well as the empirical data, shows that the new simulation approach outperforms the former simulation. The improvement affects the prediction of dialogue metrics that are related to dialogue efficiency and dialogue effectiveness.

Furthermore, the book describes a parameter-based data model, as well as a related framework. Both are used to uniformly describe multimodal human-computer interactions and to provide such descriptions for usability evaluations. Finally, the book proposes a new two-stage method for the evaluation of UBSs. The method is based on the computation of a distance measures between two dialogue corpora and the pair-wise comparison of distances among several dialogue corpora.