Evaluating Natural Language Processing Systems: An Analysis and Review

این کتاب جامع و پیشرفته اولین کتابی است که به موضوع مهم و به موقع ارزیابی سیستم های NLP اختصاص دارد. این به کل حوزه ارزیابی سیستم NLP، از جمله اهداف و دامنه، مشکلات و روش‌شناسی می‌پردازد. آنها سیستم ها را به محیط خود مرتبط می کنند و چارچوبی برای ارزیابی مناسب ایجاد می کنند. بحث اصول با بررسی دقیق تمرین و استراتژی‌ها در این زمینه تکمیل می‌شود، که هر دو سیستم را برای وظایف خاص، مانند ترجمه و پردازشگرهای زبان اصلی، پوشش می‌دهد. درس‌های روش‌شناسی که از تجزیه و تحلیل و بررسی به دست می‌آیند، در یک سری موارد نمونه اعمال می‌شوند. کتابشناسی جامع، فهرست موضوعی، و واژه نامه اصطلاحات گنجانده شده است.

This comprehensive state-of-the-art book is the first devoted to the important and timely issue of evaluating NLP systems. It addresses the whole area of NLP system evaluation, including aims and scope, problems and methodology.
The authors provide a wide-ranging and careful analysis of evaluation concepts, reinforced with extensive illustrations; they relate systems to their environments and develop a framework for proper evaluation. The discussion of principles is completed by a detailed review of practice and strategies in the field, covering both systems for specific tasks, like translation, and core language processors. The methodology lessons drawn from the analysis and review are applied in a series of example cases. A comprehensive bibliography, a subject index, and term glossary are included.