Multilingual and Multimodal Information Access Evaluation: International Conference of the Cross-Language Evaluation Forum, CLEF 2010, Padua, Italy, September 20-23, 2010. Proceedings

در ده سال اول فعالیت خود (2000-2009)، انجمن ارزیابی بین زبانی (CLEF) نقش پیشرو در تحریک تحقیقات و تحقیق در طیف گسترده ای از زمینه های کلیدی در حوزه بازیابی اطلاعات ایفا کرد، مانند پاسخگویی به سوالات زبان کروم، بازیابی اطلاعات جغرافیایی و تصویری، بازیابی درونی فعال و بسیاری موارد دیگر. همچنین مطالعه و اجرای روش‌های ارزیابی مناسب برای این انواع مختلف وظایف و - دیا را ارتقا داد. در نتیجه، CLEF در ایجاد یک جامعه تحقیقاتی گسترده، قوی و چند رشته‌ای، که حوزه‌های تخصصی مختلف را پوشش می‌دهد و در بر می‌گیرد، بسیار موفق بوده است. برای تحقق CLEF و هسته اصلی دستاوردهای CLEF است. CLEF 2010 یک نوآوری اساسی در قالب "کلاسیک CLEF" و آزمایشی با هدف درک چگونگی ساختار کمپین های ارزیابی "نسل بعدی" بود. ما باید با این مشکل مواجه می‌شدیم که چگونه CLEF را نوآوری کنیم در حالی که هنوز کسب و کار هسته سنتی خود را حفظ می‌کند، یعنی فعالیت‌های محک‌سازی انجام شده در مسیرها و وظایف مختلف. پس از بحث‌های پر جنب و جوش و در سطح جامعه، توافق بر این بود که CLEF به یک رویداد چهار روزه مستقل تبدیل شود، که دیگر در ارتباط با کنفرانس اروپایی تحقیقات و فناوری پیشرفته برای کتابخانه‌های دیجیتال (ECDL) که در آن CLEF به‌عنوان دو شرکت برگزار می‌شود، سازماندهی نمی‌شود. -و نیم روز wo- shop. بنابراین CLEF 2010 شامل دو بخش اصلی بود: یک کنفرانس بررسی شده - دو روز اول - و یک سری آزمایشگاه و کارگاه - دو روز دوم.

In its ?rst ten years of activities (2000-2009), the Cross-Language Evaluation Forum (CLEF) played a leading role in stimulating investigation and research in a wide range of key areas in the information retrieval domain, such as cro- language question answering, image and geographic information retrieval, int- activeretrieval,and many more.It also promotedthe study andimplementation of appropriateevaluation methodologies for these diverse types of tasks and - dia. As a result, CLEF has been extremely successful in building a wide, strong, and multidisciplinary research community, which covers and spans the di?erent areasofexpertiseneededto dealwith thespreadofCLEFtracksandtasks.This constantly growing and almost completely voluntary community has dedicated an incredible amount of e?ort to making CLEF happen and is at the core of the CLEF achievements. CLEF 2010 represented a radical innovation of the “classic CLEF” format and an experiment aimed at understanding how “next generation” evaluation campaigns might be structured. We had to face the problem of how to innovate CLEFwhile still preservingits traditionalcorebusiness,namely the benchma- ing activities carried out in the various tracks and tasks. The consensus, after lively and community-wide discussions, was to make CLEF an independent four-day event, no longer organized in conjunction with the European Conference on Research and Advanced Technology for Digital Libraries (ECDL) where CLEF has been running as a two-and-a-half-day wo- shop. CLEF 2010 thus consisted of two main parts: a peer-reviewed conference – the ?rst two days – and a series of laboratories and workshops – the second two days.