Continuous-Time Markov Decision Processes: Theory and Applications

فرایندهای تصمیم گیری مارکوف زمان پیوسته (MDP) که به عنوان زنجیره های مارکوف کنترل شده نیز شناخته می شوند، برای مدل سازی مشکلات تصمیم گیری که در تحقیقات عملیاتی (به عنوان مثال، موجودی، تولید و سیستم های صف)، رایانه ایجاد می شوند، استفاده می شود. علم، مهندسی ارتباطات، کنترل جمعیت (مانند شیلات و بیماری های همه گیر)، و علم مدیریت، در میان بسیاری از زمینه های دیگر. این جلد یک ارائه یکپارچه، سیستماتیک و مستقل از پیشرفت‌های اخیر در مورد تئوری و کاربردهای MDP با زمان پیوسته را ارائه می‌کند. MDP های موجود در این حجم شامل بیشتر مواردی است که در برنامه های کاربردی ایجاد می شود، زیرا امکان انتقال نامحدود و نرخ پاداش/هزینه را فراهم می کند. بسیاری از مطالب برای اولین بار به صورت کتاب ظاهر می شوند.

Continuous-time Markov decision processes (MDPs), also known as controlled Markov chains, are used for modeling decision-making problems that arise in operations research (for instance, inventory, manufacturing, and queueing systems), computer science, communications engineering, control of populations (such as fisheries and epidemics), and management science, among many other fields. This volume provides a unified, systematic, self-contained presentation of recent developments on the theory and applications of continuous-time MDPs. The MDPs in this volume include most of the cases that arise in applications, because they allow unbounded transition and reward/cost rates. Much of the material appears for the first time in book form.