Control of Conditional Processes and Fleming--Viot Dynamics
Jettkant
We discuss equivalent formulations of the control of conditional processes introduced by Lions. In this problem, a controlled diffusion process is killed once it hits the boundary of a given domain and the controller's reward is computed based on the conditional distribution given the process's survival. So far there is no clarity regarding the relationship between the open- and closed-loop formulation of this nonstandard control problem. We provide a short proof of their equivalence using measurable selection and mimicking arguments. In addition, we link the closed-loop formulation to Fleming--Viot dynamics of McKean--Vlasov type, where upon being killed the diffusion process is reinserted into the domain according to the current law of the process itself. This connection offers a new interpretation of the control problem and opens it up to applications that feature costs caused by reinsertion.
academic
التحكم في العمليات الشرطية وديناميكيات فليمينج-فيوت
تناقش هذه الورقة صيغة معادلة لمسألة التحكم في العمليات الشرطية التي قدمها ليونز. في هذه المسألة، تُقتل العملية الانتشار المتحكم فيها بمجرد لمسها حدود منطقة معينة، وتُحسب مكافأة المتحكم بناءً على التوزيع الشرطي للعملية في ظل شرط البقاء. يظل الارتباط بين الصيغ المفتوحة والمغلقة لهذه المسألة التحكم غير القياسية غير واضح حتى الآن. يقدم المؤلف برهاناً قصيراً لتكافؤها باستخدام الاختيار القابل للقياس والمحاكاة. علاوة على ذلك، يربط الصيغة المغلقة بديناميكيات فليمينج-فيوت من نوع ماكيان-فلاسوف، حيث تُعاد إدراج العمليات الانتشار المقتولة في المنطقة وفقاً للتوزيع الحالي للعملية نفسها. يوفر هذا الارتباط تفسيراً جديداً لمسألة التحكم ويوسع نطاقها إلى التطبيقات ذات تكاليف إعادة الإدراج.
تحل هذه الورقة بنجاح المسألة النظرية الأساسية في التحكم في العمليات الشرطية التي طرحها ليونز، وتثبت تكافؤ الصيغ المفتوحة والمغلقة، وتوفر منظوراً تفسيرياً جديداً من خلال ديناميكيات فليمينج-فيوت. من الناحية التقنية، يؤدي إدخال طريقة العملية المساعدة إلى تبسيط تعقيد الإثبات ويوفر أداة قيمة للبحث ذي الصلة. النتائج النظرية لا تتمتع فقط بالجمال الرياضي بل تمهد أيضاً الطريق للتطبيقات العملية التي تتضمن تكاليف إعادة الإدراج.