Niniejszy artykuł jest kontynuacją rozważań dotyczących problemu stochastycznego sterowania optymalnego w tzw. przypadku Mayera. Problemy takie opisywanego są poprzez stochastyczne równanie różniczkowe typu Ito a funkcjonał kosztu jest zależny od stanu układu w czasie końcowym. Jest to w szczególności model dyfuzyjny, modele takie są adekwatne do opisu zjawisk biologicznych i ekonomicznych w których z przyczyn naturalnych mamy do czynienia z oddziaływaniem dużej ilości niezależnych sił losowych. Problem sterowania optymalnego polega na podejmowaniu na podstawie możliwie najnowszych informacji, odpowiednich decyzji spośród wszystkich możliwych w celu osiągnięcia zamierzonego celu co realizuje się poprzez minimalizację funkcjonału kosztu. Ważną rolę odgrywa tutaj tzw. funkcja wartości. W niniejszym artykule autor udawania kolejne własności funkcji wartości dla tzw. problemu Mayera czyli dla specjalnej postaci funkcjonału kosztu.
EN
We consider stochastic optimal control problem of Mayer type. The evolution of system is described by Ito’s stochastic differential equation. Such systems are sometimes called diffusion models. The cost functional relay only on terminal condition. The value function play crucial role in determining the so called feedback optimal control. In the present paper which is a continuation of previous one the authors prove some properties of value function and gives a verification criterion. Keywords: stochastic optimal control, value function, Mayer problem
Rozważamy problem stochastycznego sterowania optymalnego dla układu opisywanego poprzez stochastyczne równanie różniczkowe typu Ito. Układy takie bywają tez nazywane jako modele dyfuzyjne. Źródłem niepewności w takich modelach jest biały szum który odzwierciedla oddziaływanie dużej ilości niezależnych sił losowych. W tej sytuacji problem sterowania polega na podejmowaniu na podstawie możliwie najnowszych informacji, odpowiednich decyzji spośród wszystkich możliwych w celu osiągnięcia zamierzonego celu. Kluczowa role odgrywa w tym zagadnieniu tzw. funkcja wartości, która w jakiś sposób charakteryzuje nam ewolucje w czasie minimalnej wartości funkcjonału kosztu. W niniejszym artykule autor udawania pewne własności funkcji wartości dla tzw. problemu Mayera czyli dla specjalnej postaci funkcjonału kosztu.
EN
We consider optimal control problem of system which is covered by Ito’s stochastic differential equation. Such systems are sometimes called diffusion models. The basic source of uncertainty in such models is white noise, which represents large numbers of independent random forces. The controller has to make relevant decision, based on the most update information among all the possible to achieve the best expected result relevant his goal. The key role play so called value function which represent in some sense evolution of minimal cost functional in time. In the present paper the author give some characterization of value function for the so called Mayer problem which correspond to special form of cost.
JavaScript is turned off in your web browser. Turn it on to take full advantage of this site, then refresh the page.