Some Remarks on Risk-Sensitive Optimality Criteria in Markov Decision Processes

Result code in IS VaVaI
<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F67985556%3A_____%2F06%3A00047531" target="_blank" >RIV/67985556:_____/06:00047531 - isvavai.cz</a>
Result on the web
—
DOI - Digital Object Identifier
—

Result language
angličtina
Original language name
Some Remarks on Risk-Sensitive Optimality Criteria in Markov Decision Processes
Original language description
In this note we focus attention on discrete-time Markov decision processes with risk-sensitive optimality criteria (i.e. the case when the stream of rewards generated by the Markov processes is evaluated by an exponential utility function). It is shown that this problem can be studied as a classical Markov decision process on condition that the transition probabilities are replaced by general nonnegative matrices. Under some unichain conditions we suggest a value iteration method for finding optimal policies.
Czech name
Několik poznámek k sensitivním kritériím optimality v markovských rozhodovacích procesech
Czech description
Práce je věnována diskrétním markovským rozhodovacím procesům se sensitivními kritérii optimality (tj.posloupnost výnosů generovaných markovským procesem je vyhodnocena pomocí exponenciální funkce užitku). Je ukázáno, že tuto úlohu lze řešit jako klasickou úlohu o markovských rozhodovacích procesech za podmínky, že matice pravděpodobnosti přechodů jsou nahrazeny obecnými nezápornými maticemi. Za určitých podmínek ergodicity je navržena metoda postupných aproximací pro nalezení optimálního řízení.

Project
Result was created during the realization of more than one project. More information in the Projects tab.
Continuities
Z - Vyzkumny zamer (s odkazem do CEZ)

Publication year
2006
Confidentiality
S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Article name in the collection
Proceedings of the International Conference of Quantitative Methods in Economics. Multiple Criteria Decision MakingXIII
ISBN
80-8078-129-X
ISSN
—
e-ISSN
—
Number of pages
7
Pages from-to
165-173
Publisher name
University of Economics in Bratislava
Place of publication
Bratislava
Event location
Bratislava
Event date
Dec 6, 2006
Type of event by nationality
EUR - Evropská akce
UT code for WoS article
—

Similar results(10)