Risk-Sensitive Optimality Criteria in Markov Decision Processes

Result code in IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F67985556%3A_____%2F07%3A00083285" target="_blank" >RIV/67985556:_____/07:00083285 - isvavai.cz</a>

Result on the web

—

DOI - Digital Object Identifier

—

Result language

angličtina

Original language name

Risk-Sensitive Optimality Criteria in Markov Decision Processes

Original language description

The usual optimization criteria for Markov decision processes can be quite unsufficient to fully capture the various aspects of a decision maker. It may be preferable to select more sophisticated criteria that also reflect variability-risk features of the problem. To this end formalae both for the variance of cumulative reward as well as for the exponential utility of cumulative reward earned up to a fixed time point of a Markov reward processes were obtained and their asymptotical properties are studied. By a careful examination of these formulae we can discover difficulties arising if the man-variance of exponential utility penalization is considered.

Czech name

Kritéria optimality zohledňující riziko v markovských rozhodovacích procesech

Czech description

Standardní kritéria optimality pro markovské rozhodovací procesy nemohou zachytit veškeré aspekty rozhodovacího procesu. Pro popis rizikových aspektů rozhodovacího procesu je třeba použít sofistikovanějších kritérií optimality. S tímto záměrem byly odvozeny vzorce i jejich asymptoticke chování pro rozptyl celkového výnosu i vztahy pro případ, že celkový výnos je hodnocen pomocí exponenciální užitkové funkce. Porovnáním uvedených vztahů lze poukázat na úskalí vznikající při použití kritériálních funkcí typu střední hodnota-rozptyl nebo exponenciálních užitkových funkcí.

Type

D - Article in proceedings

CEP classification

BB - Applied statistics, operational research

OECD FORD branch

—

Project

Result was created during the realization of more than one project. More information in the Projects tab.

Continuities

Z - Vyzkumny zamer (s odkazem do CEZ)

Publication year

2007

Confidentiality

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Article name in the collection

Operations Research Proceedings 2006

ISBN

978-3-540-69994-1

ISSN

—

e-ISSN

—

Number of pages

7

Pages from-to

555-561

Publisher name

Springer

Place of publication

Berlin

Event location

Karlsruhe

Event date

Sep 6, 2006

Type of event by nationality

WRD - Celosvětová akce

UT code for WoS article

—