Some remarks on the variance in Markov chains with rewards.

Kód výsledku v IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F67985556%3A_____%2F02%3A16020086" target="_blank" >RIV/67985556:_____/02:16020086 - isvavai.cz</a>

Výsledek na webu

—

DOI - Digital Object Identifier

—

Jazyk výsledku

angličtina

Název v původním jazyce

Some remarks on the variance in Markov chains with rewards.

Popis výsledku v původním jazyce

We consider a discrete time Markov reward process with finite state space and assume that the rewards associated with the transitions are random variables with known probability distributions and finite first and second moments. We are interested in properties of cumulative reward earned in the subsequent transitions of the Markov chain. Explicit formulas for expected values and variance of the cumulative (random) reward are obtained for finite and infinite horizon models.

Název v anglickém jazyce

Some remarks on the variance in Markov chains with rewards.

Popis výsledku anglicky

We consider a discrete time Markov reward process with finite state space and assume that the rewards associated with the transitions are random variables with known probability distributions and finite first and second moments. We are interested in properties of cumulative reward earned in the subsequent transitions of the Markov chain. Explicit formulas for expected values and variance of the cumulative (random) reward are obtained for finite and infinite horizon models.

Druh

D - Stať ve sborníku

CEP obor

BB - Aplikovaná statistika, operační výzkum

OECD FORD obor

—

Projekt

Výsledek vznikl pri realizaci vícero projektů. Více informací v záložce Projekty.

Návaznosti

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)<br>Z - Vyzkumny zamer (s odkazem do CEZ)

Rok uplatnění

2002

Kód důvěrnosti údajů

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Název statě ve sborníku

Proceedings of the 20th International Conference Mathematical Methods in Economics 2002.

ISBN

80-248-0153-1

ISSN

—

e-ISSN

—

Počet stran výsledku

6

Strana od-do

231-236

Název nakladatele

Technical University

Místo vydání

Ostrava

Místo konání akce

Ostrava [CZ]

Datum konání akce

3. 9. 2002

Typ akce podle státní příslušnosti

WRD - Celosvětová akce

Kód UT WoS článku

—