Markov Chains and Decision Processes for Engineers and Managers

Markov-modellering er anerkjent som et kraftig verktøy for å håndtere usikkerhet, og kan betydelig forbedre din evne til å analysere komplekse produksjons- og tjenestesystemer. Dessverre er mange bøker om Markov-kjeder eller beslutningsprosesser enten svært teoretiske med få eksempler, eller de er sterkt forskriftsmessige uten tilstrekkelig begrunnelse for de anvendte algoritmene. Boken 'Markov Chains and Decision Processes for Engineers and Managers' tilbyr en helhetlig fremstilling av både Markov-kjeder og Markov-beslutningsprosesser i en enkel volum. Den gir en grundig beskrivelse av konstruksjonen og løsningen av Markov-modeller, noe som letter anvendelsen deres i ulike prosesser. Organisert rundt strukturen til Markov-kjeder, begynner boken med en forklaring av Markov-kjeders tilstander, overganger, struktur og modeller, før den tar for seg steady state-fordelinger og overgangen til en måltilstand i en regulær Markov-kjede. Forfatteren omtaler også kanoniske former og overgangen til måltilstander eller klasser.