Boken 'Adaptive Markov Control Processes' tar for seg en gruppe av stokastiske kontrollprosesser i diskret tid, kjent som kontrollerte Markov-prosesser (CMP'er), også omtalt som Markov beslutningsprosedyrer eller Markov dynamiske programmer. Siden midten av 1950-tallet, med Richard Bellman som en pioner, har det blitt gjort mange bidrag til CMP'er, som har fått brede anvendelser innen ingeniørfag, statistikk og operasjonsforskning, blant andre felt. Hensikten med denne boken er å presentere nyere utviklinger innen teorien for adaptive CMP'er, som er CMP'er som er avhengige av ukjente parametere. På hvert beslutningstidspunkt må kontrolløren eller beslutningstakeren estimere de sanne parameterverdiene for deretter å tilpasse kontrollhandlingene til de estimerte verdiene. Boken har som mål å gi en dypere forståelse av denne tilpasningsprosessen uten å dekke samtlige aspekter av stokastisk adaptiv kontroll. Utvalget av materiale reflekterer forfatternes egne forskningsinteresser. For å få utbytte av innholdet i boken anbefales det å ha kjennskap til reell analyse og sannsynlighetsteori, på nivå med verkene til Ash (1972) eller Royden (1968).