Destiné aux étudiants en Masters de mathématiques appliquées ou aux élèves ingénieurs, les ouvrages de la série «Mathématiques appliquées pour le Master/SMAI» répondent à une double exigence de qualité, scientifique et pédagogique. La SMAI assure la direction éditoriale grâce à un comité renouvelé périodiquement et largement représentatif des différents thèmes des mathématiques appliquées. Ce cours présente de façon progressive, détaillée et rigoureuse la théorie des chaînes de Markov à temps et espace d'états discrets. Les notions fondamentales sont illustrées par des exemples qui apportent de nombreuses applications concrètes actuelles. Le cours est complété par des exercices dont les corrigés sont regroupés en fin d'ouvrage.