 |  |  |
| MATH1222-1 | Introduction aux processus stochastiques - Partim 1 : Chaînes de markov - Partim 2 : Processus de markov
|

 |
| Durée : | Partim 1 : Chaînes de markov : 20h Th, 10h Pr Partim 2 : Processus de markov : 10h Th, 20h TD
|
 |
| Nombre de crédits : |
|
 |
| Nom du professeur : | Partim 1 : Chaînes de markov : Pierre Geurts, Yvik Swan
Partim 2 : Processus de markov : Yvik Swan
|
 |
| Coordinateur(s) : | Yvik Swan |
 |
Langue(s) du cours :
 |
| Langue française |
 |
Organisation et évaluation :
 |
| Enseignement au deuxième quadrimestre |
 |
Contenus du cours :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Chaînes de Markov en temps discret (définitions, classification des états, temps d'absorption, propriété forte de Markov, récurrence et transience, distributions invariantes, convergence à l'équilibre). Chaînes de Markov en temps continu (Q-matrices et leurs exponentielles, processus de Poisson, Processus de vie ou de mort, propriétés des chaînes de Markov en temps continu, classification des états, récurrence et transience, distribution invariantes, convergence à l'équilibre). Files d'attentes (Notation de kendall, taux d'occupation, mesures de performances, file M/M/m). Autres applications (Markov Chain Monte Carlo, chaînes de Markov cachées) |
 |  | Partim 2 : Processus de markov |

 |
 | A la suite du cours précédent : nous étudions les principaux processus Markoviens (mouvement Brownien etc.). |
|
 |
Acquis d'apprentissage (objectifs d'apprentissage) du cours :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Après le cours, les étudiants seront capables de citer et démontrer les principales propriétés des processus stochastiques étudiés et de les exploiter à bon escient pour modéliser certains phénomènes réels.
|
 |  | Partim 2 : Processus de markov |

 |
 | Après le cours, les étudiants seront capables de citer et démontrer les principales propriétés des processus stochastiques étudiés et de les exploiter à bon escient pour modéliser certains phénomènes réels.
|
|
 |
Prérequis et corequis / Modules de cours optionnels recommandés :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Cours d'introduction aux probabilités. Connaissances élémentaires en calcul différentiel et intégral ainsi qu'en algèbre linéaire. Maîtrise de R ou Matlab. |
 |  | Partim 2 : Processus de markov |

 |
 | Cours d'introduction aux probabilités. Connaissances élémentaires en calcul différentiel et intégral ainsi qu'en algèbre linéaire. Maîtrise de R ou Matlab. |
|
 |
Activités d'apprentissage prévues et méthodes d'enseignement :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Outre l'enseignement théorique traditionnel, le cours comporte 10 heures de répétitions traditionnelles (10h Pr, type ex-cathedra).
Les étudiants de Montefiore auront également 30 heures de travaux de recherche personnelle (30h TD). Ces travaux seront à réaliser en groupe selon des modalités encore à fixer (titulaire : Prof. Pierre Geurts) |
 |  | Partim 2 : Processus de markov |

 |
 | Outre l'enseignement théorique traditionnel, le cours comporte 10 heures de répétitions traditionnelles (10h Pr, type ex-cathedra).
Les étudiants de Montefiore auront également 30 heures de travaux de recherche personnelle (30h TD). Ces travaux seront à réaliser en groupe selon des modalités encore à fixer (titulaire : Prof. Pierre Geurts) |
|
 |
Mode d'enseignement (présentiel ; enseignement à distance) :
 |
| |
 |
Lectures recommandées ou obligatoires et notes de cours :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Des notes de cours partielles seront disponibles sur MyULg. De même, des feuilles d'exercices seront proposées aux étudiants.
Bibliography
- Norris, James R. (1998). Markov chains. Cambridge University Press.
- Ross, Sheldon (2006). Introduction to probability models. Academic Press. |
 |  | Partim 2 : Processus de markov |

 |
 | Des notes de cours partielles seront disponibles sur MyULg. De même, des feuilles d'exercices seront proposées aux étudiants.
Bibliography
- Norris, James R. (1998). Markov chains. Cambridge University Press.
- Ross, Sheldon (2006). Introduction to probability models. Academic Press. |
|
 |
Modalités d'évaluation et critères :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Etudiants de Montefiore : la cote globale du cours sera le résultat d'une moyenne pondérée de deux cotes:
- la cote obtenue lors d'un examen écrit organisé durant la session de mai-juin et portant sur des questions de théorie et sur des exercices.
- la cote correspondant à l'évaluation du travail personnel réalisé pendant le cours.
Etudiants du département de mathématique : cf Partim 2 |
 |  | Partim 2 : Processus de markov |

 |
 | Pour les étudiants du département de mathématique : la cote globale du cours sera le résultat d'un examen portant sur les Partims 1 et 2 du cours de processus stochastiques. |
|
 |
Stage(s) :
 |
| |
 |
Remarques organisationnelles :
 |
| |
 |
Contacts :
 |
|
 |  | Partim 1 : Chaînes de markov |

 |
 | Yvik Swan
Université de Liège
Département de Mathématique,
Grande Traverse, 12, Sart Tilman,
B-4000 Liège
|
 |  | Partim 2 : Processus de markov |

 |
 | Yvik Swan
Université de Liège
Département de Mathématique,
Grande Traverse, 12, Sart Tilman,
B-4000 Liège
|
|
 |