Forrige gang (9.,10., 23. og 24. april) studerte vi noen anvendelser av tidsdiskrete Markov-kjeder (forgreningsprosesser kap. 5.1, ergodisk kontrollproblem i forbindelse med lagerstyring Kap. 5.3, Markov chain Monte Carlo kap. 5.5). Neste uke (30. april) begynner vi med diskusjonen av Markov-prosesser i kontinuerlig tid (kap. 2).
Regneøvelsene (Exercises 10) fremføres av Lorenzo på mandag, 28. april.
In our last lessons (9th, 10th, 23rd and 24th April) we studied some applications of discrete-time Markov chains (branching processes ch. 5.1, ergodic control problem in connection with warehouse management ch. 5.3, Markov chain Monte Carlo ch. 5.5). Next week (30 April) we will start with the discussion of Markov processes in continuous time (chapter 2).
The exercises (Exercises 10) will be presented by Lorenzo on Monday, 28 April.
I de siste forelesningene (2. og 3. april) diskuterte vi et ergodeteorem, som kan ses på som en generalisering av store talls loven til Markov-kjeder (se kap. 1.10 i Norris). Neste uke (9. og 10. april) skal vi fortsette med noen anvendelser av tidsdiskrete Markov-kjeder (feks. forgreningsprosesser kap. 5.1), Markov chain Monte Carlo (kap. 5.5)).
Regneøvelsene (Exercises 9) fremføres av Lorenzo på mandag, 7. april.
In the last lessons (April 2 and 3) we discussed an ergodic theorem, which can be regarded as a generalization of the law of large numbers to Markov chains (see chapter 1.10 in Norris). Next week (April 9 and 10) we will continue with some applications of discrete-time Markov chains (e.g. branching processes ch. 5.1), Markov chain Monte Carlo (ch. 5.5)).
Exercises 9 will be presented by Lorenzo on Monday, April 7.
Siste gang (26./27. mars) drøftet vi konvergensteoremer for Markov-kjeder (kap. 1.8 i Norris). Dessuten studerte vi reversible Markov-kjeder (kap. 1.9 i Norris). Neste uke skal vi fortsette (2./3. april) med kap. 1.10 i Norris (ergodeteorem og noen statistiske anvendelser).
Regneøvelsene (Exercises 8) fremføres av Lorenzo på mandag, 31. mars.
Last time (26/27 March) we discussed some convergence theorems for Markov chains (chapter 1.8 in Norris). We also studied reversible Markov chains (section 1.9 in Norris). Next week we will continue (2-3 April) with chapter 1.10 in Norris (Ergodic theorem and some statistical applications).
The exercises (Exercises 8) will be presented by Lorenzo on Monday, 31 March.