EN
Modul
Markovsche Entscheidungsprozesse [M-MATH-102907]
Leistungspunkte
5Turnus
UnregelmäßigDauer
1 SemesterSprache
Level
4Version
1Verantwortung
Einrichtung
- KIT-Fakultät für Mathematik
Bestandteil von
Teilleistungen
Identifier | Name | LP |
---|---|---|
T-MATH-105921 | Markovsche Entscheidungsprozesse | 5 |
Erfolgskontrolle(n)
Die Modulprüfung erfolgt in Form einer mündlichen Prüfung (ca. 20 min).
Qualifikationsziele
Absolventinnen und Absolventen können
- die mathematischen Grundlagen der Markovschen Entscheidungsprozesse nennen und Lösungsverfahren anwenden,
- stochastische, dynamische Optimierungsprobleme als Markovschen Entscheidungsprozess formulieren,
- selbstorganisiert und reflexiv arbeiten.
Voraussetzungen
Keine
Inhalt
-
MDPs mit endlichem Horizont
- Die Bellman Gleichung
- Strukturierte Probleme
- Anwendungsbeispiele -
MDPs mit unendlichem Horizont
- kontrahierende MDPs
- positive MDPs
- Howards Politikverbesserung
- Lösung durch lineare Programme -
Stopp-Probleme
- endlicher und unendlicher Horizont
- One-step-look-ahead-Regel
Empfehlungen
Das Modul "Wahrscheinlichkeitstheorie" wird dringend empfohlen. Das Modul "Markovsche Ketten" wird empfohlen.
Arbeitsaufwand
Gesamter Arbeitsaufwand: 150 Stunden
Präsenzzeit: 60 Stunden
- Lehrveranstaltung einschließlich studienbegleitender Modulprüfung
Selbststudium: 90 Stunden
- Vertiefung der Studieninhalte durch häusliche Nachbearbeitung des Vorlesungsinhaltes
- Bearbeitung von Übungsaufgaben
- Vertiefung der Studieninhalte anhand geeigneter Literatur und Internetrecherche
- Vorbereitung auf die studienbegleitende Modulprüfung