EN

Modul

Markovsche Entscheidungsprozesse [M-MATH-102907]

Leistungspunkte
5
Turnus
Unregelmäßig
Dauer
1 Semester
Sprache
Level
4
Version
1

Verantwortung

Einrichtung

  • KIT-Fakultät für Mathematik

Bestandteil von

Teilleistungen

Identifier Name LP
T-MATH-105921 Markovsche Entscheidungsprozesse 5

Erfolgskontrolle(n)

Die Modulprüfung erfolgt in Form einer mündlichen Prüfung (ca. 20 min).

Qualifikationsziele

Absolventinnen und Absolventen können

  • die mathematischen Grundlagen der Markovschen Entscheidungsprozesse nennen und Lösungsverfahren anwenden,
  • stochastische, dynamische Optimierungsprobleme als Markovschen Entscheidungsprozess formulieren,
  • selbstorganisiert und reflexiv arbeiten.

Voraussetzungen

Keine

Inhalt

  • MDPs mit endlichem Horizont
    - Die Bellman Gleichung
    - Strukturierte Probleme
    - Anwendungsbeispiele

  • MDPs mit unendlichem Horizont
    - kontrahierende MDPs
    - positive MDPs
    - Howards Politikverbesserung
    - Lösung durch lineare Programme

  • Stopp-Probleme
    - endlicher und unendlicher Horizont
    - One-step-look-ahead-Regel

Empfehlungen

Das Modul "Wahrscheinlichkeitstheorie" wird dringend empfohlen. Das Modul "Markovsche Ketten" wird empfohlen.

Arbeitsaufwand

Gesamter Arbeitsaufwand: 150 Stunden

Präsenzzeit: 60 Stunden

  • Lehrveranstaltung einschließlich studienbegleitender Modulprüfung

Selbststudium: 90 Stunden

  • Vertiefung der Studieninhalte durch häusliche Nachbearbeitung des Vorlesungsinhaltes
  • Bearbeitung von Übungsaufgaben
  • Vertiefung der Studieninhalte anhand geeigneter Literatur und Internetrecherche
  • Vorbereitung auf die studienbegleitende Modulprüfung