|
Reinforcement Learning (RL)5 ECTS (englische Bezeichnung: Reinforcement Learning)
Modulverantwortliche/r: Christopher Mutschler Lehrende:
Christopher Mutschler
Studienfächer/Prüfungsordnungsmodule:
Einfrieren der UnivIS-Modul-Beschreibung: 18.4.2022
Reinforcement Learning (142353)
Startsemester: |
SS 2022 | Dauer: |
1 Semester | Turnus: |
jährlich (SS) |
Präsenzzeit: |
60 Std. | Eigenstudium: |
90 Std. | Sprache: |
Englisch |
Lehrveranstaltungen:
-
-
Reinforcement Learning
(Vorlesung, 2 SWS, Christopher Mutschler, Do, 8:30 - 10:00, Zoom-Meeting)
-
Reinforcement Learning Übung
(Übung, 2 SWS, Christopher Mutschler, Do, 8:30 - 10:00, Zoom-Meeting)
Empfohlene Voraussetzungen:
Es handelt sich hier um eine Spezialisierungsvorlesung, eine erfolgreiche Absolvierung der Vorlesungen „IntroPR“ und/oder „Pattern Recognition“/“Pattern Analysis“ wird empfohlen. Konzepte, die in „IntroPR“ vermittelt werden, werden hier als Grundwissen vorausgesetzt.Es wird empfohlen, folgende Module zu absolvieren, bevor dieses Modul belegt wird:
Maschinelles Lernen für Zeitreihen (WS 2021/2022)
Pattern Recognition (WS 2021/2022)
Deep Learning (WS 2021/2022)
Inhalt:
The lecture aims at teachin Reinforcement Learning (RL) and will cover the following topics:
Introduction to Reinforcement Learning (Agent-Environment-Interface, Markov Decision Processes)
Dynamic Programming (Bellman Equations, Value Iteration, Policy Iteration)
Model-Free Prediction
Model-Free Control
Value Function Approximation (Linear VFA and DQNs)
Policy-based Reinforcement Learning (Monte-Carlo Policy Gradient, Advantage Estimators, TRPO, PPO)
Model-based RL
Offline RL
Explainable RL
Exploration-Exploitation
Simulation to Reality Transfer
Research frontiers & hot topics, Sim2Real & Real-World Applications
Lernziele und Kompetenzen:
The students will learn to
understand the basic principle behind sequestration decision making problems and how to translate them into a formal model
compare and analyze methods different agents to search for policies
implement the presented methods in PyTorch,
discuss the social impact of applications that automate decision making
Literatur:
- Richard S. Sutton and Andrew G. Barto. 2018. Reinforcement Learning: An Introduction. A Bradford Book, Cambridge, MA, USA.
Bellman, R.E. 1957. Dynamic Programming. Princeton University Press, Princeton, NJ. Republished 2003: Dover, ISBN 0-486-42809-5.
Csaba Szepesvari and Ronald Brachman and Thomas Dietterich. 2010. Algorithms for Reinforcement Learning. Morgan and Claypool Publishers.
Warren B. Powell. 2011. Approximate Dynamic Programming. Wiley.
Maxim Lapan. 2020. Deep Reinforcement Learning Hands-On: Apply modern RL methods to practical problems of chatbots, robotics, discrete optimization, web automation, and more, 2nd Edition. Packt Publishing.
Dimitri P. Bertsekas. 2017. Dynamic Programming and Optimal Control. Athena Scientific.
Miguel Morales. 2020. grokking Deep Reinforcement Learning. Manning.
Laura Graesser and Keng Wah Loon. 2019. Foundations of Deep Reinforcement Learning: Theory and Practice in Python. Addison-Wesley Data & Analytics.
Verwendbarkeit des Moduls / Einpassung in den Musterstudienplan: Das Modul ist im Kontext der folgenden Studienfächer/Vertiefungsrichtungen verwendbar:
- Data Science (Master of Science)
(Po-Vers. 2021w | Gesamtkonto | Studienrichtung Machine Learning / Artificial Intelligence | Reinforcement Learning)
Studien-/Prüfungsleistungen:
Reinforcement Learning (Prüfungsnummer: 31851)
(englischer Titel: Reinforcement Learning)
zugeh. "mein campus"-Prüfung: | - 31851 Reinforcement Learning (Gewichtung: 100.0 %, Prüfung, Form: variabel, Drittelnoten (mit 4,3), Dauer: -, 5 ECTS, Prüfung).
|
- Prüfungsleistung, schriftlich oder mündlich, benotet, 5 ECTS
- Anteil an der Berechnung der Modulnote: 100.0 %
- weitere Erläuterungen:
Sollte die Prüfung mündlich stattfinden, kann die Prüfung (abweichend von der Sprache der Vorlesung) nach Wunsch des Studierenden entweder in Deutsch oder in Englisch abgelegt werden. Im Falle einer schriftlichen Prüfung, wird diese in Englisch abgehalten.
If the examination is oral, the examination can be taken (in deviation from the language of the lecture) either in German or in English, according to the student's preference. In case of a written exam, the exam will be held in English.
- Prüfungssprache: Deutsch oder Englisch
- Erstablegung: SS 2022
1. Prüfer: | Christopher Mutschler (100466) |
|
![](/img/anew/void.gif) |
![](/img/anew/void.gif) |
|
UnivIS ist ein Produkt der Config eG, Buckenhof |
|
|