====== Cvičení 10 a 11 - MDP a POMDP ====== Průběžně aktualizováno. **Přednáška:** Základním studijním materiálem jsou přednášky Sekvenční rozhodování za neurčitosti, jde o přednášky č.9 (MDP) a 10 (POMPD), materiály jsou k dispozici v sekci [[courses:b4b36zui:prednasky|přednášky]]. Doplňkovým zdrojem mohou být příbuzné kurzy, například [[http://ai.berkeley.edu/lecture_videos.html|Intro to AI na UC Berkeley]] (přednášky 8 a 9, jiné přednášky relevantní k jiným tématům kurzu), kapitoly 3 a 4 [[https://web.stanford.edu/class/psych209/Readings/SuttonBartoIPRLBook2ndEd.pdf|v knize Suttona a Barta]]. **Náhrada cvičení:** Cílem cvičení je základní seznámení s pozorovatelnými a částečně pozorovatelnými markovskými rozhodovacími procesy. Podívejte se na [[https://drive.google.com/file/d/1RQI9JoGe1iD1rZB5kPXWVAYDqpIx_Dao/view|video]] z on-line cvičení ze dne 20.4.2020. **Praktická část:** Budete řešit [[https://cw.fel.cvut.cz/wiki/courses/b4b36zui/tasks/task5|Task 5]]. Vzorové řešené úlohy č. 4-6 {{ :courses:b4b36zui:b4b36zui_solved_tasks_full.pdf|zde}}. **Konzultace:** Dotazy pokládejte především na fóru v tomto [[https://cw.felk.cvut.cz/forum/thread-4927.html|vláknu]]. Výhodou je, že odpovědi jsou snadno dostupné pro všechny. Součástí minibloku jsou i //online// konzultace, které budou v pondělí 27.4. od 16:15 do 17:15.\\ K online kozultaci se připojíte na [[https://meet.google.com/fzj-zzso-pqp]].