Cvičení

Cvičení probíhají v rámci tří kontaktních bloků. Níže jsou materiály ke každému cvičení.

Materiály prezenčního kurzu jsou na stránkách B3B33KUI – Cvičení.

Blok 1

Týden	Téma	Obsah
1	Úvod + Prohledávání I	Instalace prostředí KUIMaze2, základní prohledávání, nepovinná úloha 01-easy_search, povinná úloha 02-search (A*)
2	Prohledávání II	Heuristické funkce, admissibilita a konzistence, rekurze, intro k Reversi
3	Adversariální prohledávání	Minimax, alpha-beta pruning, intro k úloze Reversi
4	Pravděpodobnost	Pravděpodobnostní příklady

Týden	Téma	Obsah
5	Sekvenční I	Expectiminimax na stromech s náhodností; úvod do MDP (komponenty, strategie, epizoda, výnos)
6	Sekvenční II	Value iteration, policy iteration; příklad s diskontním faktorem γ=0.9
7	RL I	Odhad modelu prostředí z pozorovaných epizod (přímé metody)
8	RL II	Vliv diskontního faktoru na strategii; přímý výpočet Q-hodnot z epizod
9	RL III	Pokračování posilovaného učení

Týden	Téma	Obsah
10	Bayesovské rozhodování I	Podmíněná pravděpodobnost, Bayesova věta; Bayesovský klasifikátor (příklady s různými apriorními pravděpodobnostmi a ztrátovými funkcemi)
11	Bayesovské rozhodování II	Neobvyklá ztrátová funkce; matice záměn (TP/FP/TN/FN), recall a precision
12	Učení klasifikátorů I	Lineární diskriminantní funkce, lineární separabilita, underfitting vs. overfitting
13	Závěrečné cvičení	Opakování látky semestru, dotazy k semestrálním úlohám