====== Cvičení ====== Termíny odevzdání jednotlivých samostatných úloh jsou v [[https://cw.felk.cvut.cz/brute|BRUTE]]. Záměrně je nepíšeme sem, aby nevznikaly problémy s konzistencí. Cvičící: [[http://cmp.felk.cvut.cz/~kostkj2/|Jana Kostlivá]], [[https://usermap.cvut.cz/profile/62aa02fc-e3d1-4e0c-989d-a6c9b613d981|Petr Pošík]], [[https://cyber.felk.cvut.cz/department/people/person/?id=1252&lang=en|Pavel Šindler]]. Sloupec č.par. označuje konkrétní paralelku, sloupec č.t. pořadové číslo týdne v semestru, sloupec v.t. pořadové číslo výukového týdne, tedy programu cvičení. Ve druhé půlce semestru je v tom trochu zmatek, tak prosím opatrně. ^ datum ^ č.par. ^č.t. ^ v.t. ^ náplň ^ | 22.02.2024 | 101,102,105 | 1 | 1 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_01|Úvodní cvičení]]. Osvěžíme dovednosti v Pythonu. Představíme **[[courses:b3b33kui:semestralni_ulohy:1_prohledavani_stavoveho_prostoru:start|bludiště]]** | | 23.02.2024 | 103,104,106| ::: | ::: | ::: | | 29.02.2024 | 101,102,105|2 | 2 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_03|Herní prohledávání]]. Jak prohledání urychlit, heuristiky. Jak minimalizovat soupeřův zisk. **[[courses:b3b33kui:semestralni_ulohy:2_reversi:start|Hra Reversi]]** | | 01.03.2024 | 103,104,106|::: | ::: | ::: | | 07.03.2024 | 101,102,105|3 | 3 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_05|Adversariální prohledávání]]. Jak zmenšit velký strom - prořezávání. | | 08.03.2024 | 103,104,106|::: | ::: | ::: | | 14.03.2024 | 101,102,105|4 | 4 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_055|Pravděpodobnost.]] Zopakování základních principů. | | 15.03.2024 | 103,104,106|::: | ::: | ::: | | 21.03.2024 | 101,102,105|5 | 5 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_06|Sekvenční rozhodování I]]. Zpátky k **bludišti**, ale co když se robot/agent občas splete, něco se nepovede? Který stav (políčko) je lepší. **[[courses:b3b33kui:semestralni_ulohy:3_mdp:start|Úloha MDP]]** | | 22.03.2024 | 103,104,106|::: | ::: | ::: | | 28.03.2024 | 101,102,105|6 | 6 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_07|Sekvenční rozhodování II]]. Zkusme policy počítat přímo. | | 29.03.2024 | 103,104,106|::: | - |**Svátek**| | 04.04.2024| 101,102,105|7 | 7 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_08|Posilované učení I]] Ještě v **bludišti**. Co v případě, když model chování robota-agenta neznáme? | | 05.04.2024| 103,104,106|::: | 6 |[[courses:b3b33kui:cviceni:program_po_tydnech:tyden_07|Sekvenční rozhodování II]]. Zkusme policy počítat přímo. | | 11.04.2024 | 101,102,105|8 | 8 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_09|Posilované učení II]] Explorace vs. Exploitace, aneb jak neustrnout na nalezeném řešení **[[courses:b3b33kui:semestralni_ulohy:4_rl:start|Úloha RL]]** | | 12.04.2024| 103,104,106| ::: | 7 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_08|Posilované učení I]] Ještě v **bludišti**. Co v případě, když model chování robota-agenta neznáme? **[[courses:b3b33kui:semestralni_ulohy:4_rl:start|Úloha RL]]**| | 18.04.2024| 101,102,105|9 | 9 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_09b|Posilované učení III]]; opouštíme přehledný tabulkový svět. | | 19.04.2024| 103,104,106|::: | 8 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_09|Posilované učení II]] Explorace vs. Exploitace, aneb jak neustrnout na nalezeném řešení | | 25.04.2024| 101,102,105|10 | 10 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_10|Bayesovské rozhodování I]] Nejprve trochu procvičíme všechnny ty pravděpodobnosti, sdruženou, marginální, podmíněnou. ** [[courses:b3b33kui:semestralni_ulohy:5_ml:start|Úloha Strojové učení]]**| | 26.04.2024 | 103,104,106|::: | 9| [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_09b|Posilované učení III]]; opouštíme přehledný tabulkový svět. ** [[courses:b3b33kui:semestralni_ulohy:5_ml:start|Úloha Strojové učení]]**| | 02.05.2024| 101,102,105|11 | 11 |[[courses:b3b33kui:cviceni:program_po_tydnech:tyden_11|Bayesovské rozhodování II]] Jak nalézt strategii rozhodování zvážením rizika.| | 03.05.2024| 103,104,106|::: | 10 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_10|Bayesovské rozhodování I]] Nejprve trochu procvičíme všechnny ty pravděpodobnosti, sdruženou, marginální, podmíněnou. | | 09.05.2024| 101,102,105|12 | - | **Výuka jako ve středu**| | 10.05.2024| 103,104,106|::: | 11 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_11|Bayesovské rozhodování II]] Jak nalézt strategii rozhodování zvážením rizika.| | 16.05.2024| 101,102,105|13 | 12 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_12|Učení klasifikátorů I]] Jak vytrénovat rozhodovací stroj - klasifikátor z dat. | | 17.05.2024 | 103,104,106|::: | ::: | ::: | | 23.05.2024| 101,102,105|14 | 13 | [[courses:b3b33kui:cviceni:program_po_tydnech:tyden_13|Učení klasifikátorů II]] Trénink dělá mistra a tak pokračujeme. | | 24.05.2024 | 103,104,106|::: | ::: | :::| ===== Pravidla ===== Cvičení nejsou povinná. Docházku budeme sledovat pro naši potřebu, např. pro zapamatování jmen. Předpokládáme, že diskuse nad problémy a konzultace k úlohám budou probíhat na cvičení. V případě dlouhodobější nepřítomnosti kontaktujte svého cvičícího a domluvte si individuální konzultace.