Předmět: Teorie informace

» Seznam fakult » PRF » KMI
Název předmětu Teorie informace
Kód předmětu KMI/PGSTI
Organizační forma výuky Konzultace
Úroveň předmětu Doktorský
Rok studia nespecifikován
Semestr Zimní a letní
Počet ECTS kreditů 12
Vyučovací jazyk Čeština, Angličtina
Statut předmětu nespecifikováno
Způsob výuky Kontaktní
Studijní praxe Nejedná se o pracovní stáž
Doporučené volitelné součásti programu Není
Vyučující
  • Bělohlávek Radim, prof. RNDr. Ph.D., DSc.
Obsah předmětu
Předmět obsahuje pokročilé partie z klasické teorie informace a vybraných aplikací, jejíž základy jsou probírány v magisterském studiu, a dále poskytuje úvod do zobecněné teorie informace. Klasická teorie informace: entropie a jednoznačnost funkce entropie, vlastnosti, vzájemná informace, divergence. Komunikační kanály: modely kanálu bez paměti, kapacita, Shannonova věta o kapacitě kanálu, kanály s pamětí. Zdroje informace: matematický model, Markov chains, AEP. Pokročilé samoopravné kódy: cyklické, BCH a konvoluční kódy. Úvod do zobecněné teorie informace: monotónní míry a jejich speciální případy (nepřesné pravděpodobnosti, possibility, Dempster-Shafer), míry neurčitosti a informace pro tyto míry.

Studijní aktivity a metody výuky
Přednášení
Výstupy z učení
Studenti se seznámí se základními pojmy z teorie informace.
2. Porozumění Popsat a důkladně pochopit principy a metody teorie informace.
Předpoklady
nespecifikováno

Hodnoticí metody a kritéria
Ústní zkouška, Písemná zkouška

Aktivní účast v hodině. Plnění zadaných úkolů. Složení ústní (příp. písemné) zkoušky.
Doporučená literatura
  • Ash R. (1965). Information Theory. Dover, New York.
  • Han T. S., Kobayashi K. Mathematics of Information and Coding. AMS, Providence, Rhode Island.
  • Klir G. J. (2006). Uncertainty and Information. Foundations of Generalized Information Theory. J. Wiley, Hoboken, New Jersey.
  • Pierce J. R. (1980). An Introduction to Information Theory. Symbols, Signals and Noise. Dover, New York.


Studijní plány, ve kterých se předmět nachází
Fakulta Studijní plán (Verze) Kategorie studijního oboru/specializace Doporučený ročník Doporučený semestr