Informazione e trasmissione
Indice
News
http://www.dico.unimi.it/avvisi.php?z=0;pagina=avvisistudenti
Informazioni generali
Docenti
Anastasia Pagnoni
Corsi di laurea
Corso di laurea magistrale in Informatica
Modalità d'esame
Esame orale * sugli argomenti trattati a lezione, per i frequentanti * sugli argomenti indicati nel programma d'esame disponibile sul sito del corso
Orari e luogo delle lezioni
* Mercoledì 11.45 - 13.15 Aula Alfa * Venerdì 10.45 - 12.15 Aula Alfa
Orario di ricevimento studenti
Indicato qui
Informazioni specifiche
Siti del corso
http://homes.dico.unimi.it/pagnoni/pagina%20Informazione%20e%20Trasmissione.htm
Forum del corso, e affini
Forum DSY del corso
Materiale didattico
Programma del corso
Disponibile qui (formato DOC)
Dispense
Messe a disposizione dal docente solo agli studenti frequentanti
Testi
Francesco Fabris, Teoria dell’informazione, codici, cifrari, Bollati-Boringhieri, 2001 Thomas M. Cover, Joy A. Thomas, Elements of Information Theory, John Wiley & Sons, New York, 1991
Diario del corso
Lezione del giorno 8/3/2006
- introduzione generale al corso
- contributi storici di Morse, Hartley e Wiener alla trasmissione dell'informazione
- Shannon
- modello
- primo teorema
- teorema fondamentale
- sorgente
- sorgente uniforme
- sorgente deterministica
- Interpretazione I(p)
- la funzione logaritmica considerata da Shannon come funzione I(p)
- teorema di unicità della soluzione di Cauchy
Lezione del giorno 10/3/2006
- ripasso dei logaritmi e delle loro principali proprietà
- funzione entropia
- definizioni
- esempi di calcolo
- disuguaglianza di Gibbs
- valore massimo della funzione entropia
Lezione del giorno 15/3/2006
- codifica
- sorgente
- canale
- introduzione ai codici
- a lunghezza variabile
- a blocco
- istantanei
- compatti
- binari
- a virgola
- alberi rappresentativi dei codici
- teorema di Kraft (solo enunciato)
Lezione del giorno 17/3/2006
- algoritmo di Sardinas-Patterson
- enunciato
- dimostrazione
- codice efficiente
- codice ottimale
- teorema di Kraft (dimostrazione)
- teorema di McMillan (enunciato)
Lezione del giorno 22/3/2006
- teorema di McMillan (dimostrazione)
- lunghezza media di un codice sorgente
- codice ottimale
- codice e algoritmo di Huffman
Lezione del giorno 24/3/2006
- esercizi sui codici di Huffman
- enunciato e dimostrazione del teorema del lower bound della lunghezza media di un codice istantaneo ed efficiente