Το πλήρες κείμενο των σημειώσεων του μαθήματος είναι διαθέσιμο κατόπιν αιτήματος. ΚΛΕΙΔΕΣ: Μέτρο της πληροφορίας, Μέση πληροφορία – Εντροπία, Πηγή πληροφορίας, Συνδετική και υπό συνθήκη εντροπία, Διαπληροφορία, Δίαυλος πληροφορίας και χωρητικότητα διαύλου, Εντροπία θορύβου, Εντροπία διαύλου, Χαρακτηριστικοί δίαυλοι πληροφορίας, Υπολογισμός χωρητικότητας με την τεχνική Muroga, Κωδικοποίηση και βασικές κατηγορίες κωδίκων, Μέσο μήκος κώδικα, Βέλτιστος κώδικας, Αθόρυβη κωδικοποίηση – 1ο θεώρημα Shannon, Απλοί κώδικες μεταβλητού μήκους, Ενθόρυβη κωδικοποίηση – 2ο θεώρημα Shannon, Κώδικες ανίχνευσης και διόρθωσης σφαλμάτων, Κυκλικοί κώδικες
Σκοπός του μαθήματος είναι να παράσχει στο σπουδαστή βασικές γνώσεις της θεωρίας πληροφοριών και κωδίκων. Οι γνώσεις αυτές θεωρούνται απαραίτητες για τη μελέτη και ανάλυση τηλεπικοινωνιακών συστημάτων, καθώς και για την κατανόηση τεχνικών κωδικοποίησης δεδομένων που στοχεύουν είτε στην συμπίεση δεδομένων είτε στην αντιμετώπιση των συνεπειών του θορύβου. Μετά την παρακολούθηση του μαθήματος οι σπουδαστές θα είναι σε θέση να εκτιμήσουν την πληροφορία που περιέχει σύνολο δεδομένων, να υπολογίζουν την εντροπία μίας πηγής πληροφορίας, να υπολογίζουν τη χωρητικότητα ενός απλού δίαυλου πληροφορίας, να κατανοούν τους περιορισμούς τους οποίους υπόκειται κάθε τεχνική κωδικοποίησης δεδομένων και να αναγνωρίζουν τα πλεονεκτήματα και μειονεκτήματα διαφόρων απλών κωδίκων ανίχνευσης και διόρθωσης σφάλματος.
Θεωρία της πληροφορίας
