Επιλογές εγγραφής

3125 Θεωρία Πληροφορίας
9ο Εξάμηνο ΗΜΜΥ
Διδακτικές Μονάδες : 4
Φόρτος Εργασίας : theory 3, lab 0
Γλώσσα : el, en
Μαθησιακά Αποτελέσματα : Το μάθημα αποτελεί το βασικό εισαγωγικό μάθημα στην περιοχή της Θεωρίας Πληροφορίας, η οποία αποτελεί θεωρητικό υπόβαθρο της περιοχής των τηλεπικοινωνιών με την ανάλυση της χωρητικότητας καναλιού και της κατάλληλης κωδικοποίησης, αλλά και άλλων περιοχών, όπως χρονοσειρών, τυχοπαιξίας, θερμοδυναμικής, συμπίεσης δεδομένων, θεωρίας της αξίας της πληροφορίας κ.α. Η ύλη του μαθήματος αποσκοπεί στην κατανόηση της εντροπίας κατά Shannon και άλλων βασικών εννοιών της θεωρίας πληροφορίας και στην εφαρμογή της θεωρίας σε διάφορες περιοχές ως ανωτέρω. Με την επιτυχή ολοκλήρωση του μαθήματος ο φοιτητής θα έχει κατανοήσει τις βασικές έννοιες της θεωρίας πληροφορίας και ιδιαίτερα της εντροπίας ενός τυχαίου φαινομένου, της αμοιβαίας πληροφορίας ανάμεσα σε τυχαίες μεταβλητές κ.λπ., θα μπορεί να κάνει σχετικούς αριθμητικούς υπολογισμούς μικρής και μεγάλης κλίμακας με κατάλληλα μαθηματικά εργαλεία, θα γνωρίζει θεμελιώδεις ιδιότητες της επικοινωνίας και πώς αυτές συνδέονται με τις ιδιότητες της πηγής πληροφορίας και του μέσου μετάδοσης, θα μπορεί να κατανοεί πώς συνδέεται η χωρητικότητα ενός καναλιού αφενός με την αμοιβαία πληροφορία, αφετέρου με τα λειτουργικά του χαρακτηριστικά και κυρίως με τα σφάλματα μετάδοσης, θα γνωρίζει με ποιους τρόπους μπορεί να βελτιστοποιηθεί η μετάδοση μέσα από ένα κανάλι, θα γνωρίζει πώς και γιατί ο θόρυβος επιδρά πάνω στη χωρητικότητα ενός καναλιού, θα γνωρίζει τις βέλτιστες μεθόδους συμπίεσης δεδομένων, θα γνωρίζει τη βέλτιστη στρατηγική σε συστήματα τυχοπαιξίας, θα γνωρίζει πώς μπορεί να αξιοποιηθεί η θεωρία πληροφορίας στη θεωρία χαρτοφυλακίου, θα γνωρίζει εναλλακτικές θεωρήσεις της εντροπίας, όπως η πολυπλοκότητα Kolmogorov.
Εντροπία, σχετική εντροπία και αμοιβαία πληροφορία, ιδιότητα της ασυμπτωματικής ισοκατανομής, ρυθμοί εντροπίας στοχαστικών διεργασιών, συμπίεση δεδομένων, τυχερά παίγνια και συμπίεση δεδομένων, χωρητικότητα διαύλου, διαφορική εντροπία, δίαυλος Gauss, θεωρία ρυθμού-παραμόρφωσης, θεωρία πληροφορίας και στατιστική, μέγιστη εντροπία, καθολική κωδικοποίηση πηγής, πολυπλοκότητα Kolmogorov, δικτυακή θεωρία πληροφορίας, θεωρία πληροφορίας και θεωρία χαρτοφυλακίου, ανισότητες της θεωρίας πληροφορίας.
Οι επισκέπτες δεν έχουν πρόσβαση στο μάθημα αυτό. Παρακαλούμε συνδεθείτε (με τον λογαριασμό σας).