Ανακοινώσεις μαθήματος Ενισχυτική Μάθηση

Βαθμοί μαθήματος

Sun, 22 Feb 2026 14:06:51 +0300

Γεια σας,

Ανακοίνωσα τους βαθμούς σας στη γραμματεία, φαντάζομαι θα οτυς δείτε σύντομα. Ο βαθμός σς ήταν 70% ο βαθμός της τελικής σας εξέτασης και 35% ο βαθμός των επτά εργασιών σας (η μία ήταν bonus). Αν έχετε κάποιο προβληματισμό, ή απλώς θέλετε να δείτε τις λύσεις, μπορείτε να έρθετε στις ώρες γραφείου, Δευτέρα 11-1 ή Τρίτη 1-3.

Καλό εαρινό εξάμηνο, Σταύρος Τουμπής

Τελική Εξέταση

Wed, 14 Jan 2026 22:55:34 +0300

Γεια σας,

Όπως είπαμε και στο μάθημα, δεν θα γίνει αναπλήρωση την ερχόμενη Τρίτη, επομένως οι διαλέξεις ολοκληρώθηκαν. Είναι εντός ύλης ό,τι είδαμε στο μάθημα από τα κεφάλαια 1-7 του βιβλίου των Sutton/Barto.

Στην τελική εξέταση δεν θα μπορείτε να φέρετε τίποτα μαζί σας (***ούτε τις σημειώσεις σας***). Θα σας δώσω εγώ τις εκφωνήσεις και επίσης αντίγραφα του βιβλίου, και επίσης θα γράψω στον πίνακα οτιδήποτε τυχόν χρειαστείτε και δεν θα υπάρχει στο βιβλίο. Κατ' εξαίρεση, μπορείτε να έχετε μαζί σας μια κόλλα Α4 γραμμένη μπρος-πίσω με ό,τι κομμάτι της ***θεωρίας*** θέλετε (και επομένως οχι λυμένες ασκήσεις). Οι ασκήσεις που θα πρέπει να λύσετε θα είναι παραλλαγές των ασκήσεων του βιβλίου, επομένως για την προετοιμασία σας σας προτείνω να διαβάσετε σε βάθος το βιβλίο και να λύσετε προσεκτικά όσες περισσότερες ασκήσεις μπορείτε.

Καλό διάβασμα,

Σταύρος Τουμπής

Αξιολόγηση μαθημάτων

Wed, 07 Jan 2026 10:43:23 +0300

Καλημέρα σας, Καλή Χρονιά. Σας προωθώ την παρακάτω ανακοίνωση του ΟΠΑ, και σας προτρέπω και εγώ με τη σειρά μου να αποκριθείτε. Σταύρος Τουμπής

====================

Το τέλος κάθε διδακτικής περιόδου στα Μεταπτυχιακά Προγράμματα Σπουδών έχει συνδεθεί με την αξιολόγηση μαθήματος/διδασκαλίας, μία διαδικασία που ωφελεί κυρίως εσένα - τον αποδέκτη του εκπαιδευτικού έργου.

Μέσα από το κινητό σου, μπορείς εύκολα να συμμετέχεις στην αξιολόγηση των μαθημάτων που έχεις δηλώσει.

Η ΠΕΡΙΟΔΟΣ ΑΞΙΟΛΟΓΗΣΗΣ ΞΕΚΙΝΑ ΣΗΜΕΡΑ ΚΑΙ ΛΗΓΕΙ ΣΤΙΣ 25/01/2026

--------------------------------------------------------------------------------------------------------------

Οδηγίες συμπλήρωσης ερωτηματολόγιων

Ο φοιτητής/ Η φοιτήτρια:

Συνδέεται στον σύνδεσμο https://e-grammateia.aueb.gr/ με τα ιδρυματικά διαπιστευτήρια
Επιλέγει το μενού «Αξιολόγηση»
Τα μαθήματα προς αξιολόγηση βρίσκονται μέσω του μενού Ερωτηματολόγια -> Πληροφορίες φοιτητή-> Τα μαθήματα μου
Κάτω από το πεδίο «Ενέργειες», επιλέγει το κουμπί με το μολυβάκι
Συμπληρώνει το ερωτηματολόγιο και το υποβάλλει πατώντας το κουμπί «Καταχώρηση Απαντήσεων» και μετά το κουμπί «ΟΚ»
Πατώντας το κουμπί «Λίστα Ερωτηματολογίων» γίνεται επιστροφή στη λίστα των διαθέσιμων μαθημάτων.
Αν ένα ερωτηματολόγιο έχει υποβληθεί, εμφανίζεται με τη σήμανση «Συμπληρωμένο».
Το ερωτηματολόγιο δεν είναι διαθέσιμο προς συμπλήρωση, αν έχει περάσει η αξιολογική περίοδος.
Σε περίπτωση προβλήματος / μη προβολής της αξιολόγησης, ο φοιτητής ενημερώνει την γραμματεία αναφέροντας το μάθημα/μαθήματα που αντιμετωπίζει το πρόβλημα/προβλήματα.

Η αξιολόγηση είναι ανώνυμη

Οι σύνδεσμοι δημιουργούνται με τυχαίο τρόπο και οδηγούν στην συμπλήρωση των ερωτηματολογίων εκτός του portal, ώστε να είναι αδύνατη η συσχέτιση των συμμετεχόντων με τις υποβληθείσες απαντήσεις.

Τα αποτελέσματα των αξιολογήσεων κοινοποιούνται μεμονωμένα σε κάθε διδάσκοντα/ουσα, αναλυτικά στον/στην Διευθυντή/ρια του ΠΜΣ, και συγκεντρωτικά στην ιστοσελίδα της ΜΟΔΙΠ https://aueb.gr/el/content/axiologisi-mathimatosdidaskalias-sta-pms μετά τη λήξη του ακαδημαϊκού έτους.

Η συμμετοχή σου είναι σημαντική!

Εργασίες 5,6,7.

Wed, 31 Dec 2025 17:22:37 +0300

Γεια σας,

1) οι εργασίες 5,6,7 έχουν προθεσμία υποβολής την 27η/1/2026. Ειδικά η 5η, που είναι αρκετά μεγάλη, θα μετρήσει ως bonus, και θα

δώσουμε κάποιες διευκρινίσεις στο επόμενο μάθημα.

2) σε συνέχεια συζήτησης που είχαμε στο μάθημα, οι αλγόριθμοι των σελίδων 110 και 111 είναι σωστοί, ως έχουν, σε αντίθεση με ό,τι σας είχα πει. Ο λόγος της σύγχυσης είναι οτι ο συντελεστής importance sampling ratio πρέπει να ορισθεί διαφορετικά στην περίπτωση των state-action values, σε σχέση με τον ορισμό της σελίδας 104, που αφορά τα state values. Το είχες αναφέρει μάλιστα αυτό το σημείο κάποιος/α στο μάθημα (δεν θυμάμαι ποιος/α). Δείτε σχετικά μια σελίδα που έχω αναρτήσει με τον κατάλληλο (για αυτή την περίπτωση) ορισμό. Είναι το αρχείο 50a.pdf

Καλές γιορτές,

Σταύρος Τουμπης

Εξ αποστάσεως διάλεξη

Mon, 22 Dec 2025 18:39:45 +0300

Γεια σας, όπως είπαμε και στην προηγούμενη διάλεξη, θα έχουμε μια διάλεξη αύριο εξ αποστάσεως, στο ακόλουθο λινκ. Θα ολοκλήρώσουμε το κεφάλαιο 6.

________________________________________________________________________________

Microsoft Teams Need help?

Join the meeting now

Meeting ID: 381 185 841 105 42

Passcode: iR2oV3Bp

Διευκρίνιση για τη 2η ομάδα

Wed, 19 Nov 2025 15:45:28 +0300

Γεια σας, μικρή διόρθωση, στη δεύτερη ομάδα αναφερόμουν στο παράδειγμα 3.5 στην εκφώνηση, όχι στο 3.8. Ισχύει δηλαδή ό,τι είπαμε στο μάθημα. Λυπάμαι για το μπέρδεμα.

Διευκρίνιση για την πρώτη ομάδα

Thu, 23 Oct 2025 09:21:11 +0300

Γεια σας,

Στην τάξη ανέφερα οτι αρκεί να παράξετε το Σχήμα 2.6 του βιβλίου για την πρώτη ομάδα ασκήσεων. Αυτό δεν είναι ακριβές, η εκφώνηση αναφέρει οτι πρέπει να παράξετε μερικά σχήματα, ώστε να εξερευνήσετε επαρκώς τη λειτουργία των αλγορίθμων. Προσπαθήστε να υλοποιήσετε κατά το δυνατόν πλήρως τους αλγόριθμους του κεφαλαίου, αλλά θα πάρετε όλες τις μονάδες ακόμα και αν υλοποιήσετε ένα μεγάλο υποσύνολο της άσκησης. Αν έχετε απορίες, μπορείτε να μου στείλετε μήνυμα.

Μάθημα εξ αποστάσεως

Mon, 13 Oct 2025 14:57:28 +0300

Γεια σας, λόγω της απεργίας των ΜΜΜ, το αυριανό μάθημα της Ενισχυτικής Μάθησης θα γίνει μέσω teams εδώ:

Microsoft Teams Need help?

Join the meeting now

Meeting ID: 355 255 911 875 5

Passcode: LA7nu2xa

Παρακαλώ προωθήστε το παρόν και στις σχετικές λίστες επικοινωνίας που διατηρείτε, ώστε να ενημερωθούν όλοι/ες.

Σταύρος Τουμπής

FYI: Ομιλια σε Bandits

Tue, 25 Feb 2025 23:23:07 +0300

Ομιλία Χριστίνας Φραγκούλη:

Μέρα/Ώρα: Τετάρτη 26/2, ώρα 3μμ

Τόπος: Τ106, κτήριο Τροίας

MS Teams Link:

https://teams.microsoft.com/l/meetup-join/19%3ameeting_MTA4OGMzMTUtNmZmOC00NjkzLTllZTQtM2NlMmQ0NWE5MzI4%40thread.v2/0?context=%7b%22Tid%22%3a%22ad5ba4a2-7857-4ea1-895e-b3d5207a174f%22%2c%22Oid%22%3a%22ecdc1bd6-a7c4-44e7-a03e-6567a94ede71%22%7d

Abstract:
Linear bandit and contextual linear bandit problems have recently attracted extensive attention as they
enable to support impactful active learning applications through elegant formulations.
In linear bandits, a learner at each round plays an action from a fixed action space and receives a
reward that is specified by the inner product of the action and an unknown parameter vector plus
noise. Contextual linear bandits add another layer of complexity by enabling at each round the action
space to be different, to capture context. The goal is to design an algorithm that learns to play as close
as possible to the unknown optimal policy after a number of action plays. The contextual problem is
considered more challenging than the linear bandit problem, which can be viewed as a contextual
bandit problem with a fixed context. Surprisingly, in this talk, we show that the stochastic contextual
problem can be solved as if it is a linear bandit problem. In particular, we establish a novel reduction
framework that converts every stochastic contextual linear bandit instance to a linear bandit instance.
Our reduction framework opens up a new way to approach stochastic contextual linear bandit
problems, and enables significant savings in communication cost in distributed setups. Furthermore, it
yields improved regret bounds in a number of instances.
This talk is based on joint work with Osama Hanna and Lin Yang.
Bio:
Christina Fragouli is a Professor in the Electrical and Computer Engineering Department at UCLA.
She received the B.S. degree in Electrical Engineering from the National Technical University of
Athens, Athens, Greece, and the M.Sc. and Ph.D. degrees in Electrical Engineering from the
University of California, Los Angeles. She has worked at the Information Sciences Center, AT\&T
Labs, Florham Park New Jersey, and also visited Bell Laboratories, Murray Hill, NJ, and DIMACS,
Rutgers University. Between 2006--2015 she was an Assistant and Associate Professor in the School
of Computer and Communication Sciences, EPFL, Switzerland. She is an IEEE fellow, she served as
the 2022 President of the IEEE Information Theory Society (currently serving as Senior Past
President), and has served in several IEEE-wide and Information Theory Society Committees as
member or Chair. She has also served as TPC Chair in several conferences including the IEEE
Information Theory Symposium in 20204, as an Information Theory Society Distinguished Lecturer,
and as an Associate Editor for IEEE Communications Letters, for Elsevier Journal on Computer
Communication, for IEEE Transactions on Communications, for IEEE Transactions on Information
Theory, and for IEEE Transactions on Mobile Communications. She has received numerous awards
including the Okawa Foundation Award, the European Research Council (ERC) Starting Investigator
Grant, and the Zonta Price. Her research interests are in the intersection of coding techniques,
machine learning and information theory, with a wide range of applications that include network
information flow, network security and privacy, compression, wireless networks and bioinformatics.

Βαθμοί τελικής εξέτασης

Tue, 18 Feb 2025 16:29:14 +0300

Γεια σας, οι βαθμοί σας είναι οι ακόλουθοι. Θα τους στείλω στη γραμματεία σύντομα. Αν θέλετε να δείτε το γραπτό σας, μπορείτε να έρθετε στις ώρες γραφείου της Παρασκευής, 11-1, ή να επικοινωνήσετε μαζί μου μέσω teams.

ΑΜ	ΓΡΑΜΜΑΤΕΙΑ
ds3322211	11
ds3322308	9
ds3322310	9,5
f3322308	10
f3322401	9,5
f3322403	7
f3322404	10
f3322405	11
f3322408	11
f3322409	8,5
f3322410	8,5
f3322411	9
f3322412	8

Καλή συνε΄χεια, Σταύρος Τουμπής

παράταση άσκησης

Fri, 24 Jan 2025 13:09:29 +0300

Γεια σας, άλλαξε η προθεσμία για την 5η ομάδα ασκήσεων για τις 9/2. Αν αν έχετε παραδόσει, μπορεί να κάνετε αλλαγές και να ξαναπαραδώσετε. Θα βαθμολογηθεί χωρίς να υπάρχουν αυστηρές απαιτήσεις. Καλό διάβασμα,

Σταύρος Τουμπής

Αναπλήρωση Διάλεξης

Wed, 22 Jan 2025 16:59:24 +0300

Γεια σας, η αναπλήρωση της χαμένης διάλεξης θα γίνει αύριο, Πέμπτη, 12-3, Online. Το λινκ είναι:

________________________________________________________________________________

Microsoft Teams Need help?

Join the meeting now

Meeting ID: 355 741 891 845

Passcode: Rr2cd9eV

For organizers: Meeting options

7η εργασία

Sun, 29 Dec 2024 22:24:47 +0300

Γεια σας,

1) αναρτήθηκε η 7η και τελευταία εργασία (είναι σχετικά εύκολη)

2) Σας θυμίζω ότι έχει ενεργοποιηθεί η δυνατότητα να κάνετε αξιολογήσιες των μαθημάτων σας. Αν αντιμετωπίσετε τεχνικό πρόβλημα, ενημερώστε με

Χρόνια Πολλά,

Σταύρος Τουμπής

Επείγον, αναβολή μαθήματος

Mon, 16 Dec 2024 13:42:20 +0300

Καλησπέρα, λόγω ασθένειας το αυριανή μάθημα θα πρέπει να αναβληθεί, ευχαριστώ για την κατανόηση. Στο επόμενο μάθημα, μετά τις γιορτές, θα συντονιστούμε για την αναπλήρωσή του.

Καλές Γιορτές, Σταύρος Τουμπής

Αξιολόγηση μαθημάτων

Mon, 16 Dec 2024 09:42:07 +0300

Αγαπητή φοιτήτρια / Αγαπητέ φοιτητή,

Το τέλος κάθε διδακτικής περιόδου στα Προγράμματα Σπουδών έχει συνδεθεί με την αξιολόγηση μαθήματος/διδασκαλίας, μία διαδικασία που ωφελεί κυρίως εσένα - τον αποδέκτη του εκπαιδευτικού έργου.

Μέσα από το κινητό σου, μπορείς εύκολα να συμμετέχεις στην αξιολόγηση των μαθημάτων που έχεις δηλώσει.

Η ΠΕΡΙΟΔΟΣ ΑΞΙΟΛΟΓΗΣΗΣ ΛΗΓΕΙ ΣΤΙΣ 19/01/2025

--------------------------------------------------------------------------------------------------------------

Οδηγίες συμπλήρωσης ερωτηματολόγιων

Ο φοιτητής/ Η φοιτήτρια:

Συνδέεται στον σύνδεσμο https://e-grammateia.aueb.gr/ με τα ιδρυματικά διαπιστευτήρια
Επιλέγει το μενού «Αξιολόγηση»
Τα μαθήματα προς αξιολόγηση βρίσκονται μέσω του μενού Ερωτηματολόγια -> Πληροφορίες φοιτητή-> Τα μαθήματα μου
Κάτω από το πεδίο «Ενέργειες», επιλέγει το κουμπί με το μολυβάκι
Συμπληρώνει το ερωτηματολόγιο και το υποβάλλει πατώντας το κουμπί «Καταχώρηση Απαντήσεων» και μετά το κουμπί «ΟΚ»
Πατώντας το κουμπί «Λίστα Ερωτηματολογίων» γίνεται επιστροφή στη λίστα των διαθέσιμων μαθημάτων.
Αν ένα ερωτηματολόγιο έχει υποβληθεί, εμφανίζεται με τη σήμανση «Συμπληρωμένο».
Το ερωτηματολόγιο δεν είναι διαθέσιμο προς συμπλήρωση, αν έχει περάσει η αξιολογική περίοδος.

Η αξιολόγηση είναι ανώνυμη

Η συμμετοχή σου είναι σημαντική!

Ώρες γραφείου.

Wed, 30 Oct 2024 12:45:22 +0300

Γεια σας, σας θυμίζω, έχω ώρες γραφείου Τετάρτη 5-7 και Πέμπτη 9-11. Μπορείτε να μου κάνετε και κλήσεις στο teams οποιαδήποτε ώρα και αν μπορώ θα το σηκώσω.