National and Kapodistrian University of Athens
News Aggregator: Story Discovery & Ranking - From Web Data Mining through a Modular Processing Pipeline to UI
Abstract
dc:descriptionΗ παρούσα διπλωματική εξετάζει την ανάπτυξη ενός τμητατικού συστήματος συλλογής ειδήσεων, καλύπτοντας όλα τα στάδια από τη συλλογή δεδομένων έως την τελική παρουσίαση. Τα δεδομένα των ειδήσεων λαμβάνονται απευθείας από τις ειδησιογραφικές πηγές, αποθυκεύονται και επεξεργάζονται με σκοπό να ανακαλυφθούν ομάδες άρθρων που αναφέρονται στα ίδια γεγονότα. Το σύστημα χρησιμοποιεί μια μοναδική προσέγγιση ομαδοποίησης που συνδυάζει τις δυνατότητες κατανόησης περιεχομένου των γλωσσικών μοντέλων με την ευελιξία της ιεραρχικής ομαδοποίησης. Οι ειδήσεις που προκύπτουν από αυτή τη διαδικασία ομαδοποίησης ταξινομούνται στη συνέχεια με βάση τη σημαντικότητά τους στον καθημερινό κύκλο ειδήσεων. Η βασική αρχιτεκτονική είναι χτισμένη πάνω στην τεχνολογία Docker, ενισχύοντας την φορητότητα του συστήματος και την ευκολία τροποποιήσεων. Κάθε κομμάτι λειτουργεί ανεξάρτητα μέσα σε ”κοντέινερ” Docker, διευκολύνοντας τις ενημερώσεις και διασφαλίζοντας την ανθεκτικότητα του συστήματος απέναντι στις τεχνολογικές αλλαγές. Η αξιολόγηση του συστήματος δείχνει ικανοποιητικά αποτελέσματα σε όρους ακρίβειας, ανάκλησης και F-measure, υπογραμμίζοντας την αποτελεσματικότη τα της προσέγγισης ομαδοποίησης. Ο τμηματικός σχεδιασμός του συστήματος απλοποιεί τη συντήρηση, αλλά και υποστηρίζει την απλή επέκταση και προσαρμογή σε μελλοντικές απαιτήσεις. Αυτή η διατριβή επιβεβαιώνει το δυναμικό της προχωρημένης επεξεργασίας κειμένου στη βελτίωση της ποιότητας της συλλογής ειδήσεων, προσφέροντας ένα ισχυρό πλαίσιο για περαιτέρω έρευνα και ανάπτυξη σε συστήματα ανάκτησης πληροφοριών.
Author and committee
dc:creator, dc:contributor.*- Authors dc:creator
-
- Μαστοράκης Ευστάθιος-Ανδρέας
- Mastorakis Efstathios-Andreas
Subjects
dc:subject × 2Rights
- Language dc:language
- English
Identifiers
dc:identifier.*- Identifier
- uoadl:3404641