{"id":{"repo_id":"athens","oai_identifier":"oai:lib.uoa.gr:uoadl:3401060"},"canonical_url":"https://search.ndltd.org/etd/athens/oai:lib.uoa.gr:uoadl:3401060","repository":{"repo_id":"athens","name":"National and Kapodistrian University of Athens","base_url":"https://pergamos.lib.uoa.gr/uoa/dl/frontend/oaipmh"},"display":{"title":"Towards more robust text-to-SQL translation","abstract":"Παρά τους γρήγορους ρυθμούς ανάπτυξης στο ερευνητικό πεδίο της μετάφρασης από φυσική γλώσσα σε SQL, τα Text-to-SQL συστήματα αντιμετωπίζουν κρίσιμες προκλήσεις. Οι συλλογές δεδομένων που χρησιμοποιούνται για την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων είναι ζωτικής σημασίας για τον καθορισμό της απόδοσής τους και της εξέλιξης σε αυτό το πεδίο. Σε αυτή την εργασία, εισάγουμε μία μεθοδολογία για την ανάλυση των text-to-SQL συλλογών δεδομένων και παρουσιάζουμε την ανάλυσή τους, παρέχοντας πολύτιμες πληροφορίες για τις δυνατότητες και τους περιορισμούς των text-to-SQL συστημάτων, αλλά και τον τρόπο με τον οποίο οι συλλογές δεδομένων επηρεάζουν την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων. Διερευνούμε τις υπάρχουσες μεθόδους αξιολόγησης και προτείνουμε μια αναλυτική αξιολόγηση συστήματος βασισμένη στην ανάλυση των σφαλμάτων. Δείχνουμε πώς η ανάλυση των δεδομένων μπορεί να βοηθήσει στην εξήγηση της συμπεριφοράς ενός συστήματος σε διαφορετικά σύνολα δεδομένων. Χρησιμοποιώντας την ανάλυση σφαλμάτων μας, δείχνουμε πώς μπορούμε να εντοπίσουμε τις πηγές σφαλμάτων ενός συστήματος text-to-SQL για ένα συγκεκριμένο σύνολο δεδομένων και να αποκαλύψουμε ευκαιρίες για βελτιώσεις του συστήματος.","abstract_html":"Παρά τους γρήγορους ρυθμούς ανάπτυξης στο ερευνητικό πεδίο της μετάφρασης από φυσική γλώσσα σε SQL, τα Text-to-SQL συστήματα αντιμετωπίζουν κρίσιμες προκλήσεις. Οι συλλογές δεδομένων που χρησιμοποιούνται για την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων είναι ζωτικής σημασίας για τον καθορισμό της απόδοσής τους και της εξέλιξης σε αυτό το πεδίο. Σε αυτή την εργασία, εισάγουμε μία μεθοδολογία για την ανάλυση των text-to-SQL συλλογών δεδομένων και παρουσιάζουμε την ανάλυσή τους, παρέχοντας πολύτιμες πληροφορίες για τις δυνατότητες και τους περιορισμούς των text-to-SQL συστημάτων, αλλά και τον τρόπο με τον οποίο οι συλλογές δεδομένων επηρεάζουν την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων. Διερευνούμε τις υπάρχουσες μεθόδους αξιολόγησης και προτείνουμε μια αναλυτική αξιολόγηση συστήματος βασισμένη στην ανάλυση των σφαλμάτων. Δείχνουμε πώς η ανάλυση των δεδομένων μπορεί να βοηθήσει στην εξήγηση της συμπεριφοράς ενός συστήματος σε διαφορετικά σύνολα δεδομένων. Χρησιμοποιώντας την ανάλυση σφαλμάτων μας, δείχνουμε πώς μπορούμε να εντοπίσουμε τις πηγές σφαλμάτων ενός συστήματος text-to-SQL για ένα συγκεκριμένο σύνολο δεδομένων και να αποκαλύψουμε ευκαιρίες για βελτιώσεις του συστήματος.","abstract_has_math":false,"creators":["Μητσοπούλου Άννα","Mitsopoulou Anna"],"institution":null,"degree_name":null,"degree_level":null,"degree_discipline":null,"degree_department":null,"school":null,"contributors":[],"advisors":[],"committee_chairs":[],"committee_members":[],"year":2024,"date_issued":"2024","date_published":"2024","updated_at":"2026-11-19T06:29:41Z","subjects":["Τεχνολογία – Πληροφορική","Technology - Computer science"],"languages":["English"],"rights":[],"rights_urls":[],"identifier_entries":[{"key":"dc:identifier","label":"Identifier","values":["uoadl:3401060"],"render_values":[{"text":"uoadl:3401060","href":null,"code":true}]}],"person_identifier_entries":[]},"links":{"outbound_url":"https://pergamos.lib.uoa.gr/uoa/dl/object/3401060","outbound_label":"Repository record","outbound_source":"dc:identifier","record_url":"https://pergamos.lib.uoa.gr/uoa/dl/object/3401060","record_label":"Repository record","record_kind":"record","record_source":"dc:identifier","download_url":null,"download_label":null,"download_source":null,"access_status":null,"embargo_until":null,"access_note":null},"source_record":{"url":"https://pergamos.lib.uoa.gr/uoa/dl/frontend/oaipmh?verb=GetRecord&metadataPrefix=oai_dc&identifier=oai%3Alib.uoa.gr%3Auoadl%3A3401060","prefix":"oai_dc"},"metadata_groups":[{"id":"people","label":"People","entries":[{"key":"dc:creator","label":"Author","values":["Μητσοπούλου Άννα","Mitsopoulou Anna"]}]},{"id":"academic_context","label":"Academic Context","entries":[{"key":"dc:date","label":"Dc Date","values":["2024"]},{"key":"dc:type","label":"Dc Type","values":["born_digital_postgraduate_thesis","Διπλωματική Εργασία","Postgraduate Thesis"]}]},{"id":"subjects_keywords","label":"Subjects and Keywords","entries":[{"key":"dc:subject","label":"Dc Subject","values":["Τεχνολογία – Πληροφορική","Technology - Computer science"]}]},{"id":"language_rights","label":"Language and Rights","entries":[{"key":"dc:language","label":"Dc Language","values":["English"]}]},{"id":"identifiers","label":"Identifiers","entries":[{"key":"dc:identifier","label":"Identifier","values":["uoadl:3401060","https://pergamos.lib.uoa.gr/uoa/dl/object/3401060"]}]},{"id":"additional","label":"Additional Metadata","entries":[{"key":"dc:description","label":"Description","values":["Παρά τους γρήγορους ρυθμούς ανάπτυξης στο ερευνητικό πεδίο της μετάφρασης από φυσική γλώσσα σε SQL, τα Text-to-SQL συστήματα αντιμετωπίζουν κρίσιμες προκλήσεις. Οι συλλογές δεδομένων που χρησιμοποιούνται για την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων είναι ζωτικής σημασίας για τον καθορισμό της απόδοσής τους και της εξέλιξης σε αυτό το πεδίο. Σε αυτή την εργασία, εισάγουμε μία μεθοδολογία για την ανάλυση των text-to-SQL συλλογών δεδομένων και παρουσιάζουμε την ανάλυσή τους, παρέχοντας πολύτιμες πληροφορίες για τις δυνατότητες και τους περιορισμούς των text-to-SQL συστημάτων, αλλά και τον τρόπο με τον οποίο οι συλλογές δεδομένων επηρεάζουν την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων. Διερευνούμε τις υπάρχουσες μεθόδους αξιολόγησης και προτείνουμε μια αναλυτική αξιολόγηση συστήματος βασισμένη στην ανάλυση των σφαλμάτων. Δείχνουμε πώς η ανάλυση των δεδομένων μπορεί να βοηθήσει στην εξήγηση της συμπεριφοράς ενός συστήματος σε διαφορετικά σύνολα δεδομένων. Χρησιμοποιώντας την ανάλυση σφαλμάτων μας, δείχνουμε πώς μπορούμε να εντοπίσουμε τις πηγές σφαλμάτων ενός συστήματος text-to-SQL για ένα συγκεκριμένο σύνολο δεδομένων και να αποκαλύψουμε ευκαιρίες για βελτιώσεις του συστήματος.","Despite being a fast-paced research field, text-to-SQL systems face critical challenges. The datasets used for the training and evaluation of these systems play a vital role in determining their performance as well as the progress in the field. In this work, we introduce a methodology for text-to-SQL dataset analysis, and we perform an in-depth analysis of several text-to-SQL datasets, providing valuable insights into their capabilities and limitations and how they affect training and evaluation of text-to-SQL systems. We investigate existing evaluation methods, and propose an informative system evaluation based on error analysis. We show how our dataset analysis can help explain the behavior of a system on different datasets. Using our error analysis, we further show how we can pinpoint the sources of errors of a text-to-SQL system for a particular dataset and reveal opportunities for system improvements."]},{"key":"dc:title","label":"Title","values":["Towards more robust text-to-SQL translation"]}]}],"canonical_facts":{"dc:creator":["Μητσοπούλου Άννα","Mitsopoulou Anna"],"dc:date":["2024"],"dc:description":["Παρά τους γρήγορους ρυθμούς ανάπτυξης στο ερευνητικό πεδίο της μετάφρασης από φυσική γλώσσα σε SQL, τα Text-to-SQL συστήματα αντιμετωπίζουν κρίσιμες προκλήσεις. Οι συλλογές δεδομένων που χρησιμοποιούνται για την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων είναι ζωτικής σημασίας για τον καθορισμό της απόδοσής τους και της εξέλιξης σε αυτό το πεδίο. Σε αυτή την εργασία, εισάγουμε μία μεθοδολογία για την ανάλυση των text-to-SQL συλλογών δεδομένων και παρουσιάζουμε την ανάλυσή τους, παρέχοντας πολύτιμες πληροφορίες για τις δυνατότητες και τους περιορισμούς των text-to-SQL συστημάτων, αλλά και τον τρόπο με τον οποίο οι συλλογές δεδομένων επηρεάζουν την εκπαίδευση και την αξιολόγηση αυτών των συστημάτων. Διερευνούμε τις υπάρχουσες μεθόδους αξιολόγησης και προτείνουμε μια αναλυτική αξιολόγηση συστήματος βασισμένη στην ανάλυση των σφαλμάτων. Δείχνουμε πώς η ανάλυση των δεδομένων μπορεί να βοηθήσει στην εξήγηση της συμπεριφοράς ενός συστήματος σε διαφορετικά σύνολα δεδομένων. Χρησιμοποιώντας την ανάλυση σφαλμάτων μας, δείχνουμε πώς μπορούμε να εντοπίσουμε τις πηγές σφαλμάτων ενός συστήματος text-to-SQL για ένα συγκεκριμένο σύνολο δεδομένων και να αποκαλύψουμε ευκαιρίες για βελτιώσεις του συστήματος.","Despite being a fast-paced research field, text-to-SQL systems face critical challenges. The datasets used for the training and evaluation of these systems play a vital role in determining their performance as well as the progress in the field. In this work, we introduce a methodology for text-to-SQL dataset analysis, and we perform an in-depth analysis of several text-to-SQL datasets, providing valuable insights into their capabilities and limitations and how they affect training and evaluation of text-to-SQL systems. We investigate existing evaluation methods, and propose an informative system evaluation based on error analysis. We show how our dataset analysis can help explain the behavior of a system on different datasets. Using our error analysis, we further show how we can pinpoint the sources of errors of a text-to-SQL system for a particular dataset and reveal opportunities for system improvements."],"dc:identifier":["uoadl:3401060","https://pergamos.lib.uoa.gr/uoa/dl/object/3401060"],"dc:language":["English"],"dc:subject":["Τεχνολογία – Πληροφορική","Technology - Computer science"],"dc:title":["Towards more robust text-to-SQL translation"],"dc:type":["born_digital_postgraduate_thesis","Διπλωματική Εργασία","Postgraduate Thesis"]},"updated_at":"2026-11-19T06:29:41Z"}