InfoGraberCreator - Σχεδιασμός και υλοποίηση εργαλείου λογισμικού αναζήτησης δεδομένων στο web.

Abstract

Σκοπός της πτυχιακής αυτής ήταν η μελέτη, σχεδίαση και ανάπτυξη εργαλείου για την σάρωση διαφόρων πηγών δεδομένων και την αποθήκευση των δεδομένων που εμπεριέχονται, με σκοπό την εξαγωγή χρήσιμων, για το χρήστη, συμπερασμάτων. Για το σκοπό αυτό μελετήθηκαν τέτοια συστήματα τα οποία λειτουργούν σαρώνοντας διάφορες πηγές δεδομένων. Κανένα από τα εργαλεία που μελετήθηκαν δεν προσφέρει την σάρωση ετερογενών πηγών δεδομένων. Πιο συγκεκριμένα, μελετήθηκαν συστήματα (Grabbers) τα οποία λειτουργούν για αποθήκευση προϊόντων εμπορικών καταστημάτων ηλεκτρονικής μορφής. Τα συστήματα αυτά προσφέρουν, αναζήτηση και αποθήκευση δεδομένων από xml (και μόνο) πηγές. Το σύστημα που δημιουργήθηκε έχει την ικανότητα να διαχειρίζεται δεδομένα, τα οποία βρίσκονται σε αρχεία excels, xml, csv καθώς επίσης και την δημιουργία δεδομένων σε online μορφή (Digital Sources) χωρίς την παρουσία αρχείων. Επίσης, το σύστημα παρέχει διαφορετικές υπηρεσίες ανά χρήστη, σε web based interface, με απλοποιημένες διαδικασίες, τόσο όσο, ένας μη έμπειρος χρήστης του internet να μπορεί να χειριστεί. Η συλλογή δεδομένων, και η παρουσίαση αυτών, γίνεται με διαφορετικούς τρόπους ανάλογα τις ανάγκες που παρουσιάζονται στον εκάστοτε χρήστη της εφαρμογής, με αποτέλεσμα, να ικανοποιεί και να παρέχει την λύση που ο χρήστης επιθυμεί. Το σύστημα αναπτύχθηκε με χρήση γλώσσας PHP, JAVASCRIPT καθώς χρησιμοποιήθηκαν ακόμη τεχνολογίες Ajax, Jquery. Η βάση δεδομένων είναι mysql, καθώς για το Interface χρησιμοποιήθηκε html και css.

The aim of this thesis was to design and develop a tool to be used for scanning various data sources, as well as for saving these data in order to be easy for the user to work on. Several systems, which are used for scanning data were studied for that purpose, none of which provides scanning of heterogeneous data sources. To be more precise we studied systems (Grabbers) which are used for storing the products of online shops. Those systems offer, searching and saving data from only xml sources. The tool that was created, has the ability to handle data which are located in excel, xml and csv files. In addition, it can create data in an online form (Digital Sources) without the need of files. Moreover, the system provides different services for each user, in a web based interface, through simplified procedures, so as a non experienced internet user can operate it. The collection and presentation of the data, can be illustrated through different ways, depending on the needs of each user. The system was developed with the use of PHP and Javascript as well as Ajax and Jquery technologies. The data base is mysql the interface was created with html and css.