Το πεδίο ενδιαφέροντος της παρούσας διπλωματικής εργασίας εστιάζεται στη διαδικασία της συλλογής δεδομένων που παρέχει η διαδικτυακή πλατφόρμα της google scholar για τον οργανισμό του Ελληνικού Ανοιχτού Πανεπιστημίου και στην αξιοποίησή τους για την άμεση εξαγωγή συμπερασμάτων. Για τη συλλογή των δεδομένων, περιγράφεται η μέθοδος της απόξεσης πηγαίου κώδικα, ώστε να αυτοματοποιηθεί σε μεγάλο βαθμό η καταγραφή των πεδίων ενδιαφέροντος και η αποθήκευσή τους στη βάση δεδομένων για περαιτέρω ανάλυση. Στο πλαίσιο αυτό και για την εξαγωγή και παρουσίαση των αποτελεσμάτων, περιγράφεται και διενεργείται η υλοποίηση διαδικτυακής εφαρμογής μονής σελίδας – Single Page Application με χρήση REST API. Παράλληλα, γίνεται χρήση της μη σχεσιακής βάσης δεδομένων MongoDB και των δυνατοτήτων που παρέχει για περιπτώσεις μη σταθερών δομών δεδομένων.
Η υλοποίηση στηρίζεται στη χρήση του περιβάλλοντος node.js για δημιουργία εξυπηρετητή με τη χρησιμοποίηση της προγραμματιστικής γλώσσας javascript, ο σκοπός του οποίου είναι η παροχή των πληροφοριών που έχουν συλλεχθεί στη μορφή json, μέσω σημείων διεπαφής. Τα αιτήματα προς τον εξυπηρετητή γίνονται μέσω διαδικτυακής εφαρμογής υλοποιημένης με τη βιβλιοθήκη angular της google, η οποία καταναλώνει τα json δεδομένα και τα παρουσιάζει στο χρήστη.
Τα δεδομένα χρησιμοποιήθηκαν για την εύρεση του πλήθους συνεργασιών του κάθε μελετητή εντός του Ελληνικού Ανοιχτού Πανεπιστημίου, την οπτική εύρεση των συχνότερα εμφανιζόμενων λέξεων που έχουν σημασιολογική σπουδαιότητα για το κείμενο, ενώ παράλληλα παρέχεται και η δυνατότητα εύρεσης θεματολογίας του μελετητή μέσω μοντελοποίησης θεμάτων και της τεχνικής LDA. Τέλος, παρουσιάζονται συναρτήσεις με τη μορφή πηγαίου κώδικα, οι οποίες υλοποιούν τη συλλογή και την ανάλυση των δεδομένων στο επίπεδο του εξυπηρετητή. Η φιλοξενία της εφαρμογής έγινε στη διαπανεπιστημιακή πλατφόρμα okeanos, η οποία παρείχε ένα εικονικό μηχάνημα για τους σκοπούς της εργασίας.
The scope of this thesis focuses on the procedure of collecting data regarding Hellenic Open University scholars that are presented by google scholar websites, and on the process of immediate analysis. As far as the collection of the data is concerned, scraping the source code is thoroughly described as the process for automatically registering fields of interest and saving corresponding data in a database for further analysis. On this context, the visualization of the analysis is described and implemented in terms of a single page application with the use of a REST API. The database layer of the application is using noSQL database MongoDB and makes use of its capabilities and features on variable data types.
The server side layer is based on node.js environment using javascript as the core programming language, implementing API endpoints to respond to clients with json data. Requests to server are made through the frontend layer which consumes json data and visualizes them. Frontend layer is implemented using angular framework by google.
The collected data were processed to find the quantity of collaboration among Hellenic Open University scholars, to visually present the most frequent words that are also semantically important and finally to predict the topics of individual scholars using the LDA technique of topic modelling. Finally, the source code of the most important functions regarding data collection and analysis at the server side is also presented. For hosting and deployment purposes , the web application used a virtual machine offered by okeanos platform.
Μελέτη Σχέσεων Μελετητών στα Μέσα Κοινωνικής Δικτύωσης