ΜΕΓΑΛΑ ΔΕΔΟΜΕΝΑ | BIG DATA | ΑΝΑΛΥΣΗ ΜΕΓΑΛΩΝ ΔΕΔΟΜΕΝΩΝ | BIG DATA ANALYSIS | ΥΠΟΛΟΓΙΣΤΙΚΟ ΝΕΦΟΣ | CLOUD | ΑΝΑΛΥΣΗ ΜΕΓΑΛΩΝ ΔΕΔΟΜΕΝΩΝ ΣΕ ΥΠΟΛΟΓΙΣΤΙΚΟ ΝΕΦΟΣΝ | BIG DATA ANALYSIS CLOUD
266
ΠΕΡΙΕΧΕΙ 39 ΕΙΚΟΝΕΣ
Η επιστήμη των Big Data ή όπως θα λέγαμε στα ελληνικά των «Μεγάλων Δεδομένων», γνώρισε τη δημοσιότητα, και από το ευρύτερο κοινό, κυρίως τα τελευταία χρόνια, καθώς κυριάρχησε στον παγκόσμιο ιστό, βρίσκοντας μια υψηλή θέση στις προτιμήσεις των εταιρειών και οργανισμών. Η Ανάλυση Μεγάλων Δεδομένων (Big Data Analytics) γίνεται με τη χρήση προηγμένων αναλυτικών τεχνικών πάνω σε ποικίλα σύνολα δεδομένων, που μπορεί να προέρχονται από διαφορετικές πηγές και με διαφορετικό όγκο πληροφορίας. Τα μεγάλα δεδομένα είναι ένας όρος που εφαρμόζεται σε σύνολα δεδομένων, των οποίων το μέγεθος δεν μπορούν να διαχειριστούν και να επεξεργαστούν οι συμβατικές βάσεις δεδομένων. Τα δεδομένα αυτά αποτελούνται από ένα ή περισσότερα από τα ακόλουθα χαρακτηριστικά: μεγάλο όγκο, υψηλή ταχύτητα ή/και μεγάλη ποικιλία. Τα μεγάλα δεδομένα προέρχονται από αισθητήρες, συσκευές, βίντεο/ήχο, δίκτυα, αρχεία καταγραφής, εφαρμογές συναλλαγών, διαδίκτυο και κοινωνικά μέσα, μεγάλο μέρος των οποίων παράγεται σε πραγματικό χρόνο και σε πολύ μεγάλη κλίμακα. Χρειάζονται επομένως καινοτόμες και αποδοτικές μορφές επεξεργασίας των μεγάλων δεδομένων, αφού παρότι ο όγκος είναι τεράστιος, σημασία έχει να μπορέσουμε να ξεχωρίσουμε τη χρήσιμη πληροφορία από το τεράστιο αυτό σύνολο δεδομένων. Το Cloud Computing έρχεται να δώσει λύση στις ανάγκες των Big Data, μιας και απαιτούνται σημαντικά αυξημένες δυνατότητες και πόροι (π.χ. υπολογιστική ισχύ, αποθηκευτικό χώρο, κ.ά.). Οι απεριόριστοι πόροι που προσφέρονται μέσω του Cloud Computing επιτρέπουν την κατανομή του φόρτου εργασίας που απαιτούνται για τα Big Data, με τρόπο ώστε να είναι δυνατή η σε πραγματικό χρόνο επεξεργασία των τεράστιων όγκων των δεδομένων. Το Cloud Computing επιβάλει τη χρησιμοποίηση νέων μεθόδων εκτέλεσης των εργασιών επεξεργασίας των δεδομένων ή απόκρισης των συστημάτων σε περίπτωση σφαλμάτων, κ.ο.κ., λόγω του διαμοιρασμού των εργασιών που εκτελούνται. Η εκμετάλλευση των πλεονεκτημάτων του cloud computing αναμένεται να βοηθήσει στην ανάλυση του μεγάλου όγκου των δεδομένων ακόμα και σε συνθήκες πραγματικού χρόνου, εδραιώνοντας τις εφαρμογές ανάλυσης μεγάλων δεδομένων ως απαραίτητες σε πολλούς τομείς. Η αλληλοσύνδεση των τεχνολογιών αυτών θα βρει χώρο εφαρμογής σε πολλούς κλάδους, προσφέροντας εξατομικευμένη πληροφορία στον τελικό χρήστη. Στόχος της διπλωματικής αυτής είναι η μελέτη και ανάλυση τεχνολογιών, μεθόδων, αλγορίθμων και πλατφορμών για την αποθήκευση, επεξεργασία και αποτελεσματικότερη ανάλυση μεγάλων όγκων δεδομένων σε cloud based συστήματα.
The science of Big Data, or as we would say in Greek, "Big Data", has received publicity, even from the wider public, especially in recent years, as it has dominated the world wide web, finding a high place in the preferences of companies and organizations. Big Data Analytics is performed by using advanced analytical techniques on various data sets, which may come from different sources and with different amounts of information. Big data is a term applied to data sets, the size of which cannot be managed and processed by conventional databases. These data consists of one or more of the following characteristics: high volume, high velocity, and/or high variety. Big data are generated by sensors, devices, video/audio, networks, logs, transactional applications, the internet and social media. Most of them are produced in real-time and at very large scale. Innovative and efficient big data processing techniques are therefore needed, since even though the volume is huge, it is important to be able to distinguish the useful information from this huge data set. Cloud Computing comes to provide a solution to the needs of Big Data, since significantly increased capabilities and resources (e.g. computing power, storage space, etc.) are required. The unlimited resources offered through Cloud Computing allow the workload required for Big Data to be distributed in such a way that the huge volumes of data can be processed in real time. Cloud Computing requires the use of new methods of performing the tasks of processing the data or responding of the systems in case of errors, etc., due to the division of the tasks performed. Exploiting the advantages of cloud computing is expected to help analyze the large amount of data even in real-time conditions, establishing big data analysis applications as indispensable in many fields. The interconnection of these technologies will find application in many industries, offering personalized information to the end user. The aim of this diploma is the study and analysis of technologies, methods, algorithms and platforms for the storage, processing and more efficient analysis of large volumes of big data in cloud based systems.
ΑΝΑΛΥΣΗ ΜΕΓΑΛΩΝ ΔΕΔΟΜΕΩΝ ΣΕ ΣΥΣΤΗΜΑΤΑ ΥΠΟΛΟΓΙΣΤΙΚΟΥ ΝΕΦΟΥΣ