Ανάπτυξη εργαστηριακών εφαρμογών σε python για επεξεργασία μεγάλων δεδομένων

Abstract

Με την τεράστια ανάπτυξη της τεχνολογίας και την όλο και μεγαλύτερη διάδοση του παγκοσμίου ιστού και των Social media έχει δημιουργηθεί η ανάγκη επεξεργασίας αλλά και ανάλυσης όλο και μεγαλύτερου όγκου δεδομένων και πληροφοριών τα οποία έχουν ονομαστεί BIG DATA .O όγκος και ο ρυθμός με τον οποίο παράγονται αυτά με την σειρά τους δημιουργεί την ανάγκη για ανάπτυξη καινούργιων πιο αποτελεσματικών τεχνικών και μεθόδων επεξεργασίας τους ώστε να μπορούν να αξιοποιηθούν καλυτέρα. Ένα από τα αποτελεσματικότερα εργαλεία για την επεξεργασία των μεγάλων δεδομένων είναι η γλώσσα προγραμματισμού Python .Ο προγραμματισμός των σύγχρονων συστημάτων μηχανικής μάθησης γίνεται συνήθως μεPython. Ακόμη και όταν η Python δεν είναι η κύρια γλώσσα προγραμματισμού ενός τέτοιου συστήματος.Η Python είναι επίσης η γλώσσα που χρησιμοποιούν πλέον οι περισσότεροι data scientists για desktop computing λόγω των εκτεταμένων βιβλιοθηκών έτοιμων αλγορίθμων μηχανικής μάθησης και επεξεργασίας δεδομένων διαφορετικών μορφών και μεγεθών. Στόχος αυτής της εργασίας είναι η δημιουργία ασκήσεων και εφαρμογών που θα αξιοποιούνται σε εργαστηριακό περιβάλλον για την εκμάθηση των απαραίτητων βιβλιοθηκών και εντολών της γλώσσας προγραμματισμού Python με σκοπό την επεξεργασία των μεγάλων αυτών δεδομένων.