- Κυκλικές φάσεις αφού υπάρχει συνεχής ενημέρωση της διαδικασίας
- Η φιγούρα του "αναλυτή" αποκτά ιδιαίτερη σημασία σε όλες αυτές τις φάσεις.
- ΑΠΟΚΤΗΣΗ: πραγματοποιείται με διάφορα μέσα, όπως Web Scraping (χρήσιμο για την αυτόματη λήψη πολλών πληροφοριών από το διαδίκτυο), API – Διεπαφή προγραμματισμού εφαρμογών (επιτρέποντας στους προγραμματιστές να αποκτήσουν πρόσβαση σε διακομιστές Twitter / Facebook / κ.λπ. χωρίς κανένα κίνδυνο ασφάλειας) που διατίθενται από πηγές δεδομένων όπως το Facebook και το Twitter (Twitter API, Graph API αντίστοιχα), αλλά και μέσω της ανάλυσης της ανάγνωσης των ροή δεδομένων, π.χ. η συνεχής μεταφορά δεδομένων (π.χ. βιομηχανικές διεργασίες) κ.λπ.
- ΑΠΟΘΉΚΕΥΣΗ ΚΑΙ ΟΡΓΆΝΩΣΗ: ένα παράδειγμα λογισμικού που είναι σε θέση να οργανώσει έναν πολύ μεγάλο όγκο δεδομένων (συχνά τα περισσότερα από αυτά είναι αδόμητα) είναι το Hadoop πλατφόρμα. Προσφέρει ένα κατανεμημένο σύστημα αρχείων από το οποίο είναι δυνατή η διαχείριση όλων των δεδομένων, NoSQL βάσεις δεδομένων χρησιμοποιούνται στη συνέχεια για τη λογική οργάνωση των δεδομένων (υπάρχουν διαφορετικά συστήματα NoSQL).
- ΕΝΤΑΞΗ: προετοιμασία και μετασχηματισμός δεδομένων για ανάλυση. Γενικά, ένας από τους πιο συχνούς μετασχηματισμούς είναι η εξαγωγή περιεχομένου σε μορφή κειμένου, όπως το Apache Tika14, που επιτρέπει τη διαχείριση πολύ διαφορετικών μορφών δεδομένων με ομοιόμορφο τρόπο.
- ΑΝΑΛΥΣΗ: μπορεί να πραγματοποιηθεί με εφαρμογές της πλατφόρμας Hadoop αλλά και, για μεγάλα προβλήματα, με τεχνικές εξόρυξης δεδομένων με εργαλεία όπως το Mahout, μια πλατφόρμα για την επιλογή, εξερεύνηση και μοντελοποίηση τεράστιων όγκων δεδομένων ή άλλες λύσεις υλικού κ.λπ.
Ο αναλυτής διαδραματίζει θεμελιώδη ρόλο στο σύστημα κύκλου μεγάλων δεδομένων. Αυτός είναι υπεύθυνος για τα δεδομένα οργάνωση με κατάλληλο και συναφή τρόπο βάσει τις ανάγκες της εταιρείας. Παίρνει επίσης χρήσιμες πληροφορίες από την ολοκλήρωση των δεδομένων.
BIG DATA + BUSINESS ANALYTICS = BIG DATA ANALYTICS
BIG DATA
ΜΕΓΆΛΟΣ ΌΓΚΟΣ ΔΕΔΟΜΈΝΩΝ ΠΟΥ ΠΡΈΠΕΙ ΝΑ ΕΠΕΞΕΡΓΑΣΤΕΊ ΓΡΉΓΟΡΑ ΣΕ ΠΛΗΡΟΦΟΡΊΕΣ
- Τόμος
- Ποικιλία
- Ταχύτητα
ΕΠΙΧΕΙΡΗΜΑΤΙΚΈΣ ΑΝΑΛΎΣΕΙΣ
ΑΝΑΛΥΣΗ
- Ειδικές ικανότητες
ΑΝΆΛΥΣΗ ΜΕΓΆΛΩΝ ΔΕΔΟΜΈΝΩΝ
- Πώς να ερμηνεύσετε τα δεδομένα με τον καλύτερο τρόπο;
- Πώς να αποκομίσετε αξία από τα μεγάλα δεδομένα;
